Bỏ qua tới nội dung
LSLab

Phát hiện vật thể từ drone khác ảnh mặt đất ra sao?

  • Cơ bản
  • Bài viết
  • Từ 14 tuổi
  • 5 phút đọc
Minh họa biên tập về phát hiện vật thể trong hệ thống drone.

Phát hiện đối tượng (object detection) vẫn tìm nhãn và vùng ảnh như với ảnh chụp từ mặt đất, nhưng ảnh drone thường đặt mô hình vào điều kiện nhìn khác: camera ở cao, nhìn xiên hoặc gần thẳng xuống, và vật có thể chỉ chiếm một vùng nhỏ. Cùng một chiếc xe vì vậy có thể trông như một vật lớn nhìn ngang trong ảnh đường phố nhưng chỉ là một hình nhỏ nhìn từ trên trong khung drone.

Mục lục
Phát hiện vật thể đưa ra vùng ảnh ứng viên; viền đánh dấu không phải kết luận chắc chắn về cảnh.
  • Ảnh với các vùng phát hiện
  • Vị trí ứng viên cần kiểm tra

So sánh trên cùng một vật

Tiêu chíẢnh từ mặt đấtẢnh từ droneHệ quả với bộ phát hiện
Góc nhìnThường thấy mặt bên hoặc mặt trướcCó thể thấy nóc vật, góc xiên hoặc mặt phẳngHình dạng và phần nhìn thấy đổi; mô hình cần ví dụ phù hợp góc đó.
Kích thước trong ảnhVật gần camera có thể chiếm nhiều điểm ảnhVật ở cao có thể chiếm ít điểm ảnhChi tiết nhỏ biến mất sau khi ảnh co về kích thước đầu vào; vật nhỏ dễ bị bỏ sót.
Chuyển độngCamera thường đứng yên khi chụpCamera có thể dịch chuyển, rung hoặc đổi hướngNền cũng chuyển động trong khung; không thể hiểu mọi dịch chuyển của hộp là vật tự đi.
Che khuấtNgười, xe hoặc công trình che vậtCây, mái nhà, bóng và góc nhìn có thể che vậtVật chỉ lộ một phần có thể bị nhầm hoặc không đạt ngưỡng phát hiện.

Đây là khác biệt về dữ liệu đầu vào, không phải một thuật toán “drone” riêng. Detector nhận ảnh, dự đoán lớp và vùng bao quanh vật. Tài liệu ML Kit cũng mô tả theo dõi vật nổi bật qua các khung liên tiếp; theo dõi nối các dự đoán theo thời gian nhưng không tự sửa một nhận dạng sai.

Mô hình chiếu của OpenCV liên hệ hình ảnh với hình học camera; tài liệu luồng quang học giải thích chuyển động biểu kiến có thể đến từ camera hoặc vật. Bộ dữ liệu VisDrone có chú giải về độ rõ của cảnh và che khuất để phân tích theo điều kiện. Những tài liệu này giúp đặt cách đánh giá, không hứa một mức tăng hay giảm độ chính xác cố định.

Một chiếc xe trong hai khung cảnh

Hãy tưởng tượng cùng một chiếc ô tô được chụp ngang tầm đường và từ camera nhìn chếch xuống. Trong ảnh mặt đất, cửa, bánh và mặt trước có thể hiện rõ; trong ảnh trên cao, mái xe chiếm phần lớn hình dạng và thân xe bị rút ngắn theo phối cảnh. Nếu ảnh drone được lấy từ xa, ô tô còn có ít điểm ảnh hơn. Bộ phát hiện vẫn có thể trả hộp “ô tô”, nhưng độ chắc chắn và độ khít của hộp không thể suy ra từ việc nó từng nhận diện ảnh mặt đất.

Để đánh giá công bằng, giữ cùng định nghĩa lớp và cách chấm: mỗi ảnh phải được gán nhãn vật thật, hộp dự đoán được ghép với hộp tham chiếu theo quy tắc đã chọn, rồi đếm vật bỏ sót và phát hiện nhầm. Tách kết quả theo góc nhìn, kích thước vật, độ sáng và mức che khuất giúp biết lỗi đến từ điều kiện nào. Nếu chỉ gộp mọi ảnh thành một điểm, nhiều ảnh dễ có thể che lấp một nhóm ảnh drone khó.

Theo dõi khác với phát hiện lại

Phát hiện trả lời “vật nào đang có trong khung này?”. Theo dõi cố trả lời thêm “vật ở khung trước có phải vật này không?”. ML Kit có thể theo dõi vật nổi bật qua các khung, còn một nghiên cứu UAV trên arXiv trình bày phương pháp hạ cánh tự động trên phương tiện đang chuyển động. Ví dụ nghiên cứu cho thấy một ứng dụng trong bối cảnh cụ thể; không chứng minh mọi detector hoạt động tốt với mọi góc nhìn trên không.

Giới hạn cần đọc đúng

Phần giải thích này chưa phải phép đo so sánh ảnh drone với ảnh mặt đất trên cùng tập dữ liệu. Vì vậy không thể từ đây kết luận mức chính xác hoặc ngưỡng nào là đủ. Điểm cần nhớ là khác biệt về góc, độ lớn biểu kiến, chuyển động camera và che khuất làm thay đổi bằng chứng mà mô hình nhìn thấy; cần kiểm thử trên ảnh đại diện cho nhiệm vụ dự định.

Tóm tắt

  • Cùng một vật có thể có hình dạng, kích thước và mức che khuất khác hẳn giữa ảnh mặt đất và ảnh trên không.
  • Detector trả lớp và vùng ảnh; tracker nối vật theo thời gian nhưng có thể mất hoặc nhầm mục tiêu.
  • Đánh giá cần ảnh có nhãn thật và phân tích theo điều kiện chụp, không chỉ một điểm gộp.

Thuật ngữ trong bài

Tên tiếng Việt, tên tiếng Anh và nghĩa dùng trong bài. Di chuột, chạm hoặc dùng phím Tab tới từ có gạch chân chấm để xem giải thích ngay khi đọc.

phát hiện đối tượngobject detection
Tìm các vật trong ảnh và xác định vị trí của chúng.
UAV
Phương tiện bay không người lái.

Bài này chưa được đánh dấu là đã xem

Thấy nội dung sai hoặc chưa an toàn?

Báo cho quản trị viên qua email. Thư có sẵn tên bài và đường dẫn.

Báo lỗi bài này
Xem tất cả bài của chủ đề

Nguồn

Các nguồn này viết cho người đọc lớn hơn. Nếu thấy khó, hãy đọc cùng người lớn.