Độ nổi bật và Sự chú ý của Thị giác

Độ nổi bật và sự chú ý của thị giác liên quan đến việc người ta có nhiều khả năng nhìn vào đâu nhất trong một hình ảnh, và các mô hình tính toán dự đoán điều này để hướng dẫn đồ họa, thị giác máy tính và thiết kế giao diện.

Definition

Độ nổi bật của thị giác là thuộc tính khiến một số vùng hình ảnh nổi bật và thu hút ánh nhìn, và mô hình hóa độ nổi bật là dự đoán bằng tính toán về nơi sự chú ý và các điểm cố định sẽ tập trung.

Scope

Chủ đề này bao gồm độ nổi bật từ dưới lên (bottom-up saliency) được thúc đẩy bởi độ tương phản trong các đặc điểm như cường độ, màu sắc và hướng, sự chú ý từ trên xuống (top-down attention) được hướng dẫn bởi các nhiệm vụ và mục tiêu, dự đoán ánh nhìn và điểm cố định của con người, và các ứng dụng hướng kết xuất, nén và thiết kế đến các vùng được chú ý.

Core questions

• Điều gì khiến một vùng của hình ảnh thu hút sự chú ý?
• Các ảnh hưởng từ dưới lên và từ trên xuống đối với sự chú ý được kết hợp như thế nào?
• Ánh nhìn của con người có thể được dự đoán chính xác đến mức nào từ một hình ảnh?
• Độ nổi bật có thể hướng dẫn các hệ thống đồ họa và thị giác như thế nào?

Key concepts

• Bản đồ độ nổi bật
• Độ tương phản trung tâm-xung quanh
• Tích hợp đặc trưng
• Sự chú ý từ dưới lên và từ trên xuống
• Dự đoán điểm cố định và ánh nhìn
• Các tiêu chuẩn chú ý

Key theories

Mô hình độ nổi bật tích hợp đặc trưng

Độ nổi bật được tính toán bằng cách trích xuất các bản đồ đặc trưng cho cường độ, màu sắc và hướng, phát hiện độ tương phản trung tâm-xung quanh cục bộ trong từng bản đồ, và kết hợp chúng thành một bản đồ tổng thể mà các đỉnh của nó dự đoán nơi sự chú ý được thu hút.

Sự chú ý từ dưới lên so với từ trên xuống

Sự chú ý được điều khiển bởi cả sự nổi bật do kích thích và các mục tiêu do nhiệm vụ định hướng, và các mô hình tính toán ngày càng tích hợp cả hai, một sự phân biệt trung tâm để đánh giá và cải thiện khả năng dự đoán ánh nhìn.

Clinical relevance

Các mô hình độ nổi bật hướng dẫn kết xuất và nén dựa trên nhận thức, phân bổ nỗ lực cho các vùng được chú ý, cung cấp thông tin cho thiết kế giao diện người dùng và quảng cáo, hỗ trợ cắt xén và điều chỉnh lại hình ảnh tự động, và đóng góp vào robot học và thị giác hỗ trợ.

History

Dựa trên các lý thuyết tâm lý học về sự chú ý, mô hình Itti-Koch-Niebur năm 1998 đã đưa ra một giải thích tính toán có ảnh hưởng về độ nổi bật từ dưới lên; các tiêu chuẩn và khảo sát đã củng cố lĩnh vực này, và các mạng sâu sau đó đã cải thiện đáng kể khả năng dự đoán ánh nhìn.

Key figures

• Laurent Itti
• Christof Koch
• Ali Borji

Seminal works

• itti1998
• borji2013

Frequently asked questions

Bản đồ độ nổi bật là gì?

Đó là một bản đồ có kích thước bằng hình ảnh, đánh giá khả năng mỗi vị trí thu hút ánh nhìn của người xem, với các điểm sáng đánh dấu các vùng được dự đoán sẽ nổi bật nhất.

Tại sao việc dự đoán sự chú ý lại hữu ích?

Việc biết người ta nhìn vào đâu cho phép các hệ thống tập trung chất lượng kết xuất, bit nén hoặc trọng tâm thiết kế vào các vùng quan trọng nhất đối với người xem, tiết kiệm công sức ở những nơi sự chú ý ít có khả năng tập trung.