視覚的顕著性と注意

視覚的顕著性と注意は、画像中のどこに人々が最も注目しやすいかに関わるものであり、計算モデルはグラフィックス、視覚、インターフェース設計を導くためにこれを予測します。

Definition

視覚的顕著性とは、画像のある領域が際立って視線を引きつける特性であり、顕著性モデリングとは、注意と固視がどこに落ちるかを計算によって予測することです。

Scope

このトピックは、輝度、色、方向などの特徴におけるコントラストによって駆動されるボトムアップの顕著性、タスクと目標によって導かれるトップダウンの注意、人間の視線と固視の予測、およびレンダリング、圧縮、設計を注目領域に向けるアプリケーションを扱います。

Core questions

• 画像のある領域が注意を引きつけるのはなぜですか？
• 注意に対するボトムアップとトップダウンの影響はどのように組み合わされますか？
• 人間の視線は画像からどの程度正確に予測できますか？
• 顕著性はグラフィックスおよび視覚システムをどのように導くことができますか？

Key concepts

• 顕著性マップ
• 中心-周辺コントラスト
• 特徴統合
• ボトムアップおよびトップダウン注意
• 固視と視線予測
• 注意ベンチマーク

Key theories

特徴統合顕著性モデル

顕著性は、輝度、色、方向の特徴マップを抽出し、それぞれにおいて局所的な中心-周辺コントラストを検出し、それらを統合して、そのピークが注意が引きつけられる場所を予測するマスターマップを作成することによって計算されます。

ボトムアップ対トップダウン注意

注意は、刺激駆動型の顕著性とタスク駆動型の目標の両方によって制御され、計算モデルはますます両方を統合しており、これは視線予測の評価と改善にとって中心的な区別です。

Clinical relevance

顕著性モデルは、知覚的に駆動されるレンダリングと圧縮を導き、注目領域に労力を割り当て、ユーザーインターフェースと広告デザインに情報を提供し、自動画像トリミングとリターゲティングをサポートし、ロボット工学と支援視覚に貢献します。

History

注意の心理学的理論に基づき、1998年のItti-Koch-Nieburモデルは、ボトムアップの顕著性に関する影響力のある計算論的説明を提供しました。ベンチマークと調査がこの分野を統合し、後にディープネットワークが視線予測を大幅に改善しました。

Key figures

• Laurent Itti
• Christof Koch
• Ali Borji

Seminal works

• itti1998
• borji2013

Frequently asked questions

顕著性マップとは何ですか？

これは、各位置が視聴者の視線を引きつける可能性をスコア化した画像サイズのマップであり、明るい点が最も際立つと予測される領域を示します。

注意を予測することがなぜ有用なのですか？

人々がどこを見るかを知ることで、システムはレンダリング品質、圧縮ビット、またはデザインの重点を、視聴者にとって最も重要な領域に集中させることができ、注意が向けられにくい場所では労力を節約できます。