حرکت و جریان نوری
تحلیل حرکت، چگونگی حرکت اشیاء و دوربین را بین فریمهای ویدئویی تخمین میزند و جریان نوری، میدان چگال حرکت ظاهری پیکسل است که این حرکت را کدگذاری میکند.
Definition
جریان نوری، میدان سرعتهای ظاهری الگوهای روشنایی در یک توالی تصویر است و تخمین حرکت، بازیابی این میدان یا حرکت زیربنایی شیء و دوربین است.
Scope
این موضوع شامل فرض ثبات روشنایی و مشکل دیافراگم، ردیابی ویژگیهای پراکنده با روش لوکاس-کاناده، جریان چگال با تنظیم همواری سراسری در روش هورن-شونگ، تخمین از درشت به ریز برای حرکات بزرگ، و ارتباط جریان با حرکت صحنه و دوربین میشود.
Core questions
- حرکت هر پیکسل بین فریمها چگونه تخمین زده میشود؟
- چرا حرکت محلی در امتداد لبهها مبهم است؟
- جابجاییهای بزرگ چگونه مدیریت میشوند؟
- حرکت ظاهری تصویر چگونه با حرکت واقعی صحنه مرتبط است؟
Key concepts
- ثبات روشنایی
- مشکل دیافراگم
- ردیابی لوکاس-کاناده
- جریان چگال هورن-شونگ
- تخمین از درشت به ریز
- تقسیمبندی حرکت
Key theories
- ثبات روشنایی و مشکل دیافراگم
- فرض اینکه یک نقطه متحرک روشنایی خود را حفظ میکند، یک معادله به ازای هر پیکسل برای دو مؤلفه حرکت ناشناخته میدهد، بنابراین حرکت فقط در عرض گرادیانها تعیین میشود و در امتداد لبهها مبهم باقی میماند - مشکل دیافراگم.
- تخمین جریان محلی در مقابل سراسری
- روش لوکاس-کاناده با فرض حرکت ثابت در یک پنجره محلی، ابهام را برطرف میکند، در حالی که روش هورن-شونگ یک محدودیت همواری سراسری را اعمال میکند که دو استراتژی کلاسیک برای جریان چگال را نشان میدهد.
Clinical relevance
حرکت و جریان نوری، تثبیت و فشردهسازی ویدئو، تشخیص عمل، ردیابی شیء، درک خودروهای خودران، و اودومتری بصری مورد استفاده توسط رباتها و پهپادها را هدایت میکنند.
History
فرمولبندیهای لوکاس-کاناده و هورن-شونگ در سال ۱۹۸۱، جریان نوری پراکنده و چگال را پایهگذاری کردند؛ اصلاحات واریانس برای دههها ادامه یافت و شبکههای عمیق بعدها جریان را مستقیماً از دادهها آموختند و دقت را در حرکات چالشبرانگیز بهبود بخشیدند.
Key figures
- Berthold Horn
- Brian Schunck
- Takeo Kanade
Related topics
Seminal works
- hornschunck1981
- lucaskanade1981
Frequently asked questions
- مشکل دیافراگم چیست؟
- با نگاه کردن به یک لبه متحرک از طریق یک پنجره کوچک، میتوانید نحوه حرکت آن را در عرض لبه تشخیص دهید اما نه در امتداد آن، بنابراین حرکت محلی مبهم است؛ حل آن نیازمند ترکیب اطلاعات از گوشهها یا مناطق وسیعتر است.
- جریان نوری برای چه مواردی استفاده میشود؟
- این جریان نشان میدهد که هر پیکسل چگونه بین فریمها حرکت میکند، که از ردیابی اشیاء، تثبیت و فشردهسازی ویدئو، تخمین حرکت دوربین و تشخیص اقدامات پشتیبانی میکند.