Optimal Kontrol
Optimal kontrol, bir dinamik sistemi zaman içinde bir performans kriterini optimize edecek şekilde yönlendiren kontrol girdilerini belirler.
Tanım
Optimal kontrol problemi, durumu yöneten diferansiyel denklemlere tabi olarak bir maliyet fonksiyonelini minimize eden bir kontrol fonksiyonu aramaktadır; çözümü, maksimum prensipten elde edilen gerekli koşullar veya dinamik programlamanın değer fonksiyonu ile karakterize edilmektedir.
Kapsam
Bu kapsam, durum dinamikleri ve maliyet fonksiyonelleri ile kontrol problemlerinin formülasyonunu, Pontryagin'in maksimum prensibini ve eşlenik denklemleri, dinamik programlamayı ve Hamilton-Jacobi-Bellman denklemini, doğrusal-kuadratik regülatörü ve klasik varyasyonlar hesabıyla ilişkisini içermektedir.
Temel sorular
- Sistemin yörüngesi boyunca belirli bir maliyeti minimize eden kontrol yasası nedir?
- Optimal bir kontrol hangi gerekli koşulları sağlamalıdır?
- Dinamik programlama, optimal değer fonksiyonunu nasıl karakterize eder?
- Optimal kontrol, varyasyonlar hesabını kısıtlı girdilere nasıl genişletir?
Temel kuramlar
- Pontryagin maksimum prensibi
- Optimal bir kontrol, her an bir Hamiltoniyen'i maksimize ederken, eşlenik bir maliyet durumu değişkeni zamanda geriye doğru evrilmekte ve kontrol kısıtlı olsa bile gerekli koşulları sağlamaktadır.
- Dinamik programlama ve HJB denklemi
- Bellman'ın optimallik prensibi, değer fonksiyonu için Hamilton-Jacobi-Bellman kısmi diferansiyel denklemine yol açmakta olup, bu denklemin çözümü optimal geri besleme kontrolünü vermektedir.
- Doğrusal-kuadratik regülatör
- Doğrusal dinamikler ve kuadratik maliyet için, optimal kontrol, kontrol mühendisliğinin temel taşlarından biri olan bir Riccati denkleminin çözümüyle belirlenen doğrusal bir durum geri beslemesidir.
Klinik önem
Optimal kontrol, uçak ve uzay araçlarının yönlendirilmesini, süreç ve robotik kontrolünü, zaman içindeki ekonomik ve kaynak planlamasını ve tedavi planlama modellerini yönetmekte olup, dinamik bir sistem üzerinde optimal şekilde hareket etmek için prensipli bir yol sunmaktadır.
Tarihçe
Optimal kontrol, 1950'lerde havacılık ve uzay problemlerinin etkisiyle varyasyonlar hesabından ortaya çıkmıştır. Pontryagin ve çalışma arkadaşları 1956-1962 yılları civarında maksimum prensibi oluşturmuş, Bellman paralel olarak dinamik programlamayı geliştirmiş ve Kalman'ın doğrusal-kuadratik ve filtreleme teorisi konuyu modern mühendisliğin merkezine taşımıştır.
Öne çıkan isimler
- Lev Pontryagin
- Richard Bellman
- Rudolf Kalman
- Constantin Caratheodory
İlgili konular
Temel eserler
- pontryagin1962
- bertsekas2017
- liberzon2012
Sıkça sorulan sorular
- Optimal kontrol, varyasyonlar hesabıyla nasıl ilişkilidir?
- Varyasyonlar hesabı eğriler üzerinde serbestçe optimizasyon yaparken, optimal kontrol genellikle kontrol üzerindeki kısıtlamalarla birlikte dinamik bir sistemin girdileri üzerinde optimizasyon yapmaktadır. Maksimum prensip, klasik Euler-Lagrange koşullarını bu kısıtlı, sistem odaklı ortama genellemektedir.
- Maksimum prensip ile dinamik programlama arasındaki fark nedir?
- Maksimum prensip, eşlenik bir değişken kullanarak tek bir optimal yörünge boyunca gerekli koşulları verirken, dinamik programlama her durumdan optimal maliyeti Hamilton-Jacobi-Bellman denklemi aracılığıyla karakterize ederek bir geri besleme yasası sağlamaktadır. Bu iki bakış açısı tamamlayıcı ve birbiriyle bağlantılıdır.