Merhaba ve yapay zeka dersine tekrar hoş geldiniz.
Bugün, yaşayan bir cezadan bahsediyoruz.
Pekala, burada tüm Belman denklemine sahibiz ve bu dersi devam ettirdikçe yavaş
yavaş giderek daha karmaşık hale geldik, şu ana kadar bu olasılıkları burada ekledik.
Ayrıca indirgeyen faktörü de ekledik.
Şimdi şimdi ödülümüzün bulunduğu sorunun bu tarafında daha ayrıntılı bir şekilde duracağız.
olduğunu ve bunun ortamda ve borsada eylemleri gerçekleştirdiğini ya da bunun sonucunda yeni
bir devlet kazandığını ve bu eylemin içinde bulunduğu ve ödül olduğunu söylediğini hatırlayın.
Unutmayın, takviye öğrenmenin nasıl yürüdüğü hakkında konuştuğumuzda, bir temsilcimizin
Şu ana kadar, örneğimizde, bitiş çizgisine ulaşırsak ya da ajan ateş çukuruna girerse, bir
artı bir ya da bir ek ödül alırsak, en sonunda ödüller kazanmış oluyoruz.
Fakat bu, takviye öğrenmeyle ilgili çok basit bir yaklaşımdır ve daha gerçekçi senaryolarda, yolculuğunuz
boyunca ödülleri büyük olasılıkla ödeyeceksiniz, en sonunda sadece yolculuğunuz boyunca ödüller
kazanabilirsiniz.
Örneğin bir AI oyun oynamakta ve örneğin birisini felakete uğrattıysa, düşmanı öldürmek
için puan alabilir veya başka bir oyun olabilir.
Oyunun kuralları yüzünden başka bir otomobili ya da böyle bir şeyden
daha fazla geçerse, oyunu analiz etme yöntemi değil, aslında oyun, oyunun başlamasından önce belirli
eylemleri yapma noktalarını güçlendirdiği bir şekilde yapılandırılmıştır. bitti.
Bunun gibi Sinatras çok yaygın ve yalnızca oyunlarda değil, gerçek hayatta da
var ve bu yüzden basit bir versiyon örneğimize benzer bir şey
getireceğiz, oysa oyun boyunca aracıya sürekli olarak verilen bir ödül. sadece sonun
değil, bunu yapacağımız yol diğer kiremitlere bakmaktır.
karoda bir ödül ve bir tane ödül var, diğer taraftan da firepitin eksi 1'inde ödül veriyoruz.
Şu anda sadece son
Fakat şimdi her seferinde ödüller ekleyeceğiz.
Çok küçük bir ödül eklersek eksi 0 olur. 04.
Ve gördüğünüz gibi negatif çünkü ajanın hareket etmesi her zaman olumsuz bir ödül alacak ve yaşayan
bir ceza adı verilen şey bu, nereye giderse girsin, son fayansların haricinde her zaman
bu olumsuz ödülü alacak çünkü bu bitti. oyun.
Ve bu yüzden bu kiremitteki ödülün bile delilik veya bir bulmaca olduğunu görebilirsiniz.
Ancak bu, o ödülle başlaması anlamına gelmez.
O sadece bu ödülü alır.
Ve bu, yalnızca bir fayansa girdiğinde ödülünü aldığını hatırlamakta fayda var, o da buraya giderek
o ödülü eksi 0 alacak bir eylem vaadinde bulundu. 04 ve daha sonra tekrar bir zihin ve 0
alacağım bu tarzı geliyor. 4 kelime.
Ve o kadar çok dolaşır, olumsuz ödülünü o kadar çok biriktirir ve bu nedenle
oyunu mümkün olduğunca çabuk bitirmesi için teşvik eder.
Ve şimdi, politikamızın veya temsilcilerin politikasının bu ödül için belirlediğimiz değere
bağlı olarak nasıl değişeceğine bir göz atalım.
Yani burada dört ortam var ve her biri farklı bir keşfi yapacağız.
Hesaplamaları yapmayacağız.
Sonuçları yansıtacağız ve sezgisel olduklarını göreceksiniz.
Yani burada herhangi bir devlete girmek için herhangi bir adım teklifi için bir ödül var.
Sıfıra eşittir.
Tıpkı burada gördüğümüz gibi, ödül Mei'nin 0 olacağı gibi. 0.
Şimdiye kadar yaptığımız şey için, ödülün eksi 0'da olacağını biliyorsun. 5 veya ceza verme seviyesi mayın olacak kadar
açık ateşte o kadar çok burada onları 10 kattan daha fazla görebilirsiniz.
Ve burada yaşayan Penhall'ın eksi iki olacak.
Böylece, atlama için elde ettiğiniz ödüllerden, hatta ajanların ateş çukuruna kadar çıktığı için verdiğiniz ödülün ötesinde
daha da fazla.
Öyleyse, bu ortamı geçmek için gereken eylemlerin veya en uygun politikanın bu ödüle bağlı olarak nasıl
değişeceğine bir göz atalım.
Yani bu orijinal politikamız.
Ve hatırlayabileceğiniz gibi, bu iki ilginç ve hatta acayip bir karar
ajan tarafından vardı ama o sürece yaşayabilir mantıklı tamamen mantıklı.
Çok uzun süre hayatta kaldığınız için cezalandırılmaksızın istediği süre
boyunca dolaşabilirsiniz.
Neden sadece duvardaki köşeye girip neden olmaya devam edelim
ki?
Bu şekilde gidip o zaman yürümesi olur.
Ve burada aynı şey duvara atlamanın çok daha güvenli olduğunu ve bunlardan birinin
sonunda ortaya çıkacağını umuyor ve sonra finiş çizgisine yine de gidecek çünkü bu iki işlemi seçerek ateş
çukuruna girme riski taşımıyor .
Şimdi sadece bir adım atmak için hayat gibi olumlu bir ödül eklersek ne olacağını görelim.
Buraya taşıdığınızı görebilirsiniz, anında bu ikisinin de değişti.
Şimdi temsilci duvara atlamak istemiyor.
Firepit'in yüzde 10 olasılıkla atlayabileceği riski daha yüksek, ancak öne çıkacak
çünkü burada her yere geldiğinde her an burada yapacak olsaydı, burada seyretmeye
gelirdi. yüzde 80 ihtimalle bu durumda sona erdiği bir eylem
gerçekleştirir.
Ve bu, yüzde 0 eksi 0 alacağınız anlamına geliyor. biriktirmesini sağlayacak çok zaman demek.
04 ödülü, bunun bu olumsuz ödülü
Aslında rastgele sağa hareket edeceği o anı bekleyen duvara atlarsa burada aynı
şey olur.
Bunu yapmaya devam ederse, bu negatif ödülü biriktirir ve
hesaplamaları gerçekleştirirseniz, bu yaklaşımın beklenen değerinin duvara sıçrayışının sonucunun
ileriye dönme riskinden daha kötü olduğunu göreceksiniz. ve aslında firepitte bitiyor.
ilerletmek ve burada sola doğru ilerlemektedir, çünkü firepit ateşi riski bile bilinmektedir, çünkü şu an hayatta o
kadar uzun yaşar ki bu yaşam cezasını bir sonraki ortamda biriktirir.
Böylece kararlarını bu iki blokta değiştirerek ileriye doğru
Şimdi canlı Pouncey'yi daha büyük bir sayı olan Meinzer beşinci noktaya yükseltiyoruz ve burada
neler değiştiğini görelim.
Artık bunu bu ortamla karşılaştırıldığında görebilirsiniz.
Burada değişen tek şey bu ok sağa işaret ediyor olmasıdır.
Bunun anlamı şu an için ajan için artık iyi bir seçenek değil ya da işaret eden bu ok
işareti sola işaret ediyor ve nozüllerin burnu yukarı doğru işaret ediyordu.
iyi bir fikir değil çünkü yanlış giderse evet güvende ya da firepit'i almama şansının azlığı var.
Bu yüzden, artık temsilcinin buradan dolaşması ya da sonuna kadar
dolaşması artık
Fakat aynı zamanda ya da daha az şans olacak.
Fakat aynı zamanda etrafında dolaşırken aynı zamanda önemli derecede olumsuz bir ödül biriktirir.
Yani sadece yol çok uzun.
Bu yüzden buraya gelmek için daha kısa bir rota almak için burada ya da burada olup olmamaya zorlanıyor, çünkü
firepitin içine girme riski daha yüksek olsa da, meydanın içine girdiği anda yüzde 10'luk
bir ateş şansı var. .
Hesaplamalarına göre.
Bu yaklaşımın beklenen değeri, beklenen yaşam kalitesini artırdığımız için
beklenen değerden daha iyi.
Ve son olarak, canlı ceza eksi iki nokta sıfır olan örneğe geçiyoruz.
Dolayısıyla, burada yükleme punt cezasını artırdığımızda, politikanın nasıl değiştiğini gördüğünüze göre
videoyu göndermenizi öneririz.
Videoyu duraklatmanızı ve bu senaryoda ne olacağını kendiniz düşünmenizi öneririm.
kadar yüksek olduğu için en uygun politikanın ne olacağı konusunda ne düşünüyorsunuz, öyleyse isterseniz tüm bu sözde video.
Yaşayan cezanın o
Şimdi penaltıyı eksi 2'ye arttırırsanız, size bu durumda
çözüm sunmak için atlayacağım. 0 çok yüksek, burada ceza sadece eksi 1 olduğunu unutmayın. 0 Ateşçinin sadece ateş ağzına atlayarak olsa
bile herhangi bir şekilde mümkün olduğunca oyundan çıkmak istediği çok yüksek.
O yapacak.
Eyaletinizde yeni bir duruma düştüğümde her adım attığımda ya da her
harekete geçtiğimde eksi iki ödül alacağım gibi olacak.
Buradan, iki ekstra adım atacak olursa, bitiş çizgisine ulaşmaya çalışmanın anlamı nedir?
Ben sadece buraya gelip doğrudan ateşböceğine gideceğim çünkü
bu şekilde ödülümün olumsuz ödül daha az olacağından, ek adımlar atmak kadar kötü olacak
bu yüzden bu yaşayanın eklenmesini görebilirsiniz. ödül ve değerine bağlı olarak yaşayan ödül
ekliyoruz sonuçlarımız farklı olacak.
Ve temsilci farklı politikalar seçecek ve temelde sonuç değeri ne olabilir, Belmont denklemi
sadece finiş çizgisinde değil oyunun sonunda bile olsa da oyun
boyunca dahi birleştiriliyor.
bir kez daha, her bir devletin her birinde, çevrenin kendisine bağlı olmak zorunda değildir.
Ve yine
Acenteye her eyalette değil belirli belirli ülkelerde verilebilir, ancak basit olan
örnekte, verilen her durumda ödülleri kullanıyoruz.
Bu kavramı göstermek için umarım bugünkü eğitimden hoşlanırsınız.
Gördüğünüz gibi, zaten Belman denklemini çok sofistike hale getirdik ve şimdi birçok farklı
senaryoya uygulanabilir ve bir sonraki öğreticide görmek için sabırsızlanıyorum.
Ve o zamana kadar bir keyfimin tadını çıkarın.