Merhaba ve Statoil'e hoş geldiniz.
Böylece şimdi temsilci araştırmalarını tamamladı ve sonra ne yapmak istediğinde paylaşılan ağın güncellenmesi.
Yapacağımız ilk şey, onu sermayemiz R olarak adlandıracağımız kümülatifi başlatmak ve bunu bir
meşale tensörü olarak başlatacağımız ancak tek bir boyuta sahip olacağımız, çünkü bu sadece bir değer, ancak
istedik bir tensör olmak için.
Ve ben burada sıfırlar ve daha sonra 11 kullanıyorum.
Bu nedenle, temel olarak toplu ödül 0 olarak başlatılır.
Tamam, oyunun bitip bitmediğini söylersek söyleriz.
Şu an istediğimiz, paylaşılan ağın ulaştığı son ticaretin değerine eşit
kümülatif ödül.
Bu yüzden, değer çıktısını alacağız.
Modelimizin fonksiyon çıktılarının değerini biliyorsunuz ve bu çalışma yaptığımız topluluğa vereceğimiz
değerdir.
Öyleyse ilk önce bu değeri elde edebileceğimiz değeri elde edelim.
altına alıp tekrar vurgulayalım ve sonra modelimizi elde ederiz çünkü bu değer çıktılar, ancak
ahlaki şeyin ilk çıktısı burada ve burada çift olur Yaptığımız şeyi buraya kopyalayabiliriz.
Değer Sonra bundan sonra biliyoruz ki, burada ekleyebileceğimiz değeri altçizgi
Bu, modelin girdi görüntüleri ve devletlerin çekilmesi ve Güney eyaletleri ile girişi.
Bu yüzden sadece yapıştırıyorum ve oraya gidiyoruz.
Bu değeri alacağız.
Ve şimdi şimdi yapacağımız şey, değerimize değer vermek ve herkesin değerine eşit olmasını sağlamak ve orada
başta gelen değere ulaşmaktır.
Tamam.
çıktısını modelin ilk çıktısını elde etmenin bu yeni değeri zaten değerler listesine eklediğini bilirsiniz.
Şimdi if koşulu yapılır ve şimdi yeni bir değer elde ettiğimizden beri ne
yapacağımıza göre, modelin
Dolayısıyla doğrudan değerler listemizi alıp bir çadıra doğru yönlendirebiliriz ve değişken koyarız çünkü bizim.
Bu son değer o kadar harika ki şimdi bitti.
Kayıpları baştan başlayacak ve sezgisel dersleri hatırlayacağız.
İki kayıpınız var.
Acentenin öngörüleriyle ilgili en son politika sahibisin.
Ve eleştirmenin öngörüleriyle daha az ilişkili olan değerin sonuna sahipsiniz.
Dolayısıyla, bu iki değişkeni sıfıra ilklendirerek tanıtacağız ve burada bizim
için korkunç politika kaybı politikasını alacaklardır.
Onu sıfıra getirin ve ardından değeri çok kaybetti ve sıfıra sıfırdan başlatın, sonra biriktirici ödülü bir
meşale değişkeni olarak ayarlamayı unutma diyelim, çünkü bir meşale olmaya ihtiyaç duyarız.
Roybal, çünkü bir eğim hesaplayacağız. Buna göre birikimli ödül, değer kaybının
bir dönemi olacak.
Dolayısıyla bu geçerli bir degrade ile dinamik grafiklerle ilişkilendirilmiştir.
tahminleri ve hedefleri arasında bunu en aza indirgemek için güneş altında gaz indirgeme uygulamak istediğimizi biliyorsun.
Ve nihayet, büyük eğilim döngüsüne başlamadan önce yapmamız gereken en son şey,
GAAP'yi genelleştirilmiş avantaj tahminine başlatmalı ve elde etmemeli veya kaplamamalıyız.
Şu anda başlatmak üzere olduğumuz GAAP'ye dikkat et, genelleştirilmiş avantaj
tahminidir.
Bir hatırlatıcı olarak, genelleştirilmiş bir avantaj tahmini, tanım gereği, a durumunu gözlemleyerek
a eyleminin oynanmasının avantajıdır.
Bu, eylemin ve durumun bir fonksiyonudur ve q değerleri Q A S
ile V fonksiyonunun değeri arasındaki farka eşittir.
Aslında burada yazabilirim.
Genelleştirilmiş avantaj tahmini, işlemin ve durumun bir fonksiyonudur ve bu, A işleminin
q değerlerine eşittir ve durum S, duruma uygulanan V fonksiyonunun değerinden
çıkarılır.
Sözü edilen genelleştirilmiş avantajlar budur ve şimdi şu anda başlatmak istediğimiz şey budur.
Ve bunu sıfıra başlatacağız.
gibi aynı hünerini kullanacak olan dansçılara doğru olmalı, burada meşale kütüphanesini
alıp, sıfır olan tek bir değeri tensör olarak ayarlamak için zebra'nın işlevi için başvuracağız.
Ancak burada yaptığımız
Ve bu yeni değişkeni g kullanacağız ve bu, 1'i sıfıra indiren o meşale ile eşit
olacaktır.
Dolayısıyla bu sıfıra başlatılacaktır ve bu nedenle, devletin s eyleminin q değerleri,
devletin V işlevinin değerine eşit olacaktır.
Tamam.
Ve şimdi for döngüsünü başlatmaya hazırız.
Yani burada bir maceramız olacak.
Bu yüzden iyi bir mola verin ve size saldırmak için sonraki öğreticide görüşürüz.
Ve sonra ben.