Halo dan selamat datang di Statoil.
OK jadi kami baru menghitung entropi dan menambahkannya ke daftar entropi.
Dan sekarang yang akan kita lakukan adalah mengambil setetes tindakan secara acak berdasarkan
distribusi probabilitas berikutnya.
Jadi mari kita lakukan ini.
Itu langkah selanjutnya.
Kami masih dalam lingkaran karena kami masih berjalan pada langkah-langkah di sini.
Dan sekarang Anda tahu cara memainkan aksinya.
Kami pertama-tama akan memperkenalkan variabel untuk tindakan yang disebut tindakan dan kemudian kami
mengambil distribusi probabilitas kami dan kami akan menggunakan multi-fungsi saraf untuk mengambil undian acak dari distribusi probabilitas
ini dan kemudian kami menambahkan data itu.
Jadi penting untuk dicatat bahwa tindakan sebenarnya akan menjadi tensor dengan hanya satu nilai tetapi Anda tidak harus
melihat ini sebagai nilai sederhana.
Anda harus melihat ini sebagai kutukan tensor satu per satu yang berisi nilai ini untuk tindakan.
Dan itu karena itu tidak diperas masih sama untuk loop.
Kami akan mendapatkan probabilitas log yang terkait dengan tindakan yang baru saja diputar.
Jadi ketika saya berpacaran dengan probabilitas keberuntungan saya di sini dengan mengambil yang sebelumnya, keberuntungan sebelumnya
dari yang kami hitung di sini dan kemudian saya akan menggunakan metode lain yang akan saya masukkan 1 dan tindakan yang baru
saja dilakukan bermain karena kami ingin mendapatkan probabilitas keberuntungan yang terkait dengan tindakan ini.
Jadi argumen kedua di sini saya akan melakukan tindakan saya tetapi harus ada siksaan yang mengerikan seperti yang
disyaratkan oleh fungsi yang dikumpulkan dan fungsi yang dikumpulkan hanya indeks dengan bilangan bulat tensor.
Baiklah jadi sekarang kita baru saja mendapatkan tampilan terkait dengan tindakan yang ditampilkan.
Dan sekarang langkah selanjutnya adalah menambahkan apa yang kita dapatkan ke daftar di sini.
Jadi kami mendapat nilainya.
Itulah yang kami dapatkan di sini sebagai output dari model.
Lalu kami juga mendapat masalah kunci.
Jadi kita akan menambahkan kunci ke daftar alat peraga kunci.
Kami sudah menambahkan entropi ke entropi itu kurang bagus dan hasilnya akan didapat setelah itu.
Jadi sekarang kita akan membuka nilai dan melihat daftar nilai dan proses hukum.
Mari kita lakukan.
Kami mengambil daftar nilai kami, kami menambahkan bahwa kami menggunakan fungsi pengeluaran dan kami menambahkan nilai
yang dikembalikan oleh model sempurna kemudian Sama untuk prob kunci Kami baru saja mendapatkan alat peraga baru dan kami
akan menambahkannya ke daftar alat peraga kunci.
Jadi dalam fungsi append ini kita bisa meletakkan log dari keberuntungan kita mungkin itu baru dihitung di sini.
Baiklah jadi daftar kami sekarang diperbarui dengan baik.
Sekarang yang akan kita lakukan adalah memainkan aksinya karena sebenarnya di sini kita memilih aksinya
dengan mengambil undian acak dari distribusi probabilitas di sini.
Tapi kami sebenarnya belum memainkannya dan kami akan memainkannya sekarang sehingga kami dapat mencapai negara baru
dan karenanya mendapatkan transisi baru dan memainkannya.
Kita akan mengambil lingkungan kita karena kita memainkan aksi di lingkungan kita maka
kita akan menggunakan metode langkah.
Dan di dalam kita menentukan tindakan yang dipilih untuk memainkannya dan untuk melakukan ini kita mengambil tindakan kita dan kita
menambahkan bahwa tidak ada oleh karena itu yang diharapkan itu adalah fungsi.
Ok tapi ini mengembalikan negara baru dan juga hadiah baru karena dengan mencapai negara baru kita mendapatkan hadiah baru dan
juga kita mendapatkan nilai baru untuk Dunn untuk mengetahui apakah permainan dilakukan atau tidak
Baiklah jadi dengan ini kita memainkan aksi kita mencapai keadaan baru dan kita mendapatkan hadiah dan kita tahu jika kita
sudah selesai dengan permainan.
Dan berbicara tentang selesai dengan permainan.
Kami hanya akan menambahkan sesuatu di sini yang akan memastikan bahwa agen tidak ditumpuk dalam beberapa
kondisi.
Dan untuk melakukan itu kita akan memperbarui yang dilakukan dengan sangat baik dengan cara berikut.
Yah itu akan sama dengan dilakukan atau kita akan menambahkan kondisi yang mengatakan bahwa episode permainan
tidak boleh bertahan terlalu lama dan kita akan melihat di fungsi utama bahwa akan ada parameter panjang
maks yang akan sama ke 10000.
Dan kami tidak ingin episode berlangsung lebih dari 10.000 unit.
Jadi kita akan mendengar panjang episode yang merupakan panjang dari sebuah episode dan kita akan menulis
suatu kondisi yang lebih besar dari max episode Lex yang kita belum benar-benar mengatakan ini secara panjang lebar.
Kami mendapatkannya dari parameter kami untuk mengakhiri di sini Paramjit tetapi Ramstad.
Max panjang lebar.
Jadi ini berarti bahwa jika permainan dilakukan atau panjang episode lebih besar dari panjang maksimum set episode
yang akan sama dengan 10.000.
Nah permainan akan dilakukan dan kami akan memulai permainan baru.
OK jadi itu hanya pencegahan.
Dan berbicara tentang tindakan pencegahan kita akan menambahkan tindakan pencegahan lain untuk menjepit hadiah antara minus 1 dan
plus 1.
Kami sudah mendapatkan kami ada di sini tetapi kami ingin memastikan bahwa hadiahnya antara minus 1 dan plus
1.
Dan untuk melakukan ini kita hanya perlu memperbarui hadiah dengan melakukan ini dengan mengambil yang maksimal kemudian
mengambil orang-orang yang mendapat hadiah dan 1.
Dan di sini kita mengambil maks hadiah minimum dan 1 dan minus 1 dan itu akan memastikan hadiah
itu antara minus satu ditambah satu.
Baiklah.
Jadi perkusi yang lain.
Dan sekarang kami hanya ingin memeriksa apakah permainan dilakukan dalam hal ini kami akan memulai kembali lingkungan.
Dan mengapa kita perlu memeriksa itu sekarang karena kita baru saja mencapai negara baru.
Kami baru saja melewati transisi baru.
Jadi kita perlu memeriksa itu setelah melewati transisi baru ini.
Yah permainan tidak dilakukan jadi jika dilakukan lagi jika dilakukan maka dalam kasus itu
kita akan memulai kembali lingkungan dengan mengatur panjang episode ke nol.
Dan juga keadaan akan diinisialisasi ulang untuk menginisialisasi ulang saat kita mengambil lingkungan kita
dan kita menggunakan fungsi reset OK.
Sekarang kita keluar dari kondisi ini yang baru saja memeriksa.
Dan sekarang apa yang akan kita lakukan adalah karena kita mencapai keadaan baru sementara keadaan
baru ini sekarang dan kemudian oleh Ray karena ingat negara adalah gambar input yang awalnya dinamai oleh array.
Dan sekarang yang harus kita lakukan adalah mengubah negara baru menjadi jawaban yang tersiksa.
Jadi kita akan memperbarui status kita dan kita akan menggunakan perpustakaan obor.
Dan tentu saja dari fungsi non-Thailand untuk mengubah ini non-pembayar menyatakan gambar input menjadi sensor
obor.
Sempurna.
Dan sekarang hal terakhir yang perlu kita lakukan sebelum keluar dari ini untuk loop itu adalah
loop pada langkah kita. Yah itu tentu saja menghabiskan hadiah ke Daftartonton
Itu hal terakhir yang perlu diperbarui, kami memperbarui semua daftar di sini kecuali untuk hadiahnya.
Jadi kita akan melakukan itu sekarang kita mengambil hadiah kita dan kita menggunakan fungsi otakmu untuk menambahkan
kata terakhir yang baru saja diterima dengan sempurna.
Dan tepat sebelum kita keluar dari for loop kita hanya perlu melakukan satu pemeriksaan terakhir untuk memeriksa bahwa jika sudah selesai
maka kita ingin menghentikan kedaluwarsa.
Dan jadi kita hanya akan menambahkan istirahat di sini.
Artinya jika selesai, kami menghentikan eksplorasi dan kami langsung beralih ke langkah berikutnya
yang akan menjadi pembaruan dari model bersama dan sekarang kami selesai dengan ini untuk sekarang bahwa agen telah
melakukan eksplorasi.
Ini akan memperbarui model bersama dan kami akan membereskannya di tutorial berikutnya dan seterusnya.