こんにちは､ 自動運転車への挑戦の最終段階へようこそ｡
というのも､ 今回の目標はレベル4ではなく､ 自動運転車を倒すことです｡ このチャレンジを自分で倒せるように､
コードの改善､ AIの改善､ あるいは戦略の改善に挑戦したいからです｡
そこで､ 空港からダウンタウンまで行けるような､ 非常に複雑な道路を作ろうと思うのですが､ たぶん車が道を見つけるには複雑すぎるでしょう｡
だから､ それが私の挑戦になるので､ 挑戦的な宿題を楽しみながらやってほしい｡
では､ こうしてみましょう｡
このレベル4にアプローチしてみよう｡
では､ すべてを選択して､ 脳をロードしてみましょう｡
そして､ そこに行く｡
今は空港と都心を往復しているので､ 時間がかかると思います｡
だから､ 音楽をかけるだけです｡
そして､ ここからは道連れです｡
そして､ そこに行く｡
こちらがその道です｡
そしてご覧のように､ このクルマにはトラブルが多いようです｡
だから､ それこそ私が望んでいたことなんです｡
それは､ 同じところを少しずつ往復することです｡
それが問題なんですね｡
ダウンタウンには今ひとつピンとこない｡
では､ どうすればこれを解決できるのか｡
戦略を変える必要があるのでしょうか？
車の脳内のシナプスを変化させたニューラルネットワークのパラメータを変更する必要があるのでしょうか？
報酬で何かする必要があるのでしょうか？
今のままではゴールが見つからないのに､ もっとひどい報酬を得るかもしれないよ？
だから
だから､ わからないんです｡
それは､ あなたが見つけることです｡
見ての通り､ ゴールが見つからず､ ゴールに近づかない時の報酬はあまり厳しくなく､
マイナス0でいいんです｡ 2.
だから､ シビアなバイトの報酬ではないんです｡
報酬をマイナス0にするなど､ さらに報酬を減らしてみてはいかがでしょうか｡ 5.
もしかしたら､ うまくいくかもしれませんね｡
私はただ､ あなたの助けになるような提案を投げているだけです｡
それは報酬戦略で変更できるわけです｡
もちろん､ 作ることもできます｡
その他､ ニューウェルネットワークの変更点
そこで､ この項では､ Newell Networkのアーキテクチャを作成します｡
ここでは､ 1つの隠れ層に30個の隠れニューロンを持つことを選択した｡
もっと多くの層や隠れニューロンを試して､ アーキテクチャを変えてみるのもいいかもしれませんね｡
どうだろう｡
それも改善提案なんですね｡
そして､ ディープラーニングのアルゴリズムで何かを変えてみることもできますし､ 単純にコースに進んで他のアルゴリズムについて知ることもできます｡
もしかしたら､ この状況を何とかしてくれる別のものがあるかもしれません｡
だから､ 頑張ってください｡
皆さんの解決策を楽しみにしています｡
その同じ道を描いてみてください｡
それは完璧だ｡
それは本当にかなりエキサイティングです｡
エニグマ
そして､ ヒントを与えてほしい､ あるいは何が問題なのか手短に説明してほしいということであれば､ まあ､
ここに書いてある通りです｡
そこまでいくと､ もう戻っちゃうんですよね｡
それは､ そこに到達した時点で､ 今現在のゴールであるダウンタウンから遠ざかりつつあるからです｡
その地点に到達しているときに､ それ以上進むと､ まあ､ 目標から遠ざかるわけですからね｡
だから､ ここに戻ってくるわけです｡
だから､ 目標から遠ざかっているときに罰を少なくするために､ コードの中の何かを､ 戦略の中の何かを変えなければならないのです｡
それが解決策なのかもしれません｡
いくつかの提案を投げているだけです｡
あまり早く解決策を示したくはないのですが､ これは本当に良い練習になりますし､
典型的にはエンジニアが自動運転車を作るときに遭遇する可能性のある問題なのです｡
でもとにかく､ かなりかっこいいエニグマだと思うので､ ぜひ楽しんでください｡
そして､ この宿題を解く前に､ もしかしたら､ もう一つ非常に効率的な宿題､ つまり､ 単純にこのすべてを実装してみるという宿題ができるかもしれません｡
私はまた､ まったく同じものを実装するだけです｡
これまでは私の説明を聞くだけでしたから､ とてもいい練習になりますよ｡
しかし､ 何かを聞くのと､ 自分たちでそのことをやってみるのでは､ 大きな違いがあります｡
お､ おう｡
何が起きたか見たか？
ただ､ 道を見つけただけなんです｡
すごいですね｡
どうやって抜け出したのか不思議ですが､ もっと効率的に抜け出せる作戦があるはずです｡
そして今､ かなりいい感じになっているようです｡
早口なのかもしれませんね｡
もしかしたら､ これが解決するかもしれない｡
いや､ これでいいんだ｡
またここに引っかかってきた｡
車にとってはかなりチャレンジングなことですよね？
でも､ これはきっと解決できるはずです｡
それがあなたの目標です｡
だから､ 頑張ってください｡
そして､ その解決策をぜひ教えてください｡
それまではお楽しみに｡
I.