สวัสดีและยินดีต้อนรับกลับสู่หลักสูตรเกี่ยวกับปัญญาประดิษฐ์
วันนี้เราเดินทางต่อไปสู่โลกทุก ๆ สามครั้งและเรากำลังพูดถึงด้านซิงโครนัสของ C ใด
ๆ ดังนั้นเราจึงมีตัวย่อของข้อได้เปรียบแบบซิงโครนัส
นักวิจารณ์ที่ใช้งานอยู่
และวันนี้เราจะค้นหาว่าซิงโครนัสที่นี่หมายถึงอะไร
ลองย้อนกลับไปหนึ่งก้าว
เรามาดูกันว่าเราเริ่มต้นหลักสูตรทั้งหมดนี้เพื่อบังคับให้เรียนรู้ว่าอะไรคือสิ่งที่เกี่ยวกับว่าเอเชียอยู่ในสถานะที่แน่นอน
พวกเขาสังเกตเห็นรัฐ
พวกเขาตัดสินใจบางอย่างที่พวกเขาทำในรัฐนั้นและจากนั้นรัฐก็เปลี่ยนไปดังนั้นพวกเขาจึงเข้าสู่สถานะใหม่และได้รับรางวัล
ดังนั้นรางวัลสำหรับการดำเนินการนั้นหรือของรางวัลบางประเภทซึ่งอาจเป็นโทษได้เช่นกันและพวกเขาก็จะอยู่ในสถานะใหม่
และจากนั้นตอนนี้พวกเขาก็ดำเนินการอีกครั้ง
พวกเขาได้รับรางวัลและสิ้นสุดในสถานะใหม่และพวกเขาดำเนินการอื่นและอื่น ๆ
และนั่นคือพื้นฐานที่อยู่เบื้องหลังการเรียนรู้เสริมทั้งหมด
และนั่นคือสิ่งที่เราใช้ในการเรียนรู้ในการเรียนรู้อย่างลึกล้ำและการเรียนรู้เชิงลึกอย่างต่อเนื่องและนั่นทำให้ตัวแทนของเราเอาชนะสภาพแวดล้อมที่ซับซ้อนและซับซ้อนมากขึ้นเรื่อย ๆ
แต่ตอนนี้เรากำลังจะนำเสนอแนวคิดที่ดียิ่งขึ้นและเพื่อให้ได้ระดับนี้ยิ่งขึ้น
สิ่งที่ A-3 เห็นนำเสนอผ่านองค์ประกอบนี้และองค์ประกอบซิงโครนัสคือแทนที่จะให้เอเจนต์หนึ่งโจมตีสภาพแวดล้อม
พวกเขามีสามตัวแทนหรือจำนวนของตัวแทนหรือตัวแทนหลายคนโจมตีสภาพแวดล้อมเดียวกัน
และกุญแจตรงนี้คือสาเหตุที่เรียกว่าการซิงโครไนซ์เพราะพวกมันถูกกำหนดค่าเริ่มต้นแตกต่างกันดังนั้นอินพุตของดาวจึงแตกต่างกัน
ตัวอย่างเช่นตามที่คุณเห็นจากแหล่งข้อมูลเชิงปฏิบัติคุณตั้งค่าเมล็ดสุ่มและคุณตั้งค่าแตกต่างกันสำหรับแต่ละตัวแทน
และนั่นเป็นเพราะจุดเริ่มต้นของพวกเขาแตกต่างกัน
พวกเขาจะต้องผ่านสภาพแวดล้อมต่าง ๆ
เป็นลำดับแรกจากนั้นพวกเขาจะไปสำรวจในรูปแบบที่แตกต่างกันและจากนั้นในการทำซ้ำครั้งต่อไปก็จะสำรวจด้วยวิธีต่างๆ
ตัวอย่างเช่นเรามีสามเอเจนต์
คุณอยู่ในทันใดคุณจะได้รับประสบการณ์เพิ่มขึ้นเป็นสามเท่าแทนที่จะอายุเพียงหนึ่งปีผ่านไปและสำรวจสิ่งแวดล้อมและพยายามทำความเข้าใจวิธีการใช้งานในสภาพแวดล้อมนั้น
ตอนนี้คุณมีสามหรือหลายคนที่จะผ่านและได้รับประสบการณ์นี้และเพื่อให้พวกเขาแต่ละคนเรียนรู้สำหรับประสบการณ์ที่ยิ่งใหญ่นี้และนอกเหนือจากการให้ประสบการณ์ที่กว้างขึ้นมันยังช่วยลดโอกาสของตัวแทนหนึ่ง ติดอยู่ในท้องถิ่นสูงสุด
ตัวอย่างเช่นหากตัวแทนหนึ่งพบวิธีที่จะเอาชนะสภาพแวดล้อมที่ไม่เหมาะสมที่สุดเพราะถ้ามันเบี่ยงเบนไปทางซ้ายทางขวาจากโซลูชันนั้นพบว่ามันมักจะได้รับเหมือนถูกลงโทษมากขึ้นอาจติดอยู่ในท้องถิ่นสูงสุด
มันอาจจะคิดต่อไปเรื่อย ๆ ว่านี่เป็นทางออกที่ดีที่สุดในกรณีที่มันไม่จริง
ความน่าจะเป็นของตัวแทนหลายคนที่ติดอยู่ในท้องถิ่นสูงสุดเดียวกันนั้นลดลงมากกว่าลดลงด้วยจำนวนของตัวแทนดังนั้นความน่าจะเป็นของตัวแทนหนึ่งคนที่ติดอยู่ในท้องถิ่นสูงสุดบางแห่งอาจสูง แต่หรืออาจเป็นค่าที่แน่นอน
แต่ความน่าจะเป็นเมื่อคุณมีสามในสามคนที่ติดอยู่ในค่าสูงสุดท้องถิ่นนั้นจะต่ำกว่ามาก
และตราบใดที่พวกเขาแบ่งปันประสบการณ์ระหว่างกันพวกเขาสามารถช่วยเหลือซึ่งกันและกันถ้าคนใดคนหนึ่งติดอยู่กับสิ่งนั้นมันอยู่ในระดับสูงสุดของท้องถิ่นและแค่คิดว่าดีที่สุดและดีที่สุดนั่นคือทางออกที่ดีที่สุดตลอดเวลาและ ทำอย่างนั้นต่อไป
ตราบใดที่มันมีปฏิสัมพันธ์กับตัวแทนอื่น ๆ
สมมุติว่าเจ้าตัวนี้ติดอยู่ในความสงบตราบใดที่มีปฏิสัมพันธ์กับตัวแทนอื่น ๆ ผ่านวิธีที่เราสร้างอัลกอริธึมทั้งหมดของเราผ่านมือถือและพวกเขาจะช่วยเขาออกไป
พวกเขาจะให้ความรู้แก่เขาว่าจริง ๆ แล้วคุณรู้ว่าเฮ้คุณควรสำรวจสิ่งนี้หรือเขาจะมีแนวโน้มที่จะได้รับสิ่งนั้นมากขึ้น
และโดยรวมแล้วสิ่งแวดล้อมจะรู้ว่าเฮ้แม้ว่านี่จะเป็นยุคสูงสุดที่คนเหล่านี้ได้เห็นตัวเลือกที่ดีกว่าและเราควรสำรวจต่อไปเพราะดูเหมือนว่ามีตัวเลือกที่ดี
ดังนั้นในความเข้าใจที่หยาบคายแบบสั้น ๆ สั้น
ๆ นั่นคือข้อได้เปรียบบางประการของการมีสิ่งเหล่านี้เป็นตัวแทนแบบซิงโครนัสเพื่อให้คุณมีประสบการณ์มากขึ้นในการเลือกและเรียนรู้จาก
คุณสามารถไปถึงวิธีแก้ปัญหาได้เร็วขึ้นและพูดโดยทั่วไปหากมีโอกาสน้อยที่จะติดอยู่ในค่าสูงสุดของ CRN
ในท้องถิ่น
ดังนั้นเรามาดูกันว่ามันเล่นอย่างไร
ในรุ่นนี้ที่เราสร้างขึ้นมาแล้วดังนั้นโปรดจำไว้ว่านี่คือสิ่งที่เราได้รับจากนักวิจารณ์ที่แท้จริงและนี่คือเราทุกคนหยอกล้อนี่เท่าที่คุณจำได้ตั้งแต่แรกจนถึงเต่า คุณรู้ว่าเรามีสิ่งนี้อยู่แล้วแม้ในทะเลลึก
ถามการเรียนรู้ดังนั้นเราเพิ่งตั้งชื่อ X ตอนนี้
แต่ตอนนี้เราได้แนะนำนักวิจารณ์ แต่จนถึงขณะนี้ยังไม่เข้าใจว่าประเด็นของการมีนักวิจารณ์นี้และการวัดค่าของรัฐหรือการทำนายค่าของเวทีโดยใช้ประสาทเดียวกัน
เครือข่ายหรือวิธีการเดียวกัน
แต่ตอนนี้นี่คือสิ่งนี้คือการที่คู่ค้าจะเริ่มทำความเข้าใจเพิ่มเติม
สิ่งที่เรากำลังจะทำคือเราจะทำซ้ำสิ่งนี้เพราะตอนนี้เรามีตัวแทนหลายคนดังนั้นหากมีหลายตัวแทนนี่คือสิ่งที่ดูเหมือน
ดังนั้นวิธีแรกในการจินตนาการตอนนี้คือเรามีสามวันนี้จำได้ดีว่าสิ่งที่เราพูดเกี่ยวกับพวกเขาแบ่งปันประสบการณ์ระหว่างกัน
ดังนั้นนี่เป็นจริงตอนนี้พวกเขาทั้งหมดเป็นอิสระ
คุณมีหนึ่งเล่นเกมและอื่น ๆ นอกเหนือจากการเล่นเกมเล่นอีกในเกม
มันก็เหมือนกับการเปิดตัวตัวแทนของคุณในคอมพิวเตอร์สามเครื่องที่คุณใส่คอมพิวเตอร์สามเครื่องติดกันและคุณเปิดพวกเขาและคุณรู้ว่ามันยอดเยี่ยม
เช่นเดียวกับที่คุณชอบคุณจะได้รับประสบการณ์มากขึ้นคุณจะได้รับความหลากหลายมากขึ้นโดยเฉพาะถ้าพวกเขาเริ่มต้น
ดังนั้นเราสามารถสันนิษฐานได้จากที่นี่ว่าพวกเขาป่วยเริ่มต้นเสมอก่อนแม้ว่าเราจะมีภาพเดียวกันที่นี่
พวกเราจะรู้ว่าพวกเขากำลังเริ่มต้นจริงแตกต่างกันดังนั้นมันจะไม่เหมือนการฝึกอบรมที่เหมือนกันเหมือนการเรียนรู้ที่เหมือนกันจากเกมนี้
แม้ว่าคุณจะชอบวางคอมพิวเตอร์สามเครื่องเคียงข้างกันและคุณเปิดมันขึ้นมาใช่คุณจะมีประสบการณ์มากขึ้นเพราะคุณจะมีตัวแทนสามคนเล่นอยู่และคุณก็จะได้โซลูชั่นที่หลากหลายกว่า .
นั่นเป็นความจริง
แต่ปัญหาคือพวกเขาไม่ได้แบ่งปันประสบการณ์ของเราระหว่างกันหรือไม่เรียนรู้จากกันและกัน
ดังนั้นพวกเขาไม่มีพลังที่
พวกเขาไม่มีข้อได้เปรียบหรือพลังพิเศษที่พวกเขาจะได้รับหากพวกเขาบังคับให้คุณรู้ว่าคุณมีอย่างไรถ้าคุณมีทีมงานที่พวกเขาทำงานร่วมกันได้ดีกว่าพวกเขาแต่ละคนแยกกัน
เช่นเดียวกับในทีมที่นี่คุณจะได้หนึ่งบวกหนึ่งบวกหนึ่ง
มันเป็นสาม แต่ในทีมหนึ่งบวกหนึ่งเพื่อวางไข่และไม่ใช่สามเหมือนสามเพราะพวกเขาใช้ประโยชน์จากจุดแข็งของกันและกันและลดจุดอ่อนของกันและกันและสิ่งเดียวกันที่นี่
ดังนั้นหากคุณวางคอมพิวเตอร์สองเครื่องนี้ไว้ข้างๆใช่คุณจะได้รับประสบการณ์หน่วยความจำที่มากขึ้นและอาจมีบางคนที่จะได้คำตอบที่ดีกว่า
อีกอันที่ยอดเยี่ยม แต่มันจะดียิ่งขึ้นถ้าพวกเขาเริ่มแบ่งปันประสบการณ์นั้น
และพวกเขาจะทำอย่างไร
ทีนี้มันก็คือ Wii นี้ที่เราคำนวณมันดังนั้นค่า Wii
ที่เอาท์พุทของเครือข่ายของเรานั้นเป็นเช่นนั้น
ดังนั้นพวกเขาจึงมีสิ่งนี้เหมือนกันทุกครั้ง
ตัวแทนทั้งหมดเหล่านี้พวกเขากำลังสนับสนุนนักวิจารณ์คนเดียวกัน
พวกเขาไม่ได้แยกนักวิจารณ์ที่พวกเขามีนักวิจารณ์ร่วมกันและนั่นคือกุญแจสำคัญที่นักวิจารณ์นักแสดงผูกสัมพันธ์กับซิงโครนัสของพวกเขา
มีนักวิจารณ์คนหนึ่งที่เฝ้าดูเราเมื่อพวกเขาได้รับประสบการณ์
แล้วเราจะคำนวณ Wii อย่างไร
เราต้องผ่าน Wii ให้ได้
ในขณะที่คุณจำได้ว่าเราสามารถรับทีวีผ่านค่าที่เราได้รับดังนั้นรางวัลที่เราได้รับผ่านสภาพแวดล้อม
และเมื่อตัวแทนสำรวจสภาพแวดล้อมของพวกเขาพวกเขากำลังคำนวณพวกเขากำลังคาดการณ์ Wii
รวมถึงพวกเขามี Wii ที่พวกเขาสามารถคำนวณได้
นี่คือทั้งหมดที่ผูกกลับเข้าไปในสิ่งที่เราได้พูดคุยแล้วในส่วนก่อนหน้าของคะแนน
ดังนั้นพวกเขาจึงมี Wii
ที่พวกเขาสามารถคาดการณ์ได้อย่างคาดหวังผ่านผลตอบแทนที่พวกเขารู้ว่ามีอยู่ในเขาวงกตนี้
แต่พวกเขาก็มี
Wii ที่นี่เป็นเอาท์พุทของโครงข่ายประสาทเทียมดังนั้นเมื่อพวกเขากำลังทำสิ่งนี้พวกเขาจะต้องปรับโครงข่ายประสาทของพวกเขาเพื่อให้ตรงกับที่คาดหวังไว้มากขึ้น
ดังนั้นโดยทั่วไปนี่คือการแบ่งปันส่วนนักวิจารณ์จะถูกแชร์ระหว่างตัวแทนและนั่นคือวิธีที่พวกเขาแบ่งปันข้อมูลระหว่างกันนั่นคือวิธีที่พวกเขาสามารถเห็นสิ่งที่เกิดขึ้นในสภาพแวดล้อมที่ใช้ร่วมกันซึ่งกันและกัน จะเห็นเพิ่มเติมในส่วนถัดไปในข้อได้เปรียบ
ดังนั้นใช้สิ่งนั้นเพื่อปรับให้เหมาะสมกับสภาพแวดล้อม
และสิ่งอื่น ๆ ที่ควรทราบที่นี่คือ
นี่คือการผ่าน C
นี่เป็นเหมือนแกนกลางของ A-3 ที่ดูตรงนี้
นี่เป็นรุ่น 08:30 แต่มีการใช้งานจริงที่ดียิ่งขึ้น
A ถึง C ซึ่งคุณจะได้ยินฉันชอบที่จะพูดถึงในบทเรียนแรกและด้านปฏิบัติของสิ่งต่าง
ๆ และสิ่งที่เขาจะพูดถึงคือผู้สร้าง Pi torche
ทำการปรับเปลี่ยนอย่างใดอย่างหนึ่ง ของรหัสที่ใช้ร่วมกันและรับฮับที่เขานำสิ่งเหล่านี้ทั้งหมดที่คุณเห็นในตอนนี้พวกเขามีเครือข่ายประสาทที่แยกจากกันและพวกเขาแสดงให้เห็นว่า Wii
การปรับเปลี่ยนที่ทำขึ้นจริง
ๆ แล้ว พาพวกเขามารวมกัน
ดังนั้นในที่สุดจึงมีเครือข่ายประสาทเทียมเพียงแห่งเดียวที่ใช้ร่วมกันระหว่างตัวแทน
ดังนั้นก่อนที่พวกเขาแต่ละคนจะมีเครือข่ายประสาทหนึ่งที่ใช้ร่วมกันสำหรับนักแสดงและสำหรับนักวิจารณ์หนึ่งเครือข่ายประสาท Shelfer
ที่เกิดขึ้นจริงสำหรับนักวิจารณ์เครือข่ายประสาทหนึ่งที่ใช้ร่วมกันเพื่อความถูกต้อง
ตอนนี้พวกเขาทุกคนมีโครงข่ายประสาทเทียมเดียวที่ใช้ร่วมกันสำหรับนักแสดงหรือนักวิจารณ์
และจากนั้นนักวิจารณ์ก็อยู่ที่นี่เหมือนกัน
ลองดูกันเถอะ
ลองย้ายรูปภาพเหล่านี้ไปทางซ้ายที่นี่เพื่อสร้างที่ว่าง
และนี่คือพื้นฐานของสถาปัตยกรรมหรือโครงสร้างที่เราจะใช้ในบทช่วยสอนเชิงปฏิบัติ
ฉันรู้ว่าเช่นนี้อาจฟังดูล้นหลามในขั้นตอนนี้ แต่เรามีอีกหนึ่งเรื่องที่จะพิจารณาว่าเป็นข้อได้เปรียบอะไรบ้าง
เราจะพูดถึงสัญชาตญาณในการดำเนินการอย่างไร
แต่โดยทั่วไปแล้วนี่คือสิ่งที่มันเป็น
นี่คือเครือข่ายเดียวที่แต่ละตัวแทนใช้หรือแชร์
โดยทั่วไปสิ่งที่หมายถึงคือการที่พวกเขาแบ่งปันน้ำหนักน้ำหนักของเครือข่ายที่ใช้ร่วมกันระหว่างอายุและเมื่อพวกเขาอัปเดตพวกเขาปรับปรุงเครือข่ายทั้งหมดไม่เพียง แต่เครือข่ายของตัวเอง
และจากนั้นพวกเขามีผลลัพธ์ที่พวกเขาชอบการกระทำเหล่านี้สำหรับแต่ละตัวแทนแล้วพวกเขาก็มีนักวิจารณ์ที่ใช้ร่วมกันซึ่งจะถูกตรวจสอบ
ดังนั้นฉันรู้ว่าทั้งหมดนี้เป็นเหมือนว่ามีหลายสิ่งอยู่ในตอนนี้ แต่หวังว่ามันจะมารวมกันอย่างน้อย
ประเด็นหลักจากที่นี่คือนักวิจารณ์เพราะแบ่งปัน
นั่นคือวิธีที่ตัวแทนสามารถตรวจสอบให้แน่ใจว่าพวกเขาร่วมมือกันเพื่อให้ได้ผลลัพธ์ที่รวดเร็วยิ่งขึ้น
จากนั้นในบทช่วยสอนถัดไปเราจะดูเพิ่มเติมว่าทั้งหมดนี้รวมอยู่ด้วยได้อย่างไร
ทั้งหมดนี้มารวมกัน
และสำหรับตอนนี้มีเหมือนฉันอยากจะแนะนำหรือเราอยากจะแนะนำให้คุณอ่านเพิ่มเติม
ดังนั้นนี่คือบล็อกโดย Jaromir Jansch
มันเรียกว่ามาทำให้ A3 ดูการปลูกฝังเป็นการใช้งานจริงสองส่วนและทฤษฎี
มีลิงก์และมันคล้ายกับสิ่งที่ Adlon
จะนำไปใช้ในด้านการปฏิบัติจริงของบทช่วยสอนดังนั้นจึงไม่ใช่เฉพาะสำหรับบทช่วยสอนนี้ไม่ใช่เฉพาะสำหรับ Sutro แต่สำหรับทั้งส่วนนี้
มีข้อมูลเพิ่มเติมให้กำลังใจมีข้อมูลเชิงลึกเพิ่มเติมบางอย่างที่นั่น
นั่นคือสาเหตุที่เรานำมันมาที่นี่
แต่อย่างไรก็ตามในบทช่วยสอนถัดไปเราจะเริ่มดึงทั้งหมดนี้เข้าด้วยกัน
ทุกสิ่งที่เราพูดถึง
และฉันหวังว่าจะได้พบคุณในครั้งต่อไป
และจนกว่าจะสนุกกับฉัน