Xin chào và chào mừng bạn đến với hướng dẫn thú vị của mô-đun đầu tiên Xe tự lái này.
Nó sẽ rất hoành tráng.
Chúng tôi sẽ kiểm tra con mắt của chúng tôi về môi trường và chúng tôi sẽ kiểm tra nó ở bốn cấp độ khác nhau.
Đó là, chúng ta sẽ chơi một trò chơi.
Trò chơi sẽ có đầy đủ các cấp độ khó và AI sẽ phải vượt qua bốn cấp độ này.
Vì vậy, những gì sẽ là bốn cấp độ này?
Đầu tiên cấp độ một, cấp độ đầu tiên sẽ là để đến sân bay và sau đó thực hiện một số chuyến đi khứ hồi giữa sân
bay và trung tâm thành phố.
Vì vậy, ngay khi chúng ta nhìn thấy chiếc xe thực hiện các chuyến đi vòng quanh, chúng ta sẽ vượt qua cấp độ một, sau đó là cấp độ hai.
Cấp độ hai sẽ là vẫn thực hiện những chuyến đi vòng quanh này, nhưng trên một con đường cụ thể mà chúng ta tự vẽ ra.
Nhưng nó sẽ là một con đường dễ dàng vì nó là cấp hai và tất nhiên chiếc xe sẽ phải tự lái bằng cách
ở trên con đường đó.
Vì vậy, nó sẽ là một con đường đi từ sân bay đến trung tâm thành phố và sau đó là các chiều ngược lại.
Và như vậy ô tô sẽ phải thực hiện những chuyến đi khứ hồi này bằng cách giữ nguyên trên con đường đó.
Nếu đạt, chúng ta sẽ vượt qua cấp hai, rồi cấp ba.
Cấp độ ba sẽ là vẽ một số chướng ngại vật trên bản đồ để xem liệu chiếc xe có tránh được chướng ngại vật và vẫn
đạt được mục tiêu hay không.
Vì vậy, không phải lo lắng.
Chúng tôi sẽ vẽ ra một số chướng ngại vật khó khăn mà chiếc xe sẽ phải tránh và chúng tôi sẽ xem liệu nó
có đến được sân bay và trung tâm thành phố hay không.
Và cuối cùng là cấp độ bốn, cấp độ thử thách nhất đối với chiếc xe sẽ là vẽ một con đường rất khó để đến
trung tâm thành phố.
Vì vậy, tôi không biết, bạn biết đấy, nó sẽ là một con đường giống như một con đường ngoằn ngoèo.
Tôi không phải là một kiến trúc sư xuất sắc, nhưng tôi sẽ cố gắng đi trên một con đường đầy thử thách.
Vì vậy, chúng ta hãy hy vọng chúng ta vượt qua ít nhất là cấp độ đầu tiên.
Điều đó sẽ thật tuyệt.
Sau đó, chúng ta hãy hy vọng chúng ta cũng có thể vượt qua cấp độ hai và ba.
Và nếu chúng ta vượt qua cấp độ bốn, điều đó thật tuyệt vời.
Vì vậy, chúng ta hãy làm điều này.
Hãy thử thách.
Thật ra, ô tô tự lái sẽ gặp thử thách, nhưng chúng tôi là bộ não đằng sau điều này, vì
vậy chúng ta hãy hy vọng nó hoạt động.
Được rồi.
Vì vậy, điều đầu tiên tôi sẽ làm chỉ là cung cấp cho bạn một lời nhắc nhanh về bản đồ.
Vì vậy, đó là bản đồ.
Và trước tiên, chúng ta sẽ xem bản đồ.
Chúng ta sẽ xem xét xe hơi tự lái mà không có AI.
Vì vậy, nó sẽ chỉ là một chiếc xe có những hành động ngẫu nhiên mà bạn đã thấy ở phần đầu của mô-đun này.
Vì vậy, làm thế nào chúng ta có thể nhìn vào đó?
Chà, chúng ta phải tắt AI và để kích hoạt AI, chúng ta chỉ cần đặt nhiệt độ bằng
0.
Hãy nhớ rằng tham số ở đây là nhiệt độ và ngay bây giờ nó bằng bảy.
Vì vậy, đó là một nhiệt độ thấp.
Chúng tôi sẽ tăng điều đó sau đó.
Nhưng nếu chúng ta không muốn chiếc xe có bộ não, tức là nếu chúng ta không muốn kích hoạt
AI, chúng ta chỉ cần đặt nhiệt độ về 0 t bằng 0.
Và ở đây cũng vậy.
Tất nhiên, đó là nhiệt độ thực trong mã.
Vậy là xong.
Và sau đó chúng ta không được quên lưu vì nếu không sẽ không bao gồm tiền thay đổi.
Được rồi, vì vậy bây giờ chúng tôi không có bất kỳ AI nào.
AI được kích hoạt.
Vì vậy, chúng ta hãy xem bản đồ chỉ để cập nhật nhanh cho chúng tôi, một lời nhắc nhở nhanh về nó trông như
thế nào.
Vì vậy, tôi sẽ chọn mọi thứ và nhấn enter.
Được rồi.
Và có bản đồ của chúng tôi và có ô tô của chúng tôi.
Như bạn có thể thấy, chiếc xe đang có những hành động hoàn toàn ngẫu nhiên, bạn biết đấy, đi sang trái, đi thẳng hay
đi sang phải.
Và do đó, nó không đến được sân bay, điều mà tôi nhắc ở phía trên bên trái của bản đồ và không
đến được.
Chà, nó vừa rồi.
Nhưng đó hoàn toàn là ngẫu nhiên.
Bạn thấy đấy, ngay bây giờ nó đang ở sân bay và nó không đạt được mục tiêu khác, đó là trung tâm thành phố ở phía
dưới bên phải của bản đồ.
Vì vậy, chúng tôi đã giống như ở đây.
Nhưng bây giờ chúng ta có thể thấy rõ ràng rằng các hành động là hoàn toàn ngẫu nhiên.
Nó chẳng đi đến đâu và chắc chắn là không có trí tuệ nhân tạo.
Nhưng đừng lo lắng.
Chúng tôi sẽ kích hoạt nó ngay bây giờ.
Tôi sẽ đóng bản đồ.
Và sau đó tôi sẽ khởi động lại hạt nhân, khởi động lại hạt nhân.
Bạn bấm vào nút công cụ này tại đây và sau đó.
Vâng, và bây giờ là thời gian cho chương trình.
Cuối cùng, chúng tôi sẽ đặt bộ não mà chúng tôi đã tạo ra này trong xe hơi và kích hoạt AI.
Tôi rất vui mừng để xem điều gì sẽ xảy ra.
Chúng tôi sẽ kích hoạt AI ngay bây giờ và để làm điều này, chúng tôi cần tăng nhiệt độ.
Vì vậy, để thay đổi nhiệt độ, chúng ta chỉ cần thay thế số 0 đó, hãy bắt đầu với bảy như chúng ta đã
có trước đây.
Vì vậy, hãy xác định bảy ở đây.
Được rồi.
Chúng ta đừng quên tiết kiệm.
Và bây giờ chúng ta hãy quay lại bản đồ của chúng ta.
Và bây giờ chúng ta có thể thực thi lại điều này một lần nữa vì chúng ta đã khởi động lại hạt nhân.
Vì vậy, hãy thực hiện và chúng ta bắt đầu.
Chúng tôi có chiếc xe và nó đang làm gì?
Chà, nó đang cố gắng tìm đường.
Nó đang khám phá, nó hiểu những gì nó phải làm.
Và nó sắp đến sân bay.
Và chúng ta bắt đầu.
Mục tiêu đầu tiên đã đạt được.
Tuyệt vời.
Và bây giờ mục tiêu tiếp theo là đến trung tâm thành phố.
Và ở đó nó đã đến trung tâm thành phố.
Và bây giờ nó đang cố gắng tìm lại sân bay, đi đến sân bay.
Và nó đã xảy ra một lần nữa.
Tuyệt vời.
Vì vậy, nó hoạt động.
Thật ra, không mất thời gian để khám phá, học hỏi từ sai lầm.
Bạn biết đấy, sai lầm ở đây là đi xa hơn mục tiêu.
Đó là nơi chúng tôi trừng phạt chiếc xe bằng cách thưởng cho nó một phần thưởng hơi tiêu cực.
Nó là -0. 2.
Vì vậy, nó đã học được từ sai lầm đó.
Và bằng cách học hỏi từ sai lầm đó, nó đã quản lý để nhận được phần thưởng tích cực bằng cách tiến gần hơn đến mục
tiêu.
Và bây giờ nó cuối cùng đã hiểu nó phải làm gì.
Nó chắc chắn đến sân bay và sau đó đến trung tâm thành phố và sau đó thực hiện các chuyến đi khứ hồi.
Vì vậy, đó là hoàn hảo.
Chúng tôi có một chiếc ô tô tự lái, nhưng tôi không thể không nhận thấy nó trông giống như một con côn trùng.
Bạn biết đấy, chiếc xe dường như không thực sự chắc chắn về bản thân, bạn biết đấy, nó không có chuyển động tự tin cho lắm.
Nó giống như đi bên trái và bên phải.
Đó không phải là một chuyển động của ô tô.
Nó trông giống một con bọ hơn.
Vì vậy, chúng tôi sẽ khắc phục điều đó.
Và như bạn có thể đoán, cách để khắc phục điều đó là tăng nhiệt độ.
Vì hãy nhớ rằng, nhiệt độ là thông số trong chức năng soft mac mà chúng ta có thể tăng lên để
hành động được trả về một cách chắc chắn hơn.
Vì vậy, điều đó có ý nghĩa rằng nếu chúng ta tăng nhiệt độ, tốt, chúng ta có thể khiến một chiếc ô
tô chắc chắn hơn về chính nó vì AI sẽ chắc chắn hơn về hành động mà nó sẽ thực hiện.
Và điều đó, hãy nhớ, là bởi vì hành động sẽ được thực hiện với xác suất cao hơn.
Vấn đề duy nhất với việc tăng nhiệt độ này là hãy nhớ rằng, AI ít khám phá các hành
động khác hơn bởi vì khi tăng nhiệt độ, các hành động khác sẽ có xác suất thấp.
Nhưng hiện tại điều đó dường như không phải là vấn đề vì chiếc xe dường như không có vấn đề gì khi đạt được mục
tiêu là sân bay ở trung tâm thành phố.
Vì vậy chúng ta hoàn toàn có thể tăng nhiệt độ lên nếu muốn.
Thứ mà cho đến nay trông giống như một con côn trùng, trông giống như một chiếc xe hơi.
Vì vậy, chúng ta hãy làm điều này.
Tôi sẽ đóng nó ngay bây giờ.
Chúng ta bắt đầu.
Khởi động lại kernel một lần nữa.
Và hãy nhấn.
Đúng.
Và bây giờ chúng ta sẽ tăng nhiệt độ.
Vì vậy, chúng ta hãy làm điều này.
Tôi sẽ quay lại hồ sơ của mình.
Sau đó thay t này bằng bảy bằng 100.
Chúng ta bắt đầu.
Sau đó, chúng tôi tiết kiệm.
Và bây giờ chúng ta có một chiếc xe hơi tự lái.
Chắc chắn về chính nó.
Vì vậy, chúng tôi có thể đạt được kết quả tốt hơn và chúng tôi có thể nhận được thứ gì đó trông giống một chiếc ô tô hơn.
Vì vậy, chúng ta hãy nhấp vào một bản đồ và sau đó hãy thực hiện lại điều đó một lần nữa.
Được rồi.
Chuyện gì đã xảy ra thế?
Och, nó đã làm một số kiểu kiệt sức.
Không chắc tại sao, nhưng dù sao, bây giờ chúng ta có một cái gì đó trông giống một chiếc ô tô hơn.
Bạn có thể thấy rằng nó đang đi thẳng hơn.
Nó không thực hiện những chuyển động nhanh sang trái và phải này.
Đó là bởi vì bây giờ chiếc xe chắc chắn hơn về hướng đi vào mỗi thời điểm.
Nó muốn đi theo hướng tốt nhất để đến sân bay và sau đó đến trung tâm thành phố.
Rõ ràng là bây giờ chúng ta có thể nói rằng chúng ta đã vượt qua cấp độ một.
Xe đang thực hiện các chuyến khứ hồi giữa sân bay và trung tâm thành phố.
Vì vậy, chúng tôi sẽ tiết kiệm điều đó.
Đó là tôi sẽ chỉ cho bạn cách cứu não.
Chúng ta chỉ cần nhấp vào nút lưu này.
Và nếu chúng ta.
Nhìn vào những gì xảy ra ở đây.
Chà, chúng ta có đường cong của phần thưởng ở phần đầu.
Chúng ta có thể quan sát thấy một số sai lầm mà nó đã thực hiện.
Vì vậy, đó là nơi mà phần thưởng là tiêu cực.
Nhưng sau đó nó đã học được từ những sai lầm của mình và phần thưởng tăng lên từng chút một cho đến khi phần thưởng dương
không đổi bằng 0. 1.
Nhưng đó là phần thưởng tối đa mà chúng tôi đặt ra và đó là vì nó đã kết thúc việc khám phá.
Đó là giai đoạn thăm dò.
Và sau đó nó chỉ biết những gì nó phải làm.
Và đó là nơi nó đã thực hiện những chuyến khứ hồi giữa sân bay và trung tâm thành phố mà không mắc bất kỳ sai lầm nào.
Vậy là xong.
Chúng tôi đã vượt qua cấp độ một.
Xin chúc mừng.
Bây giờ chúng ta hãy làm mọi thứ khó khăn hơn.
Hãy xem mọi thứ ở cấp độ tiếp theo.
Hãy cố gắng vượt qua cấp độ hai, điều mà tôi nhắc nhở sẽ là thực hiện những chuyến đi vòng quanh con đường cụ thể mà chúng
ta sẽ tự vẽ ra.
Vì vậy, hãy kiểm tra điều đó trong hướng dẫn tiếp theo.
Và cho đến khi đó, hãy tận hưởng tôi.