Openai Five đánh bại nhà vô địch thế giới Dota 2, Joindota |
Trang chủ Joindota
Tại Openai Five Finals, chúng tôi cũng chia sẻ hai điều bất ngờ:
Openai Five đánh bại nhà vô địch thế giới Dota 2
Openai Five là AI đầu tiên đánh bại các nhà vô địch thế giới trong một trò chơi esports, đã thắng hai trận đấu trở lại so với đội vô địch thế giới Dota 2, OG, tại Chung kết vào cuối tuần này. Cả Openai Five và Deepmind, Alphastar trước đây đã đánh bại tốt một cách riêng tư nhưng đã thua các trận đấu Live Pro của họ, làm cho đây cũng là lần đầu tiên một AI đánh bại các chuyên gia esports trên LiveStream.
Tại Openai Five Finals, chúng tôi cũng chia sẻ hai điều bất ngờ:
- Openai Five đã phát hiện ra một khả năng thô sơ để trở thành đồng đội với con người, mặc dù quá trình đào tạo của chúng tôi tập trung hoàn toàn vào việc đánh bại các bot khác. Sự dễ dàng mà chúng tôi đã biến AI cạnh tranh thành một hợp tác khiến chúng tôi hy vọng rằng các hệ thống AI trong tương lai có thể rất có lợi cho con người.
- Từ ngày 18 tháng 4, 21. Thử nghiệm cuối cùng này sẽ cho phép chúng tôi trả lời một câu hỏi nghiên cứu quan trọng, đến mức độ Openai Five có thể khai thác hoặc có thể bị đánh bại một cách đáng tin.
Tổng cộng, phiên bản hiện tại của Openai Five đã tiêu thụ 800 petaflop/s-days và trải nghiệm khoảng 45.000 năm tự chơi dota trong 10 tháng thực (tăng từ khoảng 10.000 năm trên 1.5 tháng thời gian thực kể từ quốc tế), trung bình 250 năm kinh nghiệm mô phỏng mỗi ngày. Phiên bản cuối cùng của Openai Five có 99.9% winrate so với phiên bản TI. [^Chân đôi chiến thắng]
Chuyển giao học tập
Phiên bản hiện tại của Openai Five đã được đào tạo liên tục kể từ tháng 6 năm 2018, mặc dù có những thay đổi đối với kích thước mô hình và các quy tắc trò chơi (bao gồm một số bản cập nhật bản vá trò chơi khá lớn và các tính năng mới được triển khai). Trong mỗi trường hợp, chúng tôi đã có thể chuyển mô hình qua và tiếp tục đào tạo một thứ gì đó là một thách thức mở đối với RL trong các lĩnh vực khác. Theo hiểu biết tốt nhất của chúng tôi, đây là lần đầu tiên một đại lý RL được đào tạo bằng cách sử dụng một khóa đào tạo lâu dài như vậy.
Để thực hiện công việc này, chúng tôi đã tiếp tục đưa ra công cụ phẫu thuật để chúng tôi có thể bắt đầu từ các thông số được đào tạo ngay cả trên những thay đổi kiến trúc đáng kể.
Nhiều anh hùng hơn
Chúng tôi đã thấy rất ít sự chậm lại trong đào tạo đi từ 5 đến 18 anh hùng. Chúng tôi đã đưa ra giả thuyết như vậy cũng sẽ đúng với nhiều anh hùng hơn, và sau khi quốc tế, chúng tôi đã nỗ lực rất nhiều để tích hợp những người mới.
Chúng tôi đã dành vài tuần để đào tạo với các anh hùng lên tới 25 anh hùng, đưa những anh hùng đó đến khoảng 5K MMR (khoảng 95 phần trăm của người chơi Dota). Mặc dù họ vẫn đang cải thiện, nhưng họ không học được đủ nhanh để đạt đến cấp độ chuyên nghiệp trước trận chung kết. Chúng tôi đã có thời gian để điều tra lý do tại sao, nhưng các giả thuyết của chúng tôi bao gồm từ không đủ năng lực mô hình đến cần kết hợp tốt hơn cho nhóm anh hùng mở rộng để đòi hỏi nhiều thời gian đào tạo hơn để các anh hùng mới bắt kịp các anh hùng cũ. Hãy tưởng tượng việc một con người học một anh hùng mới khó khăn như thế nào khi mọi người khác đã thành thạo của họ!
Chúng tôi tin rằng những vấn đề này về cơ bản là có thể giải quyết được và việc giải quyết chúng có thể thú vị theo đúng nghĩa của nó. Phiên bản trận chung kết chơi với 17 anh hùng, chúng tôi đã loại bỏ LICH vì khả năng của anh ấy đã được thay đổi đáng kể trong phiên bản DOTA 7.20.
Chế độ hợp tác
Nó thực sự cảm thấy tốt đẹp; Viper của tôi đã trao cuộc sống của anh ấy cho tôi vào một lúc nào đó. Anh ấy đã cố gắng giúp tôi, nghĩ rằng tôi chắc chắn rằng cô ấy biết cô ấy đang làm gì và sau đó rõ ràng là tôi đã làm. Nhưng, bạn biết đấy, anh ấy tin vào tôi. Tôi không nhận được điều đó rất nhiều với đồng đội [con người]. –Sheever
Khả năng chơi của Openai Five với con người thể hiện tầm nhìn hấp dẫn cho tương lai của tương tác con người-AI, một nơi mà các hệ thống AI hợp tác và nâng cao trải nghiệm của con người. Những người thử nghiệm của chúng tôi đã báo cáo cảm giác được hỗ trợ bởi các đồng đội bot của họ, rằng họ đã học được từ việc chơi cùng với các hệ thống nâng cao này và đó nói chung là một trải nghiệm thú vị nói chung.
Trang chủ Joindota
Sau khi sống hơn một thập kỷ kể từ khi ra mắt Joindota sẽ đóng cửa vào ngày 31 tháng 3 năm 2022.
Anh hùng Dota 2 sẽ tạo ra Avengers hoàn hảo cho MCU
Hawkeye, Black Widow, Captain America, Hulk, Iron Man & Thor – Sáu anh hùng kỳ diệu có thể được thay thế bằng Dota 2 Heroes
Một anime, phép lạ ti và hơn thế nữa – những gì đã xảy ra vào năm 2021?
Chúng tôi nhìn lại năm 2021. Rất nhiều điều đã xảy ra trong năm nay – nhưng nó không chỉ là về những điểm nổi bật! Chúng tôi cũng đã có một vài khoảnh khắc khó khăn.
Những khoảnh khắc bảng tốt nhất vào năm 2021
Dota 2 sẽ là gì nếu không có tất cả các bánh xe, chủ nhà và nhà phân tích vinh quang? Từ những trò đùa của Whacky đến những món nướng nặng nề, đây là một số khoảnh khắc tuyệt vời nhất từ các thành viên bảng yêu quý của chúng tôi vào năm 2021.
Abed, NothingTosay và hơn thế nữa – Ai là người chơi Dota 2 giỏi nhất vào năm 2021?
Yatoro, NothingTosay, Nisha, Abed, Flyfly, Nightfall – Không dễ để tìm thấy những người chơi giỏi nhất trong Dota 2. Nhưng chúng tôi đã kiểm tra các sự kiện hàng đầu và thực hiện danh sách cuối cùng của chúng tôi. Bạn sẽ thêm ai?