Apa kekuatan bot openai yang mengalahkan dendi

Pekan lalu, sejarah diciptakan di ranah Dota 2 dan AI. Di The International, Dendi, salah satu pemain terbaik dalam permainan, dipukuli tanpa ampun dalam 1v1, oleh bot, dua kali berturut-turut. Bot yang dimaksud dibuat oleh OpenAI, sebuah startup dari Elon Musk.

Sekarang Anda mungkin memiliki beberapa pertanyaan. Apa itu Dota? Apa itu OpenAI? Dan mengapa ini bahkan penting? Untuk mulai dengan, Dota adalah permainan MOBA gratis untuk bermain di mana Anda mengontrol Pahlawan dan tujuan Anda adalah untuk menghancurkan musuh Kuno. Banyak penggemar Dota mungkin tersinggung dengan kalimat terakhir karena ada begitu banyak untuk Dota maka saya telah menyimpulkan.

Gim ini sangat kompleks dengan kurva belajar yang sangat curam. Saya telah memulai sebuah misi untuk mempelajari Dota beberapa waktu yang lalu dan saya membutuhkan waktu seminggu hanya untuk melalui video How To dasar, di mana mereka menjelaskan strategi permainan, apa senjata, mantra, pahlawan lakukan dan bagaimana cara merayap. Dan ini membuat seluruh pertempuran AI vs Dendi penting karena menggambarkan betapa canggihnya AI dan ML. Jadi mari kita lihat apa yang memberdayakan bot itu dan apakah kita perlu takut tentang pemberontakan AI.

Bangkitnya Planet AI

AI menjadi Skynet adalah masalah yang bisa diperdebatkan. Elon Musk percaya bahwa jika tidak terus dikendalikan, skenario seperti Skynet kemungkinan akan terjadi. Di sisi lain, Mark Zuckerberg mengatakan bahwa AI tidak berbahaya dan tidak akan menyebabkan Skenario Kiamat. Elon Musk memulai OpenAI dengan tujuan ini.

Untuk mencegah penyalahgunaan AI dan meneliti AI yang tidak akan berbalik melawan kita. Dan aku ada di sisinya.

Tapi bukan itu yang akan kita bahas di sini. Topik utamanya adalah untuk mengetahui apa yang memberi kekuatan pada bot yang dibuat oleh OpenAI. Untuk mendapatkan pemahaman tentang itu, saya membaca beberapa makalah penelitian dan blog tentang masalah ini dan juga menghubungi teman saya Anmol Sharma yang merupakan peneliti AI & ML.

Pembelajaran Penguatan

Ini adalah nama teknologi di balik bot Dota OpenAI. Tetapi sebelum kita membahasnya, kita perlu memahami bagaimana AI umum, atau secara khusus AI dalam Video Game bekerja. AI adalah istilah yang sangat umum dan berisi banyak topik seperti Machine Learning, Deep Learning dan Neural Networks. Untuk mendefinisikan AI secara kasar, kita dapat mengatakan itu adalah kemampuan komputer untuk belajar dari informasi dan membuat keputusan berdasarkan pembelajarannya. Semakin banyak yang ia pelajari, semakin benar kebenaran keputusannya.

Apa Bedanya Dengan Bot Normal?

Bot dalam gim video umumnya terlihat cerdas, tetapi itu bukan bentuk AI yang sebenarnya. Hampir semua bot ini dalam game diprogram berdasarkan pada set If..This..Lhen..There statement. Mereka hanya mengikuti pernyataan dan mengambil tindakan berdasarkan kondisi yang tertulis dalam pernyataan itu.

Di atas saya telah menunjukkan contoh yang sangat sederhana. Pernyataan dalam permainan nyata jauh lebih kompleks dengan kondisi dalam kondisi. Semakin jelas dan terinci pernyataan-pernyataan ini, semakin banyak bot yang tampaknya cerdas.

Hadiah dan Hukuman

Dalam AI lingo, apa yang kita sebut bot dikenal sebagai Agen. Tujuannya adalah membuat agen belajar apa pun yang kita inginkan untuk dipelajari. Agen tersebut belajar melalui metode yang sama seperti yang dipelajari anjing Anda, melalui hadiah dan hukuman. Kapan pun agen membuat kesalahan, ia akan dihukum dan kapan pun ia membuat tebakan yang benar atau memberikan jawaban yang benar, itu akan dihargai. Melalui sistem ini, agen belajar untuk mengaitkan tindakan yang seharusnya tidak dilakukan untuk menghindari penalti dan melakukan tindakan (atau tindakan serupa) yang memberikan hadiah.

Jika Anda benar-benar memikirkannya, itu seperti membuat keputusan berdasarkan kondisi tertentu, seperti halnya algoritma yang melakukannya. Seperti yang telah saya perlihatkan di atas, bot permainan, yang muncul di atas laras peledak, akan mengambil tindakan sesuai algoritme. Algoritma dalam AI, jelas jauh lebih kompleks dari ini, yang membuat seluruh sistem cerdas.

Datang ke bot OpenAI kami, menurut pengembang, ia mempelajari seluruh permainan dalam waktu 2 minggu. Selama 2 minggu, itu online 24 × 7 dan bermain melawan salinan itu sendiri. Itu adalah tonggak luar biasa mengingat kompleksitas permainan dan fakta itu bisa mengalahkan Dendi.

Mengapa Mobil Tanpa Sopir Masih Tidak Ada?

Ini adalah salah satu pertanyaan pertama yang muncul di benak saya ketika saya mendengar tentang seluruh peristiwa ini. Jika sebuah bot dapat mempelajari permainan seperti itu dan melatih dirinya sendiri hingga mengalahkan pemain-pemain top, mengapa kita masih mengendalikannya. Dan ini adalah pertanyaan yang sama dengan yang saya tanyakan pada teman saya, Tn. Anmol Sharma, yang juga telah meneliti mobil-mobil yang tidak memiliki mobil. Ini yang dia katakan.

Dalam sebuah game, yang dikembangkan oleh manusia, jumlah variabel lebih sedikit. Ditambah lagi, jika agen (bot) membuat kesalahan, hukuman terburuk adalah kerugian bulat. Di dunia nyata, satu kesalahan adalah kematian.

Meskipun Dota adalah permainan yang kompleks, kemungkinan kombinasi gerakan, mantra, dan taktik, meskipun masih sangat besar, masih terbatas. Dan kesalahan diperbolehkan tanpa penalti nyata. Tetapi dalam kasus Agen mobil tanpa pengemudi, kesalahan dapat menyebabkan kecelakaan berbahaya dan bahkan kematian.

Di dunia nyata, jumlah variabel yang harus dipantau agen tidak terbatas dan situasi meningkat karena variabel-variabel ini, seperti mobil lain yang tiba-tiba berubah jalur, lompatan pejalan kaki di depan mobil, juga tak ada habisnya. Ditambah lagi, seperti yang dikatakan Jeremy Clarkson, mereka harus membuat keputusan moral dan etis ketika berada di ambang kecelakaan langsung (walaupun teorinya tidak valid).

Masa depan

Kita sudah tahu robot yang dikendalikan Manusia melakukan operasi intrinsik. Lompatan berikutnya adalah robot yang dikendalikan AI yang melakukannya. Dan ini hanya di bidang medis. AI pasti akan menjadi teknologi baru yang dominan dalam dekade mendatang di banyak bidang. Tetapi, AI juga dapat disalahgunakan untuk tujuan jahat seperti serangan DDoS, Ransomware Bots dan meretas PC lain atau sistem perusahaan.

Sehubungan dengan Dota dan game lain, kita dapat berharap untuk melihat bot cerdas dibuat untuk game lain juga, yang melawan siapa pemain dapat melatih untuk tampil lebih baik. Dan apakah saya menyebutkan OpenAI akan melakukan 5v5 di International tahun depan? Jadi saya berangkat untuk meningkatkan keterampilan Dota saya untuk setidaknya mengalahkan bot kayu bawaan. Divine Rapier di sini saya datang!