www.wikidata.uk-ua.nina.az

OpenAI Five це назва системи машинного навчання яка керує командою з п яти ботів що грають проти команди з п яти людей у

OpenAI Five

OpenAI Five — це назва системи машинного навчання, яка керує командою з п'яти ботів, що грають проти команди з п'яти людей у відеогру Dota 2. Проект був розроблений американською дослідницькою компанією зі штучного інтелекту (ШІ) OpenAI, яка була заснована з метою розробки безпечного ШІ на користь людства. Перший публічний виступ OpenAI Five відбувся у 2017 році, коли він був продемонстрований в живій грі та переміг професійного гравця, відомого під ніком Dendi. Наступного року система розвинулась до того рівня, що працювала як повна команда з п'яти осіб, і могла перемагати професійні команди.

Компанія OpenAI використовує «Dota 2» в якості прикладу застосування прикладного машинного навчання загального призначення, щоб відобразити непередбачуваність і безперервну природу реального світу. Команда розробників заявила, що головними причинами вибору цієї відеогри були складні правила та її сильна залежність від командної роботи для досягнення перемоги. Алгоритми, використані у проекті, також були застосовані до інших систем, таких як керування роботизованою рукою. Проект також порівнюють з низкою інших подібних робіт, де ШІ грає та перемагає людей, наприклад Watson у телевізійному ігровому шоу Jeopardy![en], Deep Blue — ШІ для гри в шахи і AlphaGo для настільної гри Ґо.

Історія ред.

В листопаді 2016 року почалася робота над алгоритмами, які б використовувалися для ботів. OpenAI вирішив взяти за основу відеогру Dota 2, в якій змагаються команди у форматі п'ять на п'ять, через її популярність на стримінговій платформі Twitch, яка має вбудовану підтримку Linux і має доступний API. Спочатку, до того як почати симулювати гру команди із п'яти осіб, система перемогла у прямому ефірі один на один професійного українського кіберспортсмена Денді на першій публічній демонстрації у серпні під час щорічного чемпіонату світу The International 2017. Після матчу, технічний директор проекту Грег Брокман пояснив, що бот вчився, граючи проти самого себе протягом двох тижнів реального часу, і що створене для цього програмне забезпечення було кроком у напрямку створення систем, які зможуть виконувати більш складні завдання «на кшталт, бути хірургом». OpenAI використовували у своїй роботі «навчання з підкріпленням», оскільки боти вчились, граючи проти себе сотні разів на день протягом місяців, отримуючи винагороду за такі дії, як вбивство ворога та руйнування веж.

У червні 2018 року можливості ботів розширилися до можливості грати разом як повна команда з п'яти осіб, і вони могли перемогати команди аматорів і напівпрофесійних гравців. Під час The International 2018 OpenAI Five зіграв у двох матчах проти професійних команд, перший матч був проти бразильської paiN Gaming, а другий був проти команди всіх зірок[en], створеної із колишніх професійних китайських гравців. Хоча боти програли обидва матчі, OpenAI вважали це успішним результатом, заявивши, що гра проти одних із кращих гравців в «Dota 2» дозволила їм проаналізувати та налаштувати свої алгоритми для майбутніх ігор. Остання публічна демонстрація ботів відбулася у квітні 2019 року, коли вони виграли best-of-three[en] серію проти чемпіонів The International 2018 OG на живому заході в Сан-Франциско. Того ж місяця відбулася чотириденна онлайн-подія в самій грі, де кожний бажаючий міг зіграти проти ботів. У підсумку з ботами було зіграно 42 729 публічні гри, серед яких боти програли тільки 4 075 гри.

Архітектура ред.

Кожна мережа OpenAI Five містить один шар із 4096 вузлів LSTM, який спостерігає за поточним станом гри, отриманим через API Dota. Нейронна мережа виконує дії за допомогою численних можливих «голів» дій (без залучення людських даних), і кожна така «голова» має семантичне значення. Наприклад, кількість часу для затримки дії, яку дію обрати — координати X або Y для цієї дії у системі координат юніта. Крім того, «голови» дій обчислюються незалежно. Система ШІ спостерігає за оточенням, представленим у вигляді списку із 20 000 чисел і виконує дію, створюючи список із восьми перерахованих значень. Крім того, вона обирає різні дії та цілі, щоб зрозуміти, як кодувати кожну дію та спостерігати за оточенням.

OpenAI Five розроблена як універсальна система навчання з підкріпленням на інфраструктурі «Rapid». Rapid складається з двох типів воркерів: перший тип — rollout, який запускає тисячі копій гри і допомагає їм «розмовляти» один з одним, другий тип — optimizer, запускає програмне забезпечення для виконання градієнтного спуску. До 2018 року для навчання з підкріпленням градієнтним методом «Проксимальна стратегія оптимізації» (англ. Proximal Policy Optimization) OpenAI Five встиг награти близько 180 років гри на 256 GPU і 128 000 ядрах CPU.

Порівняльна таблиця
OpenAI 1v1 бот (2017) OpenAI Five (2018)
CPU 60,000 ядер CPU, працюючих на Microsoft Azure 128,000 витискальних ядер CPU, працюючих на Google Cloud Platform (GCP)
GPU 256 K80 GPU на Azure 256 P100 GPUs on the GCP
Зібраний досвід ~300 років за день ~180 років за день
Розмір спостереження ~3.3kB ~36.8kB
Спостережень за секунду ігрового процесу 10 7.5
Розмір пакету 8,388,608 спостережень 1,048,576 спостережень
Пакетів за хвилину ~20 ~60

Порівняння з іншими ігровими системами ШІ ред.

До OpenAI Five раніше успішно використовувалися інші проєкти та системи ШІ, що грають проти людей, наприклад Jeopardy![en] з Watson, шахи з Deep Blue і Го з AlphaGo. У порівнянні з іншими іграми, які використовували системи штучного інтелекту для гри проти людей, Dota 2 відрізняється наявністю наступних елементів:

Перегляд довгострокової дії: боти працюють зі швидкістю 30 кадрів за секунду протягом середнього матчу тривалістю 45 хвилин, що призводить до 80 000 ходів за гру. OpenAI Five спостерігає за кожним четвертим кадром, генеруючи 20 000 ходів. Для порівняння, шахи зазвичай закінчуються до 40 ходу, тоді як Го закінчується до 150 ходу.

Частково спостережуваний стан гри: гравці та їхні союзники можуть бачити карту лише навколо себе. Решта його вкрита туманом війни, який приховує ворожі підрозділи та їхні переміщення. Таким чином, гра в Dota 2 вимагає робити висновки на основі цих неповних даних, а також передбачати, що може робити опонент в цей самий час. Для порівняння, шахи і Го — це ігри з повною інформацією, оскільки вони не приховують елементів від гравця суперника.

Простір безперервної дії: кожен персонаж у грі Dota 2, відомий як герой, може виконувати десятки дій, спрямованих на іншого персонажа або позицію. Розробники OpenAI Five надають простір для 170 000 можливих дій для одного героя. Не враховуючи постійних аспектів гри, існує в середньому приблизно 1000 дійсних дій для кожного моменту часу. Для порівняння, середня кількість дій у шахах становить 35 і 250 у Го.

Простір безперервного спостереження: Dota 2 грається на великій карті з десятьма героями, по п'ять у кожній команді, а також десятками будівель та персонажами (NPC). Система OpenAI спостерігає за станом гри через API бота розробників, отримуючи 20 000 значень, що становлять всю інформацію, до якої може отримати доступ людина. Шахова дошка представлена приблизно 70 значеннями, тоді як дошка для Го має близько 400 значень.

Оцінка ред.

OpenAI Five отримала визнання від спільноти ШІ, технологій та відеоігор у цілому. Засновник Майкрософт Білл Гейтс назвав це «великою справою», оскільки їхні перемоги вимагали командної роботи та співпраці. Гравець в шахи Гаррі Каспаров, який програв ШІ Deep Blue у 1997 році, заявив, що, незважаючи на те, що боти програли на The International 2018, вони зрештою переможуть, і це буде раніше, ніж очікується.

У розмові з MIT Technology Review[en] експерти зі штучного інтелекту також вважали систему OpenAI Five значним досягненням, оскільки відзначили, що Dota 2 є надзвичайно складною грою, тож навіть перемоги над непрофесійними гравцями вражали. PC Gamer написав, що перемоги ботів над професійними гравцями були важливою подією для машинного навчання. На відміну від цього, Motherboard писав, що перемога була «шахрайством» через зменшений вибір доступних для гри героїв з обох сторін, а також через те, що ботам надали прямий доступ до API, на відміну від використання ними технології комп'ютерного зору для інтерпретації пікселів на екрані. The Verge писав, що боти були доказом того, що підхід компанії до навчання з підкріпленням та її загальна філософія щодо штучного інтелекту «приносять плоди».

У 2019 році DeepMind показав AlphaStar[en] — схожого бота для Starcraft II. Як і OpenAI Five, AlphaStar використовував навчання з підкріпленням і гру сам із собою. «The Verge» повідомляє, що «мета такого типу досліджень штучного інтелекту полягає не тільки в тому, щоб перемогти людей у різних іграх, а щоб довести, що це можливо. Складне програмне забезпечення для штучного інтелекту може краще людей виконувати майже будь-яке когнітивне завдання, будь то настільна чи сучасна відеогра». Вони додали, що перемоги DeepMind і OpenAI також є свідченням користі використання навчання з підкріпленням.

Примітки ред.

  1. OpenAI Five. openai.com/five. оригіналу за 1 вересня 2018. Процитовано 10 жовтня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  2. Savov, Vlad. My favorite game has been invaded by killer AI bots and Elon Musk hype. The Verge. оригіналу за 26 червня 2018. Процитовано 25 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  3. Frank, Blair Hanley. . Venture Beat. Архів оригіналу за 12 серпня 2017. Процитовано 12 серпня 2017. 
  4. Dota 2. blog.openai.com. оригіналу за 11 серпня 2017. Процитовано 12 серпня 2017.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  5. More on Dota 2. blog.openai.com. оригіналу за 16 серпня 2017. Процитовано 16 серпня 2017.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  6. ↑ Simonite, Tom. Can Bots Outwit Humans in One of the Biggest Esports Games?. Wired. оригіналу за 25 червня 2018. Процитовано 25 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  7. Kahn, Jeremy. A Bot Backed by Elon Musk Has Made an AI Breakthrough in Video Game World. Bloomberg. оригіналу за 27 червня 2018. Процитовано 27 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  8. Clifford, Catherine. Bill Gates says gamer bots from Elon Musk-backed nonprofit are 'huge milestone' in A.I.. CNBC. оригіналу за 28 червня 2018. Процитовано 29 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  9. OpenAI Five Benchmark. blog.openai.com. оригіналу за 26 серпня 2018. Процитовано 25 серпня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  10. Vincent, James. AI bots trained for 180 years a day to beat humans at Dota 2. The Verge. оригіналу за 25 червня 2018. Процитовано 25 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  11. Savov, Vlad. The OpenAI Dota 2 bots just defeated a team of former pros. The Verge. оригіналу за 7 серпня 2018. Процитовано 7 серпня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  12. Simonite, Tom. Pro Gamers Fend off Elon Musk-Backed AI Bots—for Now. Wired. оригіналу за 24 серпня 2018. Процитовано 25 серпня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  13. Quach, Katyanna. Game over, machines: Humans defeat OpenAI bots once again at video games Olympics. The Register. оригіналу за 25 серпня 2018. Процитовано 25 серпня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  14. The International 2018: Results. blog.openai.com. оригіналу за 24 серпня 2018. Процитовано 25 серпня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  15. Wiggers, Kyle. OpenAI Five defeats professional Dota 2 team, twice. Venture Beat. оригіналу за 13 квітня 2019. Процитовано 13 квітня 2019.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  16. Statt, Nick. OpenAI's Dota 2 AI steamrolls world champion e-sports team with back-to-back victories. The Verge. оригіналу за 15 квітня 2019. Процитовано 15 квітня 2019.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  17. Wiggers, Kyle. . Venture Beat. Архів оригіналу за 11 липня 2019. Процитовано 22 квітня 2019. 
  18. Understanding LSTM Networks. colah's blog. оригіналу за 1 серпня 2017. Процитовано 27 серпня 2015.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  19. ↑ OpenAI Five. blog.openai.com. 25 червня 2018. оригіналу за 25 червня 2018. Процитовано 25 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  20. Why are AI researchers so obsessed with games?. QUARTZ. оригіналу за 4 серпня 2018. Процитовано 4 серпня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  21. Schulman, John; Wolski, Filip; Dhariwal, Prafulla; Radford, Alec; Klimov, Oleg (2017). «Proximal Policy Optimization Algorithms». arXiv:1707.06347 [cs.LG]. 
  22. Gabbatt, Adam (17 лютого 2011). IBM computer Watson wins Jeopardy clash. The Guardian. оригіналу за 21 вересня 2013. Процитовано 17 лютого 2011.  {{cite news}}: Проігноровано невідомий параметр |df= (довідка)
  23. Chess grandmaster Garry Kasparov on what happens when machines 'reach the level that is impossible for humans to compete'. Business Insider. оригіналу за 29 грудня 2017. Процитовано 29 грудня 2017.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  24. DeepMind's Go-playing AI doesn't need human help to beat us anymore. Verge. 18 жовтня 2017. оригіналу за 18 жовтня 2017. Процитовано 18 жовтня 2017.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  25. ↑ OpenAI Five. blog.openai.com. 25 червня 2018. оригіналу за 25 червня 2018. Процитовано 25 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  26. ↑ . MIT Tech Review. Архів оригіналу за 26 червня 2018. Процитовано 25 червня 2018. 
  27. Bill Gates says gamer bots from Elon Musk-backed nonprofit are 'huge milestone' in A.I.. CNBC. 28 червня 2018. оригіналу за 28 червня 2018. Процитовано 28 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  28. Bill Gates hails 'huge milestone' for AI as bots work in a team to destroy humans at video game 'Dota 2'. Business Insider. оригіналу за 27 червня 2018. Процитовано 27 червня 2018.  {{cite web}}: Проігноровано невідомий параметр |df= (довідка)
  29. . 24 серпня 2018. Архів оригіналу за 9 липня 2020. Процитовано 24 серпня 2018. 
  30. Park, Morgan (11 серпня 2018). . PC Gamer. Архів оригіналу за 25 грудня 2019. Процитовано 25 травня 2020. 
  31. Gault, Matthew (17 серпня 2018). . Vice (англ.). Архів оригіналу за 28 травня 2020. Процитовано 25 травня 2020. 
  32. Statt, Nick (13 квітня 2019). . The Verge (англ.). Архів оригіналу за 15 квітня 2019. Процитовано 25 травня 2020. 
  33. Statt, Nick (30 жовтня 2019). . The Verge (англ.). Архів оригіналу за 26 лютого 2020. Процитовано 25 травня 2020. 

Посилання ред.

Вікіпедія, Українська, Україна, книга, книги, бібліотека, стаття, читати, завантажити, безкоштовно, безкоштовно завантажити, mp3, відео, mp4, 3gp, jpg, jpeg, gif, png, малюнок, музика, пісня, фільм, книга, гра, ігри
Дата публікації:
OpenAI Five ce nazva sistemi mashinnogo navchannya yaka keruye komandoyu z p yati botiv sho grayut proti komandi z p yati lyudej u videogru Dota 2 Proekt buv rozroblenij amerikanskoyu doslidnickoyu kompaniyeyu zi shtuchnogo intelektu ShI OpenAI yaka bula zasnovana z metoyu rozrobki bezpechnogo ShI na korist lyudstva Pershij publichnij vistup OpenAI Five vidbuvsya u 2017 roci koli vin buv prodemonstrovanij v zhivij gri ta peremig profesijnogo gravcya vidomogo pid nikom Dendi Nastupnogo roku sistema rozvinulas do togo rivnya sho pracyuvala yak povna komanda z p yati osib i mogla peremagati profesijni komandi Kompaniya OpenAI vikoristovuye Dota 2 v yakosti prikladu zastosuvannya prikladnogo mashinnogo navchannya zagalnogo priznachennya shob vidobraziti neperedbachuvanist i bezperervnu prirodu realnogo svitu Komanda rozrobnikiv zayavila sho golovnimi prichinami viboru ciyeyi videogri buli skladni pravila ta yiyi silna zalezhnist vid komandnoyi roboti dlya dosyagnennya peremogi Algoritmi vikoristani u proekti takozh buli zastosovani do inshih sistem takih yak keruvannya robotizovanoyu rukoyu Proekt takozh porivnyuyut z nizkoyu inshih podibnih robit de ShI graye ta peremagaye lyudej napriklad Watson u televizijnomu igrovomu shou Jeopardy en Deep Blue ShI dlya gri v shahi i AlphaGo dlya nastilnoyi gri Go Zmist 1 Istoriya 2 Arhitektura 3 Porivnyannya z inshimi igrovimi sistemami ShI 4 Ocinka 5 Primitki 6 PosilannyaIstoriya red V listopadi 2016 roku pochalasya robota nad algoritmami yaki b vikoristovuvalisya dlya botiv OpenAI virishiv vzyati za osnovu videogru Dota 2 v yakij zmagayutsya komandi u formati p yat na p yat cherez yiyi populyarnist na strimingovij platformi Twitch yaka maye vbudovanu pidtrimku Linux i maye dostupnij API 1 Spochatku do togo yak pochati simulyuvati gru komandi iz p yati osib sistema peremogla u pryamomu efiri odin na odin profesijnogo ukrayinskogo kibersportsmena Dendi na pershij publichnij demonstraciyi u serpni pid chas shorichnogo chempionatu svitu The International 2017 2 3 Pislya matchu tehnichnij direktor proektu Greg Brokman poyasniv sho bot vchivsya grayuchi proti samogo sebe protyagom dvoh tizhniv realnogo chasu i sho stvorene dlya cogo programne zabezpechennya bulo krokom u napryamku stvorennya sistem yaki zmozhut vikonuvati bilsh skladni zavdannya na kshtalt buti hirurgom 4 5 OpenAI vikoristovuvali u svoyij roboti navchannya z pidkriplennyam oskilki boti vchilis grayuchi proti sebe sotni raziv na den protyagom misyaciv otrimuyuchi vinagorodu za taki diyi yak vbivstvo voroga ta rujnuvannya vezh 6 7 8 U chervni 2018 roku mozhlivosti botiv rozshirilisya do mozhlivosti grati razom yak povna komanda z p yati osib i voni mogli peremogati komandi amatoriv i napivprofesijnih gravciv 9 6 10 11 Pid chas The International 2018 OpenAI Five zigrav u dvoh matchah proti profesijnih komand pershij match buv proti brazilskoyi paiN Gaming a drugij buv proti komandi vsih zirok en stvorenoyi iz kolishnih profesijnih kitajskih gravciv 12 13 Hocha boti prograli obidva matchi OpenAI vvazhali ce uspishnim rezultatom zayavivshi sho gra proti odnih iz krashih gravciv v Dota 2 dozvolila yim proanalizuvati ta nalashtuvati svoyi algoritmi dlya majbutnih igor 14 Ostannya publichna demonstraciya botiv vidbulasya u kvitni 2019 roku koli voni vigrali best of three en seriyu proti chempioniv The International 2018 OG na zhivomu zahodi v San Francisko 15 Togo zh misyacya vidbulasya chotiridenna onlajn podiya v samij gri de kozhnij bazhayuchij mig zigrati proti botiv 16 U pidsumku z botami bulo zigrano 42 729 publichni gri sered yakih boti prograli tilki 4 075 gri 17 Arhitektura red Kozhna merezha OpenAI Five mistit odin shar iz 4096 vuzliv LSTM 18 yakij sposterigaye za potochnim stanom gri otrimanim cherez API Dota Nejronna merezha vikonuye diyi za dopomogoyu chislennih mozhlivih goliv dij bez zaluchennya lyudskih danih i kozhna taka golova maye semantichne znachennya Napriklad kilkist chasu dlya zatrimki diyi yaku diyu obrati koordinati X abo Y dlya ciyeyi diyi u sistemi koordinat yunita Krim togo golovi dij obchislyuyutsya nezalezhno Sistema ShI sposterigaye za otochennyam predstavlenim u viglyadi spisku iz 20 000 chisel i vikonuye diyu stvoryuyuchi spisok iz vosmi pererahovanih znachen Krim togo vona obiraye rizni diyi ta cili shob zrozumiti yak koduvati kozhnu diyu ta sposterigati za otochennyam 19 OpenAI Five rozroblena yak universalna sistema navchannya z pidkriplennyam na infrastrukturi Rapid Rapid skladayetsya z dvoh tipiv vorkeriv pershij tip rollout yakij zapuskaye tisyachi kopij gri i dopomagaye yim rozmovlyati odin z odnim drugij tip optimizer zapuskaye programne zabezpechennya dlya vikonannya gradiyentnogo spusku Do 2018 roku dlya navchannya z pidkriplennyam gradiyentnim metodom Proksimalna strategiya optimizaciyi angl Proximal Policy Optimization OpenAI Five vstig nagrati blizko 180 rokiv gri na 256 GPU i 128 000 yadrah CPU 20 19 21 Porivnyalna tablicya OpenAI 1v1 bot 2017 OpenAI Five 2018 CPU 60 000 yader CPU pracyuyuchih na Microsoft Azure 128 000 vitiskalnih yader CPU pracyuyuchih na Google Cloud Platform GCP GPU 256 K80 GPU na Azure 256 P100 GPUs on the GCPZibranij dosvid 300 rokiv za den 180 rokiv za denRozmir sposterezhennya 3 3kB 36 8kBSposterezhen za sekundu igrovogo procesu 10 7 5Rozmir paketu 8 388 608 sposterezhen 1 048 576 sposterezhenPaketiv za hvilinu 20 60Porivnyannya z inshimi igrovimi sistemami ShI red Do OpenAI Five ranishe uspishno vikoristovuvalisya inshi proyekti ta sistemi ShI sho grayut proti lyudej napriklad Jeopardy en z Watson shahi z Deep Blue i Go z AlphaGo 22 23 24 U porivnyanni z inshimi igrami yaki vikoristovuvali sistemi shtuchnogo intelektu dlya gri proti lyudej Dota 2 vidriznyayetsya nayavnistyu nastupnih elementiv Pereglyad dovgostrokovoyi diyi boti pracyuyut zi shvidkistyu 30 kadriv za sekundu protyagom serednogo matchu trivalistyu 45 hvilin sho prizvodit do 80 000 hodiv za gru OpenAI Five sposterigaye za kozhnim chetvertim kadrom generuyuchi 20 000 hodiv Dlya porivnyannya shahi zazvichaj zakinchuyutsya do 40 hodu todi yak Go zakinchuyetsya do 150 hodu 25 Chastkovo sposterezhuvanij stan gri gravci ta yihni soyuzniki mozhut bachiti kartu lishe navkolo sebe Reshta jogo vkrita tumanom vijni yakij prihovuye vorozhi pidrozdili ta yihni peremishennya Takim chinom gra v Dota 2 vimagaye robiti visnovki na osnovi cih nepovnih danih a takozh peredbachati sho mozhe robiti oponent v cej samij chas Dlya porivnyannya shahi i Go ce igri z povnoyu informaciyeyu oskilki voni ne prihovuyut elementiv vid gravcya supernika 25 26 Prostir bezperervnoyi diyi kozhen personazh u gri Dota 2 vidomij yak geroj mozhe vikonuvati desyatki dij spryamovanih na inshogo personazha abo poziciyu Rozrobniki OpenAI Five nadayut prostir dlya 170 000 mozhlivih dij dlya odnogo geroya Ne vrahovuyuchi postijnih aspektiv gri isnuye v serednomu priblizno 1000 dijsnih dij dlya kozhnogo momentu chasu Dlya porivnyannya serednya kilkist dij u shahah stanovit 35 i 250 u Go 25 Prostir bezperervnogo sposterezhennya Dota 2 grayetsya na velikij karti z desyatma geroyami po p yat u kozhnij komandi a takozh desyatkami budivel ta personazhami NPC Sistema OpenAI sposterigaye za stanom gri cherez API bota rozrobnikiv otrimuyuchi 20 000 znachen sho stanovlyat vsyu informaciyu do yakoyi mozhe otrimati dostup lyudina Shahova doshka predstavlena priblizno 70 znachennyami todi yak doshka dlya Go maye blizko 400 znachen 25 Ocinka red OpenAI Five otrimala viznannya vid spilnoti ShI tehnologij ta videoigor u cilomu Zasnovnik Majkrosoft Bill Gejts nazvav ce velikoyu spravoyu oskilki yihni peremogi vimagali komandnoyi roboti ta spivpraci 27 28 Gravec v shahi Garri Kasparov yakij prograv ShI Deep Blue u 1997 roci zayaviv sho nezvazhayuchi na te sho boti prograli na The International 2018 voni zreshtoyu peremozhut i ce bude ranishe nizh ochikuyetsya 29 U rozmovi z MIT Technology Review en eksperti zi shtuchnogo intelektu takozh vvazhali sistemu OpenAI Five znachnim dosyagnennyam oskilki vidznachili sho Dota 2 ye nadzvichajno skladnoyu groyu tozh navit peremogi nad neprofesijnimi gravcyami vrazhali 26 PC Gamer napisav sho peremogi botiv nad profesijnimi gravcyami buli vazhlivoyu podiyeyu dlya mashinnogo navchannya 30 Na vidminu vid cogo Motherboard pisav sho peremoga bula shahrajstvom cherez zmenshenij vibir dostupnih dlya gri geroyiv z oboh storin a takozh cherez te sho botam nadali pryamij dostup do API na vidminu vid vikoristannya nimi tehnologiyi komp yuternogo zoru dlya interpretaciyi pikseliv na ekrani 31 The Verge pisav sho boti buli dokazom togo sho pidhid kompaniyi do navchannya z pidkriplennyam ta yiyi zagalna filosofiya shodo shtuchnogo intelektu prinosyat plodi 32 U 2019 roci DeepMind pokazav AlphaStar en shozhogo bota dlya Starcraft II Yak i OpenAI Five AlphaStar vikoristovuvav navchannya z pidkriplennyam i gru sam iz soboyu The Verge povidomlyaye sho meta takogo tipu doslidzhen shtuchnogo intelektu polyagaye ne tilki v tomu shob peremogti lyudej u riznih igrah a shob dovesti sho ce mozhlivo Skladne programne zabezpechennya dlya shtuchnogo intelektu mozhe krashe lyudej vikonuvati majzhe bud yake kognitivne zavdannya bud to nastilna chi suchasna videogra Voni dodali sho peremogi DeepMind i OpenAI takozh ye svidchennyam koristi vikoristannya navchannya z pidkriplennyam 33 Primitki red OpenAI Five openai com five Arhiv originalu za 1 veresnya 2018 Procitovano 10 zhovtnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Savov Vlad My favorite game has been invaded by killer AI bots and Elon Musk hype The Verge Arhiv originalu za 26 chervnya 2018 Procitovano 25 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Frank Blair Hanley OpenAI s bot beats top Dota 2 player so badly that he quits Venture Beat Arhiv originalu za 12 serpnya 2017 Procitovano 12 serpnya 2017 Dota 2 blog openai com Arhiv originalu za 11 serpnya 2017 Procitovano 12 serpnya 2017 b cite web b Proignorovano nevidomij parametr df dovidka More on Dota 2 blog openai com Arhiv originalu za 16 serpnya 2017 Procitovano 16 serpnya 2017 b cite web b Proignorovano nevidomij parametr df dovidka a b Simonite Tom Can Bots Outwit Humans in One of the Biggest Esports Games Wired Arhiv originalu za 25 chervnya 2018 Procitovano 25 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Kahn Jeremy A Bot Backed by Elon Musk Has Made an AI Breakthrough in Video Game World Bloomberg Arhiv originalu za 27 chervnya 2018 Procitovano 27 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Clifford Catherine Bill Gates says gamer bots from Elon Musk backed nonprofit are huge milestone in A I CNBC Arhiv originalu za 28 chervnya 2018 Procitovano 29 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka OpenAI Five Benchmark blog openai com Arhiv originalu za 26 serpnya 2018 Procitovano 25 serpnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Vincent James AI bots trained for 180 years a day to beat humans at Dota 2 The Verge Arhiv originalu za 25 chervnya 2018 Procitovano 25 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Savov Vlad The OpenAI Dota 2 bots just defeated a team of former pros The Verge Arhiv originalu za 7 serpnya 2018 Procitovano 7 serpnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Simonite Tom Pro Gamers Fend off Elon Musk Backed AI Bots for Now Wired Arhiv originalu za 24 serpnya 2018 Procitovano 25 serpnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Quach Katyanna Game over machines Humans defeat OpenAI bots once again at video games Olympics The Register Arhiv originalu za 25 serpnya 2018 Procitovano 25 serpnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka The International 2018 Results blog openai com Arhiv originalu za 24 serpnya 2018 Procitovano 25 serpnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Wiggers Kyle OpenAI Five defeats professional Dota 2 team twice Venture Beat Arhiv originalu za 13 kvitnya 2019 Procitovano 13 kvitnya 2019 b cite web b Proignorovano nevidomij parametr df dovidka Statt Nick OpenAI s Dota 2 AI steamrolls world champion e sports team with back to back victories The Verge Arhiv originalu za 15 kvitnya 2019 Procitovano 15 kvitnya 2019 b cite web b Proignorovano nevidomij parametr df dovidka Wiggers Kyle OpenAI s Dota 2 bot defeated 99 4 of players in public matches Venture Beat Arhiv originalu za 11 lipnya 2019 Procitovano 22 kvitnya 2019 Understanding LSTM Networks colah s blog Arhiv originalu za 1 serpnya 2017 Procitovano 27 serpnya 2015 b cite web b Proignorovano nevidomij parametr df dovidka a b OpenAI Five blog openai com 25 chervnya 2018 Arhiv originalu za 25 chervnya 2018 Procitovano 25 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Why are AI researchers so obsessed with games QUARTZ Arhiv originalu za 4 serpnya 2018 Procitovano 4 serpnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Schulman John Wolski Filip Dhariwal Prafulla Radford Alec Klimov Oleg 2017 Proximal Policy Optimization Algorithms arXiv 1707 06347 cs LG Gabbatt Adam 17 lyutogo 2011 IBM computer Watson wins Jeopardy clash The Guardian Arhiv originalu za 21 veresnya 2013 Procitovano 17 lyutogo 2011 b cite news b Proignorovano nevidomij parametr df dovidka Chess grandmaster Garry Kasparov on what happens when machines reach the level that is impossible for humans to compete Business Insider Arhiv originalu za 29 grudnya 2017 Procitovano 29 grudnya 2017 b cite web b Proignorovano nevidomij parametr df dovidka DeepMind s Go playing AI doesn t need human help to beat us anymore Verge 18 zhovtnya 2017 Arhiv originalu za 18 zhovtnya 2017 Procitovano 18 zhovtnya 2017 b cite web b Proignorovano nevidomij parametr df dovidka a b v g OpenAI Five blog openai com 25 chervnya 2018 Arhiv originalu za 25 chervnya 2018 Procitovano 25 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka a b A team of AI algorithms just crushed humans in a complex computer game MIT Tech Review Arhiv originalu za 26 chervnya 2018 Procitovano 25 chervnya 2018 Bill Gates says gamer bots from Elon Musk backed nonprofit are huge milestone in A I CNBC 28 chervnya 2018 Arhiv originalu za 28 chervnya 2018 Procitovano 28 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Bill Gates hails huge milestone for AI as bots work in a team to destroy humans at video game Dota 2 Business Insider Arhiv originalu za 27 chervnya 2018 Procitovano 27 chervnya 2018 b cite web b Proignorovano nevidomij parametr df dovidka Twitter Garri Kasparova 24 serpnya 2018 Arhiv originalu za 9 lipnya 2020 Procitovano 24 serpnya 2018 Park Morgan 11 serpnya 2018 How the OpenAI Five tore apart a team of Dota 2 pros PC Gamer Arhiv originalu za 25 grudnya 2019 Procitovano 25 travnya 2020 Gault Matthew 17 serpnya 2018 OpenAI Is Beating Humans at Dota 2 Because It s Basically Cheating Vice angl Arhiv originalu za 28 travnya 2020 Procitovano 25 travnya 2020 Statt Nick 13 kvitnya 2019 OpenAI s Dota 2 AI steamrolls world champion e sports team with back to back victories The Verge angl Arhiv originalu za 15 kvitnya 2019 Procitovano 25 travnya 2020 Statt Nick 30 zhovtnya 2019 DeepMind s StarCraft 2 AI is now better than 99 8 percent of all human players The Verge angl Arhiv originalu za 26 lyutogo 2020 Procitovano 25 travnya 2020 Posilannya red nbsp Portal Videoigri Oficijnij sajt Oficijnij blog Otrimano z https uk wikipedia org w index php title OpenAI Five amp oldid 40721328