Штучний інтелект навчили грати в Minecraft. Модель тренувалась на 70 000 годин відео з ютубу
Компанія Ілона Маска OpenAI навчила штучний інтелект грати в Minecraft так, як це роблять люди. Дослідники використовували техніку під назвою Video PreTraining (VPT).
Для початку вони зібрали набір даних з 2000 годин гри від реальних людей. Для навчання використовували не лише відео з процесом, а й інформацію про натискання клавіш і рухи миші, які спричиняють дії на екрані.
В такий спосіб ШІ навчився передбачати послідовність дій, що виконуються на кожному кроці відео. Після цього йому показали 70 000 годин відео з Minecraft на ютубі. Завдяки цьому модель змогла скопіювати поведінку з відео: повторити рубання дерев, плавання, полювання, вживання їжі тощо.
Дослідники використовували і «навчання з підкріпленням», щоб нагородити ШІ за виконання особливо важких завдань на кшталт виготовлення діамантових інструментів. Досвідченим гравцям для зазвичай потрібно для цього понад 20 хвилин і 24 000 дій, і це вперше, коли цю послідовність дій навчився робити комп’ютерний агент.
Цей приклад показує, як нейромережа може переглянути набір відео в інтернеті та опанувати широкий спектр поведінки, щоб виконувати складні завдання. Потенційно такий метод може поліпшити навчання комп’ютерів та удосконалити ШІ-моделі, які зроблять ігри складнішими й цікавішими.
5 коментарів
Додати коментар Підписатись на коментаріВідписатись від коментарівВесь другий малюнок можна назвати одним словом — ідентифікатор «Алмазна кирка»
Якщо ввести цей ідентифікатор у інтерфейс Minecraft то отримаєшь алмазну кирку.
Тобто все це є атомна дія або чиста функція.
Є ідентифікатор, є інтерфейс, після введення (безпомилкового) отримуємо результат.
Прикол не в тому, аби винайти вже існуючу функцію, а в тому аби протестувати сам алгоритм з використовуванням данних, які
1) Халявні в інтернеті
2) Не розмічені автором на пряму
Це дуже дешевий підхід з майнінгу данних і робить ютуб цікавіше для data science
Це цікаво для створення справжніх ботів в іграх без крутого інтерфейсу; розширенню ігрового функціоналу у відкритому світі; та для роботехніки в цілому
П.с. Та і хто не хоче створити свого бота та подивитися на його розвиток) А ще кажуть, батьківського інстинкту не існує)))
Ось ще цікавеньке: gamedev.dou.ua/.../gpt-4-agent-in-minecraft
Ага, дуже крута новина, саме через неї на цю потрапив))
А як що до розмірковуючого ШІ у іграх? Не мовну статистичну модель. А щось, що буде мислити так логічно, як, наприклад Спок ?