искусственный интеллект учится решать различные задачи, а его обучение охватывает всевозможные способы. компания OpenAI, один из ведущих разработчиков технологий на основе машинного обучения, начала использовать для обучения нейросетей записи видеоигр Minecraft.
процесс обучения был выстроен следующим образом:
- поиск подходящих видео для обучения;
- обучение нейросети IDM на основе видео, содержащего сведения о движениях мыши и нажатии клавиш;
- разметка видео с помощью IDM и обучение игровой нейросети.
для обучения было использовано около 70 тыс. часов записей видео с YouTube — все их промаркировали специалисты, чтобы ИИ смог понять стратегию действий. однако размечена была только часть видео — остальное система смогла провести сама.
такая стратегия обучения называется предварительным обучением с «получителем». специалисты OpenAI отмечают, что такие задачи почти невозможно выполнить с помощью традиционного обучения. ИИ учится рубить деревья, чтобы собирать бревна, превращать эти бревна в доски, а затем делать из досок стол для крафта. нейросети понадобилось 4 минуты, чтобы найти алмазы. само собой, ИИ пока не справляется лучше человека-игрока, однако нейросеть только учится.