Специалисты Facebook разработали датасет персонажей, ускоряющий обучение диалоговых нейросетей

Разработчики из Facebook попробовали решить одну из важных задач программистов — наличие подходящего набора данных для обучения ИИ. Известно, что этот набор определяет точность и производительность разрабатываемого ПО.

Исследователями была разработана подборка учебных данных, которая делает эффективнее обучение алгоритмов, чья специализация — общение с живыми людьми. Датасет содержит 5 000 000 персонажей и 700 000 000 диалогов.

В основу набора данных легла подборка PERSONA-CHAT, которая была разработана сотрудниками "Фэйсбук" совместно с экспертами Монреальского института алгоритмов обучения. Сообщается, что базовый датасет включал в себя всего 1 000 личностей, то есть объем данных вырос сразу на три порядка. Есть и еще одно значимое отличие — контент "исходника" создавался искусственно, а новый набор создан на основе диалогов пользователей Reddit.

Сообщается, что диалоговый ИИ, обученный на новом датасете, способен общаться более интересно, в отличие от нейросетей, у которых не было доступа к этой базе. Кроме того, алгоритмы быстрее обучаются на основе персонажей.

Читайте далее

Документам Google обновили функционал

"Яндекс.Браузер": сайтов с надоедливой рекламой стало меньше на 22%

Создан рекламный ролик, в котором главной тенденцией 2018 года объявлена ненависть

К концу 2018 года из интернета начнут удалять посты с террористическим содержанием еще до их публикации