Facebook опубликовала код ИИ-платформы Horizon для прикладного обучения с подкреплением

Компания Facebook открыла исходный код платформы Horizon для прикладного обучения с подкреплением, пишет Engadget.

Horizon разработана инженерами подразделения Facebook AI. В течение последнего года Facebook применяла Horizon в ряде своих продуктов, например для персонализации уведомлений, улучшения виртуального помощника М в мессенджере и оптимизации качества потокового видео. Платформа построена на открытых фреймворках, таких как PyTorch 1.0, Caffe2 и Spark. Исходный код доступен на GitHub.

Компания открывает исходный код платформы с целью продвижения обучения с подкреплением. Сегодня этот метод тренировки ИИ преимущественно используется в играх и робототехнике. Facebook надеется, что с открытием кода Horizon его начнут более активно использовать компании и исследовательские команды, чтобы повысить качество масштабных производственных систем и приложений. В частности, утверждает Facebook, платформа будет полезна в работе с массивными датасетами, для обработки которых требуются большие вычислительные мощности.

Обучение с подкреплением — достаточно распространённый вид машинного обучения, который используется для тренировки алгоритмов выполнять определённую задачу. В системах машинного обучения разработчики заранее прописывают, какой результат должна выдать модель. При обучении с подкреплением модель адаптирует свои решения, исходя из спонтанной обратной связи от среды.