OpenAI выпустила новые инструменты для ИИ-разработчиков

Один из них — Realtime API — представляет собой API для встраивания в приложения голосовых функций, работающих практически в режиме реального времени и поддерживающих ввод и вывод речи. На выбор предоставлено шесть голосов, свои использовать нельзя. С помощью API можно создавать, например, персональных ИИ-ассистентов. Realtime API интегрирован с рядом сторонних инструментов.

В API появилась возможность использовать не только текст, но и картинки для файн-тюнинга GPT-4o. Это должно помочь повысить производительность модели на задачах, связанных с распознаванием изображений.

Также представлена функция кэширования промптов, которая позволяет сократить затраты на вызовы API, и функция дистилляции моделей, которая позволяет настраивать менее крупные модели, например GPT-4o mini, на основе информации, которую генерируют более крупные, например o1-preview или GPT-4o.

По словам OpenAI, её модели для создания собственных продуктов используют более 3 млн разработчиков. А за последние два года компания снизила для них цену за доступ к своему API на 99%.