Apple добавила в Foundation Models поддержку серверных моделей Claude и Gemini

Изображение: OpenAI
Фреймворк Foundation Models теперь поддерживает серверные ИИ-модели через тот же Swift API, что и локальные, сообщила Apple. Разработчики могут использовать Claude и Gemini, а поставщики других моделей могут подключать их через пакеты Swift.
Для серверных моделей фреймворк поддерживает вызов инструментов и генерацию ответов по заданной структуре.
Новые API позволяют менять модель и набор инструментов прямо во время сеанса, сохраняя общую историю диалога. Разработчик может заранее описать несколько конфигураций с разными параметрами генерации и переключаться между ними. Эту возможность можно использовать для создания ИИ-агентов.
В запросы можно добавлять изображения вместе с текстом, чтобы модель анализировала содержимое изображений. Фреймворк также напрямую интегрирован с Vision: распознавание текста и считывание штрихкодов выполняются на устройстве.
SDK Foundation Models для Python позволяет использовать фреймворк с инструментами этой экосистемы, в том числе с пакетами для оценки работы моделей.
В macOS 27 появился инструмент командной строки fm для автоматизации работы с моделями и создания прототипов без написания кода приложения.



