Разработчик и многолетний Microsoft MVP Лэнс Маккарти показал, что Windows AI APIs позволяют быстро задействовать NPU в приложениях для Windows 11. Об этом сообщает Windows Central со ссылкой на блог Маккарти.
Речь идет об API из Windows App SDK — набора инструментов и интерфейсов для создания приложений под Windows 11. По словам Маккарти, Microsoft сделала работу с NPU «действительно простой», и он был одним из первых разработчиков, кто опробовал новые возможности Win SDK.
В своем блоге Маккарти описал, как начать использовать Windows AI APIs в приложении без облачных API, дополнительных платежей, REST-вызовов и собственной ONNX-модели. Для такой схемы есть одно условие: у пользователя должен быть ПК класса Copilot+ с совместимым NPU.
Маккарти перечислил несколько ИИ-функций, которые доступны в Windows сразу:
- Phi Silica — локальная языковая модель с функциями LLM, работающая на устройстве через NPU;
- AI Text Recognition — распознавание текста на изображениях и в документах;
- AI Imaging — инструменты для масштабирования и повышения резкости изображений, создания описаний, выделения объектов и удаления объектов;
- Windows Studio Effects — функции для улучшения качества камеры и звука.
В качестве примера Маккарти привел собственное приложение Xkcd Viewer, доступное в Microsoft Store и на GitHub. Программа позволяет просматривать комиксы xkcd, а также сохранять и делиться ими.
Разработчик заметил, что приложение было не слишком удобным для пользователей с нарушениями зрения. Поэтому он добавил в него ИИ-описания изображений, чтобы комиксы лучше воспринимались через текстовое сопровождение.
По словам Маккарти, обычное озвучивание текста не передает смысл комиксов xkcd, где важна графика. Он пишет: «Это идеальный сценарий для сервиса Image Description, который понимает контекст изображения и описывает его так, чтобы это было интересно для пользователя с нарушением зрения. Он пытается передать комедийную составляющую картинки, и это лучше, чем обычный экранный диктор».
Маккарти также отметил, что доработка заняла около 10 минут, но заметно повысила ценность приложения для пользователей.
Источник: Windows Central, блог Лэнса Маккарти.
