В последние годы практически все технологические инновации так или иначе связаны с генеративным искусственным интеллектом. Многие из этих революционных систем работают на мощных и дорогих серверах в центрах обработки данных. В то же время, производители чипов наперебой трубят о невероятной мощи нейронных процессоров (NPU), которые они интегрируют в потребительские устройства.
Основные детали
Каждые несколько месяцев мы слышим одно и то же: новый NPU на 30-40% быстрее предыдущего. Предполагается, что это позволит нам делать что-то важное, но никто толком не объясняет, что именно. Эксперты рисуют картины будущего, где безопасные, персональные AI-инструменты работают непосредственно на устройстве, но насколько это соответствует реалиям AI-бума? Искусственный интеллект на «периферии» звучит заманчиво, но практически все значимые AI-сервисы работают в облаке. Так чем же занимается этот чип в вашем телефоне?
Запуская новый продукт, компании часто злоупотребляют превосходными степенями и расплывчатыми маркетинговыми формулировками, упуская важные технические детали. Большинству покупателей смартфонов неясно, зачем вообще нужен этот NPU. Если коротко, NPU – это специализированный процессор, предназначенный для ускорения задач машинного обучения. Он оптимизирован для выполнения матричных операций, необходимых для нейронных сетей, гораздо эффективнее, чем центральный процессор (CPU) или графический процессор (GPU). Теоретически, это должно позволить смартфонам быстрее и эффективнее обрабатывать AI-задачи, такие как распознавание изображений, обработка естественного языка и многое другое, прямо на устройстве, без необходимости отправлять данные в облако.
Значение для России
В России, где вопросы конфиденциальности данных и независимости от зарубежных облачных сервисов стоят особенно остро, развитие локального AI имеет стратегическое значение. Представьте себе, что голосовой помощник «Алиса» от Яндекса, работающий на смартфоне, сможет выполнять большинство задач без подключения к интернету, сохраняя конфиденциальность ваших запросов. Или, например, система распознавания лиц в камерах видеонаблюдения, работающая автономно, без риска утечки данных в облако. Отечественные производители электроники также заинтересованы в интеграции мощных NPU в свои устройства, чтобы конкурировать с зарубежными аналогами и предлагать пользователям передовые AI-функции.
Заключение
Несмотря на впечатляющие характеристики NPU в современных смартфонах, реальная отдача от них пока не соответствует ожиданиям. Проблема заключается не только в недостаточной оптимизации программного обеспечения, но и в отсутствии убедительных сценариев использования, которые бы действительно демонстрировали преимущества локального AI. Однако, перспективы развития AI на «периферии» остаются многообещающими, и по мере совершенствования технологий и появления новых приложений, NPU в наших смартфонах смогут раскрыть свой потенциал в полной мере.
Источник: arstechnica.com