Qualcomm анонсировала SDK под названием Snapdragon Neural Processing Engine. Это набор для разработчиков, являющийся частью платформы Qualcomm Zeroth, которая была представлена вместе с однокристальной системой Snapdragon 820. Напомним, Zeroth нацелена на раскрытие потенциала гетерогенной обработки, заложенный в новой SoC. В числе новых возможностей компания называет и «визуальное восприятие» (Visual Perception), которое должно использовать технологии глубинного обучения и компьютерного зрения.
Для систем глубинного обучения обычно требуются сложные нейронные сети, работающие на тысячах серверов с высокопроизводительными процессорами. Но для нового SDK подобные мощности не нужны — он оптимизирован для задач, решаемых мобильными устройствами. Инструментарий позволит OEM-производителям создавать свои модели нейросетей для устройств на базе Snapdragon 820 — смартфонов, камер видеонаблюдения, автомобилей и дронов — без подключения к облаку.
Таким образом, благодаря технологии глубинного обучения, реализованной в SDK, становятся возможными новые сценарии применения мобильных устройств: распознавание лиц и текста, отслеживание объектов, обход препятствий и языковая обработка. Snapdragon Neural Processing Engine будет доступен разработчикам во второй половине года.
