Сегодня компания Qualcomm анонсировала Snapdragon 8 Gen 3, сделав упор на генеративный искусственный интеллект для нового поколения телефонов на базе Android. Компания также представила “Snapdragon Seamless” в качестве средства для создания большего количества кросс-устройств.
Snapdragon 8 Gen 3
Чип построен по техпроцессу 4 нм с новой конфигурацией процессорных ядер, главное ядро Prime ARM Cortex X4 с тактовой частотой 3,3 ГГц. За ним следуют пять ядер Performance (3,2 ГГц) и два Efficiency (2,3 ГГц).
В целом, процессор Kryo, как утверждается, на 30% быстрее и на 20% энергоэффективнее. Графический процессор Adreno обеспечивает на 25% более высокую производительность и на 25% более высокую энергоэффективность. В игровых приложениях трассировка лучей улучшена в 1,5 раза.
Оба компонента, а также нейропроцессор Hexagon NPU (нейронный сопроцессор), который на 98% быстрее и на 40% эффективнее по сравнению с предыдущим поколением, образуют движок Qualcomm AI Engine, ориентированный на использование генеративного искусственного интеллекта в устройствах.
Snapdragon 8 Gen 3 может выполнять команды больших языковых моделей (LLM) – в частности, 7B Llama 2 – локально со скоростью до 15 лексем в секунду. Qualcomm продемонстрировала работу ассистентов на базе Llama. Также поддерживаются модели языкового зрения (LVM) и автоматического распознавания речи (ASR) на основе трансформаторных сетей, что делает этот процессор первым AI Engine компании Qualcomm, поддерживающим мультимодальные генеративные модели ИИ.
Также заявлено о самой быстрой работы в мире мобильной технологии Stable Diffusion (менее одной секунды на изображение).
Одним из мест, где могут быть использованы возможности генеративного ИИ, является камера. Среди функций – Video Object Eraser для удаления выбранных людей и объектов, а также видео с ночным видением на основе ИИ. Еще одна демонстрация на устройстве показала, как можно сделать снимок и расширить окружающее пространство.
Семантическая сегментация, позволяющая идентифицировать и оптимизировать лица, волосы, одежду и небо, поддерживает до 12 слоев и может работать как с передней, так и с задней камерой. Qualcomm особенно настаивает на одновременной работе обеих сторон. Например, камеры с постоянной чувствительностью могут обеспечивать разблокировку по лицу и сканирование QR-кодов, а “вид влоггера” позволяет одновременно снимать и то, и другое, накладывая селфи-канал на основную запись.
Snapdragon 8 Gen 3 также будет поддерживать съемку фотографий в формате Dolby HDR, позволяющем получить более 1 млрд. оттенков цвета по сравнению с 16,7 млн. оттенков, возможных в JPEG.
Как всегда, OEM-производители и разработчики программного обеспечения сами решают, будут ли они создавать функции на основе всех новых возможностей, которые предоставляет Qualcomm. Asus, Honor, iQOO, Meizu, Nio, Nubia, OnePlus, Oppo, realme, Redmi, RedMagic, Sony, vivo, Xiaomi и ZTE выпустят устройства на базе Snapdragon 8 Gen 3, причем первые из них появятся “в ближайшие недели”.
Snapdragon Seamless
Кроме того, Qualcomm анонсировала “Snapdragon Seamless” как “кроссплатформенную технологию”, обеспечивающую преемственность между Android, Windows и другими устройствами Snapdragon (например, наушниками с чипами Qualcomm).
В частности, устройства Snapdragon Seamless смогут “обнаруживать друг друга и обмениваться информацией для работы в качестве единой интегрированной системы”. Эта технология используется в телефонах с Snapdragon 8 Gen 3, ПК с ОС Windows на базе Snapdragon X Elite, а также в других чипах Qualcomm для носимых и слышимых устройств. В качестве примеров можно привести:
- Мыши и клавиатуры могут беспрепятственно работать на ПК, телефонах и планшетах.
- Файлы и окна можно перетаскивать между различными типами устройств.
- Наушники могут интеллектуально переключаться в зависимости от приоритета источника звука.
Среди партнеров, сотрудничающих с Qualcomm: Google, Microsoft, Xiaomi, Honor, Lenovo и OPPO.
В Android уже есть такие функции, как Nearby Share для файлов, в то время как другие OEM-производители имеют свои собственные решения.
В будущем Snapdragon Seamless появится в платформах XR, Auto и IoT.