Rockchip представил новый AI-видеочип RV1126B с 3T вычислительной мощностью для умных устройств.
Акционерная компания по производству электроники Rockchip (далее именуемая «Rockchip») официально объявила о запуске нового поколения AI - визуальных чипов RV1126B. Этот чип прошел испытания на готовность к массовому производству и начнет поставляться в больших объемах в этом месяце.
Как важный элемент матрицы чипов для умного зрения Rockchip, RV1126B благодаря таким преимуществам, как мощность вычислений до 3T, архитектура AI - ISP на заказ, динамическая стыковка, стабилизация изображения, супер - кодирование и аппаратный уровень безопасности, предоставляет высокоэффективные решения для таких областей AIoT, как интеллектуальная система безопасности, промышленное зрение, робототехника, интеллектуальные автомобильные системы и т.д., способствуя повышению возможностей конечных устройств от «четкого видения» к «пониманию увиденного».
Четыре ключевые технологии RV1126B заново задают стандарт для AI-визуальных чипов.
1、Двигатель с вычислительной мощностью 3T открывает новое измерение мультимодального интеллекта.
Чип RV1126B оснащен четырехъядерной архитектурой процессора Cortex - A53. Его производительность более чем в два раза превосходит производительность других чипов аналогичного класса. Встроенный разработанный самостоятельно нейропроцессор (NPU) обладает вычислительной мощностью до 3 ТФлопс. Он поддерживает такие технологии, как разреживание весов, смешанно - точечная квантование (W4A16/W8A16) и оптимизация на основе Transformer. Благодаря этому он может бесперебойно работать с крупными языковыми моделями и мультимодальными моделями, число параметров которых не превышает 2 миллиарда.
Эта способность наделяет устройства мощными возможностями семантического анализа изображений. Они могут не только точно распознавать целевые объекты в сложных сценах, но и осуществлять слияние информации между различными модальностями.
2、AI-ISP + AOV3.0 создают новый опыт восприятия визуальной информации.
Чип RV1126B интегрирован с выделенным аппаратным обеспечением AI-ISP, что позволяет преодолеть узкие места в вычислительных мощностях традиционных решений. При работе AI-ISP не требуется использование общих ресурсов 3T NPU, что позволяет экономить полосу пропускания и энергопотребление по сравнению с традиционными решениями на базе NPU. В сочетании с технологией AI Remosaic реализуется функция «адаптация к дневному и ночному режимам», благодаря которой в дневное время обеспечивается сверхвысокое качество изображения, а в условиях сверхнизкой освещенности ночью сохраняется четкость изображения.
Новая технология AOV3.0 включает функцию пробуждения устройства по низкоэнергопотребляющим аудиособытиям. Она может в реальном времени обнаруживать такие аномальные источники звука, как лай собак, разбитие стекла, выстрелы и т.д. Уровень энергопотребления устройства в режиме ожидания составляет около 1 мВт, что позволяет поддерживать круглосуточный мониторинг аудио - и видеоинформации в течение 7 дней в неделю и 24 часа в сутки.
Технология цифровой стабилизации изображения с шестью степенями свободы (6 - DOF) на аппаратном уровне позволяет точно распознавать и устранять высокочастотные колебания, делая движущиеся изображения более плавными. Технология динамической стыковки панорамных изображений с использованием двух или четырех камер позволяет избавиться от разрывов изображения в продуктах с многокамерной стыковкой и обеспечивает сверхширокий угол обзора.
3、Мощный кодировочный движок значительно повышает эффективность хранения данных.
Для таких сценариев с интенсивным объемом данных, как видеонаблюдение, RV1126B интегрирован с интеллектуальным кодировочным движком. Он поддерживает кодирование сверхвысокого разрешения для 8 - мегапиксельных видео с частотой 45 кадров в секунду. Благодаря технологии оптимизации динамического битрейта, по сравнению с традиционным режимом CBR, он позволяет сократить объем потока данных на 50%. При этом при том же объеме хранилища можно удвоить продолжительность записи. При этом обеспечивается сохранение всех деталей изображения, что значительно снижает затраты на хранение и нагрузку на пропускную способность передачи данных.
4、Аппаратная система безопасности повышает уровень защиты данных.
В ответ на потребности в информационной безопасности интеллектуальных терминалов RV1126B оснащен национальным криптографическим решением высокого уровня. Он поддерживает алгоритмы шифрования SM2/SM3/SM4, а также интегрирует технологию безопасной изоляции TrustZone и систему управления ключами keyladder. Это обеспечивает защиту данных на всех этапах — от их сбора до хранения, а также защиту моделей алгоритмов ИИ, что позволяет удовлетворить самые высокие требования к безопасности в критически важных приложениях.
RV1126B завершает матрицу визуальных чипов, способствуя интеллектуальному обновлению тысяч отраслей.
С выпуском RV1126B компания Rockchip сформировала матрицу визуальных чипов с вычислительной мощностью от 0,5T до 6T, способную удовлетворить разнообразные потребности — от начального уровня умных камер до высококлассных промышленных систем зрения.
Благодаря передовой архитектуре вычислительной мощности, оптимизации энергоэффективности и инновациям, ориентированным на конкретные сценарии, RV1126B открывает новые возможности для периферийных интеллектуальных терминалов и вносит мощный импульс в индустриальный тренд «зрение как AI-вход». С началом массовых поставок этот AI-визуальный чип, сочетающий высокую производительность и низкое энергопотребление, несомненно, ускорит процесс интеллектуальной трансформации тысяч отраслей.