Shenzhen Mingjiada Electronics Co., Ltd. поставляет/утилизирует Lattice CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений. FPGA CrossLink-NX™ для мостовых соединений MIPI и периферийного ИИ.
I. CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений. Обзор ядра: Разработано для встраиваемого зрения и периферийного интеллекта
Lattice LIFCL-40-8BG400C CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений.1. Ключевые аппаратные параметры
- Логические ресурсы и память: Включает 39 тыс. логических ячеек с бортовой памятью до 3 Мб (включая EBR и LRAM). Его благоприятное соотношение памяти к логике обеспечивает эффективное кэширование данных видеокадров и хранение весов моделей ИИ, минимизируя обращения к внешней памяти и снижая задержку передачи данных.
- Вычислительная мощность: Интегрирует 56 модулей DSP-умножителей 18x18, предоставляя достаточные вычислительные ресурсы для эффективной поддержки легкого вывода CNN. Это удовлетворяет вычислительным требованиям периферийных задач ИИ, таких как обнаружение объектов, классификация изображений и распознавание дефектов.
- Преимущества аппаратно-кодированных интерфейсов: Включает два набора 4-канальных аппаратно-кодированных приемопередатчиков MIPI D-PHY, каждый канал работает на скорости 2,5 Гбит/с с общей пропускной способностью одного PHY 10 Гбит/с. Нативно поддерживает ввод датчика изображения MIPI CSI-2 и вывод дисплея MIPI DSI, обеспечивая высокоскоростную передачу сигналов MIPI без использования логических ресурсов. Дополнительно поддерживает интерфейсы PCIe 5 Гбит/с, программируемые LVDS/SubLVDS/OpenLDI, предлагая исключительную совместимость с преобразованием протоколов.
- Низкое энергопотребление и надежность: Достигает на 75% более низкого энергопотребления по сравнению с аналогичными FPGA, с током в режиме ожидания менее 70 мкА. Поддерживает быструю конфигурацию ввода-вывода за 3 мс и мгновенную загрузку системы за 8 мс. Частота ошибок снижена более чем в 100 раз, что делает его пригодным для требовательных промышленных и автомобильных сред, одновременно удовлетворяя требованиям длительной стабильной работы.
2. Ключевые технологические преимущества
По сравнению с традиционными ASIC-мостовыми чипами и FPGA общего назначения,
LIFCL-40-8BG400C CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений.II. Функциональность мостовых соединений MIPI: Высокоскоростная, гибкая, адаптируемая к различным сценариям
MIPI CSI-2/DSI представляет собой основные высокоскоростные интерфейсы для датчиков изображения и дисплеев. Однако основные процессоры и хост-контроллеры часто страдают от ограниченного количества интерфейсов и недостаточной совместимости протоколов.
LIFCL-40-8BG400C CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений.1. Типовая архитектура решения для мостовых соединений MIPI
Агрегация и мостовые соединения нескольких датчиков MIPI
Для таких приложений, как системы кругового обзора в автомобилях, промышленный контроль с несколькими камерами и панорамный мониторинг безопасности,
LIFCL-40-8BG400C CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений.Преобразование протоколов MIPI и гетерогенных интерфейсов
Используя программируемый ввод-вывод и высокоскоростные ресурсы SERDES, этот чип обеспечивает двунаправленное преобразование между MIPI CSI-2 и такими интерфейсами, как PCIe, USB3.2 Gen1, LVDS и CMOS. Например, он преобразует сигналы датчика MIPI в видеопотоки USB3.0 для прямого подключения к ПК/встраиваемым контроллерам или преобразует традиционные сигналы дисплея LVDS в сигналы MIPI DSI для управления дисплеями высокого разрешения. Это способствует интеллектуальной модернизации устаревшего оборудования и межплатформенному взаимодействию устройств, обеспечивая адаптацию интерфейсов без замены основных контроллеров.
Ретрансляция и разделение сигналов MIPI
Для сценариев дальней передачи и мультиплексирования нескольких устройств это обеспечивает усиление и ретрансляцию сигналов MIPI, а также вывод «один ко многим». Это обеспечивает целостность высокоскоростной передачи сигналов, одновременно подавая один сигнал датчика на несколько блоков отображения/обработки, повышая масштабируемость системы. Подходит для автомобильных информационно-развлекательных систем, промышленных дисплейных связей и аналогичных приложений.
2. Ключевые преимущества реализации мостовых соединений
- Низколатентная передача: Аппаратно-кодированный MIPI D-PHY в сочетании с архитектурой программируемой логики обеспечивает задержку пересылки видеопотока ниже миллисекундного уровня. Это гарантирует производительность видео высокого разрешения в реальном времени, что делает его пригодным для сценариев динамического мониторинга и управления в реальном времени.
- Беспотерьная передача: Поддерживает беспотерьную пересылку видеоданных, сохраняя исходное качество изображения и избегая деградации, вызванной сжатием и декодированием. Это удовлетворяет требованиям высокоточного визуального контроля.
- Программируемая адаптивность: Гибкая настройка количества каналов MIPI, скорости передачи и параметров протокола обеспечивает быструю адаптацию к различным моделям датчиков и дисплеев, сокращая циклы разработки продукта.
III. Реализация периферийного ИИ: Легковесный, энергоэффективный, интеллектуальный режим реального времени на устройстве
LIFCL-40-8BG400C
CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений.1. Процесс развертывания периферийного ИИ
Адаптация и оптимизация модели
Для периферийных сценариев с ограниченными вычислительными ресурсами и хранилищем выбираются легкие модели, такие как MobileNet, YOLO-tiny и CNN. Инструментарий sensAI выполняет обрезку, квантование и компиляцию модели для сжатия весов для адаптации к бортовому хранилищу, снижая вычислительную нагрузку при сохранении точности вывода. Это обеспечивает бесшовное соответствие моделей и аппаратных ресурсов чипа.
Предварительная обработка видео и координация вывода
Используя программируемую логику чипа, предварительная обработка изображений синхронно выполняется во время передачи мостовых соединений MIPI. Это включает демозаику, коррекцию цвета, гамма-коррекцию и обрезку области интереса (ROI) для устранения избыточных данных, тем самым снижая вычислительную нагрузку для вывода ИИ. Предварительно обработанные данные изображения напрямую подаются в блок ускорения DSP для выполнения задач вывода, таких как обнаружение объектов, распознавание лиц, идентификация дефектов и подсчет статистики. Эта сквозная конвейерная операция обеспечивает бесшовную обработку без узких мест данных.
Вывод результатов и интероперабельность
Результаты вывода ИИ могут быть синхронно выведены через MIPI, GPIO, UART или другие интерфейсы. Эти выводы могут быть наложены на исходный видеопоток для отображения или переданы на основной управляющий чип для запуска последующих действий. Это обеспечивает периферийный интеллектуальный замкнутый цикл «восприятие-решение-действие» без участия облака, обеспечивая более быстрое время отклика и повышенную конфиденциальность данных.
2. Типовые сценарии применения периферийного ИИ
- Промышленный визуальный контроль: Интегрируется с промышленными камерами MIPI для выполнения в реальном времени идентификации дефектов, подсчета деталей и проверки спецификаций, заменяя ручной контроль при повышении точности и эффективности.
- Интеллектуальное восприятие в автомобиле: Агрегирует данные с автомобильных камер MIPI для мониторинга усталости водителя, обнаружения препятствий и предупреждения о выезде из полосы движения, поддерживая системы помощи водителю с низким энергопотреблением, подходящим для автомобильных источников питания.
- Охранное наблюдение: Реализует обнаружение форм человека, оповещения о вторжении на периметр и распознавание лиц. Локальный вывод и оповещение снижают нагрузку на облачную передачу, одновременно повышая скорость реагирования на оповещения.
- Взаимодействие с потребительской электроникой: Управляет камерами и дисплеями MIPI для распознавания жестов и разблокировки по лицу, с низким энергопотреблением, оптимизированным для времени автономной работы портативных устройств.
IV. Решение для конвергенции на одном чипе: Синергетические преимущества мостовых соединений MIPI + периферийный ИИ
Традиционные решения для периферийного зрения преимущественно используют архитектуру с двумя чипами «мостовой чип MIPI + чип ускорителя ИИ», страдающую от сложности аппаратного обеспечения, повышенного энергопотребления, увеличенной задержки и неизменно высокой стоимости.
LIFCL-40-8BG400C CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений.- Минималистичное аппаратное обеспечение, радикально уменьшенный форм-фактор: Замена двухчиповых решений одним чипом сокращает пространство для компоновки печатной платы, позволяя адаптироваться к компактным, портативным устройствам, одновременно снижая стоимость BOM и упрощая отладку аппаратного обеспечения.
- Низкое энергопотребление, беспроблемная работа: Технология процесса FD-SOI в сочетании с оптимизацией аппаратного ядра обеспечивает общее энергопотребление системы менее 1,5 Вт, а энергопотребление в режиме ожидания находится в диапазоне микроампер. Это облегчает работу от батареи в периферийных сценариях без активного охлаждения.
- Полная низкая задержка: Устраняет задержки передачи данных между чипами, обеспечивая бесшовный захват видео, мостовые соединения и вывод ИИ для удовлетворения строгих требований реального времени.
- Высокая надежность для суровых условий: Поддерживает промышленные/автомобильные температурные диапазоны с устойчивостью к помехам. Возможность мгновенного включения обеспечивает быструю загрузку устройства для промышленных и автомобильных применений.
V. Заключение
FPGA Lattice
LIFCL-40-8BG400C CrossLink-NX™ обеспечивает бесшовную интеграцию аппаратных ядер MIPI, значительной вычислительной мощности, низкого энергопотребления и программируемости. обеспечивает бесшовную интеграцию мостовых соединений MIPI и периферийного ИИ на одном чипе. Это решает проблемы несовместимости интерфейсов и подключения нескольких датчиков в сценариях встраиваемого зрения, одновременно обеспечивая интеллектуальный вывод в реальном времени на периферии, балансируя производительность, энергопотребление, форм-фактор и стоимость. Будь то в промышленном зрении, автомобильном интеллекте, охранном наблюдении или потребительской электронике, этот чип является идеальным выбором для легких, энергоэффективных решений для периферийного зрения. Он облегчает быструю интеллектуальную модернизацию устройств, соответствуя развивающемуся ландшафту периферийных вычислений.
Ваше сообщение должно содержать от 20 до 3000 символов!
Russian
