Перейти к содержимому

FS-Fusion

IP инференса с мультимодальным слиянием

Совместное понимание изображения и текста (VLM) и слияние данных нескольких датчиков с вычислениями прямо на устройстве.

FS-Fusion: IP инференса с мультимодальным слиянием, иллюстрация
Рис. 1 · FS-Fusion IP инференса с мультимодальным слиянием

Поток данных

Совместное понимание изображения и текста (VLM) и слияние данных нескольких датчиков с вычислениями прямо на устройстве.

ИзображениеcameraТекст/датчикиtokensКодер зренияSegFormer MiTДекодер LMSmolVLMСлитый выходОбщие признаки на кристалле
Рис. 2 · Поток данных FS-Fusion (схема)

Встроенная поддержка

Встроенная поддержка конвейера слияния SmolVLM + SegFormer MiT

Развёртывание

Тейпаут ASIC и прототипирование на FPGA с адаптацией интерфейсов и системы под проект.

В лицензию входит

IP ядра инференса, оценочная плата FPGA, отображение модели и адаптация интерфейсов, поддержка внедрения в проект.

Охват IP, интерфейсы, занимаемые ресурсы, цели по производительности и условия лицензии оцениваются для конкретного целевого устройства и модели.

Задать вопрос о FS-Fusion

Сообщите нам целевое устройство, модель и интерфейсы. Мы ответим с описанием охвата IP и планом оценки.

Узнать о лицензировании IP