产品简介
Product Introduction
多模态融合感知AI芯片“晓晰 X1”是面向视觉、惯导、震动等多种传感器融合处理的智能SoC芯片，支持多种传感器硬件同步、信息处理加速以及面向神经网络运算的加速处理单元，可在片上完成对视频、惯导、音频等多模态数据的融合处理，提升设备端的感知能力以及智能分析能力。
X1芯片集成了公司团队自研的具备仿生视觉处理能力的高性能ISP处理器，最高可支持4K视频输入及处理，同时集成了团队自研的图像处理加速引擎（CVPE），包括多传感器硬件同步、亚像素级视频畸变校正、视频关键特征提取、立体视觉感知等功能。另外，芯片集成了支持4K级视频的H264/265编解码、最高主频可达到1.5GHz的4核CPU处理器、主频可达400MHz的RISCV实时处理器以及具备4TOPs算力的NPU神经网络加速处理单元。同时该芯片集成了多种常用控制接口，实现了感知、运算及控制的一体化设计。
该芯片架构模拟人类大脑的处理机制，将多传感器数据采集与高性能处理相结合，具备“感知-运算-控制”能力，可提升机器人等设备的智能化、一体化、实时化自主信息处理水平，可服务于智能机器人、无人机、智能安防等应用场景。
芯片内集成了多种通用性处理器及多个面向视觉处理的算法加速单元，可基于此芯片实现三维重建、自主定位、目标识别等多种功能，为智能机器人等应用提供低功耗的芯片级解决方案。
（1） 实时三维重建及测距
芯片内集成了自研的畸变校正模块（LDC）和立体匹配模块（SGM），可完成对芯片图像的亚像素校正以及实时深度计算，完成目标的测距及三维重建。
（2） 实时定位导航
芯片内集成了面向视觉SLAM应用的加速算子，支持视觉、惯导等传感器的纳秒级硬件同步，进而可应用于机器人、无人机等设备实现在片上的实时自身姿态估计和定位。
（3） 实时目标识别与追踪
内置NPU处理器，支持120种以上加速算子，可完成自定义网络的片上加速推理，实现如目标识别、目标追踪等功能。
产品信息
Product Information
需求类别 | 需求点 | 详细描述 |
基本信息 | 工艺 | Samsung 14nm |
封装 | Flip-chip 21*21mm 771pin | |
处理器 | CPU | 4核Cortex-A55工作频率 1.5GHz L1 Cache：I 32KB, D 32KB. L2 Cache：512KB |
MCU | E906 (RISCV) 最高工作频率：400MHz RAM: 256KB | |
NPU | 算力达到4Tops@8Bits | |
视频处理 自研IP | BISP | 支持2通道视频接入（MIPI/LVDS IN） 可配置为单目（最高4K）、双目（最高2K）、单目+双目、双目+双目 支持HDR/WDR； 支持过滤器（降噪、锐度、模糊）； 传感器自适应的可编程伽马校正； 传感器串扰补偿； 增强的色度噪声降低（CNR）； 支持3A功能 |
LDC | 支持实时亚像素级畸变校正 | |
SLAM ACCs | 支持实时特征提取及深度计算 | |
VPU | 编解码 | 4K@60fps H264/H265，JPEG |
DPU | 视频显示 | 支持1路1080P@30FPS（MIPI/LVDS OUT） |
USB | USB | 支持USB2.0 OTG，USB3.0 Device |
Ethernet | Ethernet | 支持 10M/100M/1000M 模式 支持MII/GMII/RMII/RGMII接口 |
DDR | LPDDR5 /LPDDR4 | LPDDR5/4，兼容单/双通道 最高可达6.4Gbps |
EMMC | EMMC | 支持EMMC 5.0 |
SDIO | SDIO | 支持SDIO 3.0 |
内部控制模块 | Mailbox | CPU间通信和互发终端，温度传感控制 |
PWR | 上电、时钟、复为控制模块 | |
Timer | 6路独立Timer | |
Muxpin | 管脚复用控制模块 | |
Security | 安全控制模块 | |
外设 | UART | 4个，最高支持1.5Mbps |
SPI | 3个，master | |
I2S | 4个 可以接入8路语音信号 | |
I2C | 6个 | |
PWM | 9个 | |
GPIOs | 80个以上 | |
ADC | 5路并行sigma delta ADC (Audio Codec) 1路SARADC(4 Lane) |
