海思 HI3516CV610 硬件文档

chen_0755

海思 HI3516CV610 硬件文档
一、芯片概述
      海思 HI3516CV610 是一款面向安防市场的高性能融合视觉计算芯片，在开放操作系统、网络安全和隐私保护以及人工智能等领域处于行业领先地位。该芯片主要面向室内外场景下的              枪 机、球机、半球机、海螺机、枪球一体机等多种产品形态，致力于打造极具竞争力的方案与产品。根据功能不同，HI3516CV610 分为 00B/10B/20B/00S/20S 等多种型号 。
二、关键特性
  （一）处理器内核
     支持 ARM Cortex-A7 MP2，具备高效的数据处理能力，为芯片的整体运行提供稳定的核心支持。
     时钟速率可达 950MHz，能快速响应各类指令，保障系统的流畅运行。
     集成 32KB I-Cache、32KB D-Cache 以及 128KB L2 cache，有效提升数据读取和存储速度，减少处理器等待数据的时间，提高系统性能。
     支持 Neon 和 FPU，增强了芯片对多媒体数据和浮点运算的处理能力，适用于复杂的视觉算法和应用。
（二）智能引擎
     神经网络处理器 NPU 拥有强大的运算能力，支持 1Tops 运算性能，可高效运行各类神经网络算法。
     支持业界上百种主流算法，支撑客户快速将算法应用到实际产品中，实现产品的智能化升级。
     支持 Transformer 特性加速，内置专属多模态大模型，为诸如目标跟随、手势识别等复杂的消费类应用算法提供强大的运算支持。
     提供工具支撑模型高效生产和进化，方便开发者根据实际需求对模型进行优化和改进。
    内置人脸人形车形检测、包裹检测、宠物检测等多种实用算法，可直接应用于相关产品的功能开发。
    IVE2.5 升级算子，支持运动侦测，周界防范，跟踪，透视变换，视频诊断及多种智能分析应用，进一步丰富了芯片在智能视觉分析方面的功能。
（三）AI ISP 处理
    基础功能：支持静态和动态坏点矫正，确保图像质量；支持 3A (AE/AWB/AF) 功能，且参数用户可调节，满足不同场景下的拍摄需求；支持镜头阴影校正，使图像边缘更加清晰。
    高动态范围：支持两帧 WDR 融合，能够在大光比环境下，同时保留亮部和暗部的细节；支持 Advanced Local Tone Mapping，进一步优化图像的色调映射；支持强光抑制和背光补偿，适         应 隧道、逆光等复杂光照场景。
    清晰度与降噪：支持去固定模式噪声（FPN），减少图像中的固定噪声；运动区域效果增强算法，提升运动物体的清晰度；支持时域和空域降噪，有效降低图像中的噪点；支持多级运动检      测，能准确识别不同程度的运动；支持分区域增强，针对不同区域进行针对性的图像增强；支持去色噪 2.0，使图像色彩更加纯净。
    颜色管理与对比度增强：支持去紫边 2.0，消除图像边缘的紫色光晕；支持关键色增强，突出图像中的关键色彩；支持 local 动态对比度增强，提升图像的整体对比度；支持去雾功能，在        雾  天等恶劣天气下也能获取清晰图像。
    具备 PQ Tool 1.2，可对图像的色彩、亮度等参数进行精细调整。
（四）视频处理
    支持图像 1/15.5～16x 缩放功能，可根据实际需求对图像进行缩放，满足不同显示和存储要求。
    支持镜头畸变校正，有效消除因镜头造成的图像畸变，使图像更加真实。
    支持图像 Mirror、Flip、90 度 / 270 度旋转，方便对图像进行各种变换操作，以适应不同的应用场景。
（五）视频编码
   支持新一代公共安全视频编辑码，保障视频编码的安全性和可靠性。
   支持 H.265 Main Profile Level 5 和 H.264 BP/MP/HP Level 5.1，编码最大分辨率为 3840×2160，可满足高清视频编码需求。
   支持 I/P 帧，灵活控制视频编码的帧率和质量。
   支持智能编码 2.0，实现像素升级的同时存储不加量，例如 4MP30 产品 5GB / 天 ，有效节省存储空间。
   支持隐私编码，保护视频内容的隐私安全。
   多码流编码典型性能：3200×1800@30fps + 1280×720@30fps；3840×2160@20fps + 1280×720@20fps。
   支持 CBR/VBR/ABR/AVBR/CVBR/QVBR/FIXQP/QPMAP 等多种码率控制模式，可根据不同的网络环境和应用需求选择合适的码率控制方式。
       输出码率最大值 80Mbps，满足高清视频的传输要求。
   支持 8 个区域的编码前 OSD 叠加，可在视频编码前添加自定义的文字、图形等信息。
   支持 8 个感兴趣区域（ROI）编码，对重要区域进行重点编码，提高编码效率和图像质量。
   支持 JPEG Baseline 编码，JPGE 编码最大分辨率 16384x16384，JPGE 最大性能编码：3200×1800@30fps (YUV420)；3840×2160@20fps (YUV420)。
（六）音频接口与处理
   内置 Audio codec，支持 16bit 双路差分语音输入和单路单端语音输出，满足基本的音频输入输出需求。
   支持 1 路 I2S 接口，兼容多声道时分复用传输模式（TDM），方便与其他音频设备进行连接和数据传输。
   支持多协议语音编解码，适应不同的音频编码格式。
   支持 3A（AEC/ANR/ALC）处理 2.0，有效消除回声、噪声，自动调节音量，提升音频质量。
   支持降风噪算法，在户外等有风环境下也能获取清晰的语音。
    支持哭声检测 2.0，提升唤醒率，适用于家庭安防等场景，能及时发现异常声音。
（七）安全隔离与引擎
  支持安全启动，确保系统启动过程的安全性，防止恶意攻击。
  支持基于 TrustZone 的 REE/TEE 硬件隔离方案，实现不同安全等级的软件环境隔离，保障系统安全。
   硬件实现 AES/RSA/ECC/SHA 等多种加解密算法，以及 SM2/3/4 国密算法，为数据的加密和解密提供硬件级别的支持，保障数据安全。
三、硬件接口
（一）视频输入接口
   支持 MIPI/LVDS/Sub-LVDS/HiSPi 多种接口，可灵活连接不同类型的图像传感器。
   支持 2x2-Lane 或 4-Lane 组合，最高支持 2 路 sensor 输入，满足不同场景下对图像采集的需求。
   支持 8/10/12 Bit RGB Bayer 和 8/10/12 Bit DVP，适应不同位深的图像数据输入。
   支持 BT.601、BT.656、BT.1120 视频输入接口，与传统视频设备实现兼容。
（二）外围接口
  集成 FEPHY，支持 TSO 网络加速，提升网络数据传输速度。
  拥有 2 个 SDIO2.0 接口，支持 SDXC 卡，可用于数据存储扩展；支持对接 wifi 模组，实现无线网络连接。
  配备 1 个 USB2.0 Host/Device 接口，方便与外部设备进行数据传输和交互。
  支持上电复位（POR）和外部输入复位，确保系统在异常情况下能够正常复位。
  集成独立供电 RTC，为系统提供实时时钟功能。
  集成多通道 LSADC，可用于模拟信号的采集和转换。
  具备多个 UART、I²C、SPI、PWM、GPIO 接口，方便与其他设备进行通信和控制。
（三）外部存储器接口
  SDRAM 接口：CV61020S内置 1Gb DDR3/3L，最高速率 2133Mbps，为芯片运行提供高速的数据存储和读取支持。
  SPI Nor Flash 接口：支持 1、2、4 线模式，最大容量支持 32MB，可用于存储程序和数据。
  SPI Nand Flash 接口：支持 1、2、4 线模式，最大容量支持 512MB，提供更大容量的数据存储选择。
  eMMC4.5 接口：4bit 数据位宽，可选择从 eMMC、SPI Nor/SPI Nand Flash 启动，方便系统的启动和配置。
(四)、开发支持
  支持 Linux5.10 SDK 包，为开发者提供丰富的开发工具和函数库，方便在 Linux 系统下进行开发。
  支持 OpenHarmony 4.1，融入 OpenHarmony 生态，可利用其系统特性和生态资源进行产品开发。