助力泛安防產品落地,瑞芯微推出前后端完整解決方案
2021-01-06
近日,瑞芯微針對智慧視覺應用領域發布完整解決方案:聚焦前端產品的RV1126/RV1109兩大智慧視覺處理器、專注后端NVR/XVR產品方案RK3568和RK3588。多場景覆蓋之下,將智慧視覺產品從“看得見”、“看得清”邁入“看得深”、“看得懂”、“能預見”的多維智能感知視界。
聚焦前端視覺產品 RV1126/RV1109
在前端,為契合不同場景及細分行業的需求,瑞芯微推出兩款高低搭配芯片RV1126與RV1109,均采用14nm工藝制程,內置NPU及ISP的智慧視覺處理器。
RV1126的CPU為四核ARM Cortex-A7,NPU為2.0Tops,內置1400萬高性能、3幀高動態ISP;RV1109的CPU則為雙核ARM Cortex-A7,NPU為1.2Tops,內置500萬高性能、3幀高動態ISP。視頻編解碼方面,RV1126支持4K H.264/H.265,RV1109支持500萬H.264/H.265,RV1109和RV1126 硬件上是pin 2 pin,產品升級無縫銜接。擁有以下六大優勢:
一、看的清
RV1126與RV1109具備多級降噪、3幀HDR等技術,即可保證場景的動態范圍,又能滿足黑光全彩的需求,讓“看得清”成為現實,更符合智慧視覺類產品的實際痛點訴求
二、聽的清
內置HDAEC算法、支持麥克語音陣列,RV1126與RV1109讓高清語音全面落地,增強聲音采集及拾音距離
三、占用空間小
低碼率、低延遲編碼、感知編碼讓空間占比更小,節省后端存儲成本
四、AI算力高
異構計算、混合量化、完善工具和配套AI算法、網絡模型架構支持豐富,實現AI功能擴展。同時,功耗不及所需GPU的10%,支持Tensorflow、PyTorch、Caffe、MxNet、DarkNet、ONNX等,直接轉換和部署
五、軟件定義攝像頭
Fast Boot、雙系統架構、SDK開源開放等,客戶根據產品需求進行深度化定制,避免產品同質化
六、豐富的加解密引擎
支持TrustZone技術、含國密在內的多個密碼引擎、安全啟動,確保數據的安全性和完整性
除以上六點外, RV1126與RV1109均有豐富接口,包括千兆以太網接口,且有TSO網絡加速;USB 2.0 OTG和USB2.0 host;兩個 SDIO 3.0 接口;8通道 I2S with TDM/PDM, 2通道I2S……滿足多種應用場景的需求。
前端三大視覺應用產品優勢
智慧視覺領域的應用場景十分廣泛。在前端,依產品形態分為三大領域:IPC智能網絡攝像頭、電池IPC智能門鈴/貓眼、閘機/門禁/考勤類產品。
針對前端產品形態、場景和需求的差異,RV1126與RV1109在保持全面支持的同時,還進行更為精準的細分化處理,展現更具針對性的特性優勢。
針對IPC智能網絡攝像頭產品,RV1126與RV1109具備三大亮點:
1. 3F-HDR技術可保證高動態范圍場景的細節表現,依賴多級降噪技術可實現高質量的黑光全彩畫面
2. 智能編碼技術解決行業痛點, 低碼率編碼,感知編碼
3. 內置NPU,成熟的AI工具,豐富的AI生態算法,算力更強,極大擴展應用場景
對于電池IPC、智能門鈴、貓眼產品,客戶的需求集中在長續航、快速抓圖、高清語音對講等。RV1126與RV1109具備四點技術優勢:
1. 支持快速啟動,150ms冷啟動快速抓圖
2. 雙系統,低功耗架構、14nm工藝、支持LP3/LP4低功耗DDR,均有效延長電池供電的智慧視覺產品的續航時間
3. 內置NPU,可以過濾無效警報
4. 支持Pre-Roll錄制功能
閘機/門禁/考勤類產品,對人臉識別的精準性有著更高的要求。基于此,RV1126與RV1109做了針對性設計,讓人臉識別更加迅速、安全、可靠,人臉識別不等待、門禁快速通過成為現實:
1. 支持雙MIPI sensor輸入,感知更靈敏,活體驗證的方式可防止照片驗證,提高安全性
2. 針對逆光、順光場景的ISP優化,光線條件不佳的環境中依然精準識別
3. 豐富的AI算法生態,可擴展產品應用場景
專注后端NVR/XVR產品 RK3568和RK3588
在后端NVR/XVR產品中,瑞芯微同樣推出的兩款中端、高端方案——RK3568、RK3588。
RK3568搭載4核Cortex-A55 CPU、G52GPU、NPU為0.8Tops, 軟件接口套件設計友好,依照NVR行業大平臺做法,統一按模塊封裝多媒體處理API,客戶應用軟件可快速開發導入AI/AO/VO/VDEC/VENC。
1. 支持10路1080P30視頻解碼,8路視頻編碼
2. 支持TSO/UFO硬件加速,有效降低CPU負載;同時強大的CPU性能,提升網絡攝像頭的接入能力
3. 內置獨立第三代 NPU硬件加速器,性能達0.8-1Tops;支持人臉對比、搜臉、報警、人車分類,支持4-5路智能檢測;支持一鍵轉換,支持Caffe/TensorFlow/TF-Lite/ONNX/PyTorch/Keras/Darknet主流架構模型
4. 顯示接口豐富:支持雙/三屏異顯,HDMI2.0b,輸出4K畫質;支持eDP/MIPI DSI/LVDS/RGB888/BT.1120/BT.656
5. 強大的后處理:支持3D-LUT/GAMMA/CSC/BCSH/DITHER/CABC;支持圖像后處理,去噪,色彩增強
6. 編碼能力強:支持4K H.264/H.265/VP9多種格式高清解碼;支持ROI編碼
7. 可兼容豐富的DDR顆粒,支持LP4/LP4x/LP3/DDR4/DDR3,支持DDR3及DDR4 ECC,滿足工控等場景高可靠性要求,32bit位寬,最高頻率1600Mhz,充裕的帶寬設計,更能滿足智能NVR/XVR場景需求
8. 豐富外圍接口:支持3xSATA3.0,雙千兆網口,TSO技術,雙PCIE,滿足4G/5G/WIFI6,多網口、NPU的擴展需求
RK3588采用8nm工藝制程,搭載4核Cortex-A76+4核Cortex-A55,采用ARM最新4核GPU、NPU為6Tops,可賦能高端NVR/XVR產品,相比目前市面產品的較低視頻解碼能力、NPU算力不足、顯示接口少,高速接口少等待提升的產品需求,RK3588有以下四大優勢:
1. 支持32路1080P視頻解碼
2. 支持4屏異顯
3. 擁有多路高速接口,支持多路 PCIe3.0/PCIe2.0,SATA3.0, USB3.1和千兆以太網
4. 擁有獨立6TOPS NPU超強算力,8核CPU+4核全新GPU架構
軟硬雙提升,開發者工具更高效
當下,是一個講求軟硬協同的新時代。眾科技巨頭在發力硬件產品的同時,也在通過打造開發工具、系統等,提升自身的“軟實力”,瑞芯微也在積極推動“軟硬”的雙提升,推出更高效更精準的開發者工具RKNN Toolkit。
RKNNToolkit的功能極為豐富,主要包括:自定義算子、模型多輸入、多加速棒支持、性能及內存預估、模擬調試、量化精度分析、可視化功能、模型預編譯、模型分段、批量推理、模型轉換、量化/混合量化、模型優化開關等。通過自身的可視化特性,RKNN Toolkit讓開發者的工作更為輕松。
此外,RKNNToolkit支持兩種量化機制——Post training quantization、Quantization-aware training。而且RKNN Toolkit使用模型自身的量化參數,在量化精度上不會有損失。
RKNNToolkit配合靈活的多媒體開發接口,可增加開發者自定義應用的靈活性,讓開發不再是難事,有助于終端伙伴擴展更多AI功能及應用場景。
展開全新布局,賦能更多行業
瑞芯微致力于打造多場景計算單元SoC,在影像視覺處理、視頻編解碼、SoC 芯片設計、大系統開發上積累豐富經驗,已形成多層次、多平臺的專業解決方案。通過深挖智慧視覺產品痛點,及不同應用場景需求,瑞芯微憑借技術優勢,將極大優化終端產品性能,提升終端產品的市場競爭力。
上一篇:瑞芯微安防后端方案RK3568賦能NVR/XVR全面硬件升級 下一篇:硬核實力!瑞芯微榮獲“福建省科學技術獎”一等獎