天天看點

RK3588+AI+FPGA圖像處理硬體算法加速解決方案

RK3588是瑞芯微新一代旗艦級高端處理器,具有高算力、低功耗、超強多媒體、豐富資料接口等特點。搭載四核A76+四核A55的八核CPU和ARM G610MP4 GPU,内置6.0TOPs算力的NPU。

有五大技術優勢

1. 内置多種功能強大的嵌入式硬體引擎,支援8K@60fps 的 H.265 和 VP9 解碼器、8K@30fps 的 H.264 解碼器和 4K@60fps 的 AV1 解碼器;支援 8K30fps 的 H.264 和H.265 編碼器,高品質的 JPEG 編碼器/解碼器,專門的圖像預處理器和後處理器。

2. 内置 3D GPU,相容 OpenGL ES1.1/2.0/3.2、OpenCL 2.2 和 Vulkan 1.2。帶有 MMU 的特殊 2D 硬體引擎将最大限度地提高顯示性能,并提供流暢的操作體驗。

3. 内置瑞芯微自研的48M像素 ISP(圖像信号處理器),支援實作衆多算法加速器,如 HDR、 3A、LSC、3DNR、2DNR、銳化、去霧、魚眼校正、伽馬校正等。

4. 高算力 NPU 可支援 INT4/INT8/INT16/FP16 混合運算,其強大的相容性,可以輕松轉換基于TensorFlow / MXNet/PyTorch/Caffe 等一系列架構的網絡模型。

5. 具有高性能的 4 通道外部存儲器接口(LPDDR4/LPDDR4X/LPDDR5),能夠支援苛刻的存儲器帶寬。

RK3588+AI+FPGA圖像處理硬體算法加速解決方案

瑞芯微RK3399/RK3588+FPGA硬體加速設計方案。RK3399/RK3588通過PCIE實作與FPGA的對接。信邁科技擁有成熟的方案。

FPGA支援ZYNQ/A7/K7等,亦支援國産的安路、高雲。

RK3588+AI+FPGA圖像處理硬體算法加速解決方案

超強算力,性能與功耗的完美平衡

CPU方面,RK3588采用4核Cortex-A76和4核Cortex-A55的典型大小核架構,大核主頻2.4GHz,小核主頻1.8GHz,充分考慮了性能和功耗的平衡。1MB L2 Cache和3MB L3 Cache,提供更強的CPU運算能力。

GPU方面,RK3588內建ARM Mali-G610,至少支援2路4K UI,能流暢運作複雜的圖形處理及遊戲。

NPU方面,RK3588內建了瑞芯微第四代具有完全自主知識産權的人工智能運算引擎,在MAC運算單元的使用率及帶寬的消耗上提升了30%。6.0TOPs的NPU算力,賦能各類AI場景,給複雜場景的本地離線AI計算、複雜視訊流分析等應用提供了各種可能。

超強多媒體影像,帶來極緻體驗

RK3588多媒體影像核心IP的多核架構,使之擁有強大的處理能力,給各位開發者、使用者帶來極緻的視覺體驗。多核架構,不僅支援當下的應用需求,而且很容易更新支援未來更高性能的擴充。

首先,RK3588采用瑞芯微最新的第四代編解碼技術,真8K視訊同編同解,圖像更清晰、細節更豐富。可以支援多達40多路1080P高清視訊的同時解碼。除了通用的H265/H264之外,8K VP9/AV1解碼的支援,可以很好相容海外視訊内容的播放。AI感覺編碼、多ROI、低延遲編碼、智能碼率控制等編碼技術的更新,給特定場景比如安防等應用提供了更優化的性能。

其次,RK3588采用瑞芯微第三代影像視覺處理技術,內建4800萬安防級别ISP、3F HDR 20bit、3D降噪、畸變矯正、寬動态對比度增強等技術,支援多攝像頭接入、6目環視等,帶來相當震撼的視覺體驗。

此外,RK3588采用瑞芯微第五代顯示後處理技術,高達20多個圖層任意疊加,最高可實作真8K或雙4K120Hz的顯示能力,同樣支援1080P高清圖像的7屏異顯,真正做到超高清、高幀率、多分辨率任意組合的多屏異顯。

RK3588+AI+FPGA圖像處理硬體算法加速解決方案

內建豐富接口,讓産品定義有更大的空間

RK3588豐富的接口可以讓使用者在産品規劃上有大膽的想象空間。影像接口包括2*HDMI TX/2*DP TX/2*eDP TX/2*MIPI DSI TX/1*HDMI IN/6*MIPI CSI RX,資料接口包括4*PCIe3.0/3*PCIe2.0/3*SATA3.0/3*USB3.1/4*USB2.0/2*TypeC/2*GMAC,針對大資料和人工智能不斷更新所需要的算力平台,這些接口可以滿足各種高速率傳輸的應用需求。在存儲接口方面,RK3588支援行業領先的LPDDR5。除了接口類型和數量的豐富,在規格上同樣支援比較領先的标準和較高的性能,比如LPDDR5的5500Mbps、MIPI CSI DPHY的4.5Gbps、2.5Gops的MIPI CSI CPHY、4K60fps的HDMI IN、8K60fps的HDMI2.1等。

可廣泛應用多場景

繼續閱讀