
隨著AI為內窺鏡領域不斷注入新活力,國內某大型醫療設備廠商致力研發一款AI協助診斷的醫療內窺鏡。為滿足醫療影像中對高清顯示和低延遲顯示的需求,其設備主控板需要支持安卓環境下高清1200萬像素的2路MIPI-CSI同時輸入,且需具備獨立的ISP處理圖像,支持高清顯示和多屏顯示功能。此外,由于客戶自身硬件實力的欠缺,希望供應商可提供個性化的底板設計服務協助開發。
在內窺鏡應用上部署AI功能,對該醫療設備廠商也提出了技術上的挑戰。該客戶除了需要主控板具備AI加速能力外,在調用AI NPU方面,因客戶對RK平臺的NPU不熟悉,還需要供應商協助支持提供RK平臺的NPU的開發工具相關資料和技術服務。
面臨的挑戰
針對該廠商需求,研華提供ROM-6881 SMARC 2.1核心模塊方案。該方案使用SGeT組織所推出的SMARC 2.1核心板標準,核心板整板尺寸選用的是Full?Size,長寬尺寸為82*80mm,通過金手指連接器與底板相連,方便客戶完成安裝。此外,SMARC?核心板PIN腳定義相同,方便客戶后續做升級替換。
ROM-6881基于全新RK3588高性能Arm平臺,支持4*Arm Cortex-A76&4*Arm Cortex-A55主頻1.8GHz,內置NPU (神經網絡處理器)提供6 TOPS的AI算力,在圖像編解碼和圖像處理方面表現出色,滿足內窺鏡輕量級AI應用算力需求。并且ROM-6881支持四屏獨立顯示,最高支持8K分辨率顯示。在影像方面,支持4路MIPI-CSI,最高支持1200萬像素高清攝像頭,提供獨立的ISP,更高效的處理圖像內容,降低延遲。
除此之外,ROM-6881采用嚴苛的工業設計,擁有豐富的I/O擴展資源,滿足醫療應用的外設需求,產品支持-40~85℃寬溫工作環境,提供10年以上的供貨生命周期,滿足醫療設備長期供貨的需求。
項目的順利開發離不開研華從產品開發到項目落地一系列的技術支持,研華Design In服務在該項目中及時幫助客戶解決了安卓環境下無法獨立開發出雙MIPI-CSI的難題。雙MIPI-CSI同時輸入功能未配置在既有的安卓環境,在客戶提出此項需求后,研華技術團隊及時響應,為客戶定制了此項功能需求,幫忙客戶加快了項目應用落地。
在AI方面,研華幫助廠商快速熟悉了RK平臺的NPU開發工具RKNN,快速部署已訓練好的模型,實現AI應用落地。在底板設計方面,研華提供了詳細的底板開發資料,包括核心板PIN OUT,Layout Checking List,Design Guide等文件,供客戶參考以便快速設計。在廠商完成底板設計后,研華還提供了底板線路圖review服務,幫助客戶檢測底板設計的錯誤,避免客戶出現底板設計問題。
ROM-6881?產品特性
- 基于瑞芯微RK3588 八核 4 x Cortex-A76@2.4GHz,4 x Cortex-A55@1.8GHz
- 搭載6TOPS AI算力NPU
- 板載4/8GB LPDDR4內存和32/64GB存儲
- 支持8K@60fps H.265/VP9視頻解碼和8K@30fps H.265/H.264視頻編碼
- 支持HDMI,DP,雙通道LVDS/DSI四路獨顯解決方案
- 支持4路MIPI-CSI攝像頭同時輸入
- 支持4 x PCIE3.0, Dual Gigabit LAN, 2 x USB3.0, SATA3.0, 2 x CAN, 3 x MIPI-CSI, UART
- 支持Linux和Android操作系統