實現(xiàn)這些功能的技術中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力,植入相應的AI算法,無人機就相當于裝上了“智慧眼”,而且這個“智慧眼”居于高空,能夠在一個定點,俯瞰大范圍,實時監(jiān)控貨物的存放狀態(tài)。遠程控制技術基于網(wǎng)絡通信,通過和圖像處理板的結合,能夠實現(xiàn)低延時低帶寬的圖像傳輸處理。在實際落地應用中,可以采用成都慧視開發(fā)的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無人機的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據(jù)無人機型號進行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無人機也能夠裝上。此外,板卡整體功耗在4W左右,不會過多增加無人機的負擔。低功耗的AI圖像處理板。比較好的圖像處理板參考價格
此前,九號電動車的自平衡技術一次次刷新人們的認知,而其中一款探索版車型,甚至加入了智能攝像頭,能夠識別行人、障礙物,自動規(guī)劃行駛路線,達成自動駕駛的目的。很多人好奇這種怎么做到的,其實很簡單,車輛內(nèi)部攝像頭安裝了具備圖像處理的傳感器。這種傳感器就是圖像處理板,這類AI板卡在目標識別算法的賦能下,就能夠對視野范圍的物體進行AI分類識別,從而幫助車輛進行避障。像成都慧視開發(fā)的高性能AI圖像處理板Viztra-HE030,采用的是RK3588開發(fā)而成,憑借其工業(yè)級的性能,6.0TOPS的算力,就能夠在車輛行駛過程中的復雜環(huán)境下進行周邊環(huán)境的快速AI識別分類。當然,算法的能力也十分關鍵,由于車輛行駛環(huán)境的不斷變化,算法面臨的識別畫面也不斷變化,如何精細的進行識別,關系到車輛的行駛安全。北京圖像處理板功能瑞芯微平臺圖像處理板定制。
但這也遇到很多難點,通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無卡頓地傳輸,是分析改進這個工作需要解決的前期難點。針對于這個問題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結合,推出了低延遲低帶寬圖傳解決方案。在一個窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對收發(fā)信道,信道支持數(shù)據(jù)透傳,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實時調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像。可以使設備飛的更遠、走的更遠;可實現(xiàn)視頻中繼轉發(fā);能夠基于H265實時視頻編碼;可實現(xiàn)基于視頻流的“人在回路低延遲控制”?;谄胀?0幀相機,實現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時間在30ms左右,目前業(yè)界前列。通用性強,使用更加靈活,適用更多應用場景;支持多路SDI視頻在低至500K帶寬情況下的同時傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時延約60ms(含相機、編解碼、顯示,不含傳輸),實現(xiàn)實時控制、實時打擊。
“啟明935A”系列芯片已經(jīng)成功點亮,并完成各項功能性測試,達到車規(guī)級量產(chǎn)標準。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構集成范式的自動駕駛芯片,但并非單一芯片,而是一個家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配,再結合靈活的封裝方式,快速形成不同性能等級的SoC芯片。它還支持高帶寬的PBLink多芯互連,雙芯雙向帶寬128GB/s,四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入,可應用于各類端側AI部署。得益于大熊星座NPU天然支持Transformer結構,初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。國產(chǎn)化AI圖像處理板。
利用無人機實現(xiàn)智能化識別能夠幫助我們提升許多工作效率,在很多行業(yè)都有應用。像安防巡檢、交通管理等,飛在高空的無人機比傳統(tǒng)的地面巡邏更有視野,更能搜集掌握全局信息,再通過和地面巡邏的配合,能夠有效減少工作量。但是在無人機識別的過程中會遇到很多問題,比如當環(huán)境變得復雜時,識別的精度可能就會受到影響。AI識別算法是一種深度學習的算法,它不是一成不變的,它也需要適應不同的環(huán)境,因此對于AI算法的訓練也必不可少?;垡暩咝阅蹵I圖像處理板。附近圖像處理板優(yōu)勢
慧視光電能夠定制CVBS接口的圖像處理板。比較好的圖像處理板參考價格
目前,采用圖像識別技術來實現(xiàn)無人機規(guī)避其他障礙物是一個有效的方法。通過在無人機上植入圖像識別模塊,這個模塊由圖像處理板和相機組合而成,通過算法的賦能,就能針對不同物體實現(xiàn)快速AI識別,然后實現(xiàn)規(guī)避。而在圖像處理板的選擇上,成都慧視開發(fā)的Viztra-LE026圖像處理板就十分合適。這塊板卡采用了RV1126開發(fā)設計而成,外形呈圓形,體積小巧,尺寸為Ф38mm*12mm,重量只有12g,用在無人機上不會過多占用空間。此外,該板卡功耗≤4W,也不會增加無人機的續(xù)航負擔。比較好的圖像處理板參考價格