但這也遇到很多難點,通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無卡頓地傳輸,是分析改進(jìn)這個工作需要解決的前期難點。針對于這個問題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對收發(fā)信道,信道支持?jǐn)?shù)據(jù)透傳,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實時調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像??梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實時視頻編碼;可實現(xiàn)基于視頻流的“人在回路低延遲控制”?;谄胀?0幀相機(jī),實現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場景;支持多路SDI視頻在低至500K帶寬情況下的同時傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實現(xiàn)實時控制、實時打擊。SpeedDP可以提升算法開發(fā)效率。江西智慧城市AI智能解決方案
識別算法的性能提升依靠大量的圖像標(biāo)注,傳統(tǒng)模式下,需要人工對同一識別目標(biāo)的數(shù)據(jù)集進(jìn)行一步一步手動拉框,但是這個過程的痛苦只有做過的人才知道。越多素材的數(shù)據(jù)集對于算法的提升越有幫助,常規(guī)情況下,一個20秒時長30幀的視頻就多達(dá)兩三百張畫面需要標(biāo)注,如果視頻時長或者視頻的幀速率增加,需要標(biāo)注的幀畫面將會更多。小編曾試過標(biāo)注一個時長為1分30秒幀速率為60的視頻,需要標(biāo)注的畫面竟然多達(dá)5000多張,當(dāng)我標(biāo)注到500張的時候,整個人都已經(jīng)麻木,并且出現(xiàn)情緒波動,望著剩下的4500多張待標(biāo)注畫面,看著都頭皮發(fā)麻,怎么都不想繼續(xù)了。江西邊海防AI智能慧視光電開發(fā)的AI智能算法。
無人機(jī)能夠通過高空拍攝快速獲取大范圍、多角度的地面信息。但是傳統(tǒng)的攝像頭只能獲取視頻數(shù)據(jù),對于許多需要進(jìn)行數(shù)據(jù)分析的行業(yè)來說顯然不夠智能化,從無人機(jī)視頻數(shù)據(jù)中快速獲取提煉大量有價值的信息,不僅能夠提升工作效率,還能夠減少不小的成本支出。這就是無人機(jī)的AI識別能力。通過識別算法,在無人機(jī)工作時就對目標(biāo)范圍進(jìn)行AI檢測識別,從而提煉所需信息。這就需要對無人機(jī)進(jìn)行智能化改造,可以在傳統(tǒng)無人機(jī)吊艙中植入成都慧視開發(fā)的高性能AI圖像處理板,如利用RK3588深度開發(fā)而成的Viztra-HE030圖像處理板,6.0TOPS的算力能夠快速處理無人機(jī)識別到的復(fù)雜畫面信息,這樣就有了硬件基礎(chǔ),剩下的就需要對自身算法進(jìn)行不斷優(yōu)化提升。
小興安嶺的日常巡護(hù),是構(gòu)筑東北生態(tài)安全的必要措施,進(jìn)入冬季,整個小興安嶺將處于冰雪覆蓋,按照傳統(tǒng)的巡檢模式,危險且費(fèi)力。整個小興安嶺森林覆蓋率達(dá)到96%,只靠肉眼的觀察,很容易錯過死角空白區(qū)的潛在危險,因此,無人機(jī)上線了。將無人機(jī)智能化,在吊艙的基礎(chǔ)上加裝具備智能圖像處理的板卡,再通過定制算法的植入,一個智慧“巡檢員”就上線了。面對大森林這樣復(fù)雜的環(huán)境,成都慧視開發(fā)的高性能AI圖像處理板Viztra-HE030可以勝任,這塊板卡采用了瑞芯微旗艦級芯片RK3588,能夠輸出6.0TOPS的算力,考慮到小興安嶺冬天寒冷的環(huán)境,這款板卡能夠適應(yīng)零下40℃的環(huán)境,長時間的戶外工作不在話下。我們幫您快速提升算法性能。
“啟明935A”系列芯片已經(jīng)成功點亮,并完成各項功能性測試,達(dá)到車規(guī)級量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動駕駛芯片,但并非單一芯片,而是一個家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配,再結(jié)合靈活的封裝方式,快速形成不同性能等級的SoC芯片。它還支持高帶寬的PBLink多芯互連,雙芯雙向帶寬128GB/s,四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入,可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu),初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等?;垡暪怆娍梢远ㄖ颇繕?biāo)檢測算法。高性能低功耗AI智能視覺
哪里能夠定制跟蹤飛鳥的AI算法?江西智慧城市AI智能解決方案
首先攝像機(jī)采用的是可見光高清攝像機(jī),具備1920*1080的分辨率,系統(tǒng)視場31.11°×17.8°,其中搜索視場15.8°×15.8°(1080P像素)。而圖像處理則采用慧視開發(fā)的RV1126高性能圖像處理板,之所以采用這塊板卡,一方面得益于其低功耗、微型外觀的設(shè)計,非常契合“智慧眼”這樣對于空間要求嚴(yán)格的應(yīng)用場景;另一方面RV1126具備2.0TOPS的算力,在國產(chǎn)化方面也十分完整,安全性十足。兩者結(jié)合,就能夠形成重量不超過100g的“智慧眼”。在算法的作用下,能夠達(dá)到≥50Hz的跟蹤幀率,≥25Hz的檢測幀率,實現(xiàn)捕獲4m*4m目標(biāo)超過800m、6m*6m目標(biāo)超過1000m。這就是“機(jī)器狼”的智慧化措施,通過一個“小小的”“智慧眼”的加入,便能夠讓其實現(xiàn)許多自動化任務(wù)。隨著技術(shù)的不斷發(fā)展,“機(jī)器狼”的形態(tài)將會不斷進(jìn)步,滿足更多多樣化需求。江西智慧城市AI智能解決方案