在线不卡日本ⅴ一区v二区_精品一区二区中文字幕_天堂v在线视频_亚洲五月天婷婷中文网站

  • <menu id="lky3g"></menu>
  • <style id="lky3g"></style>
    <pre id="lky3g"><tt id="lky3g"></tt></pre>

    安謀科技商德明:端云協(xié)同,進(jìn)入軟件定義智能攝像頭時代

    安謀科技商德明:端云協(xié)同,進(jìn)入軟件定義智能攝像頭時代

    智東西(公眾號:zhidxcom)

    編輯 | 程茜

    6月30日,由智東西和智東西公開課主辦的GTIC 2022全球AIoT智能家居峰會(以下簡稱AIoT智能家居峰會),在線上成功舉辦,在全網(wǎng)16個渠道同步直播,線上觀看人數(shù)達(dá)到了90多萬人,眾多嘉賓的議題都引起了大家熱烈討論。

    8位行業(yè)重磅大咖就AIoT智能家居的技術(shù)突破、創(chuàng)新應(yīng)用和行業(yè)展望展開了精彩的深度探討,直擊行業(yè)痛點(diǎn)。

    安謀科技智能網(wǎng)聯(lián)業(yè)務(wù)線聯(lián)合負(fù)責(zé)人商德明

    作為安謀科技智能網(wǎng)聯(lián)業(yè)務(wù)線聯(lián)合負(fù)責(zé)人,商德明以《端云互動,迎接智能攝像頭時代》為主題進(jìn)行了演講。

    隨著人工智能和云端技術(shù)的發(fā)展,越來越多的攝像頭具有了AI功能,如何實現(xiàn)端云協(xié)同,打通視頻數(shù)據(jù)采集、傳輸分析、算法提取以及端側(cè)部署的整條鏈路,更好的發(fā)揮攝像頭的價值,是業(yè)內(nèi)共同的挑戰(zhàn)。

    軟件定義已經(jīng)成為趨勢,商德明認(rèn)為,軟件定義智能攝像頭也會成為未來的趨勢。

    隨著新趨勢的發(fā)展,智能攝像頭正在不斷向邊緣計算轉(zhuǎn)移、不斷增強(qiáng)的安全關(guān)切和支持云原生應(yīng)用發(fā)展。

    同時,安謀科技也圍繞三大趨勢提出了針對性的解決方案,包括具體的芯片設(shè)計和軟件參考實現(xiàn)等。

    附安謀科技智能網(wǎng)聯(lián)業(yè)務(wù)線聯(lián)合負(fù)責(zé)人商德明演講實錄

    商德明:首先感謝主辦方的邀請,也多謝各位觀眾、各位聽眾的參加,在這里也非常高興能夠跟大家一起交流,關(guān)于端云互動在新的時代以及智能攝像頭、智能攝像機(jī)等在人工智能浪潮下的一些新應(yīng)用和方式。

    同時非常感謝前面各位嘉賓的精彩演講,有很多的新的應(yīng)用案例,也給了我很多新的啟發(fā)。

    安謀科技作為技術(shù)基礎(chǔ)的使能方,可以和在座各位所在領(lǐng)域產(chǎn)生非常好的互補(bǔ)關(guān)系。同時,各位嘉賓也都分享了很多豐富的應(yīng)用場景,這些應(yīng)用場景也正好是指引我們現(xiàn)在和未來,對產(chǎn)品、技術(shù)進(jìn)行迭代的方向。

    所以借著這樣一個話題跟大家一起分享一下在端云互動未來攝像頭領(lǐng)域中,安謀科技和Arm是如何進(jìn)行一些基礎(chǔ)性工作,并為行業(yè)和生態(tài)合作伙伴提供更多的工具和底層技術(shù),使得越來越豐富、越來越智能的應(yīng)用能夠走到千家萬戶。

    大家都知道,隨著科技的進(jìn)步,軟件定義已經(jīng)發(fā)展成為一個趨勢,網(wǎng)絡(luò)連接技術(shù)、計算技術(shù)和云端存儲技術(shù)的發(fā)展,再加上越來越廣泛、統(tǒng)一的操作系統(tǒng)和虛擬技術(shù)、容器技術(shù)等,使得軟件定義更多的應(yīng)用、產(chǎn)品成為可能。大家也都聽到有很多如軟件定義汽車等的案例介紹。

    以手機(jī)為例,從硬件來看其形態(tài)有很多變化,但我們每天大部分時間使用的都是其所提供的內(nèi)容,并且通過下載不同的APP就可以提供不同的服務(wù)、從事各種操作,我們在軟件層面會有更多的投入、開發(fā),然后將這些軟件應(yīng)用在終端設(shè)備商,能夠產(chǎn)生更多智能的服務(wù)。

    從這樣的趨勢往下延伸,軟件定義智能攝像頭也會成為未來的一個趨勢,并且有很多先進(jìn)的公司已經(jīng)在采用或者正在實踐這種方式,包括而且有很多先進(jìn)的公司已經(jīng)在采用和正在實踐這樣的一種方式,包括現(xiàn)在的ITU(國際電信聯(lián)盟)也都有了ITU標(biāo)準(zhǔn)(國際電信聯(lián)盟標(biāo)準(zhǔn)),這些都是非常好的趨勢演進(jìn)。

    今天我就這個話題跟大家分享一下我們的思考和規(guī)劃,也希望能夠跟大家有更多的探討和交流。

    我們看到智能攝像頭有三大新趨勢。

    首先是不斷的向邊緣計算轉(zhuǎn)移。以前攝像頭就只是一個攝像頭,只對影像數(shù)據(jù)進(jìn)行收集、存儲、送到某個地方由人的眼睛來檢查或者送到云端,通過云端算力進(jìn)行分析。

    現(xiàn)在攝像頭越來越智能化,攝像頭擁有更多的智能化處理能力,因此智能攝像頭不再是一個簡單的傻瓜攝像頭,還會包含更多的智能應(yīng)用,這些內(nèi)容后面我會詳細(xì)介紹。

    第二個趨勢是支持云原生應(yīng)用。前面很多嘉賓也介紹到,企業(yè)會在云端進(jìn)行應(yīng)用開發(fā)、在云端環(huán)境進(jìn)行無限擴(kuò)展,而且云端提供了很多的這些DevOps、Container(容器技術(shù))等,都使得企業(yè)在云端開發(fā)應(yīng)用,并進(jìn)行廣泛部署時不受物理因素的限制,這也成為了非常重要的演進(jìn)趨勢,同時這些應(yīng)用也正在被廣泛實踐。

    在云端開發(fā)的應(yīng)用,如何將這些軟件和算法部署到端側(cè),也是一個非常重要的環(huán)節(jié)。原因在于,一是端側(cè)更加智能,二是云端和端側(cè)的互動越來越密切。

    第三個趨勢是不斷增強(qiáng)的安全關(guān)切,比如說我們在云端開發(fā)了很多的軟件,能夠在云端保障其安全,但是把云端開發(fā)的產(chǎn)品部署到端側(cè)時,端側(cè)就會有各種各樣的硬件限制和不同的安全機(jī)制,所以如何在安全性與云端有很大不同的情況下,能夠繼續(xù)實現(xiàn)同等安全級別的保障,是不斷增強(qiáng)的安全關(guān)切里重點(diǎn)關(guān)注的內(nèi)容,后面我也會詳細(xì)展開介紹。

    在向邊緣計算轉(zhuǎn)移方面,我們可以看到在生活中,一些產(chǎn)品已經(jīng)從以下幾個方面發(fā)生了變化。

    首先是定位、跟蹤以及對人體進(jìn)行識別,這些都是隨著人工智能技術(shù)發(fā)展,以及有更高算力、更高性能的計算平臺支撐,使得其能夠進(jìn)行不同物體、人臉的識別,同時隨著不同空間的變化,能夠?qū)θ说膭幼鬟M(jìn)行分析、判斷、追蹤,這些都是非常重要的應(yīng)用場景,此外,還支持各種各樣的關(guān)鍵點(diǎn)進(jìn)行檢測、判別。

    第二是自動邊界分割,我們在現(xiàn)實生活中常常會遇到一些正在運(yùn)行的電梯、水池或其他危險地帶,我們需要對其進(jìn)行分界,這樣的話,如果有遇到危險的情況就可以及時對用戶進(jìn)行提醒,這些也都是很重要的邊界分割能力。

    第三是在安全方面,我們要求對整個產(chǎn)品的安全得到非常好的保障,比如訪問權(quán)限的保障、本地推理、模型保護(hù)、數(shù)據(jù)保護(hù)、知識產(chǎn)權(quán)保護(hù),以及流媒體保護(hù)等,這些都是安全相關(guān)的要求。

    最后是不斷增強(qiáng)的人工智能,隨著人工智能技術(shù)的進(jìn)一步發(fā)展,產(chǎn)品可以根據(jù)一些人們的行為來進(jìn)行判斷,比如現(xiàn)在有一些安全隱患或安全時間,我們可以通過人工智能模型分析,遠(yuǎn)處的攝像頭就會變成安全部分延伸的千里眼,能夠看到一些特殊或比較激烈的行為,提早給安全部門一些提醒和警示。

    這些都是邊緣計算等技術(shù)發(fā)展帶來的。

    隨著不斷的安全關(guān)切,我們也要在技術(shù)上實現(xiàn)突破。

    首先是安全島(Secure Enclave)的建立,它會使得整個系統(tǒng)有一個安全的信任根(Root of Trust),也就是一個安全可信的空間。在空間內(nèi),你可以實現(xiàn)安全啟動,包括對整個設(shè)備進(jìn)行安全檢查,使得其不會被黑客襲擊或?qū)裟P瓦M(jìn)行分析,同時可以使整個系統(tǒng)里的不同安全級別的軟件能夠進(jìn)行隔離,另一個軟件不會侵入其它軟件中更為敏感的空間,此外,安全存儲、固件更新也都能得到保障。

    如固件更新,后面我們也會談到,很多產(chǎn)品的升級、更新都是非常重要的。設(shè)備更新會經(jīng)常發(fā)生,需要保證固件安全,不會有木馬或其他黑客的病毒,并且能夠隔絕襲擊,另外加密認(rèn)證等內(nèi)容,都是安全關(guān)切里非常重要的部分。

    Arm聯(lián)合很多合作伙伴,提出了PSA Certified安全認(rèn)證,這個認(rèn)證和相關(guān)架構(gòu)的提出,將安全模型、攻擊模型進(jìn)行仔細(xì)分析,并通過PSA Certified安全認(rèn)證的方式,使得不管你的設(shè)備用什么樣的硬件結(jié)構(gòu)搭建起來,都能顯著提高設(shè)備的安全等級,極大地保障其安全。

    不僅是國際上有不同的安全標(biāo)準(zhǔn),國內(nèi)也有相關(guān)標(biāo)準(zhǔn)去保障安全,國內(nèi)國標(biāo)《公共安全視頻監(jiān)控聯(lián)網(wǎng)信息安全技術(shù)要求》也分為A、B、C三個不同的等級,尤其C級中,除了安全認(rèn)證外,還會對視頻流進(jìn)行保護(hù),也就是對視頻進(jìn)行加密,同時對安全的底層硬件提出要求,使得硬件能夠快速、實時的支撐視頻流的加密、解密過程,這些也都是安全要求及安全技術(shù)產(chǎn)生的實現(xiàn)方案。

    第三個方向是云原生應(yīng)用,我會通過這張圖跟大家展開介紹一下。

    首先我們可以看到,有底層技術(shù)的保障,使得我們可以在云上提供很多服務(wù),云上的應(yīng)用也可以不斷進(jìn)行開發(fā)。

    未來,我們想要做到軟件定義攝像頭的趨勢,就需要一方面在底層建立更加統(tǒng)一、抽象,并能夠與硬件隔離的軟件架構(gòu),使得上層開發(fā)者不再被不同硬件之間的差異所困擾,而能夠集中精力去開發(fā)不同場景的應(yīng)用。

    所以我們可以想象,未來,隨著端云互動機(jī)制的打通,會有更多開發(fā)者面向不同的應(yīng)用場景來開發(fā)云端的應(yīng)用,使得智能攝像頭具備的功能越來越多。就像我們的手機(jī)中有上百萬個應(yīng)用一樣,都和我們的生活息息相關(guān)。隨著整個生態(tài)系統(tǒng)不斷成熟,會出現(xiàn)更多的應(yīng)用場景和需求,這些開發(fā)者也會針對性的根據(jù)廣大用戶的需求進(jìn)行開發(fā)。

    在智慧家庭中,比如會出現(xiàn)老人摔倒、嬰兒看護(hù)、監(jiān)測廚房煙霧等情況,現(xiàn)在這些問題的解決往往是由廠家建立軟件團(tuán)隊,做各種各樣的模型,未來,其實這些內(nèi)容都可以形成一個社區(qū),大家根據(jù)現(xiàn)在已經(jīng)有的各種各樣的應(yīng)用場景或未來可能出現(xiàn)的場景或需求,基于底層軟硬件技術(shù),使得這些應(yīng)用能發(fā)展起來。

    所以我們一方面在云端形成了一個虛擬環(huán)境,它能開發(fā)不同的應(yīng)用,同時又基于容器技術(shù)等底層技術(shù),將這些應(yīng)用平滑、有效的部署到終端上去。開發(fā)者不用再擔(dān)心其開發(fā)的應(yīng)用在攝像頭或者機(jī)器人等設(shè)備上的部署問題,不用考慮硬件設(shè)備之間的差異,充分利用端云互動機(jī)制,這一方面也是算法應(yīng)用部署的一個方向。

    那么為什么端側(cè)需要更多的智能?因為智能攝像頭能手機(jī)很多真實的數(shù)據(jù),它也最靠近數(shù)據(jù),并可以根據(jù)這些數(shù)據(jù)的特點(diǎn)進(jìn)行訓(xùn)練。

    一方面,數(shù)據(jù)在端側(cè)可以進(jìn)行訓(xùn)練,也能把一些更加復(fù)雜的或者需要云端算力訓(xùn)練的數(shù)據(jù)送到云端,然后進(jìn)行更細(xì)致的訓(xùn)練,使得訓(xùn)練模型更加精準(zhǔn)、豐富,接著把訓(xùn)練好的模型再部署到端側(cè),回到智能攝像頭這樣的硬件中去,進(jìn)行算法更新。

    同時我們也可以看到,容器技術(shù)等的支撐下,并行的模型也能夠同時進(jìn)行推理。就像前面嘉賓提到的,像多模態(tài)感知,將聲音、視覺或其他的感知,通過并行的方式來運(yùn)行。

    在圖片右側(cè)下方,我們有異構(gòu)系統(tǒng),也就是相關(guān)的CPU、GPU、NPU、ISP等硬件單元,異構(gòu)技術(shù)的發(fā)展,再加上摩爾定律,硬件的發(fā)展更加豐富,也需要專門的硬件來處理更多的數(shù)據(jù)流、更多的應(yīng)用。

    所以根據(jù)不同的硬件形成了異構(gòu)系統(tǒng),并通過前面的軟件技術(shù)能更好的利用不同硬件,使得這些數(shù)據(jù)流能夠得到更好地處理。這個是整個業(yè)界大家在共同推進(jìn)的話題。

    以上就是整個行業(yè)的趨勢以及現(xiàn)狀的一些特點(diǎn)。

    接下來我介紹一下安謀科技在智能攝像頭解決方案上的做法,主要有三個方面,我們也在和合作伙伴一起研究更好的解決方案。

    首先是芯片參考設(shè)計。芯片里包含這些所有的處理能力的IP,如何使芯片中不同的子系統(tǒng)和這些系統(tǒng)IP的組合,能夠適應(yīng)智能攝像頭里邊的高速數(shù)據(jù)流,并對數(shù)據(jù)流進(jìn)行智能分析,提取更多信息,這是芯片參考設(shè)計中最主要的一個作用。

    實現(xiàn)這一目的需要具備更高的性能、完整的功能以及更快速的處理能力,并保持實時性,這也是芯片層面需要解決的問題。

    第二是硬件仿真平臺。我們有幾種方式,一方面我們完成了智能攝像頭方案設(shè)計后,可以在FPGA板上進(jìn)行調(diào)測、驗證。同時,我們也可以通過RTL在Testbench上進(jìn)行測試,發(fā)現(xiàn)開發(fā)者設(shè)計的芯片方案是否在性能上達(dá)到要求。

    尤其是我們不僅僅是要使自己的算法,自己的軟件在功能上能夠滿足要求,同時你要考慮這個性能在哪一個硬件單元上花費(fèi)了很多時間,同時,你的算法在提升、優(yōu)化后的實際效果如何,這些都需要進(jìn)行測試。

    此外,我還想強(qiáng)調(diào)的是Arm提出的Virtual Hardware,這也和我前面提到的云原生和充分利用云上的能力相關(guān),也就是說我們把相關(guān)的重要IP,包括我們現(xiàn)在正在規(guī)劃和開發(fā)的智能攝像頭解決方案在內(nèi)的相關(guān)重要IP,將其進(jìn)行虛擬化部署在云端,這樣的話包括算法工程師、軟件工程師等開發(fā)者,就不需要等芯片流片,再到板子上進(jìn)行測試。

    事實上,這一過程需要花費(fèi)很長周期,非常耗時。開發(fā)者不需要等待,就可以在Virtual Hardware的虛擬環(huán)境中調(diào)試智能攝像頭的能力。前面嘉賓也提到,有聲音、視覺方面的算法以及成百上千的不同應(yīng)用,都可以在這個平臺上進(jìn)行測試,這是非常重要也是很有價值的一種方式。

    第三是參考軟件棧,這也是非常重要的。我們會從容器技術(shù)、安全認(rèn)證等不同角度來提供底層的協(xié)議棧。作為一個平臺開發(fā)商,軟件工作量往往是大于硬件工作量的。

    所以我們提供軟件參考設(shè)計或參考軟件棧,可以大大縮短產(chǎn)品開發(fā)的時間。此外,從生態(tài)角度講,軟件棧在生態(tài)上實現(xiàn)了統(tǒng)一,廣大的開發(fā)者和用戶就可以享受這一便利,能夠開發(fā)出更加豐富的底層應(yīng)用,不需要在底層一些沒有差異化的軟件棧上投入更多,使得產(chǎn)品、資源都更加聚焦到企業(yè)構(gòu)建差異化優(yōu)勢的產(chǎn)品和應(yīng)用中。

    剛剛,我介紹了從硬件、軟件、開發(fā)環(huán)境,以及我們向合作伙伴提供的參考設(shè)計圖。對不同的企業(yè)硬件、軟件團(tuán)隊,這張圖片可以做一個參考,能夠讓相關(guān)行業(yè)的合作伙伴共同探討,使得整個硬件平臺能夠更加優(yōu)化和高效。這個參考設(shè)計以Arm的CPU為基礎(chǔ),我們通過一條互聯(lián)的總線,將不同系統(tǒng)的其他處理單元都能夠集成到整個系統(tǒng)中。當(dāng)然,CPU里面的一些安全機(jī)制等,這些同樣能為整個產(chǎn)品提供價值。

    同時,異構(gòu)系統(tǒng)中有“周易”NPU、對流媒體進(jìn)行有效處理的“玲瓏”ISP、可以進(jìn)行數(shù)據(jù)壓縮的“玲瓏”VPU,這些都是我們整個芯片參考設(shè)計中非常重要的部分。然后NPU可以提供神經(jīng)網(wǎng)絡(luò)計算,使得智能化進(jìn)一步得到保障。

    芯片參考設(shè)計中比較有特點(diǎn)的是我們可以集成不同的子系統(tǒng)。如MCU級別的子系統(tǒng),可以連接一個更低像素的攝像頭,也可以部署一個更小配置的設(shè)備。

    就像前面有嘉賓提到的低功耗等場景下,我們會先將一個小的系統(tǒng),在電池驅(qū)動下實現(xiàn)低功耗運(yùn)行,這樣就可以實現(xiàn)數(shù)月甚至數(shù)年都不需要更換電池,并且進(jìn)行一些基本的環(huán)境監(jiān)控功能。

    比如像智能門鈴,一旦發(fā)現(xiàn)有人進(jìn)入,或者用戶需要觀察車輛,就可以通過攝像頭喚醒整個系統(tǒng),在有效的工作時間內(nèi)進(jìn)行更高像素、更智能的分析,發(fā)揮智能攝像頭的相關(guān)功能。

    所以我們希望通過參考設(shè)計,能夠把核心IP和技術(shù)進(jìn)行集成,交付給客戶一個比較完整的參考設(shè)計,使得客戶能增加一些外圍設(shè)備或接口,可以很快形成自己新一代攝像頭的設(shè)計方案,這可以大大縮短產(chǎn)品的開發(fā)時間,同時我們的整個參考設(shè)計也是經(jīng)過充分驗證的,可以為客戶在實現(xiàn)相應(yīng)功能的基礎(chǔ)上,減少時間和研發(fā)投入。

    這里比較關(guān)鍵的模組我們剛剛也提到了,就是安全機(jī)制,“山海”SPU根據(jù)不同的安全等級和對安全處理性能的要求分成不同型號,還有“玲瓏”ISP,可以提供高質(zhì)量的圖像處理。

    而視頻處理單元VPU,通過軟硬件架構(gòu),系統(tǒng)級設(shè)計,同樣能使其性能得到大幅提升。如視頻編碼標(biāo)準(zhǔn)H.265和ADSP等視頻解碼標(biāo)準(zhǔn),都能夠通過硬件的時間以非常低的延時完成,這也是智能攝像頭中的重要技術(shù)。

    這些過程是標(biāo)準(zhǔn)化的,非常適合用IP的方式來實現(xiàn),使得我們的客戶能夠節(jié)省研發(fā)時間。

    隨著人工智能技術(shù)的發(fā)展,ML(機(jī)器學(xué)習(xí))對算力、模型要求越來越高,所以有一個能夠處理神經(jīng)網(wǎng)絡(luò)計算的NPU是非常重要的。其中,周易就擁有自定義算法能力,使不同的定制算子能夠得到支撐。

    此外,我們也可以通過子系統(tǒng)進(jìn)行擴(kuò)展,增加Wi-Fi或者聲音當(dāng)面的子系統(tǒng)。

    這個產(chǎn)品組合中,最重要的是CPU,攝像頭、機(jī)器人或者是其他機(jī)器視覺方面的產(chǎn)品對CPU的處理能力要求是不一樣的,最近Arm推出的新一代CPU能力也在不斷提升,安全性上也做了補(bǔ)充和升級。

    所以,在CPU上,客戶可以有很多種選擇,NPU也有不同的系列,客戶同樣可以根據(jù)算力需求來選擇合適的IP。同樣道理,VPU和ISP的IP組合實際上就是產(chǎn)品組合,根據(jù)客戶的產(chǎn)品定位選擇是否帶電池或者功耗。

    根據(jù)不同的方式,選擇IP組合,通過參考設(shè)計形成一個系統(tǒng)級的解決方案,這是我們希望提供給行業(yè)的價值,也使這個行業(yè)在這一方面能夠大大節(jié)省研發(fā)投入。

    剛才也有提到,一方面我們在底層通過硬件模擬,使得軟件環(huán)境能夠進(jìn)行測試和運(yùn)行,另一方面也在安全方面擁有PSA Certified安全認(rèn)證。

    我們正在推出的全球聯(lián)盟計劃SystemReady,國內(nèi)也已經(jīng)有很多廠家加入了這個認(rèn)證,使得硬件能夠得到統(tǒng)一。

    這樣的話,操作系統(tǒng)可以在硬件之間有一個抽象,這就是前面所提到的軟件和硬件隔離,軟件環(huán)境就不會受硬件變化的影響,同時,操作系統(tǒng)都是行業(yè)中各個社區(qū)的開源軟件,能夠提供很多軟件應(yīng)用和操作系統(tǒng)支撐。

    Arm就是將相關(guān)的IP,集成經(jīng)過測試并實踐過的解決方案,然后提供給合作伙伴。在通過不同客戶發(fā)現(xiàn)的問題,進(jìn)一步提升、優(yōu)化我們的解決方案。

    無論是ISP、VPU還是NPU,我們都在走同樣的路線,使得這個產(chǎn)品能夠通過多次迭代提供更多的價值、更好的性能,以此來滿足上層應(yīng)用需求,包括安全機(jī)制、機(jī)器學(xué)習(xí)和云原生的相關(guān)應(yīng)用,實現(xiàn)高效支持。

    通過這種方式,客戶的產(chǎn)品在亞馬遜、阿里云或其他云上,都可以在軟件層面進(jìn)行平滑部署。

    這個也只是其中一個應(yīng)用場景,其實包括前面嘉賓的分享,智能攝像頭有非常多的應(yīng)用場景,我們都是通過這樣的流程,將數(shù)據(jù)流進(jìn)行接收,然后通過神經(jīng)網(wǎng)絡(luò)處理進(jìn)行判別。

    這里面最核心的問題就是我們?yōu)槭裁匆岢鲞@樣一個參考設(shè)計?關(guān)鍵在于,我們認(rèn)為任何一個設(shè)計都需要平衡,如何使你的計算資源能滿足數(shù)據(jù)流需求是非常核心的。

    不論是一個攝像頭還是多路攝像頭,其分辨率和數(shù)據(jù)量大小是不一樣的,數(shù)據(jù)流進(jìn)來以后,如何對其進(jìn)行拆解、處理,包括數(shù)據(jù)流需要盡量減少DDR訪問,或在RAM里面如何配置,以及如何將碎片化空間利用好,這些都是非常核心的需求。

    除了單IP非常高效,整個系統(tǒng)設(shè)計也需要對數(shù)據(jù)流進(jìn)行很好的處理,我們用最有限的硬件配置,就能夠?qū)崿F(xiàn)性能更高的效果。

    所以這個設(shè)計的理念在于,通過不同的Use-case開發(fā)來得到保障。

    除了這些技術(shù)和研發(fā)成果以外,我們也在積極推動整個生態(tài)系統(tǒng)的建設(shè),比如之前我們提到的SystemReady,也有更多的廠家參與進(jìn)來,包括很多行業(yè)的領(lǐng)導(dǎo)者,使得硬件和軟件能夠更加廣泛的在SystemReady基礎(chǔ)上,實現(xiàn)統(tǒng)一化,這都是生態(tài)建設(shè)中非常重要的內(nèi)容,通過不同的標(biāo)準(zhǔn)讓大家實現(xiàn)兼容。

    在安全方面,我們剛才也介紹了PSA Certified安全認(rèn)證,使得客戶實現(xiàn)不同安全機(jī)制的端側(cè)硬件,通過統(tǒng)一的API,在安全方面的調(diào)用和硬件機(jī)制上得到統(tǒng)一,所以我們的安全軟件、安全功能開發(fā),會在更加統(tǒng)一、便利的環(huán)境中進(jìn)行。

    同時,生態(tài)系統(tǒng)中更多的合作伙伴加入,形成方案,其價值在于,第一使得其在安全、云端開發(fā)、部署方面都能得到保障。

    第二就是使更高的能效比和低功耗成為可能,不論是聲音還是視覺功能這些在低功耗模式下都能運(yùn)行。

    第三是機(jī)器學(xué)習(xí),NPU部署產(chǎn)品的算力能夠得到保障,再加上云端模型的延展性,客戶的模型無論大小,都可以根據(jù)設(shè)備能力,部署相應(yīng)的算法。

    第四是,通過我們的參考設(shè)計等解決方案,客戶可以在云端進(jìn)行虛擬測試,能夠提前進(jìn)行軟件開發(fā)、硬件開發(fā)。同時,由于有參考設(shè)計,也可以縮減硬件開發(fā)時間。

    第五是軟件層面,基于容器技術(shù)等,這些服務(wù)能夠得到很好的部署。所以這樣的話客戶就不會太局限于硬件,不需要針對不同的硬件開發(fā)特定的軟件,而是通過這個軟件進(jìn)行一次性開發(fā),然后再去大量部署到不同的場景中。

    通過這樣的方式,我們希望能夠給行業(yè)提供更大的價值,也能夠和合作伙伴共同推動智能攝像頭的發(fā)展,使智慧家庭能夠有更好的技術(shù)支撐,產(chǎn)生更多豐富的應(yīng)用,將智能帶到千家萬戶。

    好的,感謝大家,我就這里。

    鄭重聲明:本文內(nèi)容及圖片均整理自互聯(lián)網(wǎng),不代表本站立場,版權(quán)歸原作者所有,如有侵權(quán)請聯(lián)系管理員(admin#wlmqw.com)刪除。
    上一篇 2022年7月8日 13:23
    下一篇 2022年7月8日 13:23

    相關(guān)推薦

    聯(lián)系我們

    聯(lián)系郵箱:admin#wlmqw.com
    工作時間:周一至周五,10:30-18:30,節(jié)假日休息