雷鋒網(wǎng)按:2018 全球人工智能與機(jī)器人峰會(huì)(CCF-GAIR)在深圳召開,峰會(huì)由中國計(jì)算機(jī)學(xué)會(huì)(CCF)主辦,雷鋒網(wǎng)、香港中文大學(xué)(深圳)承辦,得到了深圳市政府的大力指導(dǎo),是國內(nèi)人工智能和機(jī)器人學(xué)術(shù)界、工業(yè)界及投資界三大領(lǐng)域的頂級(jí)交流盛會(huì),旨在打造國內(nèi)人工智能領(lǐng)域最具實(shí)力的跨界交流合作平臺(tái)。 在CCF-GAIR 2018第三天的峰會(huì)現(xiàn)場,地平線智能解決方案與芯片事業(yè)部總經(jīng)理,中國半導(dǎo)體行業(yè)資深商業(yè)專家張永謙在AI芯片專場分享了他的行業(yè)觀點(diǎn)和地平線公司的最新進(jìn)展。 張永謙表示,AI目前趨勢分為三點(diǎn):第一,計(jì)算從中央到邊緣;第二,智能終端成長潛力;第三,智能是個(gè)性化趨勢。基于這樣的判斷,張永謙認(rèn)為,AI碎片化需求對創(chuàng)業(yè)公司有好處,傳統(tǒng)行業(yè)的大公司想用規(guī)模、人海戰(zhàn)術(shù)、資金實(shí)力、渠道能力在AI時(shí)代碾壓創(chuàng)新創(chuàng)業(yè)公司,幾乎不太可能。 此外,張永謙還介紹了目前地平線的第一代芯片和即將推出的第二代芯片,他表示,第一代芯片系列是成熟、量產(chǎn)化的系列解決方案,好處有兩點(diǎn),一是快,一周集成, 三個(gè)月量產(chǎn);二是高度平臺(tái)化,能快速讓廣大行業(yè)客戶和產(chǎn)品客戶直接使用的方案。 旭日系列第二代芯片是基于伯努利架構(gòu),內(nèi)核已經(jīng)設(shè)計(jì)完畢。從現(xiàn)在開始到今年年底,地平線將著力做流片并同步適配算法解決方案。 以下是張永謙在現(xiàn)場的演講,雷鋒網(wǎng)做了不改變原意的編輯整理。 張永謙:大家好,非常高興今天下午為大家介紹地平線的思考和落地的情況。 我今天的演講主題是“AI芯片,千萬行業(yè)智能化的發(fā)動(dòng)機(jī)”,聽魏少軍所長和英特爾的同事說了非常多的渠道,今天我說得更加接地氣。作為創(chuàng)業(yè)AI公司,特別是在AI目前的階段,最重要的是AI能落地,今天主要談?wù)勎覀傾I落地的工作以及我們在這方面做的事情。 我認(rèn)為現(xiàn)在最大的趨勢是AI,分為幾點(diǎn): 第一,計(jì)算從中央到邊緣。 在過去幾十年,從2000年開始,PC時(shí)代到智能手機(jī),現(xiàn)在到Internet of Smart things,AI越來越跟著人走。云端從過去的大計(jì)算率、大功耗完成任務(wù),慢慢向端上擴(kuò)展。我們認(rèn)為人工智能是端+云,構(gòu)成整個(gè)系統(tǒng)的平衡,讓整個(gè)功耗、性價(jià)比變得最優(yōu)。端上的智能和云上的智能都是需要的。地平線必須解決端上智能的問題。 第二,智能終端成長潛力。 中國可能是全球最大智能攝像頭生產(chǎn)國和使用地, 每年生產(chǎn)上億個(gè)智能攝像頭。考慮家用、嵌入式 攝像頭場景,每年會(huì)有10億個(gè)終端需要智能。目前可以看到終端的智能滲透 率只有1%,從現(xiàn)在開始,我覺得大概在兩三年內(nèi),大家會(huì)看到所有的攝像頭智能滲透率達(dá)到百分百。大家問產(chǎn)品視覺公司明年的產(chǎn)品會(huì) 不會(huì)涉及AI,偏人臉相關(guān)也是實(shí)際AI,答案是百分百。 我判斷2020年,所有跟智能攝像頭的產(chǎn)品百分百標(biāo)配現(xiàn)在所謂的人工智能,只是處理的強(qiáng)弱 。現(xiàn)在處理不到1%到兩三年后的百分百,可想而知 這個(gè)市場多么大,這個(gè)窗口多么大。行業(yè)中做芯片和AI的公司一定要抓住這個(gè)窗口,錯(cuò)過這個(gè)窗口便難以有發(fā)展前途。 第三,智能是個(gè)性化趨勢。 這是百花齊放的情況,行業(yè)會(huì)重構(gòu)。我們看到整個(gè)AI和互聯(lián)網(wǎng)一樣,它都是一個(gè)非常基本的底層技術(shù),這個(gè)技術(shù)會(huì)重構(gòu)整個(gè)行業(yè),甚至重構(gòu)整個(gè)社會(huì) ?;ヂ?lián)網(wǎng)在過去20年里是最火的行業(yè),大家可以看到它顛覆 了多認(rèn)知和行業(yè),AI技術(shù)也是如此。AI技術(shù)對人產(chǎn)生很大的影響 ,它是更加本質(zhì)的顛覆 。所有的AI是智能,它一定是個(gè)性化的,在后面很長一段時(shí)間內(nèi),大家對AI訴求非常個(gè)性化、碎片化的。 得到幾個(gè)推論:1,對創(chuàng)業(yè)公司有好處,傳統(tǒng)行業(yè)的大公司想用規(guī)模、人海戰(zhàn)術(shù)、資金實(shí)力、渠道能力在AI時(shí)代碾壓創(chuàng)新創(chuàng)業(yè)公司,幾乎不太可能。因?yàn)锳I的需求非常碎片化; 2,AI是底層技術(shù),行業(yè)要用AI就像行業(yè)要用互聯(lián)網(wǎng),不是你坐在空調(diào)房敲幾行代碼就能重構(gòu)的,必須是公司的業(yè)務(wù)體系架構(gòu)、業(yè)務(wù)軟件甚至是整個(gè)行業(yè)都會(huì)被重構(gòu)。AI對整個(gè)行業(yè)的顛覆只是剛剛開始,未來它會(huì)讓整個(gè)行業(yè)重構(gòu)。過程中一 定會(huì)冒出非常多的黑馬,這對地平線來說是非常好的機(jī)會(huì)。 簡單介紹地平線目前做的事情,希望今天我們介紹的東西可以幫助合作伙伴和行業(yè)客戶。地平線成立于2015年7月,至今將近三年時(shí)間。正式員工500多人,60%以上是碩士和博士學(xué)位,是一家比較偏重底層AI技術(shù)的公司。 魏少軍所長談到軟件定義硬件,這是地平線成立以來一直秉承的思想,現(xiàn)在尚未達(dá)到強(qiáng)人工智能的AI,軟件定義硬件。但我們確實(shí)往這個(gè)方向走,2015年我們提出地平線AI芯片想法,先由算法解決實(shí)際問題, 根據(jù)算法架構(gòu)做芯片,這是軟件定義硬件。谷歌2016年推出TPU,用在云端AI服務(wù)器。魏少軍所長談到傳統(tǒng)處理器架構(gòu)在AI時(shí)代一定會(huì)被淘汰,因?yàn)樗麄儫o法在端上使用。 地平線公司成立三年時(shí)間,去年年底完成A+輪融資。這是我們推出的BPU,2015年7月首次提出,2017年首次發(fā)布BPU處理器及整體解決方案,歷時(shí)兩年多,過程非常辛苦。 今天重點(diǎn)談?wù)凟dge AI在IoT領(lǐng)域側(cè)的應(yīng)用 ,目前智能樓宇 、智慧社區(qū)、自動(dòng)駕駛 、智能安防 、智慧商 業(yè),Edge AI處理器是我們目標(biāo)應(yīng)用市場。芯片解決方案,我們希望完成智能開放的生態(tài),生態(tài)的合作伙伴中有行業(yè)客戶,原來應(yīng)用處理器的廠商可以和我們智能處理器匹配,做一個(gè)完整的智能解決方案,包括OEM、ODM和IDH。 現(xiàn)在包括智能安防、智慧社區(qū)、智慧零售、智能樓宇等各個(gè)方向,我們會(huì)提供一套完整的解決方案,包括底層芯片。重點(diǎn)我們有針對場景做的網(wǎng)絡(luò)模型、上層簡單應(yīng)用SDK,目的是希望幫助行業(yè)用戶快速使用AI。 核心點(diǎn)是我們希望AI變成平民化的東西,現(xiàn)在真正想把AI用起來,需要很大的算法團(tuán)隊(duì),這是非常不親民 的。我們希望行業(yè)客戶、合作伙伴可以站在我們的肩膀之上,我們會(huì)針對重大場景,把AI軟件算法結(jié)構(gòu)固化到我們的芯片中。我們的合作伙伴可以直接使用我們整套解決方案,也可以利用他們的大數(shù)據(jù)在我們芯片架構(gòu)中做訓(xùn)練,訓(xùn)練出他們自己的模型。他所需投入的資源、時(shí)間都會(huì)非常少,讓AI在行業(yè)中快速落地,這是我們公司的核心產(chǎn)品和市場思考、策略。 這同時(shí)會(huì)帶來其他的好處,很多芯片公司、算法公司可以共同形成解決方案,我拜訪客戶時(shí),客戶使用這個(gè)模式時(shí)比較糾結(jié) 。芯片公司和算法公司,算法和芯片不是最早期互相適配設(shè)計(jì),中間會(huì)遇到各種各樣適配問題。芯片公司和算法公司同時(shí)支持客戶做產(chǎn)品的公司,中間會(huì)遇到各種各樣的問題。如何定義是誰的問題,如何快速解決,如何分配利益,這都是比較麻煩的問題。我說得比較直接, 但確實(shí)是現(xiàn)實(shí)中大家面臨的問題。我們的客戶現(xiàn)在不需要有任何算法團(tuán)隊(duì),使用我們整體解決方案,從第一次拿到我們的方案到推出他們智能化的產(chǎn)品只需要三個(gè)月。我們會(huì)提供一整套工具鏈,簡單易用,四步可以訓(xùn)練出自己的模型 。 針對重要的場景,智慧社會(huì)、智慧商業(yè)場景、智能安防場景,我們提供基礎(chǔ)算法模型和算法模板。如果我們的客戶具有一定的算法能力和大數(shù)據(jù),可以快速開發(fā)出自有個(gè)性化的算法模型,解決他面臨的豐富多彩的行業(yè)AI所需解決的問題。我們的交付層次不一 樣,不管你是怎樣的行業(yè)客戶和合作伙伴,都可以使用我們東西,快速完成AI落地。 這是訓(xùn)練模型的流程,整個(gè)訓(xùn)練工具,UI做得非常友好,我們有一個(gè)非常好的界面,用戶可以快速簡單的使用它。簡單介紹旭日X系列,第一代、第二代和第三代的整體規(guī)劃,以及我們所需要解決的問題。 旭日系列有三代體系架構(gòu),高斯架構(gòu)、伯努利架構(gòu)和貝葉斯架構(gòu)。高 斯架構(gòu),可以支持1080p的圖像數(shù)據(jù)處理, 檢測200個(gè)目 標(biāo),支持多達(dá)8個(gè)類別的目標(biāo)檢測。具體看應(yīng)用路標(biāo),第一代芯片系列是去年11月份布,目前基于第一代系列的芯片解決方案用戶,三季度在市場上會(huì)發(fā)布他們的產(chǎn)品。面向的應(yīng)用主要是前端智能攝像頭、大規(guī)模人臉抓拍、高精度人臉識(shí)別、商業(yè)客流分析,這是主要的場景,下面我就這幾個(gè)場景為大家介紹我們目前的主要工作。 第一代芯片系列,我們和NVDIA TX1做對比,其功耗是我們的10倍,我們只需要2瓦,每幀處理30個(gè)目標(biāo),1080P/12fps,我們針對重大場景做優(yōu)化,量身定做AI處理器,功耗和性價(jià)比做得非常好,快速為客戶提供完整的解決方案。 第一代芯片處理層次針對目標(biāo)進(jìn)行處理,現(xiàn)在看到在復(fù)雜的場景下,我們對車、人、路上標(biāo)識(shí)牌做目標(biāo)處理。實(shí)際落地的案例和解決方案:第一,大規(guī)模 、全場景人臉抓拍,主要面對智慧城市和智慧商業(yè)兩個(gè)場景。這是在北京故宮門檻,現(xiàn)在國內(nèi)公安要做開放式場景布控,在廣場、車站、碼頭、樓宇和園區(qū)里,上下班、吃飯、高峰期都會(huì)面臨大規(guī)模人流,這時(shí)候布控需要很大的挑戰(zhàn)。 現(xiàn)在整體抓拍解決方案,從人臉檢測 、跟蹤、優(yōu)選、去重等一系列做了深度的優(yōu)化,加上年齡和屬性,可以很好的應(yīng)對這種場景。即便是人臉抓拍這個(gè)小事情,行業(yè)內(nèi)的人知道這非常不容易。除了要在非常復(fù)雜的情況下,把最好的人臉抓出來,最大的挑戰(zhàn)是光線,有逆光、低照、側(cè)臉,地平線整體解決方案經(jīng)過非常多實(shí)際場景中做的經(jīng)驗(yàn),不停的迭代優(yōu)化。 我們拿到采用旭日第一代芯片人臉抓拍解決方案的相機(jī),我們選擇業(yè)界一款采用TX1的人臉識(shí)別相機(jī)做對比。我們列出正常光線、晚上弱光、陰陽臉、逆光、弱光+復(fù)雜光線、正常光線+密集通道等,人臉抓拍是重要指標(biāo),我們的抓拍率和TX1在同一水平。在高峰期吃飯 時(shí),人數(shù)一旦上來,我們?nèi)匀槐3趾芨叩淖ヅ穆?,TX1性能開始下降,出現(xiàn)誤抓和漏抓。我們可以讓這個(gè)解決方案做得更實(shí)用 、更好?,F(xiàn)在我們的人臉抓拍解決方案做得非常成熟,目前市場上有十幾家客戶都在使用我們的解決方案,下個(gè)月可以推出產(chǎn)品。 第二,前端、高性能人臉識(shí)別,大家知道最早由公安使用,接下來向民用滲透。公安行業(yè)更多的需要前端抓拍、后端 識(shí)別,主要由于犯罪庫比較大, 監(jiān)察庫至少30萬,大家知道日常生活中,尤其是民用場景,我們的前端可以把識(shí)別小庫做好,高性價(jià)比和低功耗方案非常實(shí)用,適用于城市安防、智慧社區(qū)、智能樓宇和智慧商業(yè),我們已經(jīng)開始在市場上做推廣。 這是我們在辦公室錄的視頻錄像,現(xiàn)在性能在1080P30幀處理的情況下,我們準(zhǔn)確率高于95%。這是門禁級(jí)別,不是簡單的布控,用在用戶體驗(yàn)最苛刻的場景中。 第三,商業(yè)客流分析解決方案,可以廣泛應(yīng)用在商業(yè)地產(chǎn)、零售門店和智能貨柜 。由于新零售比較火,我們希望通過AI解決方案,讓線下商業(yè)場景數(shù)字化,讓行業(yè)客戶對它進(jìn)行數(shù)字化管理和運(yùn)營,對人、貨、場進(jìn)行分析。除了人臉識(shí)別、屬性、客流統(tǒng)計(jì)以及動(dòng)線跟蹤,我們在第一代芯片上做的是單攝像頭。第二代芯片會(huì)做多攝像頭融合以及商品識(shí)別。 現(xiàn)在第一代芯片系列是成熟、量產(chǎn)化的系列解決方案,我認(rèn)為它帶來最大的好處,一是快,一周集成, 三個(gè)月量產(chǎn);二是高度平臺(tái)化的,它可以同時(shí)做人臉抓拍、識(shí)別、商業(yè)客流分析,如果你需求足夠大,可以拿我們的開發(fā)工具和你的數(shù)據(jù)做更加個(gè)性化的場景處理。我認(rèn)為這個(gè)方案是目前情況下最接地氣,最能快速讓廣大行業(yè)客戶和產(chǎn)品客戶直接使用的方案。 旭日第二代芯片系列是基于伯努利架構(gòu),內(nèi)核設(shè)計(jì)完畢。從現(xiàn)在開始到今年年底,一是做流片,二是同步適配算法解決方案。當(dāng)明年1月份和3月份,大家 拿到我們芯片時(shí),會(huì)同時(shí)拿到我們整體基于算法+AI的解決方案。這是4K乘2K的30fps處理,不僅可以做前端,還可以做邊緣計(jì)算產(chǎn)品。大庫容人臉識(shí)別,基于像素級(jí)語義、動(dòng)作行為分析、多路視頻流結(jié)構(gòu)化、全面升級(jí)、開放性做得更好。 第二代芯片是基于像素級(jí)的語義分割和理解,三維物體檢測,這個(gè)應(yīng)用更加多樣化。我們跟NVDIA TX2做了分類任務(wù)比較,早期我們可以做到2倍,現(xiàn)在我們可以做到TX2的10倍,我們的功耗在2瓦左右。語義分割任務(wù)的性能,我們對標(biāo)對象不是TX2,這種情況下我們的IoU對目標(biāo)進(jìn)行語義級(jí)、像素級(jí)分割時(shí),分割區(qū)域和 原始區(qū)域的重合率。業(yè)界可以看論文,70%是業(yè)界比較好的水平,在這個(gè)水平之下可以做到每秒處理16幀,我們的功耗只有2瓦。這里有很多好玩的應(yīng)用 ,原來做智能家電的朋友說你的電視做熱劇 ,我能否把時(shí)尚時(shí)裝、包摳出來做檢測、識(shí)別、分類,實(shí)時(shí)推送到用戶終端中?;诘诙酒募軜?gòu),做這件事非常有意思、非常好玩,把它變成現(xiàn)實(shí)。 第二代芯片幾個(gè)大方向:一是大庫容 ,在2瓦過程中做50萬人動(dòng)態(tài)比對,公共安防行業(yè)以后不需要GPU服務(wù)器,在實(shí)時(shí)布控場景中也不需要GPU服務(wù)器。全國30萬的抓逃庫可以布置在2瓦多芯片中,可以做成便攜式盒子,隨時(shí)隨地布控。智慧商業(yè)場景也是如此,現(xiàn)在很多智慧商業(yè)無法落地,你不可能把服務(wù)器部署在一個(gè)門店中,從功耗、可部署性和成本上都無法接受。當(dāng)我們推出第二代芯片時(shí),這個(gè)問題迎刃而解,我們把它 做在小盒子里,做大規(guī)模VRP、黑名單、 白名單處理。 二是復(fù)雜場景,視頻結(jié)構(gòu)化,這個(gè)事情出來很久了,業(yè)界老大哥公司做智能安防,他們推出基于GPU服務(wù)做了很多,但至今沒有大規(guī)模商用,我認(rèn)為性價(jià)比是很重要的原因。在推出第二代芯片解決方案時(shí),可以把獵鷹、臉譜等服務(wù)器上做好。 三是基于像素級(jí)的語義分割和理解,行為分析和多攝像頭融合。更多的用于安防、智慧社區(qū)、教育、智 慧零售、醫(yī)療等各個(gè)場所可以做越來越多有意思的AI應(yīng)用,讓它真正落地。這是我們公司做的基于像素級(jí) 的Python功能?,F(xiàn)在它在服務(wù)器上,利用第二代芯片的架構(gòu)進(jìn)行模擬,等第二代芯片出來后,直接在2瓦的芯片上實(shí)現(xiàn)。 地平線的目標(biāo)是通過AI芯片和核心算法,打造一整套解決方案,幫助我們行業(yè)客戶。我們的行業(yè)客戶并不需要建立龐大的算法團(tuán)隊(duì),甚至他們不需要有硬件團(tuán)隊(duì),現(xiàn)在有非常多的行業(yè)客戶,他們原來和硬件、行業(yè)設(shè)備不沾邊,他們做硬件也會(huì)跟我們交流,他們懂行業(yè)和需求,國內(nèi)資源非常多,我們希望通過AI賦能行業(yè),讓AI真正和行業(yè)結(jié)合,幫助大家解決一些問題。 地平線,中國芯。AI的路剛剛開始,如果您是行業(yè)客戶,我們非常歡迎您跟我們交流,現(xiàn)在各行各業(yè)的客戶都來找我們。如果你是智能設(shè)備廠商 ,我們可以幫助您三個(gè)月達(dá)到智能設(shè)備量產(chǎn), 投入的資源非常少,可能只需要一個(gè)硬件工程師和一個(gè)軟件工程師就夠了。如果您是AP、Sensor廠商 ,我們可以聯(lián)合打造解決方案。這是我的聯(lián)系方式,我們是創(chuàng)業(yè)公司,如果大家有合作需求可以直接聯(lián)系我。謝謝大家! |
|