沒被數(shù)據(jù)虐哭過(guò),不足以談自動(dòng)駕駛
自動(dòng)駕駛量產(chǎn)時(shí)代正在到來(lái)。
我國(guó)量產(chǎn)汽車的自動(dòng)駕駛等級(jí)正在從L2級(jí)(組合駕駛輔助)向L3級(jí)(有條件自動(dòng)駕駛)邁進(jìn),L4級(jí)自動(dòng)駕駛技術(shù)也在研發(fā)及測(cè)試中。
以智能網(wǎng)聯(lián)汽車產(chǎn)業(yè)“優(yōu)等生”上海為例,今年9月發(fā)布的《上海市加快智能網(wǎng)聯(lián)汽車創(chuàng)新發(fā)展實(shí)施方案》中提出,到2025年上海L2和L3級(jí)汽車占新車生產(chǎn)比例要超過(guò)70%,L4及以上汽車在限定區(qū)域和特定場(chǎng)景要實(shí)現(xiàn)商業(yè)化應(yīng)用。
(資料圖)
在自動(dòng)駕駛等級(jí)劃分中,每向上躍升一級(jí),都需要跨越鴻溝,解決特定的技術(shù)挑戰(zhàn)。
其中,最底層最基礎(chǔ)的挑戰(zhàn)也最容易被忽略,那就是數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)運(yùn)算。
讓人頭禿的數(shù)據(jù)存儲(chǔ)和計(jì)算
自動(dòng)駕駛是數(shù)據(jù)驅(qū)動(dòng)的技術(shù)。
在自動(dòng)駕駛模型訓(xùn)練過(guò)程中,數(shù)據(jù)環(huán)節(jié)掉鏈子是最要命的,直接影響模型質(zhì)量,從而影響車輛的安全性和穩(wěn)定性。數(shù)據(jù)對(duì)車輛環(huán)境感知、精準(zhǔn)定位、路徑規(guī)劃都有一定的影響。海量數(shù)據(jù)的高效存儲(chǔ)與計(jì)算,直接影響著車輛對(duì)感知層、決策層、執(zhí)行層等的技術(shù)架構(gòu)的構(gòu)建,因此,強(qiáng)大的存儲(chǔ)系統(tǒng)支撐,和上層算力效率的支持,是自動(dòng)駕駛企業(yè)普遍面臨多重?cái)?shù)據(jù)挑戰(zhàn):
數(shù)據(jù)多
自動(dòng)駕駛測(cè)試車隊(duì)一般擁有多輛路測(cè)車,一輛測(cè)試車每天產(chǎn)生的數(shù)據(jù)量可達(dá)數(shù)TB,而且數(shù)據(jù)量還在不斷增加。
數(shù)據(jù)雜
自動(dòng)駕駛需要使用的數(shù)據(jù)非常多元。數(shù)據(jù)來(lái)源有車輛數(shù)據(jù)、位置數(shù)據(jù)、環(huán)境感知數(shù)據(jù)、應(yīng)用數(shù)據(jù)、個(gè)人數(shù)據(jù)等等,數(shù)據(jù)類型涉及結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),數(shù)據(jù)服務(wù)類型又涵蓋文件、對(duì)象等等,導(dǎo)致不同業(yè)務(wù)對(duì)存儲(chǔ)接口、協(xié)議訪問(wèn)的需求多樣化。
計(jì)算頻率高,算力壓力大
隨著傳感器數(shù)量和圖像分辨率增加,算法模型日趨復(fù)雜,自動(dòng)駕駛量產(chǎn)面臨更大的算力挑戰(zhàn)。業(yè)內(nèi)有觀點(diǎn)認(rèn)為,L3級(jí)自動(dòng)駕駛需要100TOPS(1TOPS代表處理器每秒鐘可進(jìn)行一萬(wàn)億次操作)以上的算力級(jí)別,L3+級(jí)所需算力已經(jīng)上升到1000TOPS以上。
數(shù)據(jù)安全難度大
自動(dòng)駕駛汽車數(shù)據(jù)主要包括用戶隱私數(shù)據(jù)和國(guó)家地理信息數(shù)據(jù),自動(dòng)駕駛企業(yè)很難憑一己之力實(shí)現(xiàn)數(shù)據(jù)的分類分級(jí)、安全管控和隱私保護(hù)。
訓(xùn)練效率要求高
自動(dòng)駕駛模型迭代速度直接影響企業(yè)的核心競(jìng)爭(zhēng)力。自動(dòng)駕駛原始模型開發(fā)的過(guò)程中需要調(diào)用TB級(jí)的圖片數(shù)據(jù)集,數(shù)據(jù)讀取性能及海量元數(shù)據(jù)處理能力容易成為訓(xùn)練瓶頸。
自動(dòng)駕駛難題怎么解決?
面對(duì)數(shù)據(jù)存儲(chǔ)和算力難題,自動(dòng)駕駛行業(yè)需要專門定制的解決方案。而且從技術(shù)壁壘和安全的角度,最好有底層自主研發(fā)技術(shù)做支撐。這正是存儲(chǔ)界“扛把子”曙光已經(jīng)在做的。
目前,曙光推出了為自動(dòng)駕駛場(chǎng)景量身定制的“數(shù)據(jù)存儲(chǔ)+智能計(jì)算”解決方案,幫助主機(jī)廠、上下游解決方案商應(yīng)對(duì)數(shù)據(jù)挑戰(zhàn)。具體來(lái)看,曙光解決方案的能力主要體現(xiàn)在三個(gè)方面:
首先,自動(dòng)駕駛專用“數(shù)據(jù)存儲(chǔ)+智能計(jì)算”
在數(shù)據(jù)存儲(chǔ)方面,曙光解決方案兼具極致性能、靈活配置和功能豐富等優(yōu)勢(shì)。
自動(dòng)駕駛模型訓(xùn)練和大規(guī)模仿真中,車輛、道路信息等實(shí)時(shí)數(shù)據(jù)傳輸需要存儲(chǔ)系統(tǒng)強(qiáng)大的吞吐性能。曙光存儲(chǔ)事業(yè)部行業(yè)推廣總監(jiān)王紹祥表示:“只需一套設(shè)備支持,多種協(xié)議滿足不同應(yīng)用需求,在實(shí)現(xiàn)極致性能的同時(shí)兼具靈活性,實(shí)現(xiàn)多業(yè)務(wù)并發(fā)作業(yè)”。
基于領(lǐng)先的POSIX訪問(wèn)協(xié)議,曙光自動(dòng)駕駛數(shù)據(jù)存儲(chǔ)解決方案單節(jié)點(diǎn)可提供4GB/s+吞吐能力,支持大規(guī)模ETL端及標(biāo)注客戶端,可為上千個(gè)物理及容器應(yīng)用節(jié)點(diǎn)提供高性能支持。
在自動(dòng)駕駛中,數(shù)據(jù)采集、處理、模型訓(xùn)練、部署等不同業(yè)務(wù)流程對(duì)存儲(chǔ)服務(wù)的需求差異很大。曙光通過(guò)一套存儲(chǔ)系統(tǒng)支持文件、對(duì)象、容器訪問(wèn),打通多協(xié)議之間的數(shù)據(jù)流通,一份數(shù)據(jù)可以通過(guò)不同協(xié)議接口去訪問(wèn)。而且,通過(guò)靈活的配置和自動(dòng)適應(yīng)功能,做到以冷/熱等維度對(duì)數(shù)據(jù)分層存儲(chǔ),實(shí)現(xiàn)“采、存、管、用”的數(shù)據(jù)全生命周期管理。
在智能計(jì)算方面,曙光提供專為智能計(jì)算而生的大規(guī)模云端算力支撐,具備強(qiáng)勁算力的同時(shí),為自動(dòng)駕駛企業(yè)帶來(lái)高性價(jià)比。
曙光自動(dòng)駕駛數(shù)據(jù)閉環(huán)方案底層算力資源打通10余家計(jì)算中心,匯聚海量計(jì)算資源,能夠滿足模型訓(xùn)練的大規(guī)模并發(fā)計(jì)算需求,“曙光以強(qiáng)勁算力加快自動(dòng)駕駛模型訓(xùn)練進(jìn)度,全面提升云車兩端仿真訓(xùn)練效率,助力打破訓(xùn)練瓶頸。”曙光智算解決方案總監(jiān)董小海介紹道。
曙光智算解決方案總監(jiān)董小海發(fā)表主題演講
同時(shí),不同的自動(dòng)駕駛企業(yè)可以靈活選擇公有云、混合云(曙光算力外接或企業(yè)硬件統(tǒng)一納管)、專有云(裸金屬集群)等方式,通過(guò)更匹配業(yè)務(wù)需求的部署方案降本增效。
其次,自主研發(fā),保障安全合規(guī),支持開放生態(tài)
在存儲(chǔ)領(lǐng)域,曙光有十余年自主研發(fā)經(jīng)驗(yàn),具備代碼級(jí)深度定制化能力,助力自動(dòng)駕駛企業(yè)將數(shù)據(jù)安全掌握在自己手中。
自動(dòng)駕駛數(shù)據(jù)安全不是單點(diǎn)防護(hù),而是軟硬結(jié)合的全生命周期數(shù)據(jù)安全體系。曙光解決方案支持?jǐn)?shù)據(jù)權(quán)限精細(xì)化控制和算力自主調(diào)度,實(shí)現(xiàn)軟硬件全自主全流程可控,保障數(shù)據(jù)存取安全和訪問(wèn)合規(guī)。
同時(shí),曙光自動(dòng)駕駛協(xié)同方案基于兼容通用的人工智能計(jì)算架構(gòu),整體計(jì)算生態(tài)更為開放,軟硬件生態(tài)豐富,便于企業(yè)快速實(shí)現(xiàn)移植與兼容適配。而且支持多個(gè)計(jì)算框架,目前已實(shí)現(xiàn)模型算子精度性能對(duì)齊及分布式計(jì)算框架優(yōu)化。
第三,定制化服務(wù)能力
在存儲(chǔ)領(lǐng)域,曙光積累了眾多數(shù)百PB級(jí)存儲(chǔ)系統(tǒng)部署及長(zhǎng)期運(yùn)維經(jīng)驗(yàn),已為全國(guó)數(shù)千家用戶管理著數(shù)十EB的存儲(chǔ)空間。
現(xiàn)在,自動(dòng)駕駛企業(yè)也可以直接繼承曙光長(zhǎng)達(dá)十年的運(yùn)維服務(wù)經(jīng)驗(yàn)。通過(guò)7*24小時(shí)專業(yè)團(tuán)隊(duì)在線,曙光可以提供專業(yè)、定制化的服務(wù)支持,提供底層核心部件級(jí)別的深度調(diào)優(yōu),為自動(dòng)駕駛量產(chǎn)提供了必要的后勤保障。
當(dāng)自動(dòng)駕駛從L2級(jí)向L3級(jí)躍進(jìn)時(shí),更強(qiáng)大的數(shù)據(jù)解決方案的落地是前提。面對(duì)自動(dòng)駕駛行業(yè)的數(shù)據(jù)難題,曙光通過(guò)自主研發(fā)給出了存儲(chǔ)+計(jì)算的一站式解決方案,將助力自動(dòng)駕駛加速量產(chǎn)進(jìn)程。
關(guān)鍵詞: 解決方案 數(shù)據(jù)存儲(chǔ) 存儲(chǔ)系統(tǒng)
相關(guān)閱讀
-
沒被數(shù)據(jù)虐哭過(guò),不足以談自動(dòng)駕駛
海量數(shù)據(jù)的高效存儲(chǔ)與計(jì)算,直接影響著車輛對(duì)感知層、決策層、執(zhí)行... -
榮獲IVISTA“五星智能”成績(jī)!小鵬P5究...
從五邊形的維度圖也能看得出來(lái),小鵬P5的智能表現(xiàn)可以說(shuō)是形成了一... -
Model S驚艷亮相江城 ,光谷特斯拉中...
據(jù)了解,重裝開業(yè)的光谷特斯拉中心新增科技展示區(qū)和車主活動(dòng)區(qū)域,... -
qq仙俠傳什么職業(yè)升級(jí)快(qq仙俠傳什么...
大家好,小琪來(lái)為大家解答以上的問(wèn)題。qq仙俠傳什么職業(yè)升級(jí)快,qq仙... -
麻疹疫苗副作用是什么(麻疹疫苗副作用...
大家好,小琪來(lái)為大家解答以上的問(wèn)題。麻疹疫苗副作用是什么,麻疹疫... -
最新消息:藏不住了!紅旗高階自動(dòng)駕駛...
自動(dòng)駕駛,關(guān)山難越;但“奮進(jìn)者”,勇于攀登。紅旗在高階自動(dòng)駕駛...
- 沒被數(shù)據(jù)虐哭過(guò),不足以談自動(dòng)駕駛2022-12-20
- 榮獲IVISTA“五星智能”成績(jī)!小鵬P5究竟有2022-12-20
- Model S驚艷亮相江城 ,光谷特斯拉中心22022-12-20
- 三大指數(shù)集體下挫滬指失守3100點(diǎn) 地產(chǎn)股陷2022-12-20
- 蔚來(lái):去年8月前的部分用戶數(shù)據(jù)遭竊,被勒2022-12-20
- 比爾蓋茨再批馬斯克:憑直覺做決策致推特混2022-12-20
- 焦點(diǎn)簡(jiǎn)訊:藍(lán)皮書報(bào)告顯示:我國(guó)邊疆地區(qū)產(chǎn)2022-12-20
- 武漢管道燃?xì)猓貉矙z維護(hù)保平安 凝心聚力迎2022-12-20
- qq仙俠傳什么職業(yè)升級(jí)快(qq仙俠傳什么職業(yè)2022-12-20
- 麻疹疫苗副作用是什么(麻疹疫苗副作用)_2022-12-20
- 最新消息:藏不住了!紅旗高階自動(dòng)駕駛技術(shù)2022-12-20
- 當(dāng)前速看:嵐圖首款轎車追光可租賃電池,CE2022-12-20
- 環(huán)球即時(shí)看!試駕五菱Air ev 晴空:小身2022-12-20
- 活力座駕,逸鷺暢享——領(lǐng)略新朗逸風(fēng)采2022-12-20
- 遮瑕筆怎么用?能遮蓋黑眼圈嗎?2022-12-20
- 天天熱議:VOV晶透裸肌氣墊霜23自然色好用嗎2022-12-20
- 【時(shí)快訊】VOV晶透裸肌氣墊霜21亮膚色怎么2022-12-20
- VOV臻采三色眼影E04怎么樣?有哪些化妝技巧2022-12-20
- 眼影刷怎么用?眼影刷如何清洗?|熱議2022-12-20
- 天天頭條:VOV盈潤(rùn)隔離霜成分是什么?注意2022-12-20
- 眼影怎么畫好看?眼影有什么作用?|世界微2022-12-20
- 世界最資訊丨VOV臻采三色眼影E01怎么儲(chǔ)存?2022-12-20
- 毛孔隱形霜怎么用?適合哪類人群?2022-12-20
- 牛肉丸對(duì)身體好不好?牛肉丸會(huì)胖嗎?_全球2022-12-20
- 做牛肉丸為什么要加冰?牛肉丸要煮多久?-2022-12-20
- 環(huán)球最新:牛肉丸需要什么配料?牛肉丸的吃2022-12-20
- 牛肉丸要加淀粉嗎?牛肉丸需要加肥肉嗎?2022-12-20
- 潮汕牛肉丸有餡嗎?潮汕牛肉丸熱量多少?2022-12-20
- 潮汕牛肉丸有多少年歷史?潮汕牛肉丸有什么2022-12-20
- 豬肉丸子放淀粉還是面粉?豬肉丸子用什么肉2022-12-20