欧美激情一区二区三区在线-欧美激情一区二区三区在线播放-欧美激情一区二区亚洲专区-欧美激情在线播放一区二区三区-欧美激情在线观看一区二区三区


首頁
產品系列
行業應用
渠道合作
新聞中心
研究院
投資者關系
技術支持
關于創澤
| En
 
  當前位置:首頁 > 新聞資訊 > 機器人知識 > AI也會遭遇瓶頸 解析人工智能技術的存儲性能需求  
 

AI也會遭遇瓶頸 解析人工智能技術的存儲性能需求

來源:--      編輯:創澤      時間:2020/5/13      主題:其他   [加盟]
2020年對于很多人而言都是永遠值得銘記的一年,突如其來的新冠疫情幾乎改變了每個人的生活,它不僅給人類的經濟造成了重大損失,也給人類的健康帶來了巨大的威脅。面對這難以對付的病毒,我們既看到了無數勇士的悲壯逆行,也看到了科技在整個抗疫斗爭中所起到的關鍵作用,特別是其中的AI人工智能技術——通過AI技術我們可以加速疫苗的研發;通過AI技術,在眾多醫療終端設備以及大量的病人臨床數據中,我們能提煉出最佳的診斷方案,加速診斷的效率,提升診斷的效果。可以說,AI技術在這次關鍵的戰役中發揮出了重大的作用。

人工智能已經深入醫療、教育、工業到能源、金融等各個領域。

因此并不意外,在2020年第三屆軟件定義存儲峰會上,英特爾提出的主題是“突破內存與存儲瓶頸 釋放人工智能無限潛力”。畢竟在這場抗疫戰斗中,英特爾不僅投入重金資助合作伙伴使用AI技術進行診斷、疫苗開發方面的研究,還推動AI科技在醫學檢驗、醫療物資生產、疫情推演等多個領域加速落地,英特爾深知AI人工智能對人類的重要性。除了對抗新型病毒,AI人工智能技術其實也深入了人類生活的各個領域。英特爾公司中國區非易失性存儲解決方案事業部戰略業務開發總監倪錦峰先生在峰會上談到:“從醫療、教育、工業到能源、金融等等,每個行業都在以數字化的方式來尋求主動變革,我們可以預見的是,在不遠的將來,整個社會對數字化的服務需求將不斷地激增”。

AI人工智能技術將給存儲產品帶來重大挑戰

人工智能技術的數據管道主要分為采集、準備、訓練和推理四部分。每個部分需要讀寫不同類型的數據,工作負載也不盡相同。

“工欲善其事,必先利其器”,要想發揮出AI人工智能技術的最大威力,需要企業構建強有力的IT基礎設施。這個設施不僅需要強有力的處理器、FPGA、GPU,也需要高性能的存儲設備,否則就會如普通電腦一般,因為機械硬盤傳輸速度最慢,尋找數據的時間最長,往往會成為整個系統性能的瓶頸,即使是SATA/PCIe NAND SSD,很多時候也跟不上AI數據處理的需求。倪錦峰先生介紹到,無論用于哪個行業,人工智能的工作實際上主要由采集、準備、訓練和推理四部分組成。每個部分需要讀寫不同類型的數據,工作負載也不盡相同,將給存儲設備帶來較大的挑戰。

簡單地說,在整個人工智能執行過程中,IO的需求是不可預測、復雜多變的,它讀寫的數據主要有三個重要的特點:

第一是它的數據集大小,差異性非常大,在最初開始的采集階段是PB級別,到訓練階段是GB級別,到訓練好了執行的函數,相關的模型可能是KB級別;

第二它的工作負載也是復雜多變的,從最初百分之百的寫入到準備階段的50%讀、50%寫混合負載,到后面的一些訓練、推理階段可能出現百分之百的讀,其中包括很多的隨機讀取操作;

第三是存儲模式也會有很多變化,從一開始順序化的數據流寫入,到后面則是通過完全隨機的讀寫,來幫助建立準確的模型。

    

因此人工智能技術對存儲性能的要求是很苛刻的,用戶總是希望設備能滿足高吞吐量和低延時的需求,總是希望更多的數據能夠更加靠近處理器,以獲取及時的傳輸、執行,但用戶又會希望AI的基礎設施投資成本能在可控的范圍之內,可以說這是一個相互矛盾的需求,那么對于用戶來說如何才能實現這個愿望呢?

 

優化成本,提升性能

英特爾存儲產品構建分層存儲 

首先還是應對用戶使用的數據類型進行研究,倪錦峰先生向我們展示了英特爾經典的存儲金字塔圖。在應用中,并不是所有數據都會經常被用到,因此數據可以被分成熱數據、溫數據和冷數據等3個不同層次。熱數據即需要立馬進行處理的數據,例如銀行收到的轉賬請求,即時的地理位置等。溫數據是非即時的狀態和行為數據,例如用戶近期感興趣的話題,或用戶最近去過的地方等,冷數據則是不經常訪問的數據。

研究數據類型、數據使用所形成的工作負載,對數據進行分層,并使用最適合的設備來存儲數據可以提升存儲系統的性能,并降低成本。

如果全部使用DRAM內存來存儲這些數據,在性能上可能會表現突出,但也意味著用戶需要花費非常高昂的成本。因此更合理的是根據數據的類型、負載對它們合理地使用存儲設備。例如可以使用DRAM內存、英特爾傲騰持久內存來存儲熱數據,因為它們擁有很高的性能和超低的延遲,離CPU和GPU最近,能夠獲得及時的洞察。而英特爾傲騰固態盤搭配以英特爾為代表的TLC、QLC NAND固態盤,則憑借大容量、高性能適合用于熱、溫熱、溫存儲。這種分層設計的絕妙之處在于金字塔里的每一個層級的數據、使用產品在容量和延時特性上正好有數量級的差距,這就使得用戶可以根據數據的類型、工作負載進行冷熱分層,并同時參考自己的預算,對性能的需求,對功耗的預期,來不斷地優化自己的存儲方案。

憑借不同于傳統NAND閃存的革命性材料,傲騰具有就地寫入、支持位尋址、低延遲等三大新特性。

那么英特爾的存儲技術能否承擔起這一重任呢?從倪錦峰先生的介紹中,可以看到由于使用了不同于傳統NAND閃存的傲騰介質,傲騰持久內存、傲騰固態盤具有諸多新特性。首先是它支持就地寫入,寫入前不需要進行數據擦除。不像普通NAND閃存存在讀-修改-寫這個過程,因此它擁有更好的性能。同時在長時間寫入后,它也不會出現數據臟塊,不需要進行垃圾回收,因此傲騰產品可以很好地保持性能一致性,不會出現NAND固態盤用得越久、性能越差的問題。

與采用傳統NAND閃存的DC P4600SSD相比,傲騰固態盤DC P4800X的延遲更低、一致性更好,壽命長得多,效率更高。

其次是傲騰技術支持位尋址,可以提供超低的延遲,帶來更快的傳輸速度,畢竟AI人工智能技術的應用對存儲設備的容量和性能都有很高的要求。相比傳統NAND閃存,傲騰產品在性能上有質的提升,形象地比喻,就是將數據的載體從汽車升級為飛機。延遲方面,它最好可以做到微秒級別,雖然和內存DRAM的不到0.1 微秒相比還是存在一定的差距,但是已遠遠好于NAND閃存的近百微秒的水平。英特爾數據顯示傲騰DC固態盤的訪問延遲不僅較傳統HDD、SATA SSD大幅降低,即便與同樣采用NVMe接口的NAND SSD相比,其優勢也是非常大的——與采用3D NAND 顆粒的英特爾DC P4600 SSD 相比,傲騰固態盤DC P4800X的讀取延遲在不同寫壓力、不同隊列深度下,低了8~63倍。

此外新介質大幅提升了傲騰產品的壽命,英特爾傲騰固態盤可以支持多達60個DWPD(每日全盤寫入次數),而大家所熟悉的英特爾P4600、P4610這樣的高性能、高壽命的NAND固態盤,只能支持3個DWPD左右,英特爾傲騰固態盤的進步是非常可觀的。

人工智能技術的數據管道可以通過使用英特爾傲騰持久內存、傲騰固態盤、QLC 3DNAND固態盤,進行合理搭配來提升任務執行的效率,并降低成本、功耗。

同時從AI數據通道中的采集、整理、訓練、推理四個階段,可以看到各階段對存儲的要求是非常高的,需要有持續、一致的吞吐量,以及同樣一致、持續、超低的延遲,這些需求正是傲騰產品所擅長的,再加上英特爾QLC 3D NAND SSD所擁有的大容量(已可實現單盤32TB)、高性能特性,通過這樣一個完美的結合,可以幫助改善客戶對數據的融合,提升軟件定義存儲解決方案的性能,幫助用戶為即將到來的人工智能時代的數據爆發做好相應的準備。

 

大幅提升效率

英特爾存儲方案體現實際價值

采用傲騰固態盤后,VMWare vSAN、hadoop、CEPH等各個存儲系統的性能都獲得了大幅提升。

根據倪錦峰先生介紹,在實際使用中,不少平臺改用英特爾傲騰產品后,都獲得了很好的效果。如百度在2018年發布了基于英特爾傲騰固態盤加英特爾QLC 3D NAND固態盤的存儲解決方案,這一方案大幅提升了AI人工智能、大數據、云計算的存儲性能。在AI的一個訓練場景中,這一方案相比原來的HDD機械硬盤方案可以獲得21倍的性能提升以及96%的延遲下降,同時降低TCO多達60%。在VMWare vSAN分布式存儲系統中,將高性能緩存從NAND PCIe固態盤換成英特爾的傲騰固態盤后,其虛擬機密度提升了60%,同時系統整合率能夠提升30%;在hadoop分布式架構中,當用戶使用英特爾傲騰固態盤作為hadoop的臨時數據緩存后,其吞吐量或性能可以提升40%左右。

 

而在CEPH分布式存儲系統中,當用戶使用英特爾傲騰固態盤替換了傳統的NAND固態盤,作為元數據(metadata)緩存和journal盤后,其延遲可以降低50%左右,同時IOPS性能獲得了40%左右的提升。在微軟的Azure Stack HCI云平臺上,當用戶將英特爾傲騰固態盤作為緩存盤后,則能使每個系統、每個節點所能夠支持的虛擬機數量提升60%左右,同時虛擬機的跑分也能夠提升約80分。此外,現在也有很多國內公司正在使用英特爾傲騰技術來進行存儲解決方案的創新,包括浪潮、VMWare、XSKY、QingCloud等眾多合作伙伴。

 

讓存儲更接近計算資源讓存儲兼得高性能與穩定性


英特爾公司中國區非易失性存儲解決方案事業部戰略業務開發總監倪錦峰先生接受了采訪

從以上的技術講解、案例可以看到,英特爾解決方案之所以能有如此突出的表現,主要依賴的是性能接近內存的傲騰存儲產品。而在前不久舉行的2020英特爾中國年度戰略“紛享會”上,英特爾也提出了近內存計算的概念,那么這是否代表著未來的存儲趨勢?幸運的是,筆者在此次大會上還獲得了采訪英特爾公司中國區非易失性存儲解決方案事業部戰略業務開發總監倪錦峰先生的機會。倪錦峰先生認為在這個數據爆發的時代,特別是當5G技術發展成熟之后,所產生的大量數據無法通過網絡全部匯集到數據中心,所以部分數據必須要在邊緣進行計算,這就需要存儲和計算在邊緣端融合在一起,只有高效的存儲性能才能幫助邊緣端快速完成計算。 

而在數據中心里,則存在不少壓縮、解壓縮等具有規律性、重復性、依賴內存的計算需求,如果使用傳統的執行方式將消耗很多CPU計算資源和DRAM內存資源。英特爾的中長期目標則是將計算和存儲融合在一起,使得存儲和計算更加靠近。比如英特爾中國研究院宋繼強院長提到的方案是將FPGA與存儲架構融合在一起,存儲系統可以滿足類似實時計算的要求,比如壓縮、解壓縮、AI訓練等。同時存儲系統的參與也能有效降低用戶對CPU、內存資源的需求,從而降低成本。而性能接近內存的傲騰介質的確比較合適承擔這一重任。

顯然傲騰突出的性能是實現近內存計算的關鍵,那么企業在長時間使用傲騰時,是否需要進行額外的維護、保養呢?倪錦峰先生則表示對于傳統的NAND閃存固態盤來說,可能需要這樣的工作。畢竟傳統SSD的讀-修改-寫機制會導致垃圾數據堆積,造成性能下降,同時垃圾回收等會帶來額外的壽命損耗。傳統SSD之所以后續會出問題,一是因為垃圾堆積沒有有效處理,二是因為NAND閃存用的時間越長,它的壞塊就會越多,因此需要做很多壞塊的管理工作,壞塊越多,冗余空間越來越少,性能也會越差。


而傲騰產品沒有寫入放大的問題,同時可擦寫能力非常高,壽命有量級差異,所以它的整個生命周期里是沒有性能衰減的問題。同時傲騰產品都經歷了嚴格的性能和可靠性驗證,包括模擬了惡劣負載情況下工作5年的測試,即加速老化測試。英特爾有大量的數據證明,傲騰產品在整個生命周期里面性能是一致、持續穩定的。

傲騰將成加速AI人工智能技術的“催化劑”


在本文截稿時,新冠疫情仍沒有結束,人類仍在與之戰斗。但我們堅信沒有一個冬天不能過去,沒有一個春天不會到來,AI新興技術必將助力人類更快地戰勝疫情,加速推動社會的數字化和智能化的發展。而要加速AI技術的發展,像傲騰這樣讓數據更靠近CPU,性能接近內存的新技術必不可少。而憑借更大的存儲容量和優異的性價比,英特爾QLC3D NAND也將成為取代HDD機械硬盤陣列的一個新選擇。毫無疑問,傲騰技術與QLC 3D NAND技術的結合,將成為AI人工智能技術的“催化劑”,我們也期待著這瓶“催化劑”能讓AI人工智能技術發展得更快,并創造出更多的成果,為人類造福。





自動化所提出神經元群體間側向交互的卷積脈沖神經網絡模型

基于梯度反向傳播的脈沖神經網絡(SNN)訓練方法逐漸興起。在這種訓練方法下,SNN能夠在保留神經元內部動力學的同時獲得較好的性能

基于激光雷達的SLAM(激光SLAM)研究

Cartographer跨平臺和傳感器配置,MC2SLAM實時激光里程計系統,LeGO-LOAM種輕量級和地面優化的激光雷達里程計和建圖方法,SUMA++開源的基于語義信息的激光雷達SLAM系統

學一個忘一個?人工智能遭遇“災難性遺忘”,克服“失憶”有何良策

人工智能為什么會產生“災難性遺忘”?目前,解決災難性遺忘的方案有哪些?難點在哪?來看看專家怎么說

迎賓機器人企業【推薦】

2022年迎賓機器人企業:優必選、穿山甲、創澤智能、慧聞科技、杭州艾米、廣州卡伊瓦、勇藝達、睿博天米、銳曼智能、康力優藍、云跡科技、南大電子、獵戶星空、瞳步智能

泰政辦字〔2020〕29號 泰安市人民政府辦公室關于加快推進5G產業發展的實施意見

到2022年年底,全市建設5G基站10000個,5G技術、產品、服務在智能制造、文化旅游、城市治理、公共服務等領域廣泛應用,培育5G產業鏈優勢企業5家以上、5G產業試點示范項目20個以上,形成一批5G應用創新成果,5G產業生態體系逐步完善。

江蘇省:關于加快新型信息基礎設施建設 擴大信息消費的若干政策措施

蘇政辦發〔2020〕31號,索引號:014000319/2020-00199,江蘇省增強經濟發展新的支撐力和新動能,現提出政策措施

2020年山東省瞪羚企業十大領軍人物名單

2020年瞪羚企業十大領軍人物:朱平,李勇,肖才根,王學文,鄭淑全,苗健,程終發,張景偉,王仁鴻,陳夢夢

2020年山東省瞪羚企業自主創新十強名單

2020年瞪羚企業十強名單:創澤智能,山東儒房,煙臺云灃,山東嘉源,山東新創,山東中安,朗朗教育,山東開創,泰安市康宇,靑島乾運

濟南新材料產業園投資促進局來創澤智能機器人集團對接交流

2020年3月6日,鄭穎義局長,曲凱部長等一行4人與創澤集團董事長,副總侯月映等公司高層進行了對接交流

中國經濟活力回升 希望正重返中國市場

今日頭條,人民網,新華網,每日郵報等知名媒體,報道創澤集團疫情復工后的生產場景

自動化所提出神經元群體間側向交互的卷積脈沖神經網絡模型

基于梯度反向傳播的脈沖神經網絡(SNN)訓練方法逐漸興起。在這種訓練方法下,SNN能夠在保留神經元內部動力學的同時獲得較好的性能

習近平經濟發展新常態重大論斷,引領中國經濟行穩致遠

2020年初,突如其來的新冠肺炎疫情給我國經濟社會發展帶來前所未有的沖擊,創澤智能機器人復工復產,改裝醫用智能機器人

人工智能硬件發展的國際比較:中國、歐盟和美國

美國信息技術與創新基金會發布報告《誰會在人工智能角逐中獲勝:中國、歐盟或美國》對中國、歐盟和美國人工智能發展的現狀進行測算,分析半導體銷售量、半導體研發支出、設計AI芯片的公司數量、超級計算機數量及該系統的綜合性能情況

智能服務機器人多少錢

智能服務機器人售價大多數在12-20萬元之間,如:銳曼機器人(25萬),Cruzr(定制),創創(20萬),愛麗絲(十幾萬),云帆(十幾萬),U05(十幾萬),小勇(十幾萬

Technica公司發布智能霧計算平臺技術白皮書

SmartFog可以輕松地將人工智能分析微服務部署到云、霧和物聯網設備上,其架構支持與現有系統的靈活集成,提供了大量的實現方案,要用下一代人工智能算法來彌補現有解決方案的不足。

迎賓機器人企業【推薦】

2022年迎賓機器人企業:優必選、穿山甲、創澤智能、慧聞科技、杭州艾米、廣州卡伊瓦、勇藝達、睿博天米、銳曼智能、康力優藍、云跡科技、南大電子、獵戶星空、瞳步智能

山東機器人公司準獨角獸企業-創澤智能

山東機器人公司,創澤機器人榮獲山東省工信廳人工智能領域的準獨角獸的稱號,是中國工信部人工智能產業創新重點任務揭榜優勝單位

消毒機器人優勢、技術及未來發展趨勢

消毒機器人有哪些優勢,未來發展趨勢

家庭陪護機器人

家庭陪護機器人能在家中起到監控安全陪護具有人機互動交互服務多媒體娛樂價格查詢等

兒童陪護機器人

兒童陪護機器人與孩子互動陪伴玩耍學習價格問詢等功能說明使用指南介紹

展館智能機器人

展館智能機器人可講解自主行走語音交互咨詢互動價格咨詢等功能介紹以及表情展現能力

智能講解機器人

智能講解機器人正在劍橋講解演示咨詢互動移動宣傳價格問詢等功能說明介紹

智能接待機器人

智能接待機器人迎賓服務來賓問詢答疑價格查詢

智能主持機器人

智能主持機器人參與主持了寧夏的云天大會并完成了大會的接待任務多才多藝載很受歡迎

超市智能機器人

超市智能機器人能幫助商家吸引客戶道路指引導購價格查詢

4s店智能機器人

4s店智能機器人迎賓銷售導購數據收集分析價格問詢等

展廳智能機器人

展廳智能機器人可用于接待講解咨詢互動價格查詢等功能
 
資料獲取
新聞資訊
== 資訊 ==
» 人形機器人未來3-5年能夠實現產業化的方
» 導診服務機器人上崗門診大廳 助力醫院智慧
» 山東省青島市政府辦公廳發布《數字青島20
» 關于印發《青海省支持大數據產業發展政策措
» 全屋無主燈智能化規范
» 微波雷達傳感技術室內照明應用規范
» 人工智能研發運營體系(ML0ps)實踐指
» 四驅四轉移動機器人運動模型及應用分析
» 國內細分賽道企業在 AIGC 各應用場景
» 國內科技大廠布局生成式 AI,未來有望借
» AIGC領域相關初創公司及業務場景梳理
» ChatGPT 以 GPT+RLHF 模
» AIGC提升文字 圖片滲透率,視頻 直播
» AI商業化空間前景廣闊應用場景豐富
» AI 內容創作成本大幅降低且耗時更短 優
 
== 機器人推薦 ==
 
迎賓講解服務機器人

服務機器人(迎賓、講解、導診...)

智能消毒機器人

智能消毒機器人

機器人底盤

機器人底盤

 

商用機器人  Disinfection Robot   展廳機器人  智能垃圾站  輪式機器人底盤  迎賓機器人  移動機器人底盤  講解機器人  紫外線消毒機器人  大屏機器人  霧化消毒機器人  服務機器人底盤  智能送餐機器人  霧化消毒機  機器人OEM代工廠  消毒機器人排名  智能配送機器人  圖書館機器人  導引機器人  移動消毒機器人  導診機器人  迎賓接待機器人  前臺機器人  導覽機器人  酒店送物機器人  云跡科技潤機器人  云跡酒店機器人  智能導診機器人 
版權所有 © 創澤智能機器人集團股份有限公司     中國運營中心:北京·清華科技園九號樓5層     中國生產中心:山東日照太原路71號
銷售1:4006-935-088    銷售2:4006-937-088   客服電話: 4008-128-728

主站蜘蛛池模板: 一级黄黄色片| 亚洲欧美色综合一区二区在线| 毛片毛片免费看| 91香蕉视频网| 免费国产在线视频| 精品国产一区二区三区成人| 欧美日韩亚洲一区二区精品| 日韩一级视频| 98国内自拍在线视频| 韩国网站爱久久| 国产精品爱久久久久久久9999| 免看一级a一片成人123| 王色在线观看视频| 欧美性猛交xxxx免费看蜜桃| 黄片毛片在线免费看| 成人免费视频在线播放| 一级特黄欧美| 精品久久九九| 国产高清在线视频伊甸园| 六月丁香啪啪六月激情| 亚洲成人播放| 情侣网站 在线播放| 张柏芝国产www| 小明看片成人永久在线观看| 久碰香蕉精品视频在线观看| 美女制服一二三区| 伊人高清视频| 一级视频黄色| 久久视频在线| 国产精品久久久久久影视| 亚洲精品综合一二三区在线| 亚洲香蕉久久综合网| 国产成人精品日本亚洲18图| 国产亚洲网站| 日韩久久一区二区三区| 青青在线国产| 美国一级毛片免费| 亚洲一级生活片| 亚洲国产综合精品中文第一区| 精品欧美一区二区在线观看| 成人影片在线播放|