AI強勢來襲 物聯終端運算需求急遽增溫
2021-03-10 11:55 聯合新聞網 / CTimes零組件
【作者： 王岫晨】
物聯網正帶動人工智慧走向終端裝置，在後疫情時代，企業對物聯網 AI 的投資與布局動作頻頻。Arm 主任應用工程師張維良指出，我們可以很明顯看到四大趨勢如下：
新冠疫情加速 AI 部署
根據 Arm 於 2020 年 8 月與<<麻省理工學院科技評論洞察（MIT Technology Review）>>合作、針對來自 12 個不同產業的 301 位 C Level 的科技專業人士進行的訪談報告顯示，超過 62% 的受訪者表示，他們正在投資並使用 AI 技術。來自大型企業組織（年營收超過 5 億美元）受訪者的部署率較高，接近 80%。較小型的企業組織（營收低於 500 萬美元）的部署率則為 58%。1/3 的受訪者表示，2020 年新冠疫情的爆發加速了他們在 AI 策略上的部署。
企業組織正在提高對 AI 的投資
超過一半（57%）的受訪者看到他們的 AI 預算在過去三年內提升，且接近四分之一的人表示，他們在 2016 年到 2019 年間，年度 AI 支出最少增加一倍。其中，大型企業在 AI 支出的增加更多，73% 來自年營收超過 5 億美元的企業組織受訪者的預算都有增加，有近三分之一的受訪者預算甚至提升超過 100%。這些投資加碼反映 AI 對企業營運持續成長且普遍的影響。
超過半數企業將 AI 部署在終端裝置或邊緣運算
儘管對於已經使用 AI 的企業組織，雲端運算是他們最喜歡的基礎架構，不過在越來越需要極低延遲的數據存取，以及終端/邊緣處理能力的應用上，為了兼顧成本效益及運算效率，越來越多應用將往數據產生的來源靠近，邊緣運算或是將資源擺在更靠進存取它們的裝置的地方，相關的部署將急起直追。
對應軟硬體攻擊與保護個資/隱私的需求
AI 對幾乎所有商業與社會活動層面的衝擊持續擴大，讓企業領袖必須正視 AI 能否在負責任的規範下使用。消費者一方面對於交易與運作流程中藉助 AI 的接受度越來越高，但也期待企業能在公平的、高道德標準，並能顧及永續發展的條件下使用這項技術，特別在個資的搜集。因此在邊緣運算上，也衍生出對應軟硬體攻擊以及保護隱私等運算能力的強烈需求。
物聯網 AI 應用將聚焦於「3V」
根據 Arm 與 Strategy Analytics 合作的報告顯示，多數的物聯網應用聚焦在一些特定的領域：基本控制（開/關）、測量（狀態、溫度、流量、噪音與震動、濕度等）、資產的狀況（所在地點以及狀況如何？），以及安全性功能、自動化、預測性維護以及遠端遙控，可參考圖一。
而終端 AI 可以在三個核心領域提供價值，而它觸及的許多物聯網領域，遍及 B2B 與 B2C（企業對消費者）的應用：震動（Vibration），語音（Voice）與視覺（Vision）。
震動
包含來自多種感測器數據的處理，從加速計感測器到溫度感測器，或來自馬達的電氣訊號。它可將智能帶進 MCU 中的終端 AI 的進展，產生不同應用領域，包括溫、濕度、壓力檢測、物理檢測（如滑倒偵測）、物質偵測（如漏水、漏氣）、磁通量偵測與電場偵測等等。運用震動分析的預測性維護（PdM），在旋轉型機器密集的製造工廠裡相當常見，可以揭露鬆脫、不平衡、錯位與軸承磨損等狀況。此外，磁感測器利用磁性浮筒與一系列可以感應並與液體表面一起移動的感測器，測量液面的高低。
語音
語音啟動在智慧家庭應用中很常見，例如智慧音箱，而它也逐漸成為啟動智慧家庭裝置與智慧家電的語音中樞，如電視、遊戲主機與其它新的電器。在工業環境中，供車床、銑床與磨床等電腦數值控制（CNC）機器使用的電腦語音引擎正在興起。語音整合在車輛中也相當關鍵，因為語音有潛力成為最安全的輸入模式。OEM 代工廠商持續對車載娛樂系統中的語音辨識系統，進行大量投資。其他車用的應用包括語音輸入文字簡訊、輸入目的地、播放特定歌曲或歌曲子集，以及選擇廣播電台頻道，甚至拋錨服務與禮賓服務等。
視覺
終端 AI 提供視覺領域全新的機會，特別是與物件檢測及辨識相關。包括觀察生產線的製造瑕疵，以及找出自動販賣機需要補貨的庫存。其它實例包括農業應用，例如依據大小與品質為農產品分級。曳引機裝上機器視覺攝影機後可即時檢測出雜草、分類其種類、分析其對農穫的威脅、進而客製化除草解決方案。在工業上，包括利用熱顯影來監控互動機器零件的溫度，讓任何異常情況很快變得顯而易見。具備終端 AI 能力的裝置，可以長期檢測微細的變化，觸發排程系統，自動採取適當的行動來預防零件故障。
推動物聯網運算需求
隨著物聯網與 AI 的進展以及 5G 的推出，更多的終端智能意謂小型且成本敏感的裝置，會愈來愈有聰明、功能也愈來愈強，同時因為對雲端與網際網路的依賴較小，也將具備更高的隱私性與可靠度。因此，Arm對於MCU核心，也 透過新的設計為微處理器帶來智能，降低半導體與開發成本，同時為想要有效提升終端數位訊號處理（DSP）與機器學習能力（ML）的產品製造商，加快他們產品上市的速度。
TinyML
微型機器學習（TinyML）的崛起，已經催化嵌入式系統與機器學習結合。它捨棄在雲端上運行複雜的機器學習模型，過程包含在終端裝置內與微控制器上運行經過優化的圖型識別模型，耗電量只有數毫瓦特。受惠於 TinyML，微控制器搭配 AI 已經開始增添各種傳統上威力更強大的元件才能執行的功能。這些功能包括語音辨識（例如，自然語言處理）、影像處理（例如物件辨識與識別），以及動作（例如震動、溫度波動等）。啟用這些功能後，準確度與安全性更高，但電池的續航力卻不會打折扣，同時也考量到各種更微妙的應用。
簡化程式碼的轉移性
把AI函式庫整合進 MCU，將本地的 AI 訓練與分析能力插入程式碼中是可能的。這讓開發人員依據從感測器、麥克風與其它終端嵌入式裝置取得的訊號，導出數據的型樣，然後從中建立模型。Arm Cortex-M55 處理器與 Ethos U55 微神經處理器（microNPU），利用像 CMSIS-DSP 與 CMSIS-NN 等常見API來簡化程式碼的轉移性，讓 MCU 與共同處理器緊密耦合以加速 AI 功能。透過推論工具把 AI 功能放在低成本的 MCU 上實作，並符合嵌入式設計需求，如此一來，有 AI 功能的 MCU 就有機會在各種物聯網應用中，讓裝置的設計改觀。
附圖：圖一 : 多數的物聯網應用聚焦在一些特定的領域。
圖二 : 不同應用對於機器學習的採用比起以往更盛。圖為Arm運算方案的對應圖。
資料來源：https://udn.com/news/story/6903/5307140?fbclid=IwAR2eJEJFLD1DFifJHQNbTkWEAjQSKBk3UFlM3whrk9T69h9tNXIw3geMQ8U
如何 啟用 硬 體 加速 在 [-Fx-] 55版硬體加速導致影片綠色畫面(部分解決) - 看板Browsers 的必吃
環境：e6500、9500gt(最新驅動)、4gRam、win10、firefox55.0.3(x64)
今天稍早火狐自動更新成55版，
就發現一旦啟用硬體加速，無論內容處理程序限制設定為何，
任何Html5影片的部分區塊會變成綠色畫面(如圖：
但若關閉硬體加速，影片播放中游標一旦移動，
影片畫面便會延遲甚至卡死直到游標不動，
這台電腦之前使用Chrome會當機所以無法改用它，請問有甚麼解決方法嗎？
8/28更新
感謝大家的熱心協助，整理了一些方法及效果，
1.更新顯示卡驅動至最新版
A:更新至最新版(2016/12發布)沒有改善。
2.firefox config的設定中將「gfx.canvas.azure.backends」、
「gfx.content.azure.backends」的值改成「cairo,skia」
A:無效
3.用portable firefox或esr幾個版本測試
A:54.0.1版所有影片都正常撥放沒有綠邊。
4.安裝 codec k-lite codec full
A:無效
5.Config中修改「media.mediasource.enabled」為true
A:Youtube影片恢復正常，niconico和bilibili依舊有綠邊。
6.重新開個新的profile試試看
A:無效
7.Config中修改「media.gpu-process-decoder」為false
A:無效
8.Config中修改「media.hardware-video-decoding.enabled」為false
A:youtube、niconico、bilibili影片綠邊消失，但是回到最初未開啟硬體加速的情況
影片播放中游標一移動影片就會延遲。
9/23更新
據板友推文表示56版就修正了，期待56版的正式發行。
另外也找到了55版的解決方案：
https://support.mozilla.org/zh-TW/questions/1164331
把config中的media.windows-media-foundation.allow-d3d11-dxva改成false就行了。
再次感謝大家的幫忙。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.36.166.106
※ 文章網址: https://www.ptt.cc/bbs/Browsers/M.1503767864.A.332.html
因為FX給我的使用體驗還不錯，影片的綠色區塊也很小算能夠忍受，
但還是希望能有解決方法。
因為我沒有相關專業所以上來向各位專家請教，
如果能把GC和FX都修好當然是最好不過。
感謝建議，可惜測試後依然相同QQ
感謝大家的建議，經過gadam板友的熱心協助後，
使用下列方法後
「YouTube近日預設播放設定改成HTML5 因應辦法！(增加37啟動MSE & WebM VP9方式)
https://forum.moztw.org/viewtopic.php?f=2&t=41887」
Youtube的綠色畫面就排除了，可惜其他網站的html5影片依舊，
再次感謝大家的幫忙 m(_ _)m
目前niconico、bilibili還是有綠邊，其他影音網站比較少接觸就不清楚了。
整理了一些方法是否有效。
目前先降回54版，期待未來有改善。
※ 編輯: TWChang (114.24.205.243), 08/28/2017 21:01:12
... <看更多>