[導(dǎo)讀]點擊藍字?關(guān)注我們請私信我們添加白名單如果您喜歡本篇文章，歡迎轉(zhuǎn)載！云和邊緣人工智能(AI)如何改變物聯(lián)網(wǎng)2019年之前，大多數(shù)物聯(lián)網(wǎng)系統(tǒng)由超低功耗無線傳感器節(jié)點組成，通常采用電池供電，具備感測功能。它們的主要目的是將遙測數(shù)據(jù)發(fā)送到云端進行大數(shù)據(jù)處理。隨著物聯(lián)網(wǎng)成為新的流行詞和市...
點擊藍字?關(guān)注我們
云和邊緣人工智能 (AI) 如何改變物聯(lián)網(wǎng)
2019 年之前，大多數(shù)物聯(lián)網(wǎng)系統(tǒng)由超低功耗無線傳感器節(jié)點組成，通常采用電池供電，具備感測功能。它們的主要目的是將遙測數(shù)據(jù)發(fā)送到云端進行大數(shù)據(jù)處理。
隨著物聯(lián)網(wǎng)成為新的流行詞和市場趨勢，幾乎每家公司都在這樣做，以此實現(xiàn)概念驗證 (PoC)。云服務(wù)提供商有很好的儀表板，用吸引人的圖表顯示數(shù)據(jù)，輔助實現(xiàn) PoC。PoC 的主要用途是說服利益相關(guān)者投資物聯(lián)網(wǎng)，并證明投資回報，以便為更大的項目籌集資金。
隨著這個生態(tài)系統(tǒng)的擴大，需要與云來回發(fā)送大量數(shù)據(jù)，這一趨勢愈發(fā)明顯。這可能會堵塞帶寬管道，使數(shù)據(jù)更難快速進出云。還會造成延遲，輕則令人不快，重則會破壞需要保證吞吐量的應(yīng)用程序。
盡管 5G 和 Wi-Fi 6E 等標(biāo)準(zhǔn)承諾在帶寬和傳輸速度方面做出重大改進，但與云端通信的物聯(lián)網(wǎng)節(jié)點數(shù)量已出現(xiàn)爆炸式增長。除了設(shè)備的數(shù)量，成本也在上漲。早期的物聯(lián)網(wǎng)基礎(chǔ)設(shè)施和平臺投資需要變現(xiàn)，因為隨著節(jié)點的增加，基礎(chǔ)設(shè)施在具備可擴展性的同時，還要有盈利能力。
2019 年左右，邊緣計算的理念成為一種流行方案。邊緣計算在本地傳感器網(wǎng)絡(luò)中執(zhí)行更高級的處理。這最大限度地減少了需要通過網(wǎng)關(guān)到云端來回傳輸?shù)臄?shù)據(jù)量。此舉直接降低了成本，并在需要時為其他節(jié)點釋放了帶寬。減少每個節(jié)點傳輸?shù)臄?shù)據(jù)，還有可能會減少收集數(shù)據(jù)以及將數(shù)據(jù)傳輸?shù)皆贫怂璧木W(wǎng)關(guān)數(shù)量。
另一個增強邊緣計算的技術(shù)趨勢是人工智能 (AI)。早期的 AI 服務(wù)主要基于云。隨著各種創(chuàng)新的出現(xiàn)和算法效率的提升，AI 非常迅速地轉(zhuǎn)向終端節(jié)點，利用 AI 正在成為標(biāo)準(zhǔn)做法。
一個著名的例子是 Amazon? Alexa? 語音助手。一聽到觸發(fā)詞“Alexa”就能進行檢測和喚醒，這是邊緣 AI 的常見用法。在這個案例中，觸發(fā)詞的檢測是在系統(tǒng)的本地 MCU 中完成的。成功觸發(fā)后，其余命令通過 Wi-Fi? 網(wǎng)絡(luò)傳輸?shù)皆贫?，在云端完成最?yán)苛的人工智能處理。這樣一來，喚醒延遲被降到最低水平，從而提供最佳用戶體驗。
除了解決帶寬和成本問題，邊緣 AI 處理還為應(yīng)用帶來了更多好處。例如，在預(yù)測性維護中，可以在電動機上添加小型傳感器來測量溫度和振動。利用經(jīng)訓(xùn)練調(diào)較的 AI 模型，可以非常有效地預(yù)測電機何時會出現(xiàn)軸承損壞或過載情況。獲得這種早期預(yù)警對于及時維修電機至關(guān)重要，可以避免電機徹底報廢。
這種預(yù)測性維護大大減少了線路停機時間，因為設(shè)備在發(fā)生故障之前就得到了主動的維修。這在最大程度上節(jié)約了成本和降低了效率損失。正如本杰明·富蘭克林所說，“一分預(yù)防勝過十分治療”。
隨著傳感器的增加，網(wǎng)關(guān)也會被來自本地傳感器網(wǎng)絡(luò)的遙測數(shù)據(jù)壓得不堪重負(fù)。在這種情況下，有兩種選擇可以緩解這種數(shù)據(jù)和網(wǎng)絡(luò)擁塞。一是增加網(wǎng)關(guān)，二是將更多的邊緣處理推給終端節(jié)點。
將更多的處理推給終端節(jié)點（通常是傳感器）的想法正在興起，而且愈演愈烈。終端節(jié)點通常在 mW 功率范圍內(nèi)運行，在 μW 功率范圍內(nèi)的大部分時間處于休眠狀態(tài)。由于終端節(jié)點的低功耗和低成本要求，它們的處理能力也很有限。換句話說，它們的資源非常有限。?
例如，一個典型的傳感器節(jié)點可以由一個簡單的微控制器控制，就像一個具有 64 kB 閃存、8 kB RAM、時鐘速度在 20 Mhz 左右的 8 位處理器一樣簡單?；蛘撸⒖刂破饕部梢韵?Arm? Cortex?-M4F 處理器那樣復(fù)雜，具有 2 MB 閃存和 512 kB RAM，時鐘速度約為 200 MHz。
在資源受限的終端節(jié)點設(shè)備上增加邊緣處理非常具有挑戰(zhàn)性，需要在硬件和軟件層面進行創(chuàng)新和優(yōu)化。盡管如此，由于系統(tǒng)總是會包含終端節(jié)點，所以盡可能多地增加邊緣處理能力是符合經(jīng)濟效益的。
總而言之，就邊緣處理演進而言，很顯然，終端節(jié)點將繼續(xù)變得更加智能，但它們也必須繼續(xù)遵循其低成本和低功耗的資源要求。
邊緣處理將繼續(xù)盛行，云處理也是如此。能夠選擇將功能分配到正確位置，可以使系統(tǒng)針對每個應(yīng)用進行優(yōu)化，并確保最佳性能和最低成本。有效分配硬件和軟件資源是平衡性能與成本這對競爭性目標(biāo)的關(guān)鍵。合理的平衡可以最大限度地減少向云端傳輸?shù)臄?shù)據(jù)，減少網(wǎng)關(guān)的數(shù)量，并盡可能地增加傳感器或終端節(jié)點的能力。
超低功耗相機范例
由安森美(onsemi)? 開發(fā)的 RSL10 智能拍攝相機，通過一種可以隨時使用或輕松添加到應(yīng)用程序的設(shè)計，解決了這些挑戰(zhàn)。這個由事件觸發(fā)的 AI 成像平臺采用安森美和生態(tài)系統(tǒng)合作伙伴開發(fā)的一些關(guān)鍵組件，為工程團隊提供了一種簡單的方式，以低功耗的形式獲得 AI 對象檢測和識別功能。
所采用的技術(shù)是使用小巧但功能強大的 ARX3A0 CMOS 圖像傳感器拍攝單幀圖像，然后上傳到云服務(wù)進行處理。在發(fā)送之前，圖像由凌陽創(chuàng)新科技 (Sunplus Innovation Technology) 的圖像傳感器處理器 (ISP) 進行處理和壓縮。應(yīng)用 JPEG 壓縮后，通過藍牙? 低功耗通信網(wǎng)絡(luò)將圖像數(shù)據(jù)傳輸?shù)骄W(wǎng)關(guān)或手機上（有配套APP）要快得多。
該圖像處理器是本地（如終端節(jié)點）邊緣處理的一個典范。圖像在本地壓縮以減小數(shù)據(jù)大小，而后無線傳送到云端。這是一個顯而易見的好處，因為傳輸時間更短，發(fā)送到云端的數(shù)據(jù)更少，既節(jié)省電力，也降低了與數(shù)據(jù)相關(guān)的成本。
該圖像傳感器專為超低功耗運行而設(shè)計，運行時僅消耗 3.2 mW。還可以對其進行配置，在傳感器上進行部分預(yù)處理，從而進一步減少有源功率，例如設(shè)置一個感興趣區(qū)域。這讓傳感器能夠保持低功耗模式，直到在感興趣區(qū)域檢測到對象/運動。
進一步的處理和藍牙低功耗技術(shù)通信由完全認(rèn)證的 RSL10 系統(tǒng)級封裝 (RSL10 SIP) 提供，同樣來自安森美。該設(shè)備具有行業(yè)領(lǐng)先的低功耗運行和上市時間短等特點。
圖 1：RSL10 智能拍攝相機組件
AI 與圖像對象檢測
如圖 1 所示，電路板包括幾個用于觸發(fā)活動的傳感器。其中包括運動傳感器、加速器和環(huán)境傳感器。一經(jīng)觸發(fā)，電路板就會通過藍牙低功耗技術(shù)將圖像發(fā)送到智能手機上，然后配套APP將其上傳到云服務(wù)，如 Amazon Rekognition? 服務(wù)。
云服務(wù)運行機器視覺深度學(xué)習(xí)算法。就 RSL10 智能拍攝相機而言，云服務(wù)已被設(shè)置為進行對象檢測。圖像處理完成后，智能手機APP就會更新，獲得算法檢測結(jié)果及其成功概率。這些基于云的服務(wù)非常精確，因為它們實際上用了數(shù)十億張圖像來訓(xùn)練機器視覺算法。
圖 2：邊緣到云的無縫連接
總結(jié)
正如本文所述，物聯(lián)網(wǎng)正在轉(zhuǎn)變，并隨著人們的需要進一步優(yōu)化，以實現(xiàn)大規(guī)模和經(jīng)濟高效的擴展。新的連接技術(shù)不斷的開發(fā)，能夠幫助解決電力、帶寬和容量問題。人工智能不斷演進，能力與效率與日俱增，使其能夠落地邊緣甚至終端節(jié)點。物聯(lián)網(wǎng)正在成長和適應(yīng)環(huán)境的變化，以反映持續(xù)增長，并為未來的增長做好準(zhǔn)備。
安森美的 RSL10 智能拍攝相機是一個現(xiàn)代化的例子，證明了如何有效地解決這些挑戰(zhàn)，部署一個使用最小帶寬的智能化低成本系統(tǒng)。這是一個真正優(yōu)化的物聯(lián)網(wǎng)方案。
安森美的戰(zhàn)略重點是低功耗和高能效，我們開發(fā)的技術(shù)成功地解決了使人工智能落地邊緣遇到的主要問題，即功耗、帶寬和延遲。
云和邊緣人工智能 (AI) 如何改變物聯(lián)網(wǎng)
2019 年之前，大多數(shù)物聯(lián)網(wǎng)系統(tǒng)由超低功耗無線傳感器節(jié)點組成，通常采用電池供電，具備感測功能。它們的主要目的是將遙測數(shù)據(jù)發(fā)送到云端進行大數(shù)據(jù)處理。
隨著物聯(lián)網(wǎng)成為新的流行詞和市場趨勢，幾乎每家公司都在這樣做，以此實現(xiàn)概念驗證 (PoC)。云服務(wù)提供商有很好的儀表板，用吸引人的圖表顯示數(shù)據(jù)，輔助實現(xiàn) PoC。PoC 的主要用途是說服利益相關(guān)者投資物聯(lián)網(wǎng)，并證明投資回報，以便為更大的項目籌集資金。
隨著這個生態(tài)系統(tǒng)的擴大，需要與云來回發(fā)送大量數(shù)據(jù)，這一趨勢愈發(fā)明顯。這可能會堵塞帶寬管道，使數(shù)據(jù)更難快速進出云。還會造成延遲，輕則令人不快，重則會破壞需要保證吞吐量的應(yīng)用程序。盡管 5G 和 Wi-Fi 6E 等標(biāo)準(zhǔn)承諾在帶寬和傳輸速度方面做出重大改進，但與云端通信的物聯(lián)網(wǎng)節(jié)點數(shù)量已出現(xiàn)爆炸式增長。除了設(shè)備的數(shù)量，成本也在上漲。早期的物聯(lián)網(wǎng)基礎(chǔ)設(shè)施和平臺投資需要變現(xiàn)，因為隨著節(jié)點的增加，基礎(chǔ)設(shè)施在具備可擴展性的同時，還要有盈利能力。
2019 年左右，邊緣計算的理念成為一種流行方案。邊緣計算在本地傳感器網(wǎng)絡(luò)中執(zhí)行更高級的處理。這最大限度地減少了需要通過網(wǎng)關(guān)到云端來回傳輸?shù)臄?shù)據(jù)量。此舉直接降低了成本，并在需要時為其他節(jié)點釋放了帶寬。減少每個節(jié)點傳輸?shù)臄?shù)據(jù)，還有可能會減少收集數(shù)據(jù)以及將數(shù)據(jù)傳輸?shù)皆贫怂璧木W(wǎng)關(guān)數(shù)量。
另一個增強邊緣計算的技術(shù)趨勢是人工智能 (AI)。早期的 AI 服務(wù)主要基于云。隨著各種創(chuàng)新的出現(xiàn)和算法效率的提升，AI 非常迅速地轉(zhuǎn)向終端節(jié)點，利用 AI 正在成為標(biāo)準(zhǔn)做法。一個著名的例子是 Amazon? Alexa? 語音助手。一聽到觸發(fā)詞“Alexa”就能進行檢測和喚醒，這是邊緣 AI 的常見用法。在這個案例中，觸發(fā)詞的檢測是在系統(tǒng)的本地 MCU 中完成的。成功觸發(fā)后，其余命令通過 Wi-Fi? 網(wǎng)絡(luò)傳輸?shù)皆贫?，在云端完成最?yán)苛的人工智能處理。這樣一來，喚醒延遲被降到最低水平，從而提供最佳用戶體驗。
除了解決帶寬和成本問題，邊緣 AI 處理還為應(yīng)用帶來了更多好處。例如，在預(yù)測性維護中，可以在電動機上添加小型傳感器來測量溫度和振動。利用經(jīng)訓(xùn)練調(diào)較的 AI 模型，可以非常有效地預(yù)測電機何時會出現(xiàn)軸承損壞或過載情況。獲得這種早期預(yù)警對于及時維修電機至關(guān)重要，可以避免電機徹底報廢。
這種預(yù)測性維護大大減少了線路停機時間，因為設(shè)備在發(fā)生故障之前就得到了主動的維修。這在最大程度上節(jié)約了成本和降低了效率損失。正如本杰明·富蘭克林所說，“一分預(yù)防勝過十分治療”。
隨著傳感器的增加，網(wǎng)關(guān)也會被來自本地傳感器網(wǎng)絡(luò)的遙測數(shù)據(jù)壓得不堪重負(fù)。在這種情況下，有兩種選擇可以緩解這種數(shù)據(jù)和網(wǎng)絡(luò)擁塞。一是增加網(wǎng)關(guān)，二是將更多的邊緣處理推給終端節(jié)點。
將更多的處理推給終端節(jié)點（通常是傳感器）的想法正在興起，而且愈演愈烈。終端節(jié)點通常在 mW 功率范圍內(nèi)運行，在 μW 功率范圍內(nèi)的大部分時間處于休眠狀態(tài)。由于終端節(jié)點的低功耗和低成本要求，它們的處理能力也很有限。換句話說，它們的資源非常有限。?
例如，一個典型的傳感器節(jié)點可以由一個簡單的微控制器控制，就像一個具有 64 kB 閃存、8 kB RAM、時鐘速度在 20 Mhz 左右的 8 位處理器一樣簡單?；蛘撸⒖刂破饕部梢韵?Arm? Cortex?-M4F 處理器那樣復(fù)雜，具有 2 MB 閃存和 512 kB RAM，時鐘速度約為 200 MHz。
在資源受限的終端節(jié)點設(shè)備上增加邊緣處理非常具有挑戰(zhàn)性，需要在硬件和軟件層面進行創(chuàng)新和優(yōu)化。盡管如此，由于系統(tǒng)總是會包含終端節(jié)點，所以盡可能多地增加邊緣處理能力是符合經(jīng)濟效益的。
總而言之，就邊緣處理演進而言，很顯然，終端節(jié)點將繼續(xù)變得更加智能，但它們也必須繼續(xù)遵循其低成本和低功耗的資源要求。
邊緣處理將繼續(xù)盛行，云處理也是如此。能夠選擇將功能分配到正確位置，可以使系統(tǒng)針對每個應(yīng)用進行優(yōu)化，并確保最佳性能和最低成本。有效分配硬件和軟件資源是平衡性能與成本這對競爭性目標(biāo)的關(guān)鍵。合理的平衡可以最大限度地減少向云端傳輸?shù)臄?shù)據(jù)，減少網(wǎng)關(guān)的數(shù)量，并盡可能地增加傳感器或終端節(jié)點的能力。
超低功耗相機范例
由安森美(onsemi)? 開發(fā)的 RSL10 智能拍攝相機，通過一種可以隨時使用或輕松添加到應(yīng)用程序的設(shè)計，解決了這些挑戰(zhàn)。這個由事件觸發(fā)的 AI 成像平臺采用安森美和生態(tài)系統(tǒng)合作伙伴開發(fā)的一些關(guān)鍵組件，為工程團隊提供了一種簡單的方式，以低功耗的形式獲得 AI 對象檢測和識別功能。
所采用的技術(shù)是使用小巧但功能強大的 ARX3A0 CMOS 圖像傳感器拍攝單幀圖像，然后上傳到云服務(wù)進行處理。在發(fā)送之前，圖像由凌陽創(chuàng)新科技 (Sunplus Innovation Technology) 的圖像傳感器處理器 (ISP) 進行處理和壓縮。應(yīng)用 JPEG 壓縮后，通過藍牙? 低功耗通信網(wǎng)絡(luò)將圖像數(shù)據(jù)傳輸?shù)骄W(wǎng)關(guān)或手機上（有配套APP）要快得多。
該圖像處理器是本地（如終端節(jié)點）邊緣處理的一個典范。圖像在本地壓縮以減小數(shù)據(jù)大小，而后無線傳送到云端。這是一個顯而易見的好處，因為傳輸時間更短，發(fā)送到云端的數(shù)據(jù)更少，既節(jié)省電力，也降低了與數(shù)據(jù)相關(guān)的成本。該圖像傳感器專為超低功耗運行而設(shè)計，運行時僅消耗 3.2 mW。還可以對其進行配置，在傳感器上進行部分預(yù)處理，從而進一步減少有源功率，例如設(shè)置一個感興趣區(qū)域。這讓傳感器能夠保持低功耗模式，直到在感興趣區(qū)域檢測到對象/運動。
進一步的處理和藍牙低功耗技術(shù)通信由完全認(rèn)證的 RSL10 系統(tǒng)級封裝 (RSL10 SIP) 提供，同樣來自安森美。該設(shè)備具有行業(yè)領(lǐng)先的低功耗運行和上市時間短等特點。
圖 1：RSL10 智能拍攝相機組件AI 與圖像對象檢測
如圖 1 所示，電路板包括幾個用于觸發(fā)活動的傳感器。其中包括運動傳感器、加速器和環(huán)境傳感器。一經(jīng)觸發(fā)，電路板就會通過藍牙低功耗技術(shù)將圖像發(fā)送到智能手機上，然后配套APP將其上傳到云服務(wù)，如 Amazon Rekognition? 服務(wù)。
云服務(wù)運行機器視覺深度學(xué)習(xí)算法。就 RSL10 智能拍攝相機而言，云服務(wù)已被設(shè)置為進行對象檢測。圖像處理完成后，智能手機APP就會更新，獲得算法檢測結(jié)果及其成功概率。這些基于云的服務(wù)非常精確，因為它們實際上用了數(shù)十億張圖像來訓(xùn)練機器視覺算法。圖 2：邊緣到云的無縫連接總結(jié)
正如本文所述，物聯(lián)網(wǎng)正在轉(zhuǎn)變，并隨著人們的需要進一步優(yōu)化，以實現(xiàn)大規(guī)模和經(jīng)濟高效的擴展。新的連接技術(shù)不斷的開發(fā)，能夠幫助解決電力、帶寬和容量問題。人工智能不斷演進，能力與效率與日俱增，使其能夠落地邊緣甚至終端節(jié)點。物聯(lián)網(wǎng)正在成長和適應(yīng)環(huán)境的變化，以反映持續(xù)增長，并為未來的增長做好準(zhǔn)備。
安森美的 RSL10 智能拍攝相機是一個現(xiàn)代化的例子，證明了如何有效地解決這些挑戰(zhàn)，部署一個使用最小帶寬的智能化低成本系統(tǒng)。這是一個真正優(yōu)化的物聯(lián)網(wǎng)方案。
安森美的戰(zhàn)略重點是低功耗和高能效，我們開發(fā)的技術(shù)成功地解決了使人工智能落地邊緣遇到的主要問題，即功耗、帶寬和延遲。
下載文檔
