適用于邊緣設(shè)備的 Edge Impulse 機(jī)器學(xué)習(xí)平臺(tái)發(fā)布了一套在 NVIDIA TAO Toolkit 和 Omniverse 上開(kāi)發(fā)的新工具，為基于 Arm Cortex-A 處理器、Arm Cortex-M 微控制器或 Arm Ethos-U NPU 的入門級(jí)硬件帶來(lái)了新的 AI 模型。

通過(guò)結(jié)合 Edge Impulse 和 NVIDIA TAO 工具包，工程師可以創(chuàng)建可部署到邊緣優(yōu)化硬件（例如 NXP I.MX RT1170、Alif E3、STMicro STM32H747AI 和 Renesas CK-RA8D1）的計(jì)算機(jī)視覺(jué)模型。 Edge Impulse 平臺(tái)允許用戶使用經(jīng)過(guò) GPU 訓(xùn)練的 NVIDIA TAO 模型（例如 YOLO 和 RetinaNet）提供自己的自定義數(shù)據(jù)，并對(duì)其進(jìn)行優(yōu)化，以便在帶或不帶 AI 加速器的邊緣設(shè)備上部署。

NVIDIA 和 Edge Impulse 聲稱，這一新解決方案可以將大規(guī)模 NVIDIA 模型部署到基于 Arm 的設(shè)備上，目前可以使用以下對(duì)象檢測(cè)和圖像分類任務(wù)：RetinaNet、YOLOv3、YOLOv4、SSD 和圖像分類。 您可以在您自己的平臺(tái)上進(jìn)行嘗試。，缺點(diǎn)是該解決方案需要 GPU 進(jìn)行訓(xùn)練。

另外一項(xiàng)合作是 Edge Impulse 與 NVIDIA Omniverse 的集成，適用于使用合成數(shù)據(jù)和邊緣測(cè)試環(huán)境的應(yīng)用程序。 對(duì)于獲取真實(shí)世界數(shù)據(jù)成本高昂、耗時(shí)、產(chǎn)生隱私問(wèn)題或根本無(wú)法解釋所有類型場(chǎng)景的情況，合成數(shù)據(jù)生成非常有用。 Edge Impulse 依靠 NVIDIA Omniverse Replicator 生成合成數(shù)據(jù)，然后將這些數(shù)據(jù)輸入到邊緣設(shè)備的 AI 模型中，用于檢查制造生產(chǎn)線以檢測(cè)缺陷、設(shè)備故障或手術(shù)對(duì)象檢測(cè)以防止術(shù)后并發(fā)癥等應(yīng)用。

合成數(shù)據(jù)生成的好處包括：

通過(guò)虛擬工具降低物理原型設(shè)計(jì)和測(cè)試成本

加快開(kāi)發(fā)時(shí)間和實(shí)驗(yàn)，從而加快上市時(shí)間

模擬傳感器和模型行為、測(cè)試 MCU 兼容性等

使用合成數(shù)據(jù)增強(qiáng)模型可靠性并創(chuàng)建難以復(fù)制的場(chǎng)景