工具套件 – Jetson AI Lab

工具套件

NVIDIA Jetson AI Lab

NVIDIA Jetson AI Lab提供各種工具和教學模型,幫助開發者在Jetson平台上實現AI應用。它結合了強大的Jetson硬體、先進的AI模型和開發資源與生態系統,可實現自動化系統和邊緣運算的創新,無論是開發下一代機器人還是即時視訊分析,Jetson平台都提供了實現這些AI解決方案所需的工具和方案。

NVIDIA Jetson AI Lab供了優化的工具和全面的教學模型包含:

  • 大型語言模型 (LLM):探索大資料量進行預訓練的深度學習言模型的應用,如文本生成和語言模型。
  • 語言+視覺模型 (VLM):結合視覺和語言理解的多模態模型教程,包括實時流媒體的應用。
  • 圖像生成 :使用如Stable Diffusion的模型來生成高畫質量的圖像。
  • 視覺變壓器 (ViT):涵蓋了高分辨率密集預測的高效視覺變壓器。
  • 向量數據庫:處理多模態數據的向量數據庫範例。
  • 音訊:涵蓋自動語音識別和高品質音頻生成模型,如 Whisper和AudioCraft。
  • 培訓和資源 : 開發者可以取得大量的培訓資料、文檔和教學模型。

》亮點技術:在Jetson Orin進行多模式語音聊天

使用 Riva ASR/TTS 在Jetson AGX Orin上使用最新的LLaVA-1.5 13B視覺語言模型以互動方式談論圖像。

NVIDIA Jetson AI Lab應用案例

  • 運用ASR、TTS、LLM和Audio2Face以及NVIDIA Omniverse生成AI說話頭像

  • 在Jetson Orin上使用文字提示進行物件檢測和分割任何內容

更多應用案例請參考:NVIDIA Jetson AI Lab (jetson-ai-lab.com)