曙海教學優勢
本課程面向企事業項目實際需要,秉承二十一年積累的教學品質，Xilinx-FPGA人工智能設計與實現技術高級培訓以項目實現為導向,老師將會與您分享設計的全流程以及工具的綜合使用技巧、經驗。線上/線下/上門皆可,Xilinx-FPGA人工智能設計與實現技術高級培訓專家,課程可定制,熱線:4008699035。
大批企業和曙海
建立了良好的合作關系,合作企業30萬+。曙海的課程培養了大批受企業歡迎的工程師。曙海的課程在業內有著響亮的知名度。
課程內容
第一、演示FPGA AI項目的視頻文件和Vitis AI軟件開發原理與環境搭建。
1.演示FPGA AI項目視頻文件，讓學員對FPGA AI項目的應用范圍和實現方法有一個直觀的認識。
2.FPGA AI環境搭建。
3.FPGA AI開發原理和流程。介紹深度學習處理單元DPU、AI優化器、AI量化器、AI編譯器、運行時XRT、DPU指令集等Vitis AI主要概念、開發流程、專有命令和API接口。
4.FPGA AI開發板介紹和使用。
5.Kria KV260 AI開發板加速原理和自帶例程詳解。
第二、yolov3 & yolov3_tiny口罩訓練移植全流程與yolov2_tiny & yolov4_tiny目標識別與跟蹤例程。
1.KV260 Smartcam硬件平臺制作。
2.口罩識別yolov3和yolov3-tiny模型訓練、PC驗證和移植KV260全流程。
3.Ultra96 yolov2-tiny Vitis AI 1.3模型轉換與固化、量化與編譯、開發板圖像預處理程序、DPU AI調用命令集和DPU輸出后處理程序（包括目標閾值篩選、非最大值抑制 NMS和目標框繪制）和目標跟蹤算法程序，掌握yolo模型目標識別后處理程序和用戶算法程序的編寫。
第三、Gstreamer主流AI模型全流程的設計、訓練與FPGA轉化。
1.介紹多媒體GStreamer框架和插件，包括Element、Queue、Tee、Pad、Bin等基本元素，filesrc、v4l2src、kmssink、h264parse、x264enc等主要模塊，和qp、leaky、control-rate、target-bitrate、periodicity-idr、gop-length等主要參數，并在PC虛擬機上進行pipeline編程練習。
2.介紹Xilinx基于Gstreamer框架的視頻開發套件Vitis Video Analytics SDK?(VVAS)，包括硬件與軟件對應的層次結構，主要組件omxh264enc、omxh264dec、ivas_xfilter、ivas_xmetaaffixer等的作用與命令格式，并以框圖上逐次增加功能模塊的方式講解VVAS pipeline語言如何編寫，掌握用這種高度集成和方便的工具實現FPGA AI視覺應用編程。
3.利用在前面的課程中編譯得到的yolov2-tiny xmodel模型，使用VVAS編程語言講解編寫目標識別pipeline, 實現在KV260上的視頻文件讀取、圖像預處理、DPU運行、后處理、視頻輸出和存盤的所有功能。
4.基于KV260的自帶人臉識別模型和人物跟蹤模型，分別講解編寫VVAS pipeline人臉識別和人物跟蹤,輸出顯示在HDMI上，同時改變Gstreamer VVAS參數直觀感受不同的參數對視頻帶來的影響，講解如何正確設置Gstreamer VVAS參數。
