想象一下,當(dāng)你需要為某個(gè)工廠的生產(chǎn)車(chē)間構(gòu)建一個(gè)基于視覺(jué)的目標(biāo)檢測(cè)應(yīng)用時(shí)。傳統(tǒng)方法需要花費(fèi)大量時(shí)間采集數(shù)據(jù)樣本,而且當(dāng)工廠車(chē)間的布局發(fā)生變化時(shí),你需要重新采集大量數(shù)據(jù)。這樣的過(guò)程非常耗時(shí)、耗力,且對(duì)于數(shù)據(jù)的質(zhì)量和準(zhǔn)確性有很高的要求?，F(xiàn)在我們可以利用合成數(shù)據(jù)技術(shù)在虛擬世界合成的數(shù)據(jù)來(lái)補(bǔ)充訓(xùn)練數(shù)據(jù)集,這也是NVIDIA第八屆 Sky Hackathon大賽的主題。

本次大賽由NVIDIA企業(yè)開(kāi)發(fā)者社區(qū)與創(chuàng)樂(lè)博聯(lián)合主辦,為期3周,吸引了來(lái)自48所高校的50個(gè)參賽隊(duì)伍報(bào)名參加,總共有245名參賽者(包括導(dǎo)師)。經(jīng)過(guò)緊張激烈的競(jìng)爭(zhēng),最終有29個(gè)團(tuán)隊(duì)成功完成了比賽。

本次比賽以"工廠車(chē)間傳送帶上的紙箱檢測(cè)"為主題,參賽隊(duì)伍在比賽過(guò)程中經(jīng)歷了一系列的挑戰(zhàn)和學(xué)習(xí)機(jī)會(huì)?；顒?dòng)涵蓋了數(shù)據(jù)合成、模型訓(xùn)練、模型推理以及UI頁(yè)面搭建等過(guò)程。

在數(shù)據(jù)合成階段,每個(gè)隊(duì)伍根據(jù)提供的3D模型和場(chǎng)景,利用Omniverse Replicator進(jìn)行數(shù)據(jù)合成。此過(guò)程旨在幫助學(xué)生們熟悉深度學(xué)習(xí)數(shù)據(jù)集的合成、收集、篩選、清理和標(biāo)注過(guò)程。

接著,參賽隊(duì)伍需要根據(jù)組委會(huì)提供的教程,在自己的服務(wù)器上搭建環(huán)境,并進(jìn)行目標(biāo)檢測(cè)模型的訓(xùn)練。這一步驟讓學(xué)生們親身體驗(yàn)基于目標(biāo)識(shí)別的深度學(xué)習(xí)模型的訓(xùn)練過(guò)程。

訓(xùn)練完成后,參賽隊(duì)伍將訓(xùn)練好的模型部署在組委會(huì)提供的Jetson Xavier NX集群上,并利用NVIDIA TensorRT加速模型的推理過(guò)程。這個(gè)過(guò)程使學(xué)生們了解到利用NVIDIA TAO對(duì)模型進(jìn)行剪枝等優(yōu)化的重要性,以及TensorRT的部署能力。

為了提供更好的用戶(hù)交互體驗(yàn),每個(gè)隊(duì)伍還需要自行搭建了UI頁(yè)面,創(chuàng)建一個(gè)完整的應(yīng)用系統(tǒng)。

參賽者通過(guò)參與本次活動(dòng),不僅能夠?qū)W習(xí)到深度學(xué)習(xí)模型訓(xùn)練的實(shí)際過(guò)程,還能夠親自體驗(yàn)Omniverse Replicator合成訓(xùn)練數(shù)據(jù)、NVIDIA TensorRT對(duì)模型的部署、Jetson Xavier NX在實(shí)際場(chǎng)景中的應(yīng)用等領(lǐng)域的知識(shí)。

最終來(lái)自北京建筑大學(xué)、浙大寧波理工學(xué)院,以及東南大學(xué)和中國(guó)科學(xué)技術(shù)大學(xué)的同學(xué)們斬獲前三名,分別獲得由創(chuàng)樂(lè)博公司贊助的NVIDIA Jetson Orin NANO開(kāi)發(fā)套件一套。第四名至第20名,也將獲得創(chuàng)樂(lè)博公司贊助的Jetson NANO開(kāi)發(fā)套件。

“NVIDIA Omniverse能夠很好支撐起data-centric的深度學(xué)習(xí)研究實(shí)踐;而NVIDIA Tao開(kāi)發(fā)工具包讓本身需要很高工程要求的模型訓(xùn)練部署環(huán)節(jié)變得非常便捷;Sky hackathon對(duì)AI的大眾普及很有意義!”來(lái)自東南大學(xué),也是本次大賽第三名獲勝團(tuán)隊(duì)的隊(duì)長(zhǎng)劉夢(mèng)陽(yáng)同學(xué)說(shuō)。

“本次比賽旨在為參賽者們打開(kāi)了人工智能領(lǐng)域的大門(mén),為他們未來(lái)的學(xué)習(xí)和職業(yè)發(fā)展奠定了堅(jiān)實(shí)的基礎(chǔ)。參賽者們通過(guò)實(shí)際操作和團(tuán)隊(duì)合作,不僅提高了技術(shù)水平,還培養(yǎng)了解決問(wèn)題和創(chuàng)新的能力?！?NVIDIA GPU 應(yīng)用市場(chǎng)總監(jiān)侯宇濤表示。

“我們期待著未來(lái)的比賽和活動(dòng),為更多的學(xué)生提供機(jī)會(huì),展示他們的才華和創(chuàng)造力。同時(shí),我們也期望這樣的比賽能夠進(jìn)一步推動(dòng)人工智能技術(shù)的發(fā)展,為工業(yè)和社會(huì)帶來(lái)更多的創(chuàng)新和進(jìn)步?！?創(chuàng)樂(lè)博總經(jīng)理蒲茂表示

感謝所有參與者和支持者的努力和支持,讓本次活動(dòng)取得了圓滿(mǎn)成功。讓我們一同期待未來(lái)人工智能領(lǐng)域的發(fā)展和突破!

審核編輯黃宇