NVIDIA 第九屆 Sky Hackathon 邀請信 | 大模型時代下探索 AI 圖文多模態(tài)解決方案

聯合發(fā)起方：NVIDIA，Microsoft Reactor

特邀贊助合作伙伴：創(chuàng)樂博，合眾恒躍（排名不分先后）

尊敬的老師和同學們，

我們非常榮幸邀請您參加我們第九屆 Sky Hackathon 大賽。

在大模型時代，如何在物聯網設備上構建一個基于大模型的應用解決方案 （比如如何通過幾張照片讓大模型給自己生成一個小故事）？

本次 Hackathon 將透過由 NVIDIA 和微軟導師精心設計的在 NVIDIA Jetson 上使用大模型的場景，使參與者完整體驗大模型的應用場景，以及如何綜合人工智能知識來打造新一代的智能化應用。主辦方為參與體驗的觀眾提供了免費的 Jetson 云端編程環(huán)境，確保每位參與者都能充分參與并學到實際操作技能。 參與者通過遠程訪問 Jetson 計算節(jié)點，親身體驗如何將 Resnet50 模型從 ONNX 格式轉換為 TensorRT 推理引擎。這個過程不僅將模型進行優(yōu)化以提高性能，還展示了 NVIDIA Jetson 在深度學習加速方面的卓越表現。生成的 TensorRT 推理引擎文件將為后續(xù)任務提供高效的計算基礎。在圖像內容被識別后，通過 Microsoft OpenAI Service 將這些識別的圖像內容轉化為一個引人入勝的故事。這一步驟演示了如何將圖像識別與自然語言處理相結合，以生成有趣和富有創(chuàng)造力的故事情節(jié)。 學生通過上述兩個手段，利用網頁，搭建自己的應用。 我們期待您能夠參加本次 Hackathon，并一起探索如何使用生成式 AI 技術來解決實際問題。

比賽贊助商

湖南創(chuàng)樂博智能科技有限公司（創(chuàng)樂博）是一家教育設備公司，相關產品主要包括樹莓派、NVIDIA Jetson 系列等，包括科教設備上千款產品。

【官方網站】：https://www.loborobot.com/

【電商平臺】：https://chuanglebo.tmall.com/

北京合眾恒躍科技有限公司（HZHY）是一家領先的嵌入式產品研發(fā)和應用解決方案提供商。作為NVIDIA Jetson 系列產品全球 NPN 官方合作伙伴，開發(fā)了基于 Jeston 系列產品系列載板和智盒，應用在邊緣計算、無人機飛控、圖像處理和機器視覺領域。

【官方網站】：www.hzhytech.com

【電商平臺】：hz-ai.taobao.com

比賽主題

本次活動以 “我的 AI 應用” 為主題, 利用 Jetson 平臺的計算能力和 Azure OpenAI 的接口, 創(chuàng)建自己的應用,包含以下過程:

1.圖像識別:每組隊伍自行分工, 將圖像識別技術融入到最終的作品中。2.生成式模型調用:調用 Azure OpenAI 的接口根據關鍵字生成故事內容。3.UI 頁面搭建:每組隊伍可以根據組委會提供的教程自行搭建用戶交互系統(tǒng), 可以自行設計風格和定義額外功能。

通過本次活動,學生將會實際體驗到:

?基于圖像識別的深度學習模型的訓練過程?利用 NVIDIA TAO 對模型進行剪枝等優(yōu)化過程?利用 NVIDIA TensorRT 對訓練好的模型進行部署?利用 Azure OpenAI 接口調用大模型生成文字內容?利用 Jetson Xavier NX 進行實際場景實驗?深度學習數據集的合成、收集、篩選、清理和標注過程?基于 Flask web 框架創(chuàng)建完整的應用系統(tǒng)?與 NVIDIA 專家分享經驗和見解，交流學習心得；?與團隊合作完成挑戰(zhàn)，有機會獲得獎項和榮譽。

評分標準

所有參賽隊伍將接受其余所有隊伍的評分, 最終評分為其余所有隊伍評分的平均分。

評分類目如下：1. 內容創(chuàng)意2. 技術創(chuàng)意3. 頁面設計4. 完成度

*每一項 25 分， 共計 100 分

*分數最高者為勝出團隊。

比賽形式和硬件要求

Sky Hackathon 大賽為線上活動。

組辦方會提供比賽用的推理平臺，參賽隊伍可以在線訪問。

活動日程安排

活動形式：線上

活動安排：11 月 26 日上午訓練營, 12 月 1 日~ 3 日比賽日

活動形式：50 個隊

線上報名（https://jinshuju.net/f/nhEXmc），每個參賽隊員都需要報名。報名后，組委會聯系隊長繳納報名費后才算報名成功。且中途退賽不退還報名費。報名時間內，如果所有席位報滿，組委會將有權提前關閉報名通道。
11/26	AI訓練營
940	歡迎致辭	Maggie Liu, NVIDIA全球副總裁
950	贊助商致辭	創(chuàng)樂博代表
900	贊助商致辭	合眾恒躍代表
1000	1. 宣布黑客松的比賽規(guī)則 2. 利用 Jetson 平臺圖像推理任務 3.Azure 平臺簡介 4. 如何使用 Azure OpenAI 接口 5.介紹用戶接口的 Web 頁面實現	何琨，NVIDIA 企業(yè)開發(fā)者社區(qū)高級經理 盧建輝，微軟高級云技術布道師 李奕澎，NVIDIA 企業(yè)開發(fā)者社區(qū)經理 吳楚陽，NVIDIA 企業(yè)開發(fā)者社區(qū)內容營銷經理
12/01	線上測試
1800	開放 Jetson Xavier NX 云平臺給參賽隊伍做測試
12/02	線上測試
800	開放 Jetson XavierNX云平臺給參賽隊伍做測試
12/03	比賽
800	開放 JetsonXavierNX云平臺給參賽隊伍做測試
1400	各隊開始遠程提交最終作品，組委會進行作品評測， 系統(tǒng)停止接受作品提交時間為 14:00 同時各參賽團隊需要在 16:00之前提交一份不少于 800 字的項目報告。 如果有評分一樣的，需要有加時賽直到確定比分順序
12/04	公布比賽結果及大賽總結
1005	公布比賽結果	NVIDIA
1010	合作伙伴發(fā)言	創(chuàng)樂博代表
1015	合作伙伴發(fā)言	合眾恒躍代表
1000	本次大賽選手發(fā)揮及經驗總結	何琨，NVIDIA 企業(yè)開發(fā)者社區(qū)高級經理

參賽推理平臺

硬件平臺：NVIDIA JetsonXavier NX（ 8G Memory ）

操作系統(tǒng)：Ubuntu 18.04 L4T 64位元桌面版

開發(fā)環(huán)境：CUDA 10.2、CUDNN8.2、TensorRT8.0、OpenCV4.1.1

教學環(huán)境：Jupyter Lab 2.2

同時為參賽隊伍提供真實的Jetson Xavier NX編程環(huán)境

關于組隊和報名

Sky Hackathons 目前針對高校學生，當然有興趣參與的高中學生也歡迎。一般不需要有 GPU 編程經驗，但是最好有一定 Python 和編程基礎；對深度學習、神經網絡有一定理論基礎；

大賽預計招募50個隊伍。

此次活動采用導師制, 所以每個參賽隊伍都需要有一名指導老師。導師需要能夠敦促參賽團隊完成兩次在線 AI 訓練營的學習，以及最后的比賽。能給予團隊成員一定的技術指導。

此次活動采用導師制, 所以每個參賽隊伍都需要有一名指導老師。導師需要能夠敦促參賽團隊完成在線 AI 訓練營的學習，以及最后的比賽。能給予團隊成員一定的技術指導。

黑客精神就是團隊合作，每隊需要選出一名隊長，作為主要代表及聯絡人，同時也是決賽評委會成員，參與最后打分，除此之外，隊長還負責紀念品的領取。

所有團隊成員應單獨報名，并填寫團隊名稱以及導師名字。每隊限 3-5 人（不含導師）。如果報名團隊多于 5 人或者少于 3 人，我們將視為團隊無效。

關于Sky Hackathon大賽

Sky Hackathon 由 NVIDIA 發(fā)起并主辦，項目旨在幫助在校學生、深度學習開發(fā)者在 NVIDIA Jetson 邊緣高性能計算產品上部署和優(yōu)化人工智能應用。在經驗豐富的 GPU 導師指導下，通過黑客松競賽的方式學習業(yè)界所需的深度學習相關應用開發(fā)及其并行計算技能，激發(fā)學生們的學習興趣與創(chuàng)新力。

NVIDIA 工程師將親自為參賽隊伍帶來他們對最新的深度學習與邊緣計算方面的理解、行業(yè)的趨勢與最新的技術應用及最新開發(fā)工具實戰(zhàn)技能知識，在訓練營中對參賽隊伍進行指導。

Sky Hackathon 為參加者提供了一個難得的學習并實操的機會，學習嵌入式深度學習開發(fā)所需的動手技能，通過使用 NVIDIA 最新的編程模型、庫和工具以加速和優(yōu)化他們的 AI 應用程序。

整個活動包含了訓練營和黑客松比賽，全程采用在線的方式。

50 個參賽席位等待您，名額報滿即關閉報名通道。

報名或者咨詢Sky Hackathon大賽

點擊文末“閱讀原文”報名參加本次 Sky Hackathon 大賽！

咨詢本屆 Sky Hackathon 相關問題，

請微信添加 NVIDIA 企業(yè)開發(fā)者社區(qū)小助手

往期活動回顧

第一屆活動可以訪問：

https://mp.weixin.qq.com/s/NmKVftUs5diTrDRl2Rblmg

第二屆活動可以訪問：

https://mp.weixin.qq.com/s/1M50CStTGzQTY2ADuUpeYQ

第二屆活動導師評價：

https://mp.weixin.qq.com/s/Sue6OV0eZyYlD2vvSLvwEg

第三屆活動可以訪問：

https://mp.weixin.qq.com/s/r-nd9zDbaYdrQ0nZzKl5vg

第四屆活動可以訪問：

https://mp.weixin.qq.com/s/df1QCJ5MRLd8CxrHkSylcg

第五屆活動可以訪問：

https://mp.weixin.qq.com/s/Rt9Xz_YmI9VsjL8tUsjuqg

第六屆活動可以訪問：

https://mp.weixin.qq.com/s/VzX3bjmXQ_el0W-Ilc8ltg

第七屆活動可以訪問：

https://mp.weixin.qq.com/s/nDNn6SszX14pE5KIqNMITg

GTC 2024 將于 2024 年 3 月 18 至 21 日在美國加州圣何塞會議中心舉行，線上大會也將同期開放。掃描下方海報二維碼，立即注冊 GTC 大會。