2024年7月8日至7月12日，永春高中3A新興科技中心與台灣設計產業人才協會共同舉辦了"2024年AI運動及醫療專題實作暑期營隊"。近年來，人工智慧已正式進入我們的生活，如我們熟知的Chat GPT、Gemini、Monica等，已經成爲各種裝置上不可或缺的一部分。雖然人工智慧在寫作、新聞、繪圖、遊戲、醫療等方面看起來非常強大，即使如此還是有些捕捉不到的小細節，這正是人們可以抓住的機會，而這次的營隊就是要讓學生們在這五天的課程中，運用AI的概念實際去了解：如何透過人工智慧影像辨識達成智慧醫療的方式、如何用AI生成製作智慧運動醫療遊戲？課程分爲兩個階段：7月8日至9日的AI運動及醫療專題實作，以及7月10日至12日的運用AI製作YAHAHA運動冒險尋寶遊戲。在最後一堂課上，學生們都要分享自己的學習歷程並上臺報告跟大家分享！首先讓我們來看看這一周的精采課程內容吧~
人工智能竟然能和醫療結合?!
第一天和第二天課程內容主要讓學生學習如何運用人工智慧來分析醫學影像，以及透過技術進行疾病診斷和運動傷害的預防。在安裝所需的程式環境和套件的過程中，講師也介紹了Python套件中的程式編寫和應用，幫助學生理解後續的實際操作。提供了實際的程式編寫訓練和數據分析技巧，讓學生分組討論如何修改程式和參數，建立自己的影像辨識模型，並理解這些工具在真實世界中的實際應用和潛在影響。
經過熟悉Python套件中的程式編寫和應用後，各組開始拍攝大量所需的數據以提升精準度。主要分成了兩個專題：五十肩和坐姿改善。使用mediapipe和SVM機器學習，透過程式先拍攝指定動作，然後輸入Demo模型進行測驗。使用簡單的左手、右手和雙手來進行測試後，再利用電腦鏡頭來偵測肢體動作，收集正確和錯誤姿勢的影像以訓練AI。最後藉由電腦將偵測到的影像與參考影像進行對比，就大功告成了！
這兩天的AI醫療營隊課程，我們相信學生們不僅收穫了醫療和AI技術相關知識，也培養了分析問題、動手實踐的能力，讓學生深入了解如何運用人工智慧技術去解決實際的醫療和健康問題，並培養了他們的程式編寫、數據分析和機器學習應用能力。接著我們來看第三天和第四天的課程吧！
應用AI遊戲軟體就能製作闖關遊戲?!
在製作遊戲時，過去常因為看到複雜的介面就會感到困惑，不知道該從何著手。然而，利用YAHAHA的AI場景生成功能對遊戲新手來說提供了很大的幫助！在第三天和第四天的課程，學生要使用YAHAHA製作出運動冒險尋寶遊戲並且要設計新穎的玩法並且設計專屬的AI醫生可供玩家諮詢問題！在下載軟體時，講師先向學生介紹YAHAHA的特色和下載方式，並指導他們如何在手機或桌機上下載更換喜歡的遊戲角色。YAHAHA主要有兩種模式：PARTY GAME (派對模式)和 HORROR GAME (恐怖模式)，而課程所使用的是PARTY GAME模式。安裝完成後，學生們根據講義開始熟悉YAHAHA的啟動介面(圖2)。
講師開始介紹 YAHAHA 遊戲AI場景生成介紹+實做，上圖最右邊有兩種模式，一個是生成自然景觀，另一個是說故事的方式生成。選擇左邊的模式後，就可以開始建造地形啦~
講師先講解人物應該如何設置在正確的地面上，以免人物受困。接著讓學生們開始建造地形，他們可以根據自己的喜好使用地形編輯器修改場景，然後根據地形建造道路，以確保卡丁車可以順利行駛。接著將兩座島連接起來，並使用內建素材庫中的卡丁車進行開車動作。在駕駛過程中，有時候可能會不小心掉進水裡或卡住，這時就需要重新鋪好地形。
除了加入卡丁車外，像是城堡、燈塔、橋等物件，同學們可以選擇自己喜歡的外觀來加進遊戲裡。學生們跟隨老師的簡報學習製作，儘管有些單字仍不太熟悉，但這並沒有阻礙學生學習YAHAHA的熱情！小編在拍攝時發現，有部分同學依照簡報上的步驟延伸出許多不同的製作方式，並開始熟悉YAHAHA的介面了！講師除了示範給同學們外，也給同學們很大的彈性來去探索！我們簡單欣賞一下同學們目前製作好的遊戲吧~
隨後，講師介紹了TRIPO AI軟體。如果YAHAHA的素材庫中沒有你喜歡的角色，你可以自行匯入自製的3D模型進入，例如可使用TRIPO AI的關鍵字輸入功能來生成角色。只需輸入英文關鍵字，例如：3D Monster（如下圖），挑選怪獸並將檔案輸出到YAHAHA軟體中，就能製作出不同類型的怪獸。除了使用YAHAHA素材庫來配合TRIPO AI的動作素材外，講師也介紹了MIXAMO官方網站，讓怪物可以擁有更豐富的動作，從而使遊戲更符合個人喜好的遊戲風格。
為了讓遊戲更豐富且刺激，除了增加怪物或更改複雜的地形外，和NPC對話領取任務是遊戲中不可或缺的元素之一（如下圖一二）。向NPC領取任務後，任務清單會顯示需要哪些道具，完成後可以獲得寶藏。透過這樣的設計可以讓玩家在遊戲中有方向，並在規定的時間內完成蒐集指定物件，取得獎勵（圖三圖四）。
來到 YAHAHA 課程最後，遊戲中建立AI NPC，使用特定的語句詢問機器人，機器人會分析你目前遇到甚麼狀況(圖二)。建立AI NPC 在遊戲裡，相對於前面所講的NPC不一樣的地方在於：透過這種互動式問答，增加遊戲的趣味性和技術實作。
結合第一天和第二天影像醫療的應用，對醫療和遊戲領域都有很大的幫助，讓玩家了解整個遊戲設計的理論基礎。學生能夠創造有教育意義且有趣的遊戲，增進使用者的身體健康和運動技能，讓遊戲整體不會變得過於無趣！
成果發表：學生作品展示與學習歷程分享
課程結束的最後一天，學生需要將這四天所學的作品整理成學習歷程檔案，製作學習歷程檔案主要包括學習目標、學習經歷、學習成果、反思與評估等內容。台灣設計產業人才發展協會 理事長與同學分享了學習歷程檔案應包含的項目，如何讓這四天的課程內容呈現更具吸引力！
製作學習歷程檔案最主要是：讓學生反思在學習過程中遇到的困難，找到解決問題的方法，同時思考未來的發展方向。和不熟悉的同學一起合作也是課程的重點之一，助於展現合作能力和團隊合作的重要性；口語和書面表達方面，也需要注意表達方式和邏輯，充分內化所學內容，評估自身能力！
同學們開始製作學習歷程檔案，過程中 理事長細心指導同學們，並給予建議，讓同學們思考要用什麼樣的方式讓簡報看起來更專業！ 製作到一個段落後，每位同學開始個別報告他們所做的學習成果歷程 ，我們來看看同學們表現得如何吧！
影像辨識班的同學分成小組，需要去設想情境，幫助有特殊症狀的病患可能會遇到的情況，並設計各種動作，方便病患傳達所需要的幫助。
這組同學們利AI影像辨識技術去監測病人的手勢和動作，及時發現和回應緊急情況。(如圖二)這些簡易的手勢可以在緊急情況下，讓家屬或是親友知道病人有什麼需求，但也因為這樣，也會有機器誤判的問題。
為了避免不好的狀況，提出了在未來可以結合line等通訊軟體，對於病患能有更及時的照顧，讓家屬和醫生可以查出患者在什麼時間做出了哪些動作。
遊戲設計班的同學們雖然都是製作同一款遊戲，但每位學生遇到的問題多少都有些不一樣，像是島嶼建的太高，沒版法爬上去；地形崎嶇，導致於無法駕駛車輛；部分英文單字看不太懂，無法找到簡報上的功能等問題。尋求隔壁同學或是老師的幫助，這些問題都能迎刃而解！
學生的創意與挑戰：AI運動及醫療專題實作營
透過這五天的課程AI運動及醫療專題實作暑期營隊，學生們不僅學到了技術知識，還深入理解了AI在醫療和遊戲領域的應用潛力。在影像醫療方面：如何運用人工智慧技術進行醫療影像辨識? 通過實際操作和團隊合作，提升了程式編寫、數據分析和問題解決的能力。在遊戲方面：如何應用AI遊戲軟體製作闖關遊戲?通過實際操作軟體，了解軟體內的功能以及操作方式。
而在製作學習歷程檔案中，反思了自己在學習過程中遇到的困難和成長，為未來的發展方向增添更多思路。每位學生的學習歷程檔案都展示了他們的努力和成果，讓我們看到了他們在短短幾天內的進步和成長。希望透過這五天的課程，能成為他們探索AI世界的起點，激勵他們在未來的道路上，不斷前行，勇攀高峰！
!!若有興趣更進一步了解，歡迎來電或來信台灣設計產業人才發展協會!!
#AI運動與醫療專題實作：五天暑期營隊激發無限創意
Comments