長庚大學人工智慧研究中心與資工系學生團隊開發「智助餐」系統 奪全國競賽冠軍

長庚大學資工系王妤霈,李羽喬,左庭瑀,林麗文四名同學組成「熊熊巴比」團隊,以「智助餐」系統打敗眾多競爭對手,勇奪「2020中華電信IoT大平台創意應用大賽」校園組冠軍,抱走20萬元獎金。該系統使用物聯網、人工智慧以及邊緣運算技術自動辨識自助餐菜色、計價、分析營養與忌食餐點,並可協助餐廳端管理物料與分析顧客喜好,商轉性高、應用範圍廣,獲獎實至名歸。

「智助餐」系統獲長庚大學人工智慧研究中心支持,在桃園長庚紀念醫院黃美涓名譽院長與長庚養生文化村戴興業主任協助下,以養生村長者餐廳為實驗場域,由工學院生物醫學工程研究所暨資訊工程學系趙一平助理教授,以及管理學院工業設計系蔡采璇教授共同指導。

趙一平老師指出,該系統最主要的功能是顧客點好餐後,可以放到攝影機下自動辨識菜色,且直接計價,減少餐廳端的負擔,簡化流程與節省時間。辨識後的數據同時也會儲存至資料庫內,成為餐廳成本控管的依據,亦可針對消費者的偏好設計菜單,減少供應消費者比較不喜歡的菜,避免浪費並降低成本。

此外,在一些需要了解顧客營養資訊的場域,例如醫院或長照機構,也可以針對每個人所點的每一道菜色提供其營養攝取資訊,幫助醫生確認病患是否有按照處方去選擇應該吃的食物。

這項硬體架構很容易移植到不同的自助餐場域使用,減少不同環境的開發成本,硬體費用相較於人力成本而言相對低廉,配合IoT大平台的數據分析功能,可針對不同情境做調整,甚至分析個別顧客喜好推薦客製化菜單,並能減少人與人接觸,在後Covid-19時代,因應人們對於衛生的要求提高,將有極大商機。

此外,系統也會記錄食材庫存量,庫存量不足時,提醒店家購買食材,食材庫存量過多或快要超過保鮮期時,提醒店家盡速處理,例如搭配促銷活動做折扣,並發送訊息提醒會員相關優惠活動,增加買氣,避免一次烹煮過多,最後造成食材浪費。

趙一平老師分析,目前確實沒有此類的設備實際運用於自助餐場域,本系統運用到人工智慧、邊緣運算、物聯網以及中華電信IOT大平台,且有因應到Covid-19疫情以及目前大家對於健身或飲食衛生的注重,且可商轉性很高,因此才能獲獎。

回想埋首於開發研究中最難忘的事,團隊成員們紛紛表示,大家為了要收集很多菜色的照片資料來訓練人工智慧模型,不得不成為自助餐的常客,每天都要去買回來拍照,拍完後又怕浪費只好吃掉,現在對於這些菜色真的已經有點膩了。此外,為了有最好的表現,同學們比賽前一晚都待在實驗室,反覆練習口頭報告與修改投影片,直到日出。

而決賽時因為要實際展示系統,大家事先還去買自助餐再帶去現場,擺出一道道菜色,讓評審老師們進行系統測試,沒想到有評審特地把菜色混合,故意讓系統辨識失敗。整個參賽過程面臨的艱辛、挑戰都很難忘,同學們很高興能通過一關關的考驗,最終獲得滿滿收穫,拿到全國校園組冠軍。

團隊成員們也分享,能得獎相當興奮與開心,只是在台上講感言時真的好緊張。接下來希望可以讓辨識準確率再繼續提高,系統運行可以更順暢,然後實際放在養生村當中使用,讓長輩們都可以利用這個系統了解自己飲食紀錄及營養攝取量,吃得營養又健康。