:::

【109年 應用案例】 自動篩果系統:利用類神經網路、AI、自動化提高篩果效率,提昇 10 倍效率、增加 17 億產值、93%準確率大幅增加品質的解決方案

臺灣地處亞熱帶,又有多樣化的地理環境,相當適合種植水果;舉凡香蕉、鳳梨都曾是紅極一時,讓我們引以為傲的熱門出口商品。然而,因為消費國農民逐漸掌握到了臺灣水果優良的種子,可以自行種出同等品質但是更加平價的相同水果,致使我們的水果出口面臨重大危機!目前,臺灣的水果如芒果、芭樂雖然仍有一定競爭優勢,但若是未能比其他國家更進一步,假以時日仍然會落入同樣的問題當中,不容我們輕忽!水果品質與品牌價值是臺灣水果產業於國際間保持競爭力的不二法門。

篩果工作是水果產銷當中決定品質的主要環節,目前業界卻囿於高度倚賴逐漸老化的農村人力,致使缺工下篩果成本上揚,良率也極難一以貫之保持穩定;因此,篩果工作的自動化,就成為相當重要且急迫的課題。國立清華大學電機工程學系李祈均教授帶領團隊透過攝影機、輸送帶、以及 AI 結合出的自動篩果系統,目前具有高達 93% 的準確度。一個產季就能為芒果單一商品提昇 17 億的產值。隨著 AI 系統的逐步發展,未來準確度可望提昇外,也可以將同樣的系統應用在其他水果之上,進一步推動水果全程產銷履歷,帶動臺灣水果產業科技化升級。

篩果工作非常仰賴稀缺的人力,農村人口老化更是雪上加霜

李祈均教授(後稱李教授)在一次聊天中,從曾一起在美國讀書的同學余(化名)處認識到水果產業面臨的困境。余是一家臺灣數一數二的大型水果國際進出口廠商的年輕第二代。根據余投身產業多年的觀察,臺灣水果初期生產出口往往可以得到相當不錯的利潤,但消費國的果農往往在取得種子之後,就會嘗試摸索在地育種,以降低成本獲取更大利潤。臺灣水果若是在品質或品牌價值上無法超出消費國果農的產品,就會因為競爭者的成本確實較低,而被淘汰。

篩果是將水果按照品質分級,如果連最低規格皆無法通過,則會打消為廢品。實務上,篩果這個工作會由農民集貨場以及經銷商的包裝場分別執行,但如果集貨場處理得不好,而包裝場又在前期抽樣沒做好,就會造成經銷商的損失,最多甚至白白打消 30% 的 A / A+ 等級的水果。

這個工作極度仰賴有經驗的篩果人員,比較有經驗的篩果人員,不只可以控制好品質,降低篩果過程中傷損水果的機率,甚至有能力額外揀出約莫 10% 的 A+ 等級水果,大大增加許多價值。令產業憂心的是,有經驗的篩果人員因為農村高齡化而逐漸凋零,成為非常稀有的資源。這樣稀有的人力資源每每在農忙時期炙手可熱,大家爭相搶奪,搶不到的農家或是經銷商,只能遷就於比較次級的人力,蒙受承擔額外損失的風險,付出更大的成本;最不幸的狀況,便是遭受前述 30% 的打消損失。

篩果是水果生產後期包裝銷售時的重要流程,若是品質控管沒做好,將會造成巨大損失

▲篩果是水果生產後期包裝銷售時的重要流程,若是品質控管沒做好,將會造成巨大損失。

AI非常適合協助篩果工作,只不過數據集的取得困難

李教授在了解余的困難之後,發現這是一個可以利用 AI 來解決的問題—篩果雖然高度仰賴具有經驗的篩果人員,卻是一個重複性很高的工作;而處理重複、資料量大的工作一直都是 AI 的強項。

不過,在研發工作還沒有開始,就面臨第一個令人頭痛的問題:要從哪一種水果開始?

首先,合適的水果需要有一定的出口量,而且必須是仍具有相當成長空間的果物;如果是部分較缺乏國際競爭力者如香蕉、鳳梨等,廠商已經沒有餘力投下更多資金購買設備,更遑論在研發時期贊助經費或是協助研發團隊實驗了。

既然有了想法,當然就要加緊腳步盡快開始實行!於是,目前仍保有一定規模優勢的愛文芒果,雀屏中選成為自動篩果系統的第一個實驗對象。

芒果採收後的第一關,就是在集貨場進行第一次的篩果,待篩果完成之後,即送至包裝場進行熏蒸消毒、準備銷售或是裝櫃外銷。然而,對於目標市場有較深入了解的外銷廠商,對於品質會更加嚴格要求,往往在包裝場熏蒸之前,還會再行篩果一次以把握水果品質。由於集貨場的員工是以篩檢的芒果數量而非芒果品質計算工資,以量取勝往往是他們工作的傾向;如此一來,後一手包裝廠為了選果品質,便不得不重工篩果而徒增勞務。解決方案看來簡單明瞭—只需要透過攝影機、分級分流的機器輸送帶,以及搭配上可以從外觀分辨芒果品質的 AI 就能夠自動篩果。但是,難點就在於 AI 要如何分辨芒果的好壞呢?對,就是必須從建立一套訓練數據集開始!為了建立數據集,李教授團隊建立網站,讓所有人都可以上傳芒果照片並且為它們分級;在完善數據集後,就能利用它們來訓練 AI。

若是集貨場的篩果工作沒有做好,包裝場又會再打消或降級最多 30% 的水果造成損失。

▲李教授團隊研發出的篩果機透過AI圖像辨識篩選品相上佳的芒果。

經過訓練的 AI 準確度高達 93%,一個產季就可以提高 17 億產值

108 年,透過工業局(現經濟部產業發展署)與 AI HUB 的協助,成功加速技術進場實證。

李教授團隊在 2 個月實證期間累積 10 萬筆數據,經過訓練的 AI 準確度高達 93% !比起正確率 70% 的人工作業高出許多,在品質上有了很明顯的差異。以出口價值計算,一個芒果產季預估可望提高 17 億的產值!更可以節省人力成本達 186.6 萬,並免於前文所提的季節缺工問題。

除此之外,因為不再需要集貨場和包裝場各篩果一次,也減少篩果過程當中人為疏失所造成的損耗。待技術更臻成熟後,未來也能將同樣的系統應用在其他的臺灣出口水果如蓮霧、芭樂上,讓臺灣的水果產業更上一層樓。

既然是 AI,就能經由不斷訓練來提高準確度,透過演算法的持續調整,以及與設備廠商的合作,可以大幅提昇產能。另外,李教授也在廠商及政府的贊助之下舉辦 AI Cup 競賽,讓更多團隊使用同樣的數據集來繼以推動演算法的發展,期待能帶動更多有興趣投入的業者進一步合作。

AI HUB 上的愛文芒果等級辨識系統

李教授團隊期許透過 AI 的力量,能夠建立水果從生產到包裝運輸的完整履歷,藉以提昇臺灣水果的品牌價值!除了期望讓臺灣水果在國外競爭激烈的市場搶占一席之地,也能隨著質量兼備的供貨,讓臺灣水果在國際上大放異彩,成為臺灣之光。

台灣水果在國際市場上仍有一定競爭優勢,但隨著外銷出口,也面臨消費國果農的競爭壓力。

▲臺灣水果在國際市場上仍有一定競爭優勢,但隨著外銷出口,也面臨消費國果農的競爭壓力。

每年芒果季輕鬆省下 186.6 萬,而且大幅提高品質

▲每年芒果季輕鬆省下 186.6 萬,而且大幅提高品質。

 

推薦案例

這是一張圖片。 This is a picture.
實現無人商店夢想 喜鵲生活建構智能機產業未來

「喜鵲生活的DNA不會只有販賣機,我們相信販賣機結合科技、通路、人文,才能帶來令我們歡欣鼓舞的成果。」這是喜鵲生活官網上的一句話,讓販賣機帶來愉悅的生活,建構貼心、科技、永續的智能機產業未來,也是喜鵲生活創立的初衷。 成立於2018年的喜鵲生活,在成立4個月之後,即推出臺灣第一台自有品牌結合行動支付掃碼感應、藉由螢幕觸碰完成消費體驗、POS系統管理、數據聚集於後台的喜鵲U1智販機,讓消費者能同步世界的新零售腳步,體驗購買便利性、結帳安全性、視覺娛樂性、提升物流補貨效率的全新零售消費體驗。 傳統販賣機缺乏資訊可見度 AI技術協助資訊透明化 此次,喜鵲智能販賣機更搭載AI技術,提供可調整貨架空間、搭配工業電腦與大尺寸觸控顯示螢幕之自動販賣機,達成無店面商店之目的。 喜鵲生活表示,傳統販賣機最大問題即是缺乏資訊可見度。想要檢查庫存,就必須由補貨人員實際檢查每一部機器,這種做法既費時,成本也高。而當機器故障時,一般更是會長時間無法運作。大多數故障均無人通報,直到下次補貨人員抵達補貨才會發現。接著還必須等待維修技師排行程,而一等就可能需要數週的時間。 傳統販賣機缺乏即時互動性,當消費者投幣後遇到狀況時廠商無法當下處理。此外,傳統販賣機更缺乏彈性,無法應消費者偏好變化而調適。 傳統販賣機存在僅限零錢購物、支付工具單一;商品擺放數量有限,選擇性少等缺點。 受到COVID-19疫情影響,消費習慣轉為非接觸式的方式,致使無人化商店市場升溫。一般自動販賣機僅能擺放較單純的商品如飲料、食品等等。可販售的產業有限。而喜鵲開發出的專利販賣機可調整貨架空間,搭配升降貨梯,適用在各種類型的商品。此外,機台搭配工業電腦與大尺寸觸控顯示螢幕,能同時達到廣告託播的需求,預計朝無店面商店的方向邁進。 根據喜鵲生活觀察發現,近兩年來的消費者市場趨勢,消費者訴求便利生活、飲食消費型態重視餐飲體驗簡單快速,並且搭配手機連網訂購模式,而且熱飲及鮮食外送是兩大趨勢重點。而設置地點、販售品項、食用方式及多元付款方式是智能販售機的市場成長重點。 就便利性而言,臺灣消費者購買自動販賣機食品仍以車站、機場、學校、商業區公司附近為最高,多樣的付款方式也更獲得消費者支持,顯示未來自動販賣機可朝品項多元和支付方式多元兩大方向展開。 AI銷售預測技術整合後台管理 達到精準行銷目的 由於商品種類繁多,難以得知商品在不同因素如季節、市場情形、促銷活動等影響下的需求,容易造成缺貨或庫存過剩的狀況,喜鵲生活特別開發「AI銷售預測技術」,整合至後台管理系統,期能透過數據分析鎖定客戶購買偏好及意願,進而達到精準行銷之目的,進而做出精準的商業決策,有效分配有限資源。 導入AI系統可達精準行銷、庫存管理及供應鏈管理三大目標。 此一系統為專為供應鏈管理人員設計的調補貨決策輔助工具,透過 AI 預測未來銷量需求,協助企業有效優化產能、庫存及配貨策略。 其整體系統架構包括: 1資料探索性分析功能:針對資料內缺失值提供自動化補值、自動編碼及自動特徵篩選功能。 2建模功能 : 1提供迴歸Regression、時間序列Time Series Forecast共兩類預測問題類型之模型訓練功能。nbsp 2支援 Auto ML 自動建模,並由系統推薦提供最佳模型,亦可建立集成模型提升模型準度。nbsp 3支援多種演算法類型:Random Forest, XGBoost, GBM等演算法。nbsp 4支援多種時間序列模型:指數平滑、ARIMA、ARIMAX、間歇性需求、動態複迴歸等模型。nbsp 5支援多種模型評估指標:R, MAE, MSE, RMSE, Deviance, AUC, Lift top 1, Misclassification等指標。nbsp 6支援自動切割訓練資料集及Holdout驗證資料集,並可手動調整比例。nbsp 7支援自動模型集成學習 Stacked Ensemble、平衡函數學習 Balancing Classes、早停法 Early Stopping。nbsp 8支援同時建立多個模型,系統將依照建模需求配置資源,讓建模、預測等任務擁有獨立的運算資源且互不影響,在整體伺服器空間有上限的情況下,運算資源能有效率被利用。nbsp 9具有記憶體運算In-memory computing功能,可藉由大容量及高速的記憶體進行運算,避免大量從硬碟中讀寫檔案,提高運算效能。 3資料串接功能: 運用API嫁接,採用完整的資料串接自動化,不需要手動匯入資料,提高使用者體驗。 4圖表分析功能:針對商品銷量提供視覺畫圖表及基本統計值。 AI數據分析解決方案具備兩大優勢: 1創業機台租售 低成本開設無人實體店與連鎖零售業合作,透過智能機讓創業者以低於店面租金的成本經營零售生意。提供機台買賣及租賃兩種合作模式,依業者評估選擇。 2多型態商品上架 24小時隨時隨地販售商品,可上架達60多種多樣化商品,透明大櫥窗提升商品能見度,定期補貨及追蹤商品販售狀況,依需求調整產品類型。 近來網路與實體界線模糊化,顧客互動方式大幅改變,消費需求多變且個性化,零售業面臨前所未有的挑戰和不確定性,掌握數據成為關鍵。AI 數據分析解決方案能幫助零售業快速活化大量資料,打造無縫的個人化體驗,最佳化營運價值鏈並提升效率,強化企業核心競爭力。

【解決方案】佐翼科技無人機導入高爾夫球場域 可節省一半人力
佐翼科技無人機導入高爾夫球場域 可節省一半人力

對於大多數的高爾夫球場而言,場務的營運及管理是一個令人頭疼的問題。「球場就是在賣草皮,場地一定要顧好」,一位高球場負責人不諱言指出。面臨球場場務人力短缺、老年化及成本高昂的市場痛點,導入AI無人機進行農藥噴灑及防蟲害,將可節省球場一半以上的人力成本,並大幅提升整體營運效率。 初夏晌午,位於桃園的台北高爾夫俱樂部,AI智慧無人機緩緩升空,其主要的任務是進行高爾夫球場AI 智慧無人機施肥噴藥的測試。事實上,執行此項任務的佐翼科技,其無人機普遍使用於稻田、香蕉、茶樹等農作物,來從事施肥施藥及防治病蟲害的工作,對於動輒數十到上百公頃的高爾夫球草坪,要運用AI無人機協助草皮維護作業,現階段將進行資料蒐集、建立施藥AI模型及多光譜影像分析測試等,未來將進一步進行大規模的技術落地驗證,為無人機導入高爾夫球場域建立典範。 透過AI無人機施肥灑藥 可節省一半人力 傳統高爾夫球場維護草坪的作業方式,是以人工揹著藥桶,或是駕駛施藥車逐一分區進行噴灑。「國內高爾夫球場於2001年起開始種植超矮性百慕達草種品系,此一草種喜好涼爽的氣候,台灣高溫潮濕的天氣型態並不適宜」,佐翼科技執行長進一步指出,為避免草皮遭受病蟲害,就必須進行農藥噴灑工作,以18洞球場而言,相當於每周要噴灑一次殺菌劑,T台及球道每兩個月噴藥一次。對於高爾夫球場而言,噴灑農藥耗時費力,重要的是,大規模噴灑將增加人員中毒與農藥量增加的風險。 農用無人機在高爾夫球場應用之效益 根據佐翼科技研究,高爾夫球場的蟲害包括夜盜蟲、斜紋夜盜蛾等,其生活習性是傍晚會出來覓食,因此,噴藥的工作必須傍晚施作。依據傳統作業方式,每次施藥估計需要兩台車三個人力,共耗費45小時的時間。若透過AI無人機施肥灑藥,操作人力僅需1人,20分鐘可以噴灑08公頃土地,約可節省三分之二的人力,也可減少營運成本30左右。 高爾夫球場草坪透過AI無人機施肥灑藥,約可節省一半人力 啟用農用無人機應用於高爾夫球場的草皮維護,除了顯著的效益顯現外,佐翼科技也特別導入AI多光譜影像辨識建立NDVI標準化植被指數分析,「所謂的多光譜是將不同的波長波段光線打在草坪的植株上,蒐集反射回來的影像進行分析」,佐翼科技劉姓執行長接著解釋,因為不同光譜,每一種植物在光的波長吸收程度不一,透過多光譜可以掌握草種生長狀況。同時再結合AI影像辨識,可以精準偵測病蟲害分布情況,據此決定施藥量的多寡。 跨領域協作 建立無人機草坪多源影像資料庫 運用AI多光譜影像辨識技術,佐翼科技將蒐集包括可見光譜、多光譜、熱影像和高光譜影像等,建立無人機草坪多源影像資料庫,完整掌握百慕達草種生長週期。 佐翼科技累積豐富的農業AI無人機噴灑藥劑經驗,但要將AI解決方案導入大面積的高爾夫球場仍有諸多問題需要克服。例如需要建立全新施藥模型及測試飛行方式,尤其是多光譜影像辨識運用,概念驗證並不困難,但實際執行則需要更多的測試實證,反覆推論,並與植物專家建立協同作業才能完成,這部分則須仰賴資策會等法人單位跨域整合,集結更多場域投入實證,建立典範,才能在高爾夫球場場域擴散。 智慧無人機導入高爾夫球場的國際案例文獻並不多,在驗證的過程中,能否快速複製至下一個球場尚未可知,但佐翼科技劉姓執行長認為,透過跨領域協作的方式,將問題定義清楚,一一臚列,供需雙方取得共識,針對每一個問題提出可以解決的方案,並找尋內外部的資源合作,才能逐步完成高爾夫球場智慧化的目標,順利協助產業轉型。 佐翼科技執行長劉峻麟

這是一張圖片。 This is a picture.
基於人工智慧的PCBA表面瑕疵檢測改善

隨著AOIAI系統的導入,我們將能提高產品良率、降低成本,從業務面來看,更可提高客戶的信任度,增加營業收益。而且AI具有難以被模仿的優勢,並非如其它設備只要花錢就買的到,讓我們的競爭對手難以追上我們。 組弘發展現況 我們致力於IOT智慧製造上,自行開發的系統已有智慧物料系統、環境溫溼度監控系統、防錯料系統、智能採購算料系統、智慧物料盤點系統、錫膏管理系統、生管系統。過去我們曾詢問過其他廠商,有關AI檢驗PCBA表面瑕疵的可能性,每個廠商都希望我們能夠購買其設備,但實際驗證後都無法達到效果,此次與資服業者討論過後,定調為AOIAI的運作模式,方覺得有可行性。 組弘科技投入AOIAI檢測計畫,用於檢查SMT零件上的文字、焊點、極性、缺件hellip等,用AI替代人工來學習AOI檢測後定義為rdquo可能是不良品rdquo的部份,提升人員產值與降低誤判率。 產業痛點 nbspnbspnbsp 台灣缺工情形嚴重,尤其願意從事目視檢查的人更少,而且年齡相對較大,檢查遺漏的狀況越來越嚴重。所以在追求高品質電子產業中,最關鍵的瓶頸已經是生產後的檢查。過去的消費性產品,異常未能被檢出,只要在一定比例下,也可被接受。現在的汽車產業如果有不良未被檢出,即有可能造成人員死亡,所以汽車產業對於品質的要求極高。要想在汽車產業的供應鏈中生存,就必須解決異常無法被檢出的問題。 nbspnbspnbsp 而且隨著台灣工資越來越高,只能設法以AI技術,取代傳統人力,否則就算解決了異常流出,但相對高的人力成本依然無法在此產業中競爭。 應用技術與說明 nbspnbspnbsp 原本過程圖一,PCB從出來Reflow後,會經過AOI檢測,分出「疑似不良品」與良品,這時「疑似不良品」的部分約為20,再由人工針對這20的部分來做複判,再將「疑似不良品」的部分區分為良品與不良品。 nbspnbspnbsp 我們想要藉由AI的技術,將原本由人工複判這20的「疑似不良品」改由AI來做,複判出來一樣會有良品與「疑似不良品」,結果一樣會有「良品」與「疑似不良品」的產生,但此時「疑似不良品」約只剩下3,也就是說組弘作業人員的工作量會從20降到只有3。理論上是AOI檢查完後,再由AI來做複判,但從表面看起來似乎只有經過AOI而已,所以我們才將這個技術稱之為A0IAI檢測圖二。 原本AOI檢測過程 操作員將待測PCB板放入AOI檢測設備,輸出AOI 檢測不良品資訊,再經由人工逐一覆判是否為不良品。 AOIAI檢測過程 操作員將待測PCB板放入AOI檢測設備,輸出AOI檢測不良品資訊後, 進由AI先進行AOI檢測不良品的覆判,輸出AI檢測不良資訊後, 再經由人工逐一覆判是否為不良品。 流程差異 nbspnbspnbsp 藉由AOIAI系統的導入,我們除了能夠提升目視檢查人員的效率與良率外,我們有了這次AI的導入經驗,以後也可將AI與大數據的運用加入到組弘原有的智慧製造系統,使我們的智慧製造系統的效能更提升,更進一步的減輕員工的工作壓力。 導入前後差異說明 推廣策略 1nbspnbspnbspnbspnbspnbsp 同領域擴散:所有SMT製造業皆會遇到檢查瓶頸導致延誤出貨的狀況,導入此系統可解決目前缺工嚴重問題並提升出貨速度與品質,自行向客戶推廣或透過設備商銷售給相關需求者。 2nbspnbspnbspnbspnbspnbsp 異業擴散規劃:與AOI製造商洽談直接將AI系統掛在AOI系統內,增加其市場競爭力。 nbsp 獲利策略 1nbspnbspnbspnbspnbspnbsp 與AOI製造商合作收取授權金。 2nbspnbspnbspnbspnbspnbsp 與SMT製造業直接銷售AI系統。 3nbspnbspnbspnbspnbspnbsp 提供SMT製造業AOIAI系統訂閱制