:::

【109年 應用案例】 「AI麵包辨識系統」,機器一掃,價格瞬間幫你算好!

轉化AI人臉辨識技術的奇思妙想

隨著人工智慧發展,越來越多行業開始擁抱AI技術,甚至悄悄走入人們生活之中。由於烘焙店多數販售的是新鮮現做的麵包與西點,而現烤麵包通常不會有條碼,必須依賴結帳人員肉眼辨識,並逐一輸入麵包種類與價格,於是從AI人臉辨識技術得到靈感,想像若是能把這樣的人工智慧技術轉換對上百款的麵包作辨識,或許能提升門市結帳效率……。

手作麵包多樣化,樂了顧客,苦了店員!

國內某烘焙屋的麵包品項多達100種以上,且會定期更換或新增商品,讓顧客有多樣化的選擇;但這也讓結帳人員視為一種挑戰。

店家訓練一位結帳人員所需時間為2個月,但正式上線服務後,每個月還是會發生5至10%不等因麵包辨識錯誤而結錯帳的問題,且結帳高峰期通常是下班時期,所以時常造成結帳塞車,結帳人員又會因為緊張而更容易算錯金額。而結帳人員訓練困難且結帳流程不精準的問題,讓業者困擾已久……。

當烘焙遇見人工智慧,迸出智慧零售妙體驗!

在一般的麵包店都是新鮮出爐後先「裸裝販售」,待麵包溫度降為常溫狀態後再進行「包裝販售」,這兩種結帳方式都需結帳人員辨識及記憶價錢才能進行,且櫃台人員需要2個月的教育訓練才能上線結帳,上線後每月還是會有5至10%的錯誤機率。而邁迪烘焙屋麵包品項多達100種以上,對結帳人員著實是一大挑戰!

因雲逵科技有限公司擅長開發iPad POS,且設計的理念就是簡單、方便、好用,讓店家能輕鬆、快速且正確的結帳,所以結合現有的POS系統,再加上AI影像辨識的功能,讓店家能更有效率且精準地完成每一筆交易。

AI麵包辨識模型運作示意圖 (圖片來源-雲逵科技提供)

▲AI麵包辨識模型運作示意圖 (圖片來源-雲逵科技提供)

而執行方式可以簡化為八個步驟,包含:

1.收集數據:至烘焙業者拍攝麵包影像數據。

2.影像標註:影像數據交予木刻思股份有限公司進行人工標註。

3.AI建模及訓練:由木刻思負責AI建模及訓練的調整。

4.iPad POS調整:在建模的同時,POS端將進行前端UI介面的調整,以及後台端與AI model的串接。

5.開始測試:當木刻思以現有數據,達到辨識率95%以上,即正式開始串接測試。

6.實際場景測試:實際移至麵包店拍攝採集數據,實際驗證其影像辨識正確率。

7.規劃實際場景應用附件:當辨識正確率達98%以上,將設計應用於現場結帳之附件,如:遠端拍攝鏡頭及投射光源。

8.正式應用:結合電子發票正式上線。

POS機AI麵包辨識結帳流程:開始辨識-辨識完成-結帳-確定結帳,只需3秒 (圖片來源-雲逵科技提供)

▲POS機AI麵包辨識結帳流程:開始辨識-辨識完成-結帳-確定結帳,只需3秒 (圖片來源-雲逵科技提供)

AI麵包辨識系統,一兼三顧好輕鬆!

加值AI能量後,不但可節省烘焙坊結帳人員事前訓練時間及成本,並減少人員辨識錯誤的成本,亦可加速結帳流程與效率,增加客戶滿意度,後續可推廣至各大零售業,擴增智慧零售的新版圖。

AI加值前後的麵包結帳流程比較圖 (圖片來源-雲逵科技提供)

▲AI加值前後的麵包結帳流程比較圖 (圖片來源-雲逵科技提供)

推薦案例

【導入案例】海量數位工程AOI機器智能手臂檢測系統 大幅提高瑕疵檢測精準度
海量數位工程AOI機器智能手臂檢測系統 大幅提高瑕疵檢測精準度

臺灣堪稱製造業大國,然而,在產線上,品質瑕疵檢測一直是製造業長期痛點,雖然有AOI設備可輔助,但大多採用固定式機器,受限於角度,診斷不夠精準,誤判率也高。海量數位工程公司導入AOI機器智能手臂檢測系統,可有效降低誤判率,提高瑕疵檢測精準度。 一般來說,產品的良率攸關企業的成本與客戶的退貨率,而製造產業品質瑕疵的檢測流程,往往需要編制大量的品質檢測人力。目前製造業檢測工具雖然有AOI設備來輔助進行,但這些設備多半採用固定式的檢測機器,固定式相機容易受限於角度,導致診斷不夠精準,誤判率太高等缺點,因此,人員在後端需要再次篩選檢驗,也就是複檢,通常人工目測檢視的瑕疵漏檢率平均在5上,甚至可高達20。 製造業品質檢測三大痛點 機器手臂AOI之動態多角度品檢協助解決 根據海量數位工程實際了解製造業在檢測產品品質有三大痛點: 痛點一、人力檢測產品品質出錯率高 目前製造業多以人力來檢測產品外觀,但人工判斷多半有誤差,例如:表面刮傷、色差、焊道外觀hellip等,瑕疵判斷出錯率高,且須待成品階段才能一次性檢驗,時常出貨前全檢後依然遭整批退件,導致重製及人力成本大增。 痛點二、品質檢測之數據無法量化與記錄 傳統人力檢測無法保留檢測數據,嗣後發生品質糾紛時,責任難以釐清。而海外品牌高階代工單往往要求溯源與相對應的缺點紀錄,傳統產業原有之人力檢測難以符合更高階代工單之要求。 痛點三、傳統AOI視覺檢測的限制 現有製造業常用的AOI視覺檢測系統,因為視覺軟體技術的限制,都是以固定相機、固定光源及單一角度的方式來進行,這種方式對於平面或形狀由直線組成之產品例如:長方體或正方體的單一檢測點尚可處理,但對於複雜形狀的產品例如:汽車零件多為不規則狀多點、多幅度的檢測,就較難實現。 海量數位工程研發AOI機器智能手臂檢測系統,有效提高瑕疵檢測精準度。 為解決製造業在品質檢測的痛點,海量數位工程決定從研發多角度、可移動式的檢測儀器開始發想,從結合工廠自動化領域中的兩大代表性技術-機器手臂與機器視覺著手。海量數位工程以機器手臂結合AOI之動態多角度AI視覺即時品質檢測方式,改善固定式檢測受限多角度的問題,視覺檢測技術的提升與結合人工智慧,進一步相機取得的影像資訊可由平面取樣提升至多角度、多維度取樣。 選定汽車產業做為實證場域 可快速回應顧客需求 AOI機器智能手臂檢測系統,所運用的AI技術包括無監督學習(unsupervised)、監督式學習Supervised learning、半監督式學習Semi-supervised Learing,使業者在初期樣本不齊全,或是沒有不良樣本的情況下也能使用無監督深度學習技術學習良品,並應用在汽車三角架自動焊接的視覺檢測上。可解決導入前受限於固定式機器的角度、診斷不夠精準、誤判率高的問題。 汽車零組件單價較高,會要求更嚴格的瑕疵檢測正確率。 在導入AI服務的產業中,選定汽車製造業作為實證場域。海量數位工程表示,汽車製造業主要為相關零組件製造商,而且通常元件單價較高,需更多品質檢測品質及良率,會要求更嚴格的正確率,因此選定汽車業做為導入的場域。 機器手臂結合AI之動態多角度AOI視覺即時品質檢測系統,除了可以改善汽車零組件檢測瑕疵品質失誤率外,因為以多角度的機器手臂AOI服務來提升定點式AOI光學檢測,可以符合多數產業之量測需求;最後是建立第三方系統平台,建置共同工作整合平台監測系統,以便在問題發生時,第一時間接收訊息並著手處理。 本系統可針對出廠產品之重要數據進行記錄儲存,為實現未來數位生產線與虛擬生產之基礎。同時於瑕疵發生時,可即時串接海量MES監控系統,迅速反應至相關製造決策部門,嗣後並利用ERP系統進行專案管理與檢討,有效精進其生產效率,降低生產成本。 有助降低溝通成本 期許成為行業標配 就產業上下游整合而言,可以為上下游之數據連貫提供一基礎之標準,降低供應鏈之溝通成本,經由指標代工廠與品牌商的認證,有機會成為該產業之行業標準配置。 透過此一計畫的產出數據資料庫建置,業者進一步透過大數據分析Data Analysis,優化供應鏈管理的解決方案「供應鏈規畫Supply Chain Planning, SCP」,依據數據,建立預測計畫,並運用科技串連供應鏈上下游的數據,精準控制產品品質。未來對接歐美、日,需要品質精細訂單,業者能更快速回應及整合產業供應鏈Supply Chain 。 最後期望透過標竿示範產業之場域驗證,例如:以汽車零組件製造產業標竿示範場域,透過機器手臂結合AI之動態多角度AOI視覺即時品質檢測系統計畫進行驗證,讓汽車代工廠與汽車原廠之間有更優化的供應鏈聯繫,並成為該行業標準。更進一步尋求更多的AI團隊,加入場域協作平台跨產業之開發,帶動整體AI新創與場域結合的生態系。 海量數位工程研發的自走車

這是一張圖片。 This is a picture.
生成式AI在商場!聚典資訊打造創新購物體驗

隨著智慧零售新風潮的崛起與不斷演進的AI科技與技術,聚典資訊乘此風浪推出生成式AI客服機器人Gen AI 客服機器人,為改寫消費體驗的傳統框架做足了準備,欲替場域、顧客與品牌方開創零售新應用 為了提升使用者體驗,聚典資訊攜手三創生活與西門商圈,共同推行全新的生成式AI智能客服系統。這一創新技術結合了高效的便利性、智能問答、自動推薦等功能,顧客們僅需拿起手機,掃描螢幕上的QR Code即可獲得所需資訊與推薦清單,不僅為他們帶來更加方便的購物體驗,場域方更能透過實體機台與後台分析協助,提升營運效益並掌握行銷流量密碼,達到商業洞見新應用的效果。 Gen AInbsp客服機器人 五大特點 【便利性提升】新的AI智能客服系統設置於驗證場域內,配備大螢幕顯示樓層導覽和分類介紹選單,操作簡便直觀。顧客可以掃描螢幕上的QR Code,客服資訊帶著走,隨時隨地查找需要的資訊,大大地提高了尋找商店與商品的效率。 【智能問答系統】聚典資訊開發的智能問答系統,使用自建語言模型,建立專屬語意資料庫。系統運用非關聯式資料庫和Vector Search技術,為每個使用情境量身定制智能問答解決方案。通過語意分析,系統能夠提供精準且人性化的回答,並經由不斷學習和更新資料庫,以提升服務品質。 【自然語言處理 NLP 技術】系統透過大規模語料庫訓練,具備深度語言結構和語意理解能力。不只能夠生成自然流暢的回答,也能通過分析不同用詞和標點符號的情緒語氣,提供適當的回應,使顧客感受到貼心的服務。 【全天候即時服務】該系統提供24小時不間斷的即時服務,確保無論何時何地,顧客都能獲得所需的幫助,其顧客滿意度高達90。 【多元應用場景】聚典資訊的生成式AI智能客服系統,除了智慧零售的應用外,還可以廣泛應用於藝文產業和行銷團隊等多個領域,提升各行業的運營效率和客戶體驗。 聚典資訊於西門商圈六號出口外之智慧顯示機台 生成式AI在商場 智慧顯示更加分搭載點擊與影像辨識的智慧顯示機台,協助使用者更能看見生成式AI,並達到完整的使用流程,避免單方面的資訊傳遞也能有效提高使用者體驗,更能依照場域需求增加模組,如小遊戲、拍貼機與智慧行銷模組,增添使用樂趣與傳遞品牌價值,建立人與人與商場的連結。 10,000以上雙月造訪人次:Gen AI配合搭載點擊與影像辨識的智慧顯示機台,更有效的引導使用者獲得重要資訊。 90以上的使用滿意度:透過完整的使用者旅程,我們也獲得90以上的使用滿意度,並持續為使用者創造美好體驗與回憶。 247全天候客服服務:透過雲端伺服器的運作,我們打造了24小時全年無休的智能客服,無時無刻幫助使用者解決各式難題。 智慧顯示Gen AI 完整零售實體場域的使用者旅程 nbsp 最懂你的智能客服 最多樣的解決方案 聚典資訊提供包含於雲端、地端或混和雲的AI解決方案,依據客戶需求進行導入,並為企業設計了專屬的問答介面,無論是使用者還是管理者,都能輕鬆上手。這套系統不僅美觀大方,還能大幅提升工作效率,讓企業在數位轉型過程中快速進入狀況。 地端部署的生成式AI解決方案能避免資料上傳至雲端,確保企業敏感資訊的安全,從資料輸入到AI模型訓練與推論的所有過程,均在地端主機進行,這樣的架構消除了資訊外洩的風險,特別適合對資料隱私有高度要求的企業,如大型零售業、製造業、科技業及政府部門等。 聚典資訊的專業團隊根據每個企業的特定需求,打造專屬的大語言模型LLM,企業只需提供相關的垂直領域資料,便能透過AI技術快速生成精準的內容,應用範圍廣泛,從文案創作、翻譯語言到客服系統等,幫助企業在不同業務領域中全面提升效能。此外亦能透過後台面板查看每次互動的完整問答紀錄,讓企業能夠檢視使用效益,並根據實際運作情況持續優化AI模型的表現,從而提供更精確、更人性化的服務。 聚典資安落地生成式AI介紹,提供多樣化的解決方案 AI for Good 「AI for good」 一直是聚典在推動技術創新的同時,也關注其在社會責任與ESG永續發展方面的角色,因此能不斷的創新並持續為使用者創造更佳的使用者體驗,也與合作企業一同推動更具效能、具社會意義的解決方案,希望能透過AI打造更智慧的城市並提供更優質的生活體驗。nbsp

這是一張圖片。 This is a picture.
測試座接觸元件 AI 智能瑕疵檢測

在 5G、AIOT、汽車電子等下游發展迅速,全產業鏈有望受益於此消費市場。在產品需求動能逐漸增加的情況之下,提高生產效率與降低作業成本成為最重要的課題。為符合客戶各封裝產品類型的需求,穎崴科技一直致力於研發高度客製化測試座,但衍伸的作業痛點則是無法大批量與機台全自動化的作業,部分作業仍需依賴人工執行。 在本案 2021 年時測試座探針部分是委外製造,對現行與未來的大量需求下工時、成本、供給、品質是穎崴需面臨的課題。nbsp因探針的體積較小且材質屬於金屬類型,在現行人力目檢下需花上較多的時間調整焦距、亮度等以確保能看得清晰並判斷,而判斷標準會因人而異,容易因主觀意識或人員目檢疲勞產生誤判、作業疏失,導致不良品未檢出、流入客戶端手中,使客戶使用本公司的測試座產生誤判結果,導致客戶產品功能失效等問題,進而影響本公司的商譽。 本公司在接觸元件檢測良率為 9995,看似高良率,但以一個品檢人員平均一天能檢測 1 萬根針,不良品就有 5 根針,在僅 3 公分長寬的測試座上約有 1 千根針,只要有一根不良針可能導致客戶端測試不良。因現有作業模式為人力目檢,當外在因子若為人員疲勞,人員作業疏失,人員非量化判定即有可能造成不良品流出,因此接觸元件的品質必須嚴格把關。 nbsp曾尋求以光學檢測Rule-based進行外觀品質控管,但接觸元件材質為金屬製,對光線會產生射散、背景雜訊干涉、背景刮痕、材質等因素可能造成誤判,因而找到在 AI 技術方面的資服業者來解決我們的檢測難處。 開發 AOI 專用線掃設備 nbsp為了達成本公司 IC 測試座內動輒數千上萬支探針檢測需求,若以傳統面型取像與逐針取像,勢必因取像速度慢無法達到快速檢測以及節約人力的目標。針對此點,資服業者提出可試用 AOI 專用線掃模組方案,以 X 軸 63mm 為面寬,往復掃描測試座上的所有探針,經測試可一次掃描 89 支探針如下圖,大幅提升未來 AOI 機台的檢測效率。nbsp本案將進行上述創新的概念驗證POC,重點於線掃描設備的開發,針對本公司所提供的正常與異常探針進行取像、學習、訓練,先以逐針取像,訓練初步 AI 模型為驗證目標,以達初步認可。 本案客製化開發的線掃描取像模組 未來理想取像結果示意圖 以單一 AI 技術方案解決量檢測需求 nbsp統一以 AI DL CNN 學習方式,取代現行 Rule based 需逐一定義瑕疵,為滿足磨耗的量測需求與缺損異物的外觀瑕疵檢測需求,如機台同時採用採量測檢測兩套技術,除了成本增加外,亦影響檢測速度,則資服業者建議以線掃描設備取像,其解析度足以由 AI 同時判定外觀瑕疵及以大小圓點判斷針頂磨耗狀況,詳如下圖。 以線掃描像素方式,呈現針頂磨耗情形 nbsp依此 AI 檢測技術能符合穎崴的量測與檢測兩項需求,不僅在未來探針檢測上帶來更多的效益,也在 AI 技術方面帶來創新主軸。 改變人檢方式,提升工作效率與產品品質 經以上述硬軟雙劍合璧後線掃描硬體AI 軟體模式訓練,成功挑戰了 AOI 新興檢測應用,經本案 AI 落地 POC 驗證後,包含客製化線掃描模組及初步 AI 模型開發、驗證,計畫明年正式開發 AOI 機台,並導入 IC 測試座生產線。 未來展望 IC 測試座上游探針業者及下游 IC 廠使用者對 AOI 檢測機台均有需求,上游可確保探針出廠品質,下游使用者則可利用本機台定期檢測手中諸多 IC 測試座使用狀況,對未來需求勢必殷切,故本計畫 AOI 機台對 IC 測試產業於可見的未來必將造成極為正面的影響。