在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

工業界AI項目研發中的各個環節的重要細節點

深度學習自然語言處理 ? 來源:深度學習自然語言處理 ? 作者:皮特潘 ? 2021-01-18 16:51 ? 次閱讀

導讀

本文從作者的經歷和經驗教訓展開,闡述了在AI項目研發中的各個環節的重要細節點,展現了一個AI項目到最終落地繁瑣的過程。

前言

AI虐我千百遍,我待AI如初戀。什么才是好的AI?答:能落地的AI才是好AI。AI項目從無到有,再到最終落地,無非不是挖坑、踩坑、填坑的過程。本文從筆者的一些經歷、經驗、血淚教訓展開,說一下對AI項目研發過程中的感想。

被虐的案例

案例1:經過N次版本修改與優化,最終定稿。支持切換型號、云端訓練、人工調參等。搞到最后,才發現別人要求準確率100%。

案例2:樣機各種燈光閃來閃去,各種運動機構群魔亂舞。什么犄角旮旯都覆蓋到,什么劃痕、殘缺、臟污都面面俱到。但是,一個產品檢測竟然要30s。到過一次現場才發現,人工目檢只需要2s。

案例3:光學算法、界面都ok了。在熱火朝天、干勁十足的準備推廣成千上百套變現的時候,客戶說只要一套。

案例4:同上,最終客戶說再考慮一下,當然是杳無音信。算是被耍呢?還是算是白嫖呢?

案例5:當我們正為識別準確率是99%的時候,客戶把一個識別成功的和一個識別失敗拿到一起,問:這兩個明明一模一樣,為啥這個失敗了,這個成功了?

案例6:我去生產現場培訓客戶標注。他們非常配合,找來的也是目檢老手。我示范了幾個后,讓他試試。他就是不肯,搞到最后才知道:額,他不會用電腦

案例7:我們的算法好牛掰,我們模型好先進。AI+傳統方法一起來搞,完美。不過你需要調整這20個超參數。人呢?別走啊!

案例8:已經上線運行了,最后發現某一種型號的某一種缺陷打光不佳,圖像上很難判斷。最終只能推倒重來。

案例9:沒有意識到數據的重要性,每次都是幾張圖片在測試,結果是很完美,最匆匆拍板上線。最終大批量測試的時候,發現不work了。

為啥這么難?

工業AI,尤其是缺陷檢測這塊都是硬骨頭。雖然場景非常簡單,雖然數據都是源源不斷,雖然算法都是非常純粹。主要是其需求太分散了,不是不能做,而是值不值得去做。因為你要面臨以下問題:

說不清道不明、模棱兩可的需求標準,某些難以量化的標準。

頻繁的變更需求標準,難以做到只靠調后處理參數就快速響應。

頻繁更換型號的場景,留給你訓練的時間不多。甚至無法提供良好的訓練環境。

立體的產品,各種吃光照,吃視角的缺陷,極其微弱的缺陷。

難以保證的樣本一致性問題。

準確率能不能到100%?

有沒有人工做的更快?

有沒有人工費用更便宜?

需要配合繁復的硬件設備,尤其是運動設備。如何才能保證整套設備的穩定性?

后期維護成本問題?由于涉及的環節太多,需要“全才”才能搞定。

......

一般流程

AI要敏捷開發,更要方法論,更更要穩定成熟的流程。

830d16de-58b2-11eb-8b86-12bb97331649.jpg

這里要提的是,工業場景的AI不過是整套系統中的一個小小組件,你一定不會靠單純的AI去make money。即便如此,AI從無到有,依然經過以下幾個環節:

需求階段

包括場景分析,問題定義,可行性分析。很多任務都是從該階段直接進入end。這個是好事,一定不要盲目自信和盲目樂觀。所謂一葉障目不見泰山,只看到算法容易實現就忽略以上的問題,最后只能慘淡收場。最怕投入太多沉沒成本之后,想收場卻不甘心。

什么是需求,什么是真正需求,什么是隱藏等待發掘的真正需求。很多時候,和客戶一起聊需求的時候,他們給不出明確的需求。最簡單直接的辦法就是,深入參觀他們的生產現場。和工人融到一起,學會他們的判斷標準。為他們發掘需求,尤其是下面幾點必須提前明確清楚:

什么是絕對不能容忍的錯誤,一旦出現就是質量事故。我們要知道算法的下限在哪里。

涉不涉及更換型號,能否提供符合模型訓練的場景要求,比如至少得有GPU吧,或者可以上網進行云端訓練。

對時間上的要求,很多替換人工工位都要要求比人更快。我們要知道系統的物理極限,例如運動設備。

對于算法難以界定的灰色地帶,接不接受人工二次復檢。對于不work的個例,我們要有backup。

其他都比較直白,對于第二點說明一下。大家想必都知道,我們做算法復現的時候,推理部分比訓練部分要容易好幾個等級。同理,上線部署的時候,如果涉及用戶自己訓練,那么難度就上來了。要把標注、數據處理、訓練參數、測試評估等都打包在一起,還要實現全自動化。甚至會遇到諸如用戶電腦不能上網&沒有GPU,沒有錯,即便是你提訓練必須條件,他也不一定會給你配到。

以上這幾點,一定要仔細論證,全局論證,反復論證。論證不是內卷,不是效率不高,不是執行力不高。沒有詳細論證而匆匆上馬的項目,一般后期有無數個坑在等著你。

打光階段

包括光學設計,成像分析,當然還包括不是那么AI的結構設計等。俗話說:七分靠打光,三分靠調參。打光非常重要,因為后續算法只能為圖片負責。一般我會用“明顯”和“明確”來進行可行性分析,“明顯”就是來自光學。最直觀的判斷就是,人肉眼能否通過圖片進行精準判斷。如果存在模棱兩可的部分,那么它也將成為算法模棱兩可的地方。

數據階段

包括數據采集,數據標注,數據處理。數據的重要性不言而喻,正所謂:七分靠數據,三分靠trick。數據到位了,一切都好說。數據的重要性,想必是任何一個從業人員都深有體會的。我們要數據,要有效的數據。沒有數據的場景,抱歉請用傳統方法。要記住,模型泛化,沒那么重要,當然模型也沒有那么強的泛化能力。它之所以能夠識別,那是因為它見過。將模型理解成一個存儲器,而不是泛化器。之前的你,需要建立數據庫來存儲數據用以測試時的比對,現在的你,模型就是你的數據庫。

數據標注就會涉及標準的定義,很多時候很難拿到清晰的標準。或者說無法量化為清晰的標準。往往會存在灰色地帶,這就要提前有一個清晰的認識。對于灰色地帶的處理,或者說客戶的容忍,要提前想好策略。這里比較困難的是,灰色地帶可能很難量化出來,我們只是知道這個樣本是灰色地帶,到底有多灰,have no idea。

另外,比較重要的是盡快建立穩定的、有代表性的數據集合,尤其是測試集,這點非常重要。可以幫助非常敏捷進行后續的benchmark實驗。如果你不知道你對什么樣的最終結果負責,那么你將永無止境的做下去。

算法設計階段

包括任務定義,任務拆分,模型選擇。尤其是任務拆分,你不肯定把所有的大象都裝到一個冰箱里面,你也不可能把所有的雞蛋放到一個籃子里面。

杜絕唯模型論 & SOTA 論。我們需要的是在特定場景下解決特定的問題。這里涉及學院派思維轉變,學院派的高手為imageNet和COCO等數據集負責,而我為我自己的場景和自己數據集負責。SOTA看中的是模型的上限,而實際的場景,看中的是模型的下限。

杜絕唯AI論。不管傳統方法還是AI方法,能work的就是好算法。如果傳統方法沒有明顯的缺陷,那么請選擇傳統方案。或者你可以這么認為,當前看似高大上的AI并不是真正的AI,或許30年后一天,你會說:先用傳統方法YOLO V28 來試一下吧!

訓練評估階段

包括模型調參,模型訓練,指標評估。所謂的“煉丹”。前幾步做好了,一般不會有太大問題,如果有,請向前追溯。這里要說一句,“提前優化是萬惡之源“。在保證精度的時候,再去考慮速度,再去做優化。當然你靠58個模型聯合起來獲取的精度不在該討論范圍。

部署階段

這個階段坑比較多,基本上都是技術方面。也是所謂的“臟活”。包括模型優化,跨平臺前向推理,模型加密。終于到部署階段了,也看到了落地的曙光。關于深度學習人工智能落地,已經有有很多的解決方案,不論是電腦端、手機端還是嵌入式端,將已經訓練好的神經網絡權重在各個平臺跑起來,應用起來才是最實在的。不過依然存在這么多工作需要做:

跨平臺:可跑目標硬件上,包括各類cpu/gpu/npu/fpga等等。
高效能:速度快、占用內存少等。
精度沒有丟失:經過一通量化、剪枝、蒸餾、圖優化等操作后,終于滿足時間要求了,卻突然發現部署測試精度掉了一半,WTF
加密需求:你一定不希望自己辛辛苦苦搞出來的成果被別人白嫖吧!
閉環生態:當然你不能一勞永逸,怎么在應用中收集樣本,更新系統。你需要作成實用、好用的閉環工具鏈。

運維階段

包括運行監控,模型更新等。你以為可以所以口氣了,并沒有。能不能經受海量產能和時間的考驗,請瑟瑟發抖地注視著吧!運維的核心就是保證業務安全穩定運行。上面提到,AI泛化能力還是比較欠缺的,所以很可能會在實際運行的過程中遇到不work的情況。當然最最直接的辦法就是持續不斷擴充數據。當然要保證你的模型有足夠的capacity,如果沒有,那么就是算法設計環節沒有做好。收集數據利用上面部署階段所說的閉環生態工具鏈來持續完成這個事情。至此,你的AI項目已經落地。

結語:多謝各位。

責任編輯:xj

原文標題:工業界AI項目落地的繁瑣過程

文章出處:【微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉載請注明出處。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 工業
    +關注

    關注

    3

    文章

    1850

    瀏覽量

    46776
  • AI
    AI
    +關注

    關注

    87

    文章

    31287

    瀏覽量

    269643
  • 人工智能
    +關注

    關注

    1792

    文章

    47514

    瀏覽量

    239227

原文標題:工業界AI項目落地的繁瑣過程

文章出處:【微信號:zenRRan,微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    AI干貨補給站04 | 工業AI視覺檢測項目實施第三步:模型構建

    在當今智能制造的浪潮AI視覺檢測技術憑借其高效、精準的特性,已然成為提升產品質量和生產效率的重要工具。為了助力從業者更好地理解和實施AI視覺檢測
    的頭像 發表于 11-29 01:04 ?232次閱讀
    <b class='flag-5'>AI</b>干貨補給站04 | <b class='flag-5'>工業</b><b class='flag-5'>AI</b>視覺檢測<b class='flag-5'>項目</b>實施第三步:模型構建

    AI干貨補給站03 | 工業AI視覺檢測項目實施第二步:數據收集

    阿丘科技「AI干貨補給站」推出系列文章——《工業AI視覺檢測項目入門指南》,這一系列內容將AI視覺檢測
    的頭像 發表于 11-22 01:06 ?269次閱讀
    <b class='flag-5'>AI</b>干貨補給站03 | <b class='flag-5'>工業</b><b class='flag-5'>AI</b>視覺檢測<b class='flag-5'>項目</b>實施第二步:數據收集

    人工智能工業領域應用有哪些

    人工智能(AI)技術的快速發展與廣泛應用,正在深刻改變著工業領域的面貌。從生產計劃到產品檢測,從能源消耗到客戶分析,AI的觸角已經延伸到了工業生產的
    的頭像 發表于 10-17 17:06 ?1177次閱讀

    邏輯組件的流程塊節點通常出于什么用途

    邏輯組件的流程塊節點是流程圖、狀態圖、序列圖等圖表的基本元素,它們用于表示業務流程、工作流程、算法步驟、系統狀態等。這些節點在軟件開發、項目
    的頭像 發表于 10-15 14:38 ?183次閱讀

    固定式工業條碼掃描器在mes系統各個環節應用

    ,扮演著不可或缺的角色。本文將探討固定式工業條碼掃描器在MES系統各個環節的應用及其帶來的優勢。一、材料入庫與追蹤在生產的第一環節,固定式工業條碼掃描器被廣泛應用于原
    的頭像 發表于 08-02 16:51 ?403次閱讀
    固定式<b class='flag-5'>工業</b>條碼掃描器在mes系統<b class='flag-5'>中</b>的<b class='flag-5'>各個環節</b>應用

    基于AI深度學習的缺陷檢測系統

    工業生產中,缺陷檢測是確保產品質量的關鍵環節。傳統的人工檢測方法不僅效率低下,且易受人為因素影響,導致誤檢和漏檢問題頻發。隨著人工智能技術的飛速發展,特別是深度學習技術的崛起,基于AI深度學習的缺陷檢測系統逐漸成為
    的頭像 發表于 07-08 10:30 ?1584次閱讀

    Pegatron通過AI賦能的數字孿生來模擬并優化工廠運營

    制造商在縮短生產周期、提高生產力與質量方面所面臨的壓力越來越大,而且還要在做到這一切的同時降低成本。為了應對這些挑戰,他們正在通過投資工業數字化和 AI 賦能的數字孿生,為從規劃到運營等各個環節帶來新的可能性。
    的頭像 發表于 07-02 11:53 ?693次閱讀

    字節跳動否認AI手機研發項目

    近日,有市場傳聞稱字節跳動已在兩個月前秘密啟動了AI手機研發項目,引發業界廣泛關注。然而,字節跳動相關人士迅速對此作出回應,表示這些消息并不屬實。
    的頭像 發表于 06-12 15:54 ?627次閱讀

    什么是工業控制網絡節點?常用的節點有哪些

    工業控制網絡節點是指在工業控制網絡,用于實現數據采集、處理、傳輸和控制等功能的設備。它們是工業控制系統
    的頭像 發表于 06-11 10:36 ?1205次閱讀

    Arm預計未來五年將有1000億臺設備用于AI

    在COMPUTEX 2024展前活動,Haas詳解了其公司計劃如何在2025年前,將逾千億臺Arm架構設備投入人工智能(AI)應用,涵蓋從云端到邊緣側的各個環節
    的頭像 發表于 06-06 16:29 ?679次閱讀

    信號的預處理包括哪些環節

    各個環節,包括信號的采集、預濾波、采樣、量化、編碼、去噪、特征提取等。 信號采集 信號采集是信號預處理的第一步,它涉及到從實際物理現象獲取信號的過程。信號采集的方法取決于信號的類型和來源,例如聲音、圖像、溫
    的頭像 發表于 06-03 10:35 ?3353次閱讀

    IMEC推出針對N2節點的設計探路PDK

    和培訓提供對廣泛的高級節點訪問。這將為業界提供培訓未來半導體專家的工具,降低學術界和工業界接觸最先進半導體技術的門檻,并使工業界能夠通過有意
    的頭像 發表于 03-25 17:34 ?438次閱讀
    IMEC推出針對N2<b class='flag-5'>節點</b>的設計探路PDK

    未來已來:AI 助力智能制造

    傳統的供應鏈管理往往需要人工進行,涉及到物流、采購、庫存管理等多個環節,存在著信息不對稱、協調困難等問題。 而AI技術通過對供應鏈各個環節的數據進行實時分析,能夠幫助制造商預測市場需求,提前調整庫存,減少庫存積壓和浪費...
    的頭像 發表于 03-25 11:26 ?556次閱讀
    未來已來:<b class='flag-5'>AI</b> 助力智能制造

    Imec推出首款針對N2節點的設計探路工藝設計套件

    Design Systems和Synopsys的工具套件,為設計探路、系統研究和培訓提供對廣泛的高級節點訪問。這將為學術界和工業界
    的頭像 發表于 02-22 18:24 ?1011次閱讀

    積極布局工業元宇宙,推動工業制造業數字化轉型發展

    ,實現工業制造全流程的數字化、智能化和網絡化。在這個世界工業制造業的各個環節將實現無縫對接,從產品設計、生產制造到銷售服務等全流程將變得更加高效、精準和智能。
    的頭像 發表于 01-23 15:23 ?415次閱讀
    主站蜘蛛池模板: 爱看精品福利视频观看| 大量国产后进翘臀视频| 免费观看黄色网| 中文天堂最新版www官网在线| 国内一级特黄女人精品片| 日本高清色视频在线观看免费| 三级视频网站在线观看播放| 美女被免费网站在线视频九色| 男女交性视频免费| 伊人久久大香线蕉综合电影| 日本免费一区二区视频| 俄罗斯久久| 性天堂网| 日韩1页| 婷婷六月综合网| 亚洲综合丁香婷婷六月香| 国产美女叼嘿视频免费看 | 黄色片香蕉视频| freesex欧美| 色v在线| 五月激情啪啪网| 日本不卡在线视频| 午夜爱爱网站| 五月婷婷激情综合| 日本三级吹潮| 国产精品久久久久久久久kt| 午夜精品网站| 26uuu另类欧美亚洲曰本| 一区二区三区四区五区| 中文字幕在线一区二区在线| 免费黄色大片视频| 被公侵犯肉体中文字幕一区二区| 天堂新版www中文| 久久综合精品视频| 午夜国产在线观看| 欧美人与zoxxxx视频| h视频在线观看视频观看| 国产热视频| 清纯唯美亚洲综合欧美色| 国产精品麻豆va在线播放| 天堂8中文在线最新版在线|