自去年11月ChatGPT橫空出世,一波由AIGC引發的熱潮轟轟烈烈地傳播開。短短兩個月,ChatGPT活躍用戶量達到1億,Stable Diffusion也有1000萬的活躍用戶;眾多互聯網科技巨頭快速加入AI大模型角逐戰,更多的語言交互、AI生成視頻、AI作畫等應用頻頻涌現;一系列動作都讓AI再次成為“熱搜詞”,引起廣泛地關注與討論。

華為盤古大模型

AI是一項通用的目的技術,它正從局部應用到千行百業。在我們的生活中,無時無刻不使用AI,例如交通的自動駕駛,制造的工業質檢,語音識別等等。2019年《邁向萬物智聯新世界》研究表明,到2025年,企業對AI的采用率將達到86%。那么如何在企業的生產生活中融入AI呢?

首先,我們來看一下AI應用的開發流程:

a) 確定目的,明確AI應用開發的方向,以確定后續的開發方向和整體架構。

b) 準備數據,即收集當前AI應用分析處理所需要的原始數據。原始數據是為了確保AI能夠更好的預測分析更多的數據,從而降低人力的消耗。

c) 訓練模型,即將收集的數據,使用一定的算力和算法進行訓練,最終得到模型用于之后的預測分析。

d) 評估模型,用于評估訓練生成的模型是否準確率達標,如不達標,則需繼續訓練優化。

e) 部署模型,將評估通過的模型,部署到具體的設備上,進行預測分析。

其中數據、算力、算法即為人工智能的三要素,在AI應用開發過程中起到關鍵性的作用。

在整個AI應用的開發流程涉及到大量的專業知識,例如整體應用框架的構建,合適算法的選擇,應用部署的流程,企業進行AI應用開發則需要克服大量的困難。為了進一步簡化AI應用的開發難度,當前華為推出了一站式AI開發平臺ModelArts,以下為ModelArts的整體框架:

華為全棧AI能力

ModelArts采用華為自研Ascend、Kunpeng系列芯片,為AI應用開發提供海量算力,并支持業界主流AI開發框架(PyTorch、TensorFlow、MindSpore);同時與之搭配的生態社區AI Gallery,還提供了大量的開源數據集、算法、模型等內容,幫助開發者獲取AI應用的開發資源。

前面提到,一個完成的AI應用開發,需要確定目的、準備數據、訓練模型、評估模型、部署模型這五步。除開確定目的,ModelArts平臺在后四步均能進行優化提升AI應用效率。

準備數據:在ModelArts上可以選擇Gallery上海量的數據集進行開發,同時,業界常見的圖像分類、目標檢測、語音識別等數據集格式均支持,如果是沒有標注的數據信息,可以僅標注部分數據,然后調用快速標注完成所有數據的標注;

訓練模型:ModelArts上可以選擇Gallery上業界常見的算法進行訓練,也提供當前主流的LLM大模型進行微調,同時在訓練的過程中提供實時的訓練日志查看,便于問題排查。

評估模型和部署模型,ModelArts也提供對應的評估方式和在線部署測試功能,方便開發者快速使用。

同時,為了更進一步的降低開發者的開發難度,ModelArts將準備數據、訓練模型、評估模型、部署模型組成一條Workflow流水線,開發者只需要和ModelArts對話,提供項目需要的數據集,ModelArts就會自動分析數據集并選擇自有的算法進行訓練得到最終的模型,并給開發者進行評估。

ModelArts對話工作流

當然,如果你想要開發自己的算法,ModelArts也提供云上Codelabs代碼開發環境,能夠快速調用云上AI算力和存儲空間,實現AI算法快速開發。同時也提供本地IDE + ModelArts插件,遠程直接連接云上資源開發,貼近你的使用習慣。

Codelabs運行環境

至今,已經有很多企業使用ModelArts平臺,進行各個場景進行AI應用開發。

中科院腦智卓越中心利用 ModelArts 繪制斑馬魚腦圖譜,重構準確率和召回率已達95%。如果使用多機并行計算,理論上10萬個神經元的總重構時間可以從125人工作1整年縮短至僅需10天,單神經元重構費用下降為原來的1/77。如果將研究對象擴展到小鼠或獼猴等大腦結構更為復雜的生物,降本增效將更加可觀。

河南鑫磊集團通過業務系統,將運營數據、焦炭數據、原料煤數據、生產過程設備傳感器數據等數據進行整合上傳到華為云,并由華為云 AI 對其進行智能計算、分析,得出最優配煤比例。初期焦炭質量預測模型平均準確率達到94%以上,后續伴隨數據樣本增多,模型準確度將持續提升,每年至少可節省成本約3000萬。

拓安信使用ModelArts平臺,實現了水表照片的快速標注和訓練,完成了水表讀數識別算法的開發和優化。節省千萬人力成本,實現AI自動抄水表,并自動錄入到管理系統中,管理效率提升30%,同時也進一步保障了客戶的數據安全。

水表讀數識別

由此可見,一站式AI應用開發平臺ModelArts,為企業AI應用開發提供全流程幫助,有效的提升了AI應用的開發效率和產出。

時代日新月異,科技高速發展。早在2015年,中國國務院印發《中國制造2025》方針,其中智能制造則是本次方針的核心。為了進一步提升企業AI能力,我們需要不斷地學習AI知識,使用合適的AI開發工具,為我們的生產生活帶來更大的便利。

今年9月,華為云、鯤鵬、昇騰和終端聯合打造的華為開發者空間棧正式上線!空間棧是面向新一代開發者的技術成長與學習陣地,聚焦人工智能、大數據、物聯網等行業熱門技術或前沿趨勢。通過訓練營、社區活動等形式,幫助開發者一站式了解更多華為技術與產品,持續構建未來競爭力。

其中,華為云主導的昇騰AI·玩轉AIGC實戰營正在進行中!本期實戰營由華為全棧AI即AI芯片Ascend-910、異構計算框架CANN,以及華為云一站式AI開發平臺ModelArts提供技術支持。目前已經有3000+開發者報名學習,并對生成對抗網絡——StarGAN、中文文生圖大模型——悟空畫畫、Stable Diffusion等前沿技術展開了分享交流,除了AIGC實戰營,還有昇騰AI引力場和鯤鵬HPC訓練營等眾多趣味訓練營等你來體驗!點擊立即前往。

鏈接:https://developer.huawei.com/home/devrun.html