中方利用蒸蒸技術訓練AI模型抗衡晶片限制
路透社審閱逾三百份中國學術論文、專利及政府文件,揭示中方透過蒸蒸技術(distillation)從美國頂尖人工智能模型提取成果,用於訓練本土競爭模型,以應對美國晶片出口限制。北京正鼓勵此技術,旨在降低AI成本並擴展至製造業。
路透社審閱逾三百份中國學術論文、專利、企業披露、招聘公告及政府文件,揭示中方正採用日益精密的方式,從美國領先的人工智能模型輸出中提取成果,用於訓練本土競爭模型,以拓寬其人工智能策略並應對美國收緊晶片限制。
該過程稱為蒸蒸技術,已從學術實驗擴展至中國的主流工業應用。文件描述中國研究人員利用美國模型回答問題、構建電腦代碼及尋找難題解決方案,中國企業則開發軟件將過程自動化,由專業工人準備材料以訓練較小的本土模型。
美國於週一表示將進一步限制中國獲取如Nvidia等公司的先進晶片。蒸蒸技術並非違法,在全球其他地區亦常見;雖然無法完全複製領先模型的能力或消除對高階電腦運算的需求,但可協助開發人員在較小系統中保留特定技能,降低營運成本,從而減少對美國技術的依賴。
此技術亦成為中美兩大經濟體之間的摩擦點,尤其在下月18至19日於深圳舉行的亞太經合組織峰會前夕,屆時美國總統特朗普與中國國家主席習近平預計會面。美國商務部官員在七月於成都的會議上向中國監管機構提出關注,警告部分活動可能構成知識產權盜竊。
中國官員辯稱蒸蒸技術是標準的人工智能開發技術,並表示願意就構成知識產權盜竊的行為採取行動,但未作具體承諾。美國當局在九月公開指控中國公司以工業規模有針對性地蒸蒸美國人工智能模型。
中國政府文件並未指示企業蒸蒸美國模型,但鼓勵此技術作為北京推動人工智能擴散至全球第二大經濟體的一部分。今年一月由八個中國政府機構發布的全國性人工智能+製造業政策套裝,包括支持模型訓練、微調及蒸蒸技術的指引。
上海交通大學研究人員在去年十一月論文中描述從OpenAI的o1模型選取約5,000個答案,經GPT-4o mini翻譯,組裝成10,750個雙語訓練例子,以進一步訓練阿里巴巴的Qwen2.5-72B模型。阿里巴巴研究人員在今年四月論文中描述更系統的方法,使用GPT-4及GPT-4o生成非中文的訓練材料。