國際電信聯(lián)盟電信標準分局(ITU-T)日前正式發(fā)布ITU-T F.748.43 Framework and requirements for the foundation model platform(基礎模型平臺參考框架和技術要求)、ITU-T F.748.45 Technical requirements and evaluation methods of AI based code generation in multimedia applications(多媒體應用中基于AI的代碼生成技術要求及評價方法)、ITU-T F.748.52 Requirements and evaluation methods for retrieval augmented generation of large scale pre-trained model(大模型檢索增強生成技術要求與評估方法)。以上3項ITU國際標準由中國信息通信研究院(簡稱“中國信通院”)牽頭制定。
1. ITU-T F.748.43 Framework and requirements for the foundation model platform(基礎模型平臺參考框架和技術要求)


該國際標準基于《MaaS模型即服務技術與應用要求 第三部分:大模型平臺》提出,圍繞大模型的數(shù)據(jù)工程、模型預訓練、模型調優(yōu)、模型交付、模型運營、平臺能力和監(jiān)控七個維度,構建了面向大模型全生命周期的功能要求框架,和每個維度的能力要求。本標準適用于企業(yè)在大模型平臺的研發(fā)、評估和驗收等過程,為大模型平臺的建設和選型提供指引。降低企業(yè)或用戶定制調優(yōu)、部署大模型的技術門檻,推動大模型應用的快速落地。
2. ITU-T F.748.45 Technical requirements and evaluation methods of AI based code generation in multimedia applications(多媒體應用中基于AI的代碼生成技術要求及評價方法)


該國際標準基于中國信通院與工商銀行聯(lián)合牽頭編制的《智能化軟件工程技術和應用要求 第一部分:代碼大模型》提出,圍繞代碼大模型相關的通用能力、專用場景能力和應用成熟度,從輸入多樣性、任務多樣性、語言完備度、結果可接受性、結果準確度等維度,對代碼大模型提出了全棧技術要求和評估方法。本標準適用于企業(yè)在代碼大模型的研發(fā)、評估和驗收等過程,一方面為代碼大模型的建設和改進提供參考,另一方面為代碼大模型的技術選型提供指引,推動“AI+軟件”健康有效發(fā)展。
3. ITU-T F.748.52 Requirements and evaluation methods for retrieval augmented generation of large scale pre-trained model(大模型檢索增強生成技術要求與評估方法)


該標準規(guī)范了檢索增強生成服務技術要求和評估方法,旨在為RAG技術和應用能力評估提供依據(jù),標準圍繞檢索能力、生成能力、優(yōu)化能力、應用成熟度、應用穩(wěn)定性等維度,為檢索增強生成技術在知識庫構建、信息檢索優(yōu)化、生成技術完善以及應用生態(tài)拓展等方面提供規(guī)范與指導。