近日，国际数据公司IDC 发布《AI大模型技术能力评估报告，2023》，从算法、生态、服务能力等多个维度评估中国大模型的整体实力。IDC在报告中提出了AI大模型技术评估框架，评估维度涵盖算法模型、基础能力、创新及定制化能力、平台能力、安全可解释、行业应用，以及配套服务和大模型生态等指标，意在衡量中国AI大模型市场进程。阿里云、百度、华为、科大讯飞、澜舟科技、360、商汤、腾讯、智谱AI等14家大模型厂商参与了本次评估。
报告显示，百度文心大模型、阿里巴巴通义大模型、科大讯飞星火大模型、智谱AI大模型在通用能力上表现满分。“通用能力”指标反映的是大模型的整体技能，包括语音识别、语音合成等自然语言处理；图片生成、图片搜索等计算机视觉；机器学习/深度神经网络等底层技术能力的差异化优势；意图识别、泛化能力、知识库构建能力等等。
报告显示百度文心大模型3.5拿下12项指标的7个满分，综合评分。其中，百度文心大模型在算法模型、行业覆盖两个维度是满分选手。
“模型建设是非常高壁垒的事情，百度有持续积累，同时也非常坚定地投入。”百度集团副总裁吴甜表示，接下来百度会持续提升基础通用能力以达到在社会上供职的目标，“到目前来说效果很好，但依然没有达到我们对它的期望，还有大量的工作需要去开展。类比到人的话，给社会提供一个智力水平足够高，综合能力足够强，可以到社会上供职的AI，这是我们大的目标。”
报告显示，阿里云在11项指标中获得6项满分，分别是通用能力、服务能力、创新能力、平台能力、生态合作、电商行业应用，且阿里云是“服务能力”满分厂商。据悉，阿里云的通义大模型家族现已具备处理或生成文本、语音和图片等多种模态的能力。过去3个月，阿里云先后推出了基础模型“通义千问”、音视频大模型产品“通义听悟”、 AI绘画创作大模型“通义万相”，通义大模型家族仍在不断迭代和进化中。
可以看出，在具体行业应用方面，百度文心大模型的优势领域在能源，阿里通义大模型则聚焦于电商。IDC评估结果显示，百度文心大模型在行业覆盖上获得满分成绩，在能源、金融、教育、医疗等领域已经实现广泛业务布局和落地场景探索。据介绍，文心大模型目前有15万家企业申请接入文心一言测试。百度智能云与300多家生态伙伴，在超过400个场景中已取得不错的测试效果。
南都记者 马宁宁 发自上海
