速讯：百度工程师首次现场演示：“文心千帆”如何可视化微调大模型

来源：证券日报 2023-05-09 21:58:45

5月9日，百度智能云在北京举行文心大模型技术交流会，向在场的百家企业展示文心大模型在产品技术、场景研发、生态建设等领域的最新进展。

大模型引发的AI再造产业趋势已经势不可挡。但当下企业最大的难题是，如何高效、低成本得获取大模型能力，如何挑选到最合适的大模型服务。

百度智能云方面表示，正在内测的“文心千帆大模型平台”，是全球首个一站式的企业级大模型生产平台，不但提供包括文心一言在内的大模型服务及第三方大模型服务，还提供大模型开发和应用的整套工具链。

(相关资料图)

未来，文心千帆将提供两种服务：第一，文心千帆将以文心一言为核心，提供大模型服务，帮助客户改造产品和生产流程。第二，作为一个大模型生产平台，企业可以在文心千帆上基于任何开源或闭源的大模型，开发自己的专属大模型。

百度集团副总裁侯震宇表示，大模型时代下，企业的创新要脱颖而出，不但需要智能的算力、灵活的框架平台、丰富的大模型体系以及优质的应用方案，还需要这四者之间端到端的适配与优化，这是一个“既要、又要、还要”的端到端创新工程。

现场，百度智能云与联想集团、用友、宝兰德等14家文心千帆生态伙伴举行签约仪式。

用友网络副总裁、用友研究院院长吕建伟表示，中国企业关注大模型的落地能力，一个简单的智能问答背后有着非常复杂的加工过程。我们期望和百度智能云一起，把微调、性能调优等工具简化，推动大模型应用。

北京宝兰德软件董事长易存道表示，如何把大模型在垂直行业做好，是目前各个企业都要考虑的问题，多数企业无法像百度一样有能力建设大模型。怎么能够把百度的大模型能力和企业业务有效结合起来，创造更高的价值，是企业非常好的弯道超车机会。

事实上，目前企业应用大模型面临诸多难点：模型体积大，训练难度高；算力规模大，性能要求高；数据规模大，数据质量参差不齐。大模型产业化需要云计算厂商将模型开发、训练、调优、运营等复杂过程封装起来，通过低门槛、高效率的企业级服务平台深入产业，为千行百业提供服务。

侯震宇表示，文心千帆大模型平台是全球首个一站式的企业级大模型平台。之所以称为全球首个一站式平台，是因为它不但提供包括文心一言在内的大模型服务，还提供大模型开发和应用的整套工具链。此外，该平台还支持各类第三方大模型，未来将成为大模型生产和分发的集散地。

目前，文心千帆大模型平台提供公有云服务、私有化部署两大交付模式。

在公有云服务方面，将提供推理（直接调用大模型的推理能力）、微调（通过高质量精标业务数据，高效训练出特定行业的大模型）、托管（将模型发布在百度智能云，以实现更加稳定高效的运行）三种服务，大幅降低企业部署大模型的门槛。

百度智能云AI与大数据平台总经理忻舟在现场演示了如何微调大模型，这也是国内首次演示如何微调行业专属大模型的全过程。文心千帆大模型平台提供了可视化开发工具链，提供了数据生成、标注、回流的数据闭环管理功能。客户以少量数据即可发起模型微调，最快几分钟就可获得自己的专属大模型。

在私有化部署方面，文心千帆大模型平台支持软件授权（提供在企业环境中运行的大模型服务）、软硬一体（提供整套大模型服务及对应的硬件基础设施），租赁服务（提供机器和平台的租赁满足客户低频需求）三种方式。私有化部属能够满足对数据监管有严格要求的企业客户需求。

忻舟总结，文心千帆大模型平台有六大特点：更易用，开箱即用，节约客户机会成本；更全面，提供覆盖全生命周期的工具链；更高效，可以端到端的全流程优化；更安全；更开放；更集成，更多插件拓展模型能力边界。

“快且收敛，是大模型应用训练中一个非常重要的指标。”忻舟说，“只快不收敛，大模型的训练是没有用的。文心千帆在多机多卡训练性能方面，可以更快达到收敛的状态，在全球权威AI基准评测MLPerf榜单中排名世界第一。”

（文章来源：证券日报）

标签：