
“大语言模型正被企业用作生成式AI的核心要素。”Meta在官网中说道。Llama 2模型的发布,是Meta在大语言模型领域的又一次有力发声。此前,谷歌、微软曾通过接入大语言模型,更新其旗下多个产品线。
OpenAI的GPT-4和Meta的Llama分别是大语言模型领域闭源和开源的代表。全球有众多大模型基于Llama开发而来,但又受限于无法免费商用。随着Llama2免费开源商用,并与微软这样的云服务商深度合作,开源力量可能重新划分AI市场的格局,对众多大模型应用企业也是好消息。

现在,用户需要通过提交表格的方式即可获得Llama-2-chat模型。用户下载每个模型后,将收到大模型的型号代码、规模、用户指南信息。

其中,Llama 2-Chat是针对对话AI场景进行优化的,使用来自人类反馈的强化学习来确保安全性和有用性。
在训练过程中,Llama 2使用公开的在线数据进行预训练。然后通过使用监督微调创建Llama-2-chat的初始版本。接下来,Llama-2-chat会通过人类反馈强化学习第一次出现标注上(RLHF)进行迭代细化,其中包括拒绝采样和近端策略优化(PPO)。

Llama-2大模型将免费用于研究和商业用途。微软是Llama 2的首选合作伙伴。据悉,Llama 2可在 Azure AI模型目录中使用,使用Microsoft Azure的开发人员能够使用它进行构建,并利用其云原生工具进行内容过滤和安全功能。
Llama 2还针对在Windows的本地运行进行了优化,为开发人员提供了无缝工作流程,为跨不同平台的客户带来生成式AI体验。目前,Llama2也可通过Amazon Web Services(AWS)、Hugging Face和其他提供商获取。
二、经过三方安全测试,Meta与微软联合推动Llama-2落地人工智能在给社会带来巨大进步的同时,也伴随着风险。Meta希望提供开源,以促进大模型的透明度。
据Meta介绍,Llama-2已经通过安全测试。测试团队不但来自于Meta内部,通过生成对抗性提示以促进模型微调,还有第三方机构对Llama-2进行外部对抗性测试,以识别性能差距。

在Meta进一步的研究论文里,Meta解释了模型的微调和评估方法并指出了其缺点,并披露了此前经历过的已知挑战和问题。
Meta创建了大模型指南作为指引,以支持开发人员提供负责任的开发和安全评估的最佳实践。该指南概述了一些实践成果,反映了整个人工智能研究行业讨论有关负责任的生成式AI最先进的研究。
Meta还启动了一项新的合作伙伴计划,研究人员可以申请加入从业者社区,分享有关Llama-2的经验,社区将制定一个研究议程来推动未来的发展。同时,Meta还在政策监管下,明确禁止某些使用大语言模型的指导方向,以帮助确保这些模型得到公平和负责任的使用。
结语:开源大模型,Meta加速AI领域发展随着Meta大模型Llama 2发布,全球的大语言模型矩阵又新增一位重磅嘉宾。Meta和微软的联合,也迅速将Llama 2的应用,直接和成千上万的开发者连接起来。
相较于上一代,Llama 2 在推理、编码、熟练程度和知识测试,优于其他开源语言模型。
随着大模型研发和落地的加速狂飙,我们有望看到更多大模型为生活以及产业带来巨大影响。
相关文章









猜你喜欢
成员 网址收录40418 企业收录2986 印章生成263660 电子证书1157 电子名片68 自媒体103556