Google Cloud用 RLHF 驯服 Llama2

2023年09月01日 由 camellia 发表 474 0

在最近的Google Cloud Next活动中,谷歌宣布他们将在Google Cloud的Vertex AI上提供Meta的Llama 2和Code Llama,以及Falcon LLM,这令人意外,因为谷歌是唯一一个没有与竞争机构合作托管Llama 2或其他开源LLM模型的云服务提供商。


1_副本

这似乎是谷歌考虑到以企业为主要客户的Vertex AI的决定,它们正在寻求更多的选择。根据趋势来看,在GPT-4之后,Llama 2是最受欢迎的大型语言模型,考虑到它是开源和商业可用的。对于Llama 2来说,谷歌表示他们是唯一一个提供适配器调优和RLHF的云供应商。


尽管Meta和谷歌是广告竞争对手,但在大型语言模型方面它们抛开了竞争。Meta不想与任何LLM业务竞争,并愿意向每个人提供Llama 2。现在谷歌云有了Llama 2,Meta已经占领了每一个可能的领域。事实上,Meta刚刚打破了谚语:“如果你擅长某件事,永远不要免费做”。


然而,谷歌接受Llama 2提出了一个问题:PaLM 2是否不够强大?谷歌Bard目前使用的是PaLM 2,与ChatGPT相比,似乎它不受企业的喜爱,因为它无法根据他们的要求进行定制,并且它的回答质量较低。


这家科技巨头声称它的Model Garden拥有100多个模型,包括企业就绪的基础模型API、开源模型和来自谷歌和第三方的任务特定模型。谷歌应该明白,在LLM方面,重要的不是数量,而是质量。


最近,OpenAI也借鉴了Meta的方法,现在正在努力为GPT-4和GPT-3.5提供定制选项,同时避免开源。为了实现这一目标,ChatGPT的创建者最近推出了GPT-3.5 Turbo API以进行微调。此外,它还与Scale合作,以微调GPT-3.5,以吸引企业。


LLM云之战开始


谷歌可能已经晚了,但仍然有希望,沿着AWS的路线走。谷歌已经意识到托管多个LLM的重要性,就像亚马逊的Bedrock平台一样。目前,Bedrock托管来自AI21、Cohere、Anthropic Claude 2和Stability AI SDXL 1.0的模型。


目前,微软正在积极探索不同的LLM。微软Azure目前通过API包含了所有OpenAI服务,包括Azure OpenAI服务。这使得企业和开发者能够使用GPT、DALL·E和Codex创建应用程序。


当Meta推出Llama 2时,Azure被宣布为首选合作伙伴。微软似乎不会止步于此,他们进一步计划在Azure上销售可以帮助客户为他们的业务创建AI应用程序的Databricks软件的新版本。这项新服务将帮助公司从头开始创建AI模型,或重新利用开源模型,作为授权OpenAI专有模型的替代选择。


在最新的季度中,由于Azure OpenAI服务的推动,Azure实现了26%的收入增长,成为赢家。然而,现在所有三个云都共同拥有Llama 2,谁将在未来季度引领LLM云的竞争将是令人着迷的。


Gemini呢?由于Vertex AI现在托管Llama 2,并将重点转向与微软和亚马逊类似的较小模型,这引发了创建Gemini来应对GPT-5的可行性问题。这一考虑尤其重要,因为OpenAI也将重点转向为企业提供服务。


不要忘记,谷歌的Codey有一个名为Code Llama的新竞争对手,只有时间能告诉谁编码更好,以及它被企业客户和开发者采用的程度。

文章来源:https://analyticsindiamag.com/google-cloud-tames-llama-2-with-rlhf/
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
热门职位
Maluuba
20000~40000/月
Cisco
25000~30000/月 深圳市
PilotAILabs
30000~60000/年 深圳市
写评论取消
回复取消