PaLM 2 運(yùn)用超過(guò) 100 種語(yǔ)言的多語(yǔ)數(shù)據(jù)訓(xùn)練而成,理解和產(chǎn)生文字的能力大幅強(qiáng)化,能將含有微妙細(xì)節(jié)的文句翻譯成各種語(yǔ)言,例如不容易處理的俗諺、詩(shī)歌、謎語(yǔ)等。 PaLM 2 也擁有廣泛的數(shù)據(jù)資料,涵蓋數(shù)學(xué)算式的科學(xué)研究論文、網(wǎng)頁(yè)等,在邏輯、常識(shí)推理以及數(shù)學(xué)方面的功能大幅提升。 不只如此,PaLM 2 還使用大量公開(kāi)的自然語(yǔ)言和源代碼數(shù)據(jù)進(jìn)行預(yù)先訓(xùn)練,精通 Python 和 JavaScript 等常見(jiàn)的程式語(yǔ)言。
PaLM 2 能有不同的規(guī)模大小,讓它能夠微調(diào),更輕易地部署并應(yīng)用在不同的產(chǎn)品和情境。 谷歌推出 4 種不同規(guī)模的 PaLM 2,由小到大分別是 Gecko、Otter、Bison、Unicorn,其中 Gecko 極為輕量,甚至可在離線的移動(dòng)設(shè)備上運(yùn)作。
今日開(kāi)發(fā)者大會(huì)上,谷歌表示有 25 款新產(chǎn)品和功能由 PaLM 2 提供支持,谷歌內(nèi)部也有許多團(tuán)隊(duì)在使用:
Bard 移植到 PaLM 2 上,也支持谷歌近日公開(kāi)的編程新功能。
谷歌 Workspace 新功能幫助用戶在 Gmail 和谷歌文件撰寫(xiě),并協(xié)助在谷歌試算表進(jìn)行整理,這些都是結(jié)合 PaLM 2 的技術(shù)。
Med-PaLM 2 是由具有醫(yī)學(xué)背景的谷歌健康研究團(tuán)隊(duì)?wèi)?yīng)用醫(yī)學(xué)知識(shí)進(jìn)行訓(xùn)練的語(yǔ)言模型,能從各種密集復(fù)雜的醫(yī)學(xué)內(nèi)容歸納重點(diǎn),回答相關(guān)問(wèn)題,在醫(yī)療知識(shí)方面展現(xiàn)出頂尖效能,也是第一個(gè)能在美國(guó)醫(yī)師執(zhí)照考試的試題類型中,達(dá)到「專家」等級(jí)的語(yǔ)言模型。
Sec-PaLM 是 PaLM 2 的特殊版本,專為安全性用途訓(xùn)練而成,在網(wǎng)絡(luò)安全分析方面可望帶來(lái)重大進(jìn)展。
生成式 AI 協(xié)作工具 Duet AI for 谷歌 Cloud 也采用 PaLM 2 的技術(shù),幫助用戶以前所未有的速度學(xué)習(xí)、構(gòu)建并執(zhí)行運(yùn)營(yíng)作業(yè)。
從今日起,開(kāi)發(fā)者可登記使用 PaLM 2,企業(yè)用戶也能通過(guò) Vertex AI 中的模型,享受企業(yè)級(jí)的隱私、安全以及管理功能。
除此之外,谷歌已著手開(kāi)發(fā)第一個(gè)從頭即采取多模態(tài)的 Gemini 模型,在不同大小模型下都能提供絕佳性能,也能有效率地和其他工具、API 整合。 一旦微調(diào)完成并通過(guò)安全性測(cè)試,Gemini 將會(huì)像 PaLM 2 一樣,開(kāi)始提供多種大小和速度的模型,確保能有效運(yùn)用在各種應(yīng)用程序、產(chǎn)品和設(shè)備。