2023年上半年，科技領(lǐng)域最熱不過(guò)大模型；

2023年下半年，大模型開(kāi)始集體“上山下鄉(xiāng)”，進(jìn)入行業(yè)、深入硬件。

端側(cè)大模型，就是在這時(shí)開(kāi)始成為一個(gè)重要研究方向。

這其中，谷歌在今年2月發(fā)布對(duì)標(biāo)ChatGPT的Bard后，在前不久"made by Google"的硬件發(fā)布會(huì)上，正式將大模型相關(guān)技術(shù)下沉到了Pixel 8 Pro上。

“買手機(jī)送大模型”，也成了業(yè)界送給谷歌Pixel 8系列手機(jī)最好的推廣文案。

Bard下沉到端側(cè)

2016年，谷歌CEO Sundar Pichai在made by Google大會(huì)上正式宣布，谷歌從“Mobile First”轉(zhuǎn)向“AI First”，AI由此成為了谷歌的主旋律。

僅僅一年后，谷歌就對(duì)外發(fā)布了為大模型埋下伏筆的Transformer架構(gòu)，造就了后來(lái)OpenAI的崛起，以及如今大模型時(shí)代的到來(lái)。

同樣是基于Transformer架構(gòu)的Bard在今年2月正式發(fā)布后，行業(yè)內(nèi)開(kāi)始高度關(guān)注這一模型。

一是關(guān)注這一模型是否能夠迎頭趕上風(fēng)頭正盛的ChatGPT，二是關(guān)注谷歌將如何應(yīng)用這一模型。

畢竟，谷歌有著世界上最優(yōu)秀的工程師團(tuán)隊(duì)和工程師文化，曾在過(guò)往互聯(lián)網(wǎng)熱潮中，研發(fā)出了幾乎統(tǒng)治了搜索引擎江湖的Google搜索引擎，在移動(dòng)互聯(lián)網(wǎng)時(shí)代，又憑借Android承載了移動(dòng)互聯(lián)網(wǎng)生態(tài)的半壁江山。

今年9月，就在谷歌這場(chǎng)硬件發(fā)布會(huì)之前，Bard產(chǎn)品總監(jiān)Yury Pinsky在官方博客中透露，Bard已經(jīng)可以連接到用戶的Google應(yīng)用服務(wù)，以實(shí)現(xiàn)針對(duì)用戶本人的定制化AI服務(wù)。

在這篇博文中，他指出，Bard可以從用戶每天使用的諸如Gmail、YouTube、谷歌云盤(pán)、谷歌地圖等服務(wù)中獲取信息，甚至可以跨應(yīng)用獲取信息，來(lái)提供千人千面的個(gè)人AI助手的能力。

例如，如果你和你的朋友正在籌備一場(chǎng)去大峽谷的旅行，你就可以通過(guò)自然語(yǔ)言與Bard交互，讓它為你做這樣一個(gè)規(guī)劃。

Bard在收到指令后，會(huì)通過(guò)查閱Gmail郵箱中信息來(lái)找到適合每個(gè)人的出行日期，通過(guò)查找實(shí)時(shí)航班和酒店信息，和前往機(jī)場(chǎng)的谷歌地圖路線，甚至觀查閱機(jī)場(chǎng)活動(dòng)的YouTube視頻，來(lái)為你規(guī)劃好整個(gè)形成。

同樣是在這篇博文中，Yury Pinsky還提到了另一項(xiàng)功能——多人交互。

當(dāng)有人通過(guò)向你分享了他與Bard的聊天時(shí)，你可以接著他的對(duì)話內(nèi)容，繼續(xù)與Bard交互。

顯然，更符合這些功能的應(yīng)用場(chǎng)景實(shí)際上是在移動(dòng)端，這樣的應(yīng)用研究，正是谷歌在為Bard下沉到端側(cè)做準(zhǔn)備。

實(shí)際上，就在這篇博文發(fā)布兩周后，2023年10月4日，谷歌"made by Google"硬件發(fā)布會(huì)在紐約正式召開(kāi)。

在這場(chǎng)硬件發(fā)布會(huì)上，谷歌不僅發(fā)布了Pixel 8手機(jī)，還將大模型正式下沉到了端側(cè)手機(jī)上。

端側(cè)大模型，用處幾何？

在今年的made by Google大會(huì)上，谷歌高級(jí)副總裁Rick Osterloh一上場(chǎng)就表示，“谷歌聚焦讓AI變得對(duì)每個(gè)人都更有用。”

至于如何讓AI變得對(duì)每個(gè)人都更有用，谷歌的做法是，做一款將軟件、硬件和AI整合在一起的手機(jī)，也就是谷歌Pixel手機(jī)。

2023年大模型這么熱，谷歌也在端側(cè)大模型應(yīng)用上做出了些花樣。

首先，在和Fitbit聯(lián)動(dòng)時(shí)，生成式AI可以作為你的運(yùn)動(dòng)健康小助理，告訴你，你今天之所以跑步會(huì)比往常感覺(jué)更困難，是因?yàn)槟憬裉爝x擇的路線更崎嶇、有更多的爬升。

與此同時(shí)，生成式AI還會(huì)根據(jù)你的問(wèn)題，為你輸出含有圖表的詳細(xì)分析報(bào)告。

其次，谷歌再次提及自家語(yǔ)音助手時(shí)，也特別強(qiáng)調(diào)加入引入了Bard。

Google Assistant負(fù)責(zé)人Sissie Hsiao在發(fā)布會(huì)上表示，引入Bard后，Google Assistant將個(gè)性化功能與大模型的推理能力、生成能力相結(jié)合，可以實(shí)現(xiàn)聽(tīng)、說(shuō)、影響處理能力的全面升級(jí)。

Sissie Hsiao在發(fā)布會(huì)上通過(guò)一系列提問(wèn)為我們展示了端側(cè)大模型的功能：

1、她告訴手機(jī)上的Bard“查看本周所有未讀郵件”，隨后，Bard幫她整理出收件箱中未讀郵件，并整理出相關(guān)郵件的概要，其中有一封關(guān)于派對(duì)邀請(qǐng)的郵件；

2、她接著問(wèn)Bard“這個(gè)派對(duì)的地址在哪”，Bard通過(guò)訪問(wèn)手機(jī)上的谷歌地圖，為用戶提供出這一派對(duì)的具體位置；

3、她繼續(xù)追問(wèn)Bard“到這個(gè)派對(duì)需要多長(zhǎng)時(shí)間”，Bard就會(huì)進(jìn)一步在谷歌地圖上給出路線信息。

與此同時(shí)，在手機(jī)上，Bard依然擁有大模型所有該有的文字處理和文字生成能力，這些能力也成了谷歌這代手機(jī)的一大亮點(diǎn)。

人均大模型時(shí)代開(kāi)啟

當(dāng)然，在這場(chǎng)硬件發(fā)布會(huì)上，谷歌還公布了一系列其他加入AI魔力的實(shí)用功能。

例如可以讓你免于騷擾電話侵?jǐn)_的Call Screen。

當(dāng)有電話接入你的手機(jī)時(shí)，你的語(yǔ)音助手會(huì)先請(qǐng)對(duì)方說(shuō)明來(lái)意，如果對(duì)方也是一個(gè)機(jī)器人，闡述的信息被識(shí)別為垃圾信息，會(huì)主動(dòng)回絕并將來(lái)電信息和相關(guān)來(lái)意一并顯示在用戶屏幕上。

例如可以為你用手機(jī)拍攝的視頻消除背景噪音的Audio Magic Eraser。

當(dāng)你視頻中有不是你需要的背景噪音時(shí)，通過(guò)這一加入生成式AI能力的功能，可以直接將這些背景噪音擦除。

再比如，可以為你P圖的Best Take。

當(dāng)你在為朋友拍照時(shí)，只需要多拍幾張照片，當(dāng)有某個(gè)或某些人表情不到位或有閉眼時(shí)，通過(guò)這一功能就可以篩選其他合適的表情直接替換。

此外，谷歌在Pixel 8 Pro中通過(guò)融合更強(qiáng)大的攝像頭、Tensor G3和計(jì)算音頻的能力，引入了視頻增強(qiáng)（Video Boost）功能，通過(guò)谷歌云端計(jì)算攝影模型對(duì)每一幀圖像進(jìn)行處理，從而得到更漂亮的視頻。

也是在發(fā)布會(huì)上，谷歌Pixel產(chǎn)品總監(jiān)Shenaz Zack也指出，“得益于谷歌數(shù)據(jù)中心模型（data center models），谷歌提升了Video Boost功能，改善了Google assistant的能力。”

這樣看來(lái)，端側(cè)大模型要想用起來(lái)，依然需要云端大模型提供助力。

Rick Osterloh指出，“谷歌人工智能團(tuán)隊(duì)正在嘗試基于生成式AI改變現(xiàn)在我們看到的一切。”

尤其是輸入法中的文字修正功能、長(zhǎng)文章的摘要整理功能，未來(lái)在大模型的加持下，將會(huì)在潛移默化中逐漸被大家頻繁使用。

對(duì)于谷歌來(lái)說(shuō)，更重要的是，谷歌認(rèn)為，Pixel 8 Pro是第一款搭載端側(cè)大模型的手機(jī)。

這將注定讓谷歌再次載入史冊(cè)。