Google IO 2021懶人包:Android 12搶先看、Google地圖與相簿新功能、Wear OS、TPU v4與LaMDA

2021.05.19 04:32AM

2021年Google I/O仍採線上模式舉辦,本屆Keynote重點仍在於Android 12的發展,老服務Google地圖與Google相簿的新功能,以及收服三星後的 Wear OS發展。另外在AI與運算領域方面,亦特別挑出TPU v4以及LaMDA來解說。以下是本屆Google I/O的發表內容。

Android 12數位車鑰匙與Material You 設計介面

在蘋果日前宣布提供 iPhone 以 UWB 技術做為汽車的數位鑰匙功能後, Google 也宣布 Android 12 將支援相近的數位鑰匙功能,無獨有偶的,率先與 Google 合作數位鑰匙的車廠仍舊為 BMW 。

不過此項技術並非廣泛開放,預計幾個月後將由特定的 Pixel 手機與特定三星 Galaxy 機種率先開放使用。

照片中包含了電子產品、三星Galaxy S21 Ultra 5G、三星Galaxy S21 + 5G、電子配件、三星

▲ Android 12 支援 UWB 技術外,也同樣支援 NFC 技術(照片為具備 UWB 的 Galaxy S21 Ultra )

Android 12 的數位鑰匙功能本質與目前使用 Android 進行支付的方式相似,同樣需要提供高度的安全性驗證,鎖定中的 Android 手機當然是不能夠使用數位鑰匙功能的;而 Google 將透過 UWB 與 NFC 兩項技術,在提供 UWB 功能的新手機可藉由 UWB 特性不須取出手機即可如當前汽車所使用的免鑰匙系統一樣進行車輛解鎖;至於使用 NFC 功能時,仍需像目前使用 Google Pay 一樣需要將 NFC 標籤與汽車的 NFC 標籤進行短距離的非接觸解鎖。

Android 12 除了新 Material You 設計介面、減少系統消耗,還可快速確認相機、麥克風是否被偷偷使用

Google 在 Google IO 大會除了介紹 Android 12 全新的 Material You 設計風格以外,也一併針對安全性進行強化,最引人注目的莫過於未來如果有程式偷偷使用手機的相機或是麥克風, Android 12 將以小圖示顯示在右上角,並可使用下拉選單快速禁用,做為強化並確保個人的隱私權的新機制。

Material You 是 Google 自提出 Material Design 後的全新設計語言,強調是更具個性化的使用體驗,包括基於色彩科學的個人化配色與重新設計的個性 Wedget ,諸如選擇完桌面後,系統會自動幫使用者在包括操作介面、通知欄、鎖定螢幕、音量控制、 Wedget 等套入適合的系統配色。此外除了針對操作視覺提供全新的動畫效果以外,同時也針對系統進行瘦身,除了系統反應更快以外,核心系統服務占用 CPU 的比重縮減 22% ,同時將系統服務使用大核心運算的比重減少 15% ,使設備能夠更為省電。

照片中提到了#Googlel、E News App、9:46 AM,跟谷歌有關,包含了多媒體、產品設計、多媒體、牌、電子產品

▲隱私儀錶板功能提供可視化界面讓使用者更容易看懂那些應用正使用那些權限

照片中提到了#Googlel、G,跟谷歌有關,包含了多媒體、產品設計、多媒體、牌、屏幕截圖

▲未來若相機與麥克風在被占用,右上角會跳出小小的通知圖示

照片中提到了#GooglelO、Tue, May 18、12:00,跟谷歌有關,包含了多媒體、移動設備、移動電話、產品設計、手機

▲新設計的下拉選單可以快速停用這些疑似被惡意軟體操控的感測器

設備安全與個人隱私也是每次 Android 升級的重點功能,此次新設計的隱私儀表板透過直覺的可視化界面,讓使用者清楚的看到當前的 app 的隱私權線設定、正在使用那些數據、使用的頻率與應用程式執行的頻率,並可從儀表板中直接取消可疑應用程式的權限。

另外 Android 12 的狀態列未來在相機、麥克風使用時會在右上角跳出提示,方便使用者確認這兩項感測器是否被不知名應用使用中,同時可透過下拉選單的快捷開關禁用特定程式使用相機與麥克風的權限。

至於針對地點隱私部分, Android 12 透過全新的"大致位置"的權限功能,未來可限制特定應用程式只能得知使用者大概的所在地,不會像當前提供位置權限後提供過於精確的地理資訊。

照片中提到了#Googlel、Private Compute Core、G,跟谷歌有關,包含了介紹、數碼展示廣告、牌、儀表、屏幕截圖

▲ Private Compute Core 強調將部分隱私運算功能在與網路隔離的環境下使用

此外, Android 12 將提供稱為 Private Compute Core 的開源技術,藉由把隱私相關的運算部分獨立於網路之外,在進行即時字幕、當前的音樂播放、智慧回應等音訊與語言相關的高度隱私內容時,避免這些資料藉由網路外洩。

Google 即日起開放 Pixel 3 以上 Pixel 機種安裝 Android 12 Beta 1

通常 Google IO 大會也象徵 Google 即將開放 Beta 版本的新版 Android ,在稍早 Google 也正式宣布即日起開放 Pixel 3 以後的 Pixel 機種下載安裝 Android 12 Beta 1 ,此版本也將包括稍早所公布的 Material You 。

照片中提到了15:22、to A99%,包含了功能手機、像素5、像素3、移動設備、功能手機

▲ Pixel 3 之後的機種皆可在今日透過開發者計畫安裝 Android 12 Beta 1

若為早期申請開發者,當前使用開發者預覽版 Android 12 Developer Preview 3 的 Pixel 用戶將在近幾個小時內收到 Android 12 Beta 1 的 OTA 通知,若等不急的開發者亦可自 Google 的開發者平台直接下載映像檔進行刷機。雖然目前的 Beta 1 穩定度應該比起開發者預覽版本好了許多,不過仍不建議抱持著把 Beta 版穩定度當成正式版本的一般使用者、尤其手中的 Pixel 手機還是主力手機的一般人搶先下載。

目前 Google 提供 Pixel 3 、 Pixel 3XL 、 Pixel 3a 、 Pixel 3a XL 、 Pixel 4 、 Pixel 4 XL 、 Pixel 4a 、 Pixel 4a 5G 與 Pixel 5 試用 Android 12 Beta 1 。

Android Developer 的 Android 12 Beta 1 映像檔下載頁面: Android Developer

Google地圖4個新功能 新導航減少煞停次數、強化即時街景、標記人潮區域、個人化地圖

Google地圖(Google Maps)已經是很成熟的產品,不過Google I/O上還是有不少新東西,且這次新加入的4個功能都算是實用性功能,值得你玩玩看。首先是強化車輛導航,可以分析交通路況,減少你煞停的機會。相信你應該有經驗,開車轉過一個路口立刻就猛踩煞車煞停,未來可以避免這類狀況。其次是更細緻的即時街景服務,另外還能會在地圖上標記人潮眾多的區域,對於現在疫情來說十分好用。最後則是個人化地圖,會分析你的使用行為預測你的搜尋結果。

最佳化導航路徑 減少車輛煞停次數

Google地圖的導航雖然偶爾會導到奇怪的地方,但普遍來說還是滿好用的。然而除了能讓你正確到達目的地之外,還有什麼方式能提升使用體驗?Google透過交通分析了解到最短路徑不見得是最佳路徑,尤其對汽車來說,走走停停的捷徑不如順暢的道路。且根據維吉尼亞大學的研究指出,走走停停或者說是劇烈煞停汽車,可能是造成車禍的一部分因素。因此未來在導航上,你能透獲得更順暢的導航路線,避免讓你走走停停進而降低車禍發生的機會。

更精確細緻的即時街景

先前Google曾推出AR即時街景導航服務,現在你在行人模式下開啟後,附近的商店、餐廳顯示將更準確,且點選後會如2D的Google地圖一樣顯示該店的人潮、評分、照片等資訊。目前Google地圖AR導航功能預計將推到全球50個城市,如果你方向感不太好,那麼可以試試看這個功能。

▲未來的Google地圖也會更加詳細,包括行人穿越道的位置都會標示。

標記人潮區域 避免擁擠或群聚

公園有多少人?捷運上會不會爆滿?我們每天都在想這些問題,Google則更進一步幫我們處理好。未來Google地圖將會標示人潮聚集的區域,像是公園、市場或是轉運站,你可以藉此避開人潮或是避免群聚感染。

▲圖中黃色框線區域即為人潮熱點,可預先知道避開人潮。

個人化地圖資訊 預測你的使用行為

打開地圖的目的是什麼?是要找餐廳、導航還是評價?或許你已經在近期的Google地圖中感覺到,地圖上的標示似乎偶爾會有些改變。是的,未來當你打開Google地圖時,地圖的標記將會透過學習而有所改變。

舉例來說,當你總是早上8點打開地圖找早餐店,下次你8點打開地圖時,Google就會預先幫你標示這些早餐店,你就不用再一個個去搜尋。未來Google地圖會判斷你的時間與地點,預先標示高關聯度的地點給你,能夠減少你花費在搜尋上的時間。

▲地圖上這麼多標示哪個是你要的?未來會透過學習機制,預測你要的地點。

Google相簿新同物件回顧照片集、合成3D照片、上鎖檔案夾、特殊節日回顧

Google相簿(Google Photos)還能玩出什麼新花樣?Google在Google I/O 2021上發表了Google相簿的多個新功能,包括新的回顧照片集,能夠搜尋照片中的特定物件,像是某個登山背包,Google會利用AI找出所有你背這個背包登山的照片做成相片集,或者全家經常在某個沙發上拍照,AI也會抓出所有在此沙發上的合照,以物品做為相簿的主題,而非過去的人物或是時間。另外,這次也推出合成的3D照片,也終於能幫你的檔案夾用密碼上鎖。

回顧相片方式有很多種 AI自動幫你整理好

Google相簿內有4兆張相片自從拍完就沒有被重新回顧過,但這些照片就沒有回憶的價值嗎?Google不這麼認為。過往Google相簿利用人物、時間、地點等標記方式,幫你做人物、節日或是旅行回顧,整理成一個個相片集。現在Google發現了另一個很有趣的方式整理相片,那就是相同的物件。

你會不會總是背著某個背包登山,或者是穿著某件衣服去玩樂,也有可能全家的人都喜歡在客廳沙發上拍照。Google利用AI比對所有照片中的物件,並且把相似的物件抓出來做成相簿。舉例來說,你可能每次都背著橘色登山包爬山,AI只要認出這個背包就把它撈到相簿中,你就有了背橘色背包登山的故事集。此功能最少只需要3張相片就能觸發,會自動比對相似的形狀或是顏色,不需要你手動開啟。

除了物件以外,未來Google相簿也將強化時間戳記,會推出新年、光明節等節日回顧。並且會每個月推出當月最佳回憶,或是旅行精選之類的照片,而這些功能將於近期陸續上線。

▲AI會直接找出相同的物件,並將其做成相片集,例如圖中的背包。

用機器學習製作3D照片

拍小孩總是拍不好?或者拍照好像角度總是不對勁?Google利用機器學習製作精美的3D照片,現在似乎更進一步。你只要拍攝2至3張相近角度的照片,Google相簿就會自動分析並將其串接成3D照片。以前這種動畫效果,動畫師得要處理個幾小時,現在透過機器學習,只要一瞬間就能完成。

▲你只要有2至3張角度相似的照片,AI就會自動合成3D照片。

用密碼上鎖的檔案夾

許多人都很疑惑,為什麼Google相簿沒有私密的檔案夾?未來Google相簿將會有名為Locked Folder的上鎖檔案夾,你能自行設定密碼並保存特定照片。且你若使用Google相簿等App時,它不會直接將相片顯示在螢幕上,此功能將先於Google Pixel手機上推出。若你使用的是Pixel手機,也可以在手機上直接將相片、影片直接儲存到該資料夾中。

照片中包含了特寫、法希瑪國際旅行社、芒格洛爾、575018、德拉拉卡特

▲終於有私密資料夾了,這功能來的真晚,但遲到總比不到好。

世界級運動員用AR擴增實境呈現搜尋結果 透過AI更理解你的問題

近年來Google一直試著讓人們在搜尋時不再以簡單的文字網址作為搜尋結果,2021年的Google I/O則展示當人們搜尋不同的運動時,Google讓這些世界級運動員,包括足球員Megan Rapinoe、日本網球職業運動員大坂直美和美國女子競技體操選手Simone Biles透過AR擴增實境的方式展現在使用者眼前。

除了AR以外,透過拍你手上皮膚的樣貌,Google 皮膚診斷工具可以協助判斷你的皮膚狀況,目前這個AI模型已經可以判斷288種皮膚狀態,並提供相關的問答結果,協助使用者以此為基礎做更深入的搜尋研究。

MUM AI模型:更理解使用的在問什麼

Multitask Unified Model 是Google開發出來試著更了解人們搜尋意圖的AI模型,並聲稱比BERT模型更強千倍,而且可以跨越75種不同的語言,簡單來說MUM模型試圖讓使用者搜尋一個自己語言的關鍵字,但幫你找到全球所有語言的內容再轉換成你的語言。

例如使用者在搜尋英文「Mt. Fuji」,MUM模型就知道你在搜尋跟富士山有關的內容,而且判斷是你可能想要爬富士山,因此再給你相關準備的搜尋結果。如果你的搜尋包含英文「hiking」,MUM模型就會判斷你可能會想要健身,進而推薦你適合的裝備。

▲透過MUM模型還能幫助使用者判斷鞋子是否適合爬富士山。

Google Lens成為搜尋的一部分

照片中提到了nose、pet、red,跟美國廣播公司有關,包含了樹、數碼展示廣告、顯示裝置、標牌、旗幟

圖片搜尋上,Google Lens 將會成為搜尋的一部分,而且不只能辨識一張圖片的基本樣貌,而是包括其中的組成元素。例如上圖的狗夠,以往除了辨識他是一隻狗狗以外,還能辨認出狗的鼻子、紅色衣服、寵物以及休閒等元素。

照片中提到了Google Lens、Google Lens、3B,包含了通訊設備、數碼展示廣告、小工具、通訊

▲由來自印度的Google CEO Pichai來示範透過Google Lens可以解方程式再合理不過了。

智慧型手錶作業系統Wear OS升級 連三星Tizen都收服了

Google 終於升級了智慧型手錶作業系統 Wear OS,這次還攜手整合了Samsung Tizen作業系統,未來三星的智慧型手錶將會搭載最新的Google Wear OS,新的升級包括效能速度提升、更長久的電池續航力以及更活躍的開發者社群。

效能速度提升上,Google宣稱在新作業系統上執行應用程式將能提升30%的速度,動畫呈現也更滑順。更重要的是,開發者終於不用分心在不同的作業系統,Wear OS統一了整個Android平台。

三星表示下一款的Galaxy Watch將會搭載新款的Google Wear OS,在應用程式多工運作上會更順暢。另外Google也表示最受歡迎的Fitbit智慧型手錶款式也會搭在最新的Wear OS。

▲新Google Wear OS介面展示,管理各種手錶上執行的任務更方便了。

▲滑動不同畫面、包括睡眠時間、行事曆和休息時間也更加流暢。

照片中提到了G Pay,跟谷歌、Fitbit有關,包含了圖形、商標、產品設計、牌、圖形


▲手錶上的Google地圖、助理也都會重新設計,Google Pay也會支援26個國家(先前只有11個)。YouTube Music 則預計在年底加入新的Wear OS。

照片中提到了Google、SAMSUNG、Longer,包含了樹、牌、綠色、儀表、樹

▲速度和電池續航力仍然是新Google Wear OS的更新重點。

Google推出Smart Canvan功能 利用@串連所有服務

Google在今天的發表會宣佈將Google Smart Canvas工具加入Google Workspace中,利用Smart Canvas就可以在文件中導入試算表、行事曆、簡報、表格、投票功能等等,只要利用「@」符號就能夠將想要的工具串進文件中,在單一的文件裡就能開啟其他應用程式,讓google服務整合在同一個畫面中。

Smart Canvas將Google文件變成整合大平台

一般人大多使用Google文件當作共享的基礎工具,加入Smart Canvas功能後,將能夠在文件中加入會議活動時程通知、其他使用者、試算表格、簡報、雲端硬碟、行事曆、Gmail、協作平台、投票功能等等,只要透過「@」就能加入想要串進去的服務,Google也表示未來在試算表格中也將會加入Smart Canvas功能。

操作的方式和一般社群網站相同,在文件中打上「@」就能快速瀏覽所有Google支援的服務,比如說可以在文件中放進重要的行事曆,相關的使用者帳號等等,好處是所有的服務都可以在同一個畫面中顯示,而不用另外再開新的視窗。

照片中提到了Next steps、O Presenters need to figure out ordering: @ keep typing to search、PEOPLE,包含了媒體、多媒體、產品、牌、線
▲在Google文件中打上「@」就能使用Smart Canvan功能。

照片中提到了Next steps、Presenters need to figure out ordering: Aiko Gray Lila Cole Gonzalo Ricci、Pull/ Analyze Home & Gardei Campaign Data,包含了樹、普希金山、毒品交易的商業秘密:幾乎真實的記錄、作家、書評
▲Smart Canvan支援多種google服務,像是行事曆、試算表格和投票功能。

照片中提到了External、All external communication should be captured in B HomeWorld Account Notes、E HomeWorld Account Notes,包含了網頁、網頁、產品、媒體市場、牌
▲使用Smart Canvan後,加入的服務會呈現可以預覽的模式。

照片中提到了External、All external communication should be captured in B HomeWorld Account Notes、OVERVIEW,包含了網頁、網頁、產品、媒體市場、牌
▲開啟後的服務會和文件呈現在同一個畫面中。
 

效能比 TPU v3 高一倍的 TPU v4

Google 在此次 IO 大會宣布推出第四代 AI 加速晶片 TPU v4 ( Tensor Processing Unit ), TPU 是 Google 針對其 AI 與機器學習所自主設計的專屬邏輯晶片,相較 TPU v3 效能翻了一倍,同時一套具備 4,096 個 TPU v4 的伺服器 POD 的效能超過 1 EXAFLOPS 。

目前 Google 已經將 TPU v4 導入數據中心當中,預計在今年內開放給 Google Cloud 客戶使用。

▲ Google 邀請演員 Michael Pena 參觀位於聖塔芭芭拉的 Quantum AI Campus

另外 Google 日前已經宣布投入量子運算,不過目前量子運算仍處於非常早期的階段, Google 當前在加州聖塔芭芭拉設有 Quantum AI Campus ,此次也邀請演員 Michael Pena 串場參觀這座專業量子運算設立的實驗室,由於量子運算系統特性,在介紹過程也不忘強調放有量子計算機的機房可能是世界最冷的地方,僅有 10 milliKelvin 。

下一代自然語意理解 AI 技術 LaMDA ,超越目前只能回答正確答案的 BERT 、宛若與好友進行閒聊對話

Google 的 AI 自然語言理解技術在業界是有目共睹的,當前我們平日所使用的自然語言理解技術是基於 BERT ,然而 Google 當然不光只滿足於 BERT ,在今年的 Google IO 宣布新一代的自然語言理解技術 LaMDA / Language Model for Dialogue Applications 。目前 LaMDA 仍在開發階段,還未有具體導入 Google 服務的時程規劃。

不同於 BERT 基於理解與對話, LaMDA 進一步把自然語意對話 AI 昇華到能夠如真人一般在對話中參雜閒聊,關鍵在於 LaMDA 不同於 BERT 等傳統對話 AI 圍繞在與談話主題相關的狹義路徑, LaMDA 能夠在多個話題之間自由的切換,使對話的過程宛若與朋友閒聊一樣自然,在回答的語句加入並非與問題相關卻具關連性的回答。

照片中提到了#GooglelO、most notable was New、Horizons, the spacecraft,跟谷歌有關,包含了球、/ m / 02j71、地球、多媒體、球

▲ Google 藉把 LaMDA 扮演冥王星展示與人類自然的對話,跳脫 BART 只能提供正確答案的對話模式

為了展現 LaMDA 的強大, Google 在 I/O 的介紹使 LaMDA 扮演冥王星與紙飛機,當使用者提問時, LaMDA 會如同人類進行角色扮演時從"如果我是 XXX "的角度進行對話,問答中間也會夾雜大量與話題相關的敘述,遠大於原本提問者所發問的題目以外。

照片中包含了約翰·霍普金斯大學徽標白色、棕櫚灘大西洋大學、大學、學院、布朗大學

▲ LaMDA 是以真實的對話進行訓練,同時在訓練過程學習判斷上下句的關聯性

LaMDA 與傳統語意認知模型最大的區別在於是藉由對話進行訓練,在進行訓練時學習不同形式語言的開放式對話,同時分辨對話的上下文是否具備關聯性。 Google 舉了一個簡單的例子:當有人說出"我剛剛開始上吉他課",雖然本身不算發問,但這位說話的人可能會希望有人能夠告訴他"感覺好棒啊,我媽也常常彈奏她的骨董馬丁吉他",前後文雖然不具直接關聯性,卻是能夠呼應前言的回應。

照片中提到了#GooglelO、1 sènse your excitement.、Ask me anything.,跟谷歌有關,包含了設計、平面設計、產品設計、設計、儀表

▲ LaMDA 能夠從無數的對話模式中自關聯性著手提供更自然的對話

LaMDA 目前還未導入 Google 服務當中, Google 在官方的介紹也提到將會確保 LaMDA 是否符合企業責任,例如回答的問題是否超出詼諧導致反感,以及擔心是否遭受濫用,反而造成社會對立、仇恨蔓延, Google 表示縱使學習的語言內容仍可能在實際使用模型時發生被濫用的情況;不過最終的目標是會應用在 Google 旗下如 Google Assistant 、 Google Search 與 Workspace 等服務使用。

6 則回應