Google AI賦予Android全新功能：畫圈搜尋助學、Gemini更聰明、TalkBack更清晰、防詐騙警報上線

Google AI作為Android作業系統的核心，數十億的Android 系統使用者，現在能用全新的方式跟自己的手機互動。在今Google I/O 2024開發者大會上，展示了能讓你在Android上體驗Google AI的各項功能更新。

畫圈搜尋現在可以幫助學生完成回家功課

「畫圈搜尋」直接內建在使用者體驗裡，讓你只要用簡單的手勢，就以搜尋在手機上看到的任何內容，而且不需要停止正在進行的操作，或切換到其他應用程式。自從在三星 Unpacked發表以來，Google為畫圈搜尋新增了全螢幕翻譯等新功能，並且把這項功能擴大，支援更多 Pixel 和三星裝置。

從今天開始，學生可以直接用手機和平板電腦畫圈搜尋，輕鬆完成回家功課。當學生圈出他們遇到困難的部分時，不用離開數位資訊表或課程大綱，就可以獲得逐步的指引，解決許多物理和數學應用題。今年稍晚，畫圈搜尋還能更進一步解決與符號公式、圖表和圖形等相關更複雜的問題。這些都可以透過應用我們專門針對學習進行微調的新模型系列 LearnLM 來實現。

目前畫圈搜尋已經在超過1億台裝置上使用，Google計劃為更多裝置提供這種便利的體驗，希望今年年底讓使用者人數翻倍。

Gemini更能理解情境脈絡，協助你完成工作

Android 系統上的 Gemini是一種新型助理，可以透過生成式AI來提高創造力和工作效率。這種整合到Android系統裡的體驗，能更準確地瞭解你螢幕畫面上內容的上下文，還有正在使用的應用程式。

不久之後，你就可以在使用的應用程式上叫出Gemini的附加功能，用更輕鬆、更多元的方式來使用Gemini。例如，把生成的圖片拖放到Gmail、Google訊息和其他地方，或在YouTube影片中點擊「詢問有關這部影片的問題」，獲取特定資訊。如果你擁有Gemini Advanced，也可以透過「詢問有關這個PDF的問題」選項，不需要翻閱很多頁，就可以快速獲得答案。我們將在未來幾個月之內，向數億台裝置推出這項更新。

Gemini Nano將具備完整的多模態功能

Android是首創裝置內建有基礎模型的行動作業系統。有了Gemini Nano，可以快速為你提供服務，並且完全保密你的資訊。今年稍晚，從Pixel開始，Gemini Nano將具備全面的多模態功能，除了處理文字輸入外，手機還能理解更多與上下文相關的資訊，像是影像、聲音和口說對話等。

透過TalkBack獲得更清晰的描述內容

今年稍晚，Gemini Nano的多模態功能將整合到TalkBack功能裡，幫助視障使用者獲得更豐富、更清晰的影像描述。TalkBack使用者平均每天會遇到90張未標記的圖片。這項更新，將會幫助彌補影像資訊不全的問題，未來無論是家人朋友傳來照片中的更多細節，或是網路購物時要選擇的衣服款式和剪裁，都能輕鬆掌握資訊。由於Gemini Nano是直接在裝置上運作，因此能快速取得這些描述，而且即使沒有網路時也能正常運作。

在電話中接收可疑詐騙警報

根據2023年10月的一份報告，在報告發表當下的過去12個月中，人們因為詐騙造成的損失超過1兆美元。Google正在測試一項Gemini Nano的新功能，在通話過程中如果偵測到與詐騙有關的對話模式，就會立即發出警報。例如，如果有一個「銀行代表」提出不常見的銀行要求，要求你緊急轉帳、使用禮品卡付款，或是提供PIN碼或密碼這種個人資訊，你就會收到警報。這項保護可以直接在裝置上進行，因此對話能夠完全保密，Google將在今年稍晚與大家分享更多關於這項選用功能的資訊。

史塔夫短評：Gemini x Android整合越來越強大