[WWDC24] Apple Intelligence:以AI賦能的iPhone、iPad和Mac,與ChatGPT整合開啟無限可能
蘋果發表Apple Intelligence,這是一款適用於iPhone、iPad和Mac的個人智慧系統,將生成式模型的強大功能與個人情境互相結合,提供極其實用且合乎需求的智慧功能。Apple Intelligence與iOS 18、iPadOS 18和macOS Sequoia深度整合。此功能充分利用Apple晶片的強大實力,從而理解並建立語言和圖片、在各種App中採取動作,並根據個人情境來簡化及加速日常任務處理。透過「Private Cloud Compute」,Apple為AI的隱私性訂定全新標準,而且不管是裝置端處理過程,或在專屬的Apple晶片伺服器上所運行的更大、以伺服器為基礎的模型,皆能靈活展現其運算能力。
語言理解和創作的全新能力
Apple Intelligence為使用者開啟強化寫作能力和溝通效率的全新方法,藉由iOS 18、iPadOS 18和macOS Sequoia中新推出的全系統內建「Writing Tools」,使用者幾乎可以在任何地方進行改寫、校對與文本摘要,包括「郵件」、「備忘錄」、Pages及第三方App。
無論是整理課堂筆記、確認部落格文章通順流暢,或是確保電子郵件呈現完美文筆,「Writing Tools」都可以幫助使用者對自己的寫作更有信心。藉由「Rewrite」,Apple Intelligence 讓使用者能夠從他們所書寫的不同版本當中,挑選最適合受眾和當前任務的語氣。「Rewrite」可以協助提供適合不同場合的文字,從精心設計的求職信、到充滿幽默感與創意的派對邀請函都可以。「Proofread」功能可以檢查文法、詞彙選擇和句子結構,並提供修改建議和說明,使用者能校閱或快速接受這些建議。藉由「Summarize」功能,使用者可選取文字,將內容概括成容易理解的段落、重點條列、表格或清單。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11113043/Apple-WWDC24-Apple-Intelligence-Writing-Tools-240610_big.jpg.large_2x-1024x731.jpg?resize=800%2C571&ssl=1)
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11113126/Apple-WWDC24-Apple-Intelligence-Notes-Summarize-240610_big.jpg.large_2x-1024x731.jpg?resize=800%2C571&ssl=1)
用「郵件」處理電子郵件變得前所未有地簡單。「Priority Messages」是收件匣置頂的新區塊,會顯示最緊急的電子郵件,例如當天的晚餐邀請或登機證。在收件匣中,使用者不再只能預覽電子郵件的前幾行文字,而是無須點開郵件就能檢視摘要。針對長郵件串,使用者只須輕點,即可查看相關細節。「Smart Reply」可以提供快速回信的建議內容,並能辨識電子郵件中的提問,確定所有問題都有相應的答覆。
對語言的深度理解也擴展至「通知」功能。「Priority Notifications」會將最重要的內容顯示在堆疊的頂部,而摘要功能可以協助使用者瀏覽冗長或堆疊的通知訊息,並在「鎖定螢幕」上顯示重點資訊,當有聊天群組特別活躍時尤其實用。此外,為了幫助使用者專注於當前的工作,新推出的「Reduce Interruptions」專注模式只會顯示可能需要立即處理的通知,例如幼稚園通知要提早去接小孩的簡訊。
使用者現在可以在「備忘錄」和「電話」App中錄製、轉錄及摘要音訊內容。當通話期間啟動錄音時,參與者會自動收到通知;通話結束後,Apple Intelligence便會產出摘要,幫助使用者回顧重點資訊。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11113557/Apple-WWDC24-Apple-Intelligence-Notes-record-and-transcribe-audio-240610_big.jpg.large_2x-1024x731.jpg?resize=800%2C571&ssl=1)
「Image Playground」讓溝通和自我表現變得更有趣
Apple Intelligence 提供令人興奮的圖像創作功能,協助使用者以全新方式溝通、表現自我。透過「Image Playground」,使用者可以在幾秒鐘內創作出有趣的圖像,並從動畫、插圖或素描等三種風格中進行挑選。「Image Playground」操作簡單,更直接內建在「訊息」等App中。它還可以在指定的App中使用,非常適合用來嘗試不同的概念及風格。所有圖像都在裝置端生成,讓使用者可以自由地嘗試各種圖像且不限數量。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11113703/Apple-WWDC24-Apple-Intelligence-Image-Playground-240610_big.jpg.large_2x-1024x731.jpg?resize=800%2C571&ssl=1)
透過「Image Playground」,使用者可從主題、服裝、配件和地點等分類裡,挑選一系列概念;輸入描述來定義圖像內容,並從圖庫中挑選某個人,指定他出現在圖像裡,並挑出他們最喜歡的風格。
藉由「訊息」中的「Image Playground」體驗,使用者可以快速為朋友創作有趣的圖像,甚至可以看到與對話有關的個人化建議設計。例如,若使用者正在與一群朋友討論要去健行時,他們就會看到與朋友、目的地和活動相關的建議概念,使圖像創作更快速且更切題。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11114129/Apple-WWDC24-Apple-Intelligence-Messages-Image-Playground-personalization-01-240610_inline.jpg.large_2x-731x1024.jpg?resize=571%2C800&ssl=1)
在「備忘錄」中,使用者可以透過Apple Pencil調色板工具中的全新Image Wand功能使用「Image Playground」,使筆記更吸睛。潦草的素描可以變成令人喜愛的圖像,使用者甚至可以選擇空白背景,並利用周遭環境來創造圖像。在Keynote、「無邊記」和Pages等App,以及採用全新 「Image Playground」 API的第三方App中,皆可使用 「Image Playground」。
創作適合任何時刻的Genmoji
使用者可以創作原創的Genmoji來表現自我,並將表情符號帶至全新境界。只要簡單地輸入描述,就能產生專屬的Genmoji及其他額外選項。使用者甚至可以根據照片創作朋友和家人的Genmoji。就像表情符號一樣,Genmoji可以穿插在文字訊息裡、作為貼圖分享,或用作「點按回應」。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11114346/Apple-WWDC24-Apple-Intelligence-Genmoji-race-car-driver-240610_inline.jpg.large_2x-731x1024.jpg?resize=571%2C800&ssl=1)
「照片」新功能讓使用者更具掌控力
透過Apple Intelligence,搜尋照片和影片變得更加便利。使用者可以自然的語言搜尋特定照片,例如輸入「Maya穿著紮染襯衫滑板」或「臉上貼著貼紙的Katie」。影片搜尋也變得更強大,能夠在片段中找到特定時刻,讓使用者能夠直接跳到相關段落。此外,新的「Clean Up」可以辨別並移除照片背景中不相干的物品,而不會不小心影響到主體。
透過「回憶」,使用者只需輸入描述,即可創作他們想看的故事。Apple Intelligence將利用語言和圖像理解,根據描述挑選出最適合的照片和影片,接著依據照片中辨別出來的主題,擬定故事情節和章節,並將它們編排成具備獨特劇情發展的影片。使用者甚至可以從Apple Music中取得與回憶相符的歌曲建議。與所有Apple Intelligence功能一樣,使用者的照片和影片都保存在裝置上,且不會與Apple或任何其他人共享。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11114519/Apple-WWDC24-Apple-Intelligence-Memory-movie-240610_big.jpg.large_2x-1024x576.jpg?resize=800%2C450&ssl=1)
Siri進入全新時代
Apple Intelligence使Siri更深度地整合到系統體驗之中,藉由更豐富的語言理解能力,Siri變得更自然、更配合情境,也更加個人化,能夠簡化並加速日常任務的執行。即便使用者口語不流暢,Siri也能理解並維持指令脈絡依序處理。此外,使用者還可以對Siri打字,並在文字和語音之間切換,以當下最適合的方式與Siri進行交流。Siri也採用全新設計,運作時螢幕邊緣會發出優雅的光芒。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11114619/Apple-WWDC24-Apple-Intelligence-type-to-Siri-240610_inline.jpg.large_2x-732x1024.jpg?resize=572%2C800&ssl=1)
Siri現在可以隨時隨地為使用者提供裝置支援,並回答數千個關於如何操作iPhone、iPad和Mac的問題。使用者可以學習各種知識,例如在「郵件」App中排程電子郵件,或如何從淺色模式切換至深色模式。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11114717/Apple-WWDC24-Apple-Intelligence-Siri-product-knowledge-240610_inline.jpg.large_2x-732x1024.jpg?resize=572%2C800&ssl=1)
透過螢幕感知,Siri將能隨時間理解並處理更多App中的使用者內容。例如,如果朋友在「訊息」中傳來了一個新地址,使用者可以說:「將這個地址新增到他的聯絡人名片中。」
有了Apple Intelligence,Siri將能夠在Apple和第三方App中執行數百項新動作。例如,使用者可以對Siri 說:「從我的『閱讀列表』中找出那篇關於蟬的文章」或「將週六烤肉的照片傳送給 Malia 」,Siri就會處理好。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11114954/Apple-WWDC24-Apple-Intelligence-Siri-content-search-240610_inline.jpg.large_2x-732x1024.jpg?resize=572%2C800&ssl=1)
Siri將能提供為使用者及其裝置端資訊量身定做的智慧能力。例如,使用者可以對Siri說:「播放Jamie推薦的Podcast 」,Siri就會找到並播放該節目,使用者甚至不用記得對方是在簡訊或電子郵件中推薦的。或是他們可以問Siri:「媽媽的航班什麼時候降落?」Siri將找出航班資訊,並與即時航班動態交叉比對後,回答航班抵達時間。
AI隱私新標準
為了提供實質助益,Apple Intelligence仰賴著對於個人資訊的深度瞭解,並同時保護使用者隱私。Apple Intelligence的技術基石是裝置端處理,在其背後的許多模型都完全於裝置端運作。為了執行更複雜且需要更高處理效能的動作,「私有雲運算」將Apple裝置的隱私和安全性延展至雲端,以解鎖更多智慧技術。
藉由「私有雲運算」,Apple Intelligence可以靈活展現其運算能力,並利用更大且以伺服器為基礎的模型來執行更複雜的指令。這些模型在由Apple晶片提供支援的伺服器上運行,為Apple確保資料永遠不會保留或洩漏奠定基礎。
獨立專家可以檢查在Apple晶片伺服器上運行的程式碼以驗證隱私,「 Private Cloud Compute 」以加密方式確保iPhone、iPad和Mac不會與伺服器通訊,除非其軟體已被公開記錄以供檢查。Apple Intelligence與「 Private Cloud Compute 」為AI隱私訂定了全新標準,解鎖更多使用者可以信任的智慧技術。
ChatGPT與Apple進行跨平台整合
Apple正在將ChatGPT的使用整合進iOS 18、iPadOS 18和macOS Sequoia的體驗中,讓使用者無須在工具之間切換,即可運用其專業技術,以及圖像與文件的理解能力。若有需要時,Siri可以直接仰賴ChatGPT的專業技術。使用者的任何提問、文件或照片在被傳送至ChatGPT之前,都將先徵求同意,再由Siri直接回答。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11115251/Apple-WWDC24-Apple-Intelligence-Siri-ChatGPT-integration-240610_inline.jpg.large_2x-732x1024.jpg?resize=572%2C800&ssl=1)
此外,ChatGPT將可在Apple的全系統「Writing Tools」中使用,協助使用者撰寫任何文稿。有了「Compose」,使用者還可以利用ChatGPT的圖像工具來生成各種風格的圖像,以豐富撰寫內容。
![](https://i0.wp.com/media.stufftaiwan.com/wp-content/uploads/2024/06/11115341/Apple-WWDC24-Apple-Intelligence-ChatGPT-Writing-Tools-Compose-prompt-240610_big.jpg.large_2x-1024x576.jpg?resize=800%2C450&ssl=1)
使用ChatGPT時可享內建隱私保護,使用者的IP位址會被隱藏,而且OpenAI也不會記錄指令。ChatGPT的資料使用政策適用於選擇連結 ChatGPT 帳戶的使用者。
ChatGPT將於今年稍晚在iOS 18、iPadOS 18和macOS Sequoia上推出,並由GPT-4o驅動。使用者無須建立帳戶即可免費使用,ChatGPT訂閱者則可以連結至他們的帳戶,並直接在系統中使用已付費功能。
推出日期
Apple Intelligence無須額外付費即可使用。測試版將於今年秋季隨著iOS 18、iPadOS 18和macOS Sequoia一併推出,支援英文 (美國)。部分功能、軟體平台和其他語言將在明年陸續推出。Apple Intelligence將在搭載M1及更高階晶片,並且將Siri和裝置語言設定為英文 (美國) 的 iPhone 15 Pro、iPhone 15 Pro Max以及iPad和Mac上提供。
史塔夫短評:蘋果主力產品全面AI化
WWDC 2024相關新聞:
[WWDC24] iPhone 大變身!iOS 18搭載衛星簡訊、強化隱私、Apple Intelligence整合ChatGPT
[WWDC24] Apple Intelligence:以AI賦能的iPhone、iPad和Mac,與ChatGPT整合開啟無限可能
[WWDC24] AirPods功能再進化:Siri動作控制、通話降噪、遊戲沉浸式音訊
[WWDC24] tvOS 18推出「InSight」等全新智慧功能、更新Enhance Dialogu與自動顯示字幕
[WWDC24] iPadOS 18讓iPad更多功能:新增Math Notes計算機,照片、訊息、備忘錄功能升級
[WWDC24] macOS Sequoia能無線操控iPhone!嶄新功能Apple Intelligence與Safari Highlights
[WWDC24] Apple「Private Cloud Compute」AI隱私與安全再升級!
[WWDC24] Apple watchOS 11推出全新「Vitals」App監測健康指標、訓練量值助您掌握體能狀況