Apple Intelligence 的全新功能

開發者現在可以存取 Apple Intelligence 的裝置端基礎模型，為自家 app 打造私密且智慧的使用體驗

Apple 在 WWDC25 發表了個人智慧系統 Apple Intelligence 的新功能，將在 iPhone、iPad、Mac、Apple Watch 和 Apple Vision Pro 上推出。

Apple 今日宣布 Apple Intelligence 新功能，提升 iPhone、iPad、Mac、Apple Watch 和 Apple Vision Pro 的使用者體驗。Apple Intelligence 帶來如 Live Translation 等功能為使用者帶來新的溝通方式；更新的視覺智慧功能充分發揮螢幕的使用空間；以及透過強化的「影像樂園」和 Genmoji 盡情表達自我。此外，「捷徑」現在也能直接運用 Apple Intelligence，開發者將能夠取用 Apple Intelligence 核心的裝置端大型語言模型，直接運用這項強大快速、以隱私為原則、即使使用者離線也可用的智慧技術。Apple Intelligence 的這一系列功能即日起開放測試，並將於今年秋季開放給擁有支援裝置且設為支援語言的使用者。

Apple 軟體工程資深副總裁 Craig Federighi 表示：「我們去年啟程踏出第一步，為使用者帶來實用、切身相關、容易使用且方便取用的智慧功能，同時保護使用者隱私。Apple Intelligence 的模型變得更強大且更有效率，我們也將功能擴展到各大作業系統的更多領域。我們也將跨出一大步，讓開發者能直接存取驅動 Apple Intelligence 的裝置端基礎模型，讓他們得以直接運用這項強大快速、以隱私為原則、即使使用者離線也可用的智慧技術。我們相信這會為使用者常用的 app 注入全新一波智慧體驗。我們非常期待看見開發者的創作。」

Apple Intelligence 功能將透過今年稍晚的軟體更新新增支援 8 種新的語言，包括丹麥文、荷蘭文、挪威文、葡萄牙文 (葡萄牙)、瑞典文、土耳其文、中文 (繁體) 和越南文。

Live Translation 突破語言藩籬

Live Translation 協助消弭語言障礙，幫助使用者在訊息和通話中協助跨語言溝通。這項體驗整合至「訊息」、FaceTime 和「電話」，由 Apple 建構、完全在裝置端運作的模型支援，確保使用者的私人對話保持隱私。

「訊息」中的 Live Translation 可自動翻譯文字。使用者在國外旅遊時，若與新朋友一起規劃行程，可以在輸入訊息的同時進行翻譯，讓訊息以對方偏好的語言送出。當使用者收到回覆時，每段文字也都可以立刻翻譯在 FaceTime 通話中，使用者聆聽說話者聲音的同時，可透過即時翻譯的字幕理解對話內容。電話通話時，對話的翻譯會與說話者的聲音同步播放。

Live Translation 讓使用者能跨語言溝通，無論是在「訊息」裡打字，或透過 FaceTime 或「電話」對話。

更新的「影像樂園」和 Genmoji 帶來全新方式探索創意

Genmoji 和「影像樂園」為使用者提供更多表達自我的方式。除了將文字描述變成 Genmoji 以外，現在使用者也能結合兩個表情符號，透過描述混合生成新的圖案。使用者用 Genmoji 和「影像樂園」生成以自己家人朋友為靈感的圖片時，可以更改表情，或者根據個人特色微調，例如根據朋友的新造型做調整。

進化的「影像樂園」和 Genmoji 能結合兩個表情符號，透過描述混合生成新的圖案，為使用者帶來全新方式表達自我。

在「影像樂園」中，使用者可以藉由 ChatGPT 採用全新風格，例如油畫風格或向量藝術，使用者若有特定的想法，可以點按 Any Style 並說明自己的想法。「影像樂園」可將使用者的描述或照片傳送給 ChatGPT 並創造獨特的圖片。使用者永遠握有掌控權，不會有任何資訊在未經許可的情況下分享給 ChatGPT。

「影像樂園」搭配 ChatGPT 提供全新風格，包括當使用者若有特定想法時可利用的 Any Style 選項，

「視覺智慧」協助使用者搜尋資訊並採取行動

「視覺智慧」奠基於 Apple Intelligence 並延伸至使用者的 iPhone 畫面，可在檢視任何內容時切換 app 進行搜尋與操作。

Apple Intelligence 的更新將「視覺智慧」延伸至使用者 iPhone 螢幕上的內容，例如透過《Google》、《Etsy》和其他支援的 app 搜尋類似的物件。

「視覺智慧」已能透過 iPhone 相機幫助使用者瞭解周遭物體與地點，而現在「視覺智慧」讓使用者能利用自己 iPhone 螢幕上的內容，更快速的完成更多事項。使用者可以針對自己在螢幕上所看見的內容向 ChatGPT 提問探究，也能透過《Google》、《Etsy》和其他支援的 app 搜尋類似的圖片。若對特定物件有興趣，例如一盞檯燈，使用者可以重點標示，以在網路上精準搜尋該項或類似物件。

視覺智慧也能偵測到使用者正在瀏覽一項活動，並提出加入至行事曆的建議。接著，Apple Intelligence 會擷取該活動日期、時間和地點，並且預先填入這些重點資訊。

「視覺智慧」也能偵測到使用者正在瀏覽一項活動，並提出加入至「行事曆」的建議。隨即，Apple Intelligence 會擷取相關資料以建立行程。

使用者只要按下用來截圖的按鍵，即可針對螢幕內容啟用視覺智慧。使用者將能夠選擇儲存或分享這張螢幕截圖，或運用視覺智慧探索更多。

Apple Intelligence 擴大支援 Apple Watch 的「健身」功能

Workout Buddy 是 Apple Intelligence 驅動的首屈一指體能訓練體驗，結合使用者的體能訓練資料和健身記錄，並在訓練時生成個人化、激發動力的洞察資訊。

為即時提供實用的鼓勵訊息，Workout Buddy 會針對心率、配速、距離、「活動記錄」圓圈、個人健身里程碑等項目，分析使用者當下的體能訓練資料和健身歷史記錄。全新的文字轉語音模型會將這些洞察資料轉換為動態生成的語音。該語音使用 Fitness+ 教練的語音資料建構，因此具備適合體能訓練的活力、風格和語氣。Workout Buddy 透過 Apple Intelligence 以私密且安全的方式分析資料。

Workout Buddy 將可於 Apple Watch 搭配藍牙耳機使用，並需有支援 Apple Intelligence 的 iPhone 位於附近。初期將以英文提供，並支援多種熱門體能訓練類型，包括室外與室內跑步、室外與室內步行、室外自行車、高強度間歇訓練、功能性肌力訓練、傳統肌力訓練。

由 Apple Intelligence 驅動的 Workout Buddy 登陸 Apple Watch，將首屈一指體能訓練體驗結合使用者的體能訓練資料和健身記錄，並生成個人化、激發動力的洞察資訊。

Apple Intelligence 裝置端模型現在開放開發者取用

Apple 現在開放讓任何 app 都能直接運用 Apple Intelligence 核心的裝置端基礎模型。

Foundation Models 框架讓開發者能直接運用 Apple Intelligence 核心的裝置端基礎模型，提供快速、以隱私為核心、可離線使用的強大智慧能力。

透過 Foundation Models 框架，app 開發者能夠將 Apple Intelligence 納入開發過程，為使用者帶來更智慧、離線也可使用、保護隱私，而且 AI 推論免費的全新體驗。舉例而言，教育型 app 可以利用裝置端模型生成一組根據使用者筆記打造的個人化考題，無須支付任何雲端 API 費用；亦或是戶外 app，可以新增即使使用者離線，也可使用的自然語言搜尋功能。

此 Foundation Models 框架為 Swift 提供原生支援，開發者能用最低至三行程式碼即可輕鬆存取 Apple Intelligence 模型。

此框架原生支援 Swift，因此 app 開發者最少以三行程式碼即可輕鬆存取 Apple Intelligence 模型。引導式生成、工具調用等功能都已整合進開發框架中，讓開發者能更輕鬆地在現有 app 中加入生成式技術。

「捷徑」更有智慧

「捷徑」比以往更加強大且智慧化。使用者可以運用智慧操作，這是一整套由 Apple Intelligence 驅動的全新捷徑功能。使用者將能看見針對指定功能的專用操作項目，例如使用「書寫工具」摘要文字，或透過「影像樂園」建立圖片。

現在，使用者可以在裝置端或透過「私密雲端運算」直接運用 Apple Intelligence 模型生成回應，該回應將會導入至其餘捷徑流程中，同時維持捷徑中使用資訊的隱私安全。例如，學生可以建立一組運用 Apple Intelligence 的捷徑，將課程內容的音訊逐字稿與自己的筆記互相比對，並添加也許自己錯過的重點。使用者也可以選擇用 ChatGPT 來生成回應，並將其導入至捷徑流程中。

「捷徑」有了 Apple Intelligence 的強力驅動，使用者可以在裝置端或透過私密雲端運算直接運用 Apple Intelligence 模型生成回應，該回應將會導入至其餘捷徑流程中。

其他新功能

Apple Intelligence 現在更深度整合至使用者每天常用的 app 和體驗：

現在「提醒事項」會自動辨別電子郵件、網站、備忘錄或其他內容中最相關的操作項目，並自動分類。

Apple 錢包現在可自動辨識並摘要商家與貨運業者寄送之電子郵件中的訂單追蹤資訊。這項功能適用於使用者的所有訂單，讓他們能在固定一處查看完整的訂單詳情、進度通知等資訊。

使用者可以「訊息」裡針對任何事物建立投票，而且 Apple Intelligence 讓「訊息」能辨識對話裡適合投票的時機並建議投票。此外，「訊息」裡的 Backgrounds 讓使用者能將對話視窗套用優美的個人化設計，也可以運用「影像樂園」建立獨特且符合對話的背景圖。

由 Apple Intelligence 驅動的其他功能還包括：自動辨識並摘要來自商家與貨運業者電子郵件中的訂單追蹤資訊，以及在「訊息」的群組對話裡，辨識適合投票的時機並建議親朋好友投票。

這些功能是建立在 Apple Intelligence 已提供給使用者的一系列強大能力之上：

「書寫工具」能幫助使用者針對已書寫的文字進行重寫、校對和摘要。透過 Describe Your Change，使用者能描述他們想針對文本做出的特定改寫，例如讓一份晚餐派對的邀請函讀起來更像一首詩。

「照片」中的「清除」工具讓使用者能移除令人分心的元素，同時忠於拍攝者想要捕捉的時刻。

由 Apple Intelligence 驅動的「視覺智慧」能幫助使用者透過 iPhone 相機迅速瞭解周遭物體與地點。

Genmoji 讓使用者只須輸入描述即可建立原創表情符號。就像表情符號一樣，也可以穿插在文字訊息裡、作為貼圖分享，或用作「點按回應」。

「影像樂園」讓使用者可根據主題、服飾、配件和地點等概念，隨即建立有趣且獨特的影像。甚至還可自行新增文字描述，利用照片圖庫中的照片打造與家人或朋友面容相似的人物圖像。

「影像魔杖」可以將草圖轉成相關圖片來搭配筆記。

郵件摘要讓使用者能輕鬆點按「摘要」，就可以快速閱讀長篇郵件或對話的重點資訊。

「智慧型回覆」在「郵件」和「訊息」中，為使用者提供提供簡短的建議回覆內容。

Siri 更加自然且實用，透過輸入來與 Siri 對話即可深入了解自己 Apple 裝置的功能和設定；Siri 也能在使用者說話打結時仍能跟上內容，而且能在前後指令之間保有脈絡。

ChatGPT 整合至「書寫工具」和 Siri 中，讓使用者能取用廣泛的世界知識，受益於其圖像和文件理解能力，而無須另外切換工具。

透過「照片」app 的自然語言搜尋功能，使用者只須描述，就能更輕鬆地找到特定照片或影片。

使用者只須輸入描述，即可製作回憶影片。

「備忘錄」中音訊逐字稿的摘要將自動生成，為使用者提供一目瞭然的重要資訊。

使用者能生成通話逐字稿的摘要以查看重要資訊並且突顯重點。

「重要郵件」是「郵件」收件匣頂部的一個新區塊，顯示最緊急的電子郵件，例如當天的午餐邀請或登機證。

「重要通知」將最重要通知顯示在頂部，突顯可能需要立即注意事項的通知。

通知摘要以摘要形式呈現較長的內容或堆疊的通知，在「鎖定畫面」直接顯示關鍵詳情。

「郵件」和「訊息」的「預覽」會顯示重要資訊的簡短摘要，讓使用者不用點開信件就能檢視。

「降低干擾專注模式」僅顯示可能需要立即注意的通知。

AI 隱私權的一大突破

Apple Intelligence 的設計旨在每個步驟都保護使用者的隱私，它使用裝置端處理，意即支援它的許多模型完全在裝置端運行。針對需要存取更大模型的指令，「私密雲端運算」將 iPhone 的隱私權與安全性延伸至雲端，解鎖更多智慧功能，並確保使用者的資料絕不會分享給 Apple 或被 Apple 儲存，只會用來完成指令。獨立專家能夠、且已經持續在檢視於 Apple 晶片伺服器上運行的程式碼，時時核查這項隱私權承諾。這是 AI 隱私方面的一大進展。

新聞來源：Apple Newsroom

整理編輯：酷里斯