蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia


章節連結

蘋果開發者大會 WWDC 2024 稍早正式展開,首場發表會中公布了旗下全平台的系統更新,許多人關注的「AI」,也藉由本次活動正式宣布名為「Apple Intelligence」,同時也確認了整合 OpenAI 的 ChatGPT。以下是此次發表會的重點整理。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

visionOS 2

首先登場的 visionOS 公布了第一次的大型更新版本 vivionOS 2,新增了一些手勢操作,例如手掌向上捏合可以呼叫 Home 選單,向下捏合則可以觀看剩餘電量與時間等資訊。相簿應用現在可以將 2D 照片透過物件分析來生成 3D 圖像。Mac 虛擬螢幕功能提供不同比例的切換,例如 21:9 或 32:9,不用侷限於筆電本身的顯示比例。旅行模式除了飛機,現在也支援火車。目前 Vision Pro 已經有 2000 多款專用 App,蘋果這次也開放更多的 API 協助開發者開發應用。另外,蘋果也與 Canon、Blackmagic Design 合作,前者將推出可以拍攝空間影片的鏡頭,後者則會推出能拍攝全新 Apple immersive Video 格式(即 180 度 3D 影片)的攝影機,並且能用旗下的達芬奇剪接軟體進行後製。此外 FinalCut 與 Vimeo App 也都將新增空間影片剪輯的功能。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

本次活動也公布了更多的 visionOS 上市地區。包括 6/28 起在中國、日本、新加坡推出。7/12 起在澳洲、加拿大、法國、德國、英國上市。台灣暫時還沒有。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

iOS 18

App 與 Widget 提供了更自由的自定義與設定功能。深色模式除了能改變圖示風格,還能讓用戶選擇圖示色調。控制中心也進一步升級,例如加入了音樂播放和智慧家電控制的介面。此外,開放的API讓第三方軟體可以加入控制中心。部分控制中心的功能在鎖定畫面上也能使用,用戶還可以透過動作按鈕快速調用。

隱私保護方面則新增加了 App 上鎖功能,用戶進入應用程式需要密碼或Face ID驗證,程式也能完全隱藏,隱藏狀態下的資料無法被搜尋到。針對需要存取聯絡人的應用程式,未來用戶可以選擇性開放聯絡人,而非全部開放。訊息 App 增加了更多文字格式選項(如底線、斜線)及特效,還可以透過衛星傳送訊息。並起訊息應用程式也將支援 RCS(Rich Communication Services)格式。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

Mail 郵件 App 新增自動分類功能,並提供顯示摘要。新加入遊戲模式可以減少後台佔用,提高遊戲表現,並且降低手把和 AirPod 耳機的延遲。相片 App 會自動依照時間、地點、人員等條件來分類照片,也可以過濾特定內容例如截圖,讓搜尋照片變得更方便快速。最後兩個應該台灣暫時用不到,首先是地圖應用程式加入預設的路徑,例如登山訓練等,可以提供使用者參考並在過程中進行指引。Apple Pay 則新增 Tap to Cash,兩支手機只要透過輕觸即可完成轉帳。

iPad OS 18

基本上包括上述所有 iOS 18 的新特色。其他主要是針對大螢幕以及與 Apple Pencil 相關的應用。首先是 iPad 終於將支援計算機 App,除了因應大螢幕而調整介面布局外,也加入了支援 Apple Pencil 手寫輸入功能,的「Math Notes」應用以及 Smart Script 功能,可以直接手寫公式甚至繪製圖形來進行自算,且還可以修改數字,計算機會即時配合修改計算結果。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

筆記的部分則可以分析使用者的書寫習慣,將手寫文字的字跡變得比較整齊美觀,但又還是兼具個人手寫的特徵(可以理解為手寫筆跡的美顏濾鏡)。甚至也支援透過鍵盤輸入文字後,透過使用者的字跡顯示出來。並能自由調整字跡的位置、修改內容、剪下貼上等。新增 SharePlay 功能可以將畫面與他人共享,甚至讓對方進行遠端操作。App 內可以加入浮動選項,讓使用者方便快速檢視、使用App內特定功能。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

Audio & Home

AirPods 可以通過點頭或搖頭來回應,例如點頭接聽電話、搖頭掛斷電話。新增語音隔離(Voice Isolation)功能,能降低背景噪音並凸顯人的語音。另外現在遊戲也支援空間音訊,不過要遊戲本身有支援才行。

Apple TV 方面強化了字幕顯示的效果,能夠在適當的時候顯示字幕。新的 inSight 功能讓用戶能快速查看播放中影片的相關資訊。如果用戶使用iPhone作為遙控器,也可以快速顯示這些資訊,這類似於亞馬遜影音的功能。tvOS 的部分則新增支援 21:9 比例畫面投影、更多螢幕保護程式等。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

Watch OS 11

全新 Vitals App 可以將用戶的健康資訊例如心率、呼吸頻率、手腕溫度、睡眠時間和血氧等,集中在一個頁面上顯示,並提供更深入的分析與建議。新的「Training Load」功能可以追蹤運動強度並給予適當建議,讓使用者能夠有效鍛鍊且避免受傷。健身 App 的頁面可以自定義顯示順序。經期 App 可以顯示孕期,並能監控相關的生理數據。加入翻譯功能,可以直接使用語音進行翻譯。其他例如加入簽到功能、加入新的雙擊手勢操作自定義功能,還有一些介面美化上的調整。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

macOS

本次公布最新版本 macOS 名稱為 Sequoia。功能上最大的更新在於允許 iPhone 將畫面投放到 Mac 電腦中顯示,並支援反向控制,可以在 Mac 上點選手機功能或是輸入文字等,甚至也可以直接透過拖曳方式在兩個裝置之間傳送檔案或內容資訊。手機上的通知資訊也會在 Mac 中顯示。而在使用這些功能時,iPhone 可以維持上鎖的狀態。macOS Sequoia 也支援螢幕分割功能,操作方式與 Windows 類似,透過拖視窗到畫面邊緣或角落就會自動調整尺寸。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

新的密碼 App 搭配 iCloud 鑰匙圈可以記錄各種密碼,包括登入資訊或是 Wi-Fi 密碼都可以。FaceTime 加入快速去除 / 更換背景功能。Safari 瀏覽器優化了影片瀏覽的耗電量,且針對個人化和隱私性等使用體驗方面進行了提升。新版 Safari 瀏覽器將結合 AI 功能,可生成網頁內容的摘要,或是擷取地址與電話等資訊。

遊戲方面蘋果推出了新版 Metal 3 以及新版遊戲轉譯工具 Game Porting Toolkit 2,不僅讓開發者更容易將遊戲轉移至 Mac 平台,這次甚至還支援了 iPhone 或 iPad 平台的轉譯。此次發表會也預告了更多遊戲將登陸蘋果裝置,包括 Ubisoft 即將推出的《刺客教條:暗影者》就會在 Mac 與 iPad 平台上推出。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

Apple Intelligence

蘋果這次推出 Apple Intelligence,並深度整合於 iOS 18 中。全新的全系統「Writing Tools」,讓使用者無論在「郵件」、「備忘錄」、Pages 還是第三方應用中,都能進行文字改寫、校對和摘要處理。iPhone 15 Pro 上展示的「Writing Tools」界面,讓人見識到這項功能如何在日常訊息撰寫中提供幫助。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

在圖像創作方面,Apple 推出了「Image Playground」,使得溝通和自我表現更加有趣。使用者可以在幾秒鐘內創作出動畫、插圖或素描風格的圖像,這些功能不僅內建於「訊息」等應用中,還可在特定應用中使用,操作簡單直觀。「照片」app 也得到升級,新增了「回憶」和「Clean Up」功能。使用者只需輸入描述,即可創作出由 Apple Intelligence 挑選最佳照片和影片編排成的故事。此外,「Clean Up」功能能夠智能辨別並移除照片背景中的不相干物品,確保照片主體不受影響。Siri 在 Apple Intelligence 的加持下,邁出了巨大的一步,變得更自然、更符合語境,且更加個人化。現在,使用者可以選擇打字或語音與 Siri 互動,自由切換,根據當下需求選擇最合適的交流方式。

在隱私保護方面,Apple 設立了新的標準。透過「Private Cloud Compute」,Apple 能夠靈活調配裝置端和伺服器端的計算能力,伺服器端的模型運行於專屬的 Apple 晶片伺服器上。使用者的指令資料在傳送過程中不會被儲存或被 Apple 取得,只用來執行指令,並且這一隱私承諾可受獨立專家檢驗。此外,ChatGPT 現已整合進 Siri 和全系統「Writing Tools」,使用者無需切換應用程式,即可利用其專業知識和對圖片與文件的理解能力,進一步提升使用體驗。

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

支援裝置方面,iPhone 15 Pro 以及搭載 M1 以上處理器的 iPad / Mac 將可以使用 Apple Intelligence 的功能(iPhone 15 與 iPhone 15+ 用戶:?????)。預計今年夏季開放美國英文版本試用。預計秋季提供給 iOS 18、iPadOS 18 以及 macOS Sequoia 用戶使用。其他更多語言與功能預計明年陸續推出。


延伸閱讀

Leave a Comment Cancel

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *

*

這個網站採用 Akismet 服務減少垃圾留言。進一步了解 Akismet 如何處理網站訪客的留言資料