科技

蘋果發表AI服務Apple Intelligence並整合ChatGPT,將應用於iOS 18、iPadOS 18及macOS Sequoia

LPComment
發布於 06月12日02:10 • 劉胖胖

蘋果開發者大會WWDC 2024 稍早正式展開,首場發表會中公布了旗下全平台的系統更新,許多人關注的「AI」,也藉由本次活動正式宣布名為「Apple Intelligence」,同時也確認了整合 OpenAI 的 ChatGPT。以下是此次發表會的重點整理。

visionOS 2

廣告(請繼續閱讀本文)

首先登場的 visionOS 公布了第一次的大型更新版本 vivionOS 2,新增了一些手勢操作,例如手掌向上捏合可以呼叫 Home 選單,向下捏合則可以觀看剩餘電量與時間等資訊。相簿應用現在可以將 2D 照片透過物件分析來生成 3D 圖像。Mac 虛擬螢幕功能提供不同比例的切換,例如 21:9 或 32:9,不用侷限於筆電本身的顯示比例。旅行模式除了飛機,現在也支援火車。目前 Vision Pro 已經有 2000 多款專用 App,蘋果這次也開放更多的 API 協助開發者開發應用。另外,蘋果也與 Canon、Blackmagic Design 合作,前者將推出可以拍攝空間影片的鏡頭,後者則會推出能拍攝全新 Apple immersive Video 格式(即 180 度 3D 影片)的攝影機,並且能用旗下的達芬奇剪接軟體進行後製。此外 FinalCut 與 Vimeo App 也都將新增空間影片剪輯的功能。

本次活動也公布了更多的 visionOS 上市地區。包括 6/28 起在中國、日本、新加坡推出。7/12 起在澳洲、加拿大、法國、德國、英國上市。台灣暫時還沒有。

廣告(請繼續閱讀本文)

iOS 18

App 與 Widget 提供了更自由的自定義與設定功能。深色模式除了能改變圖示風格,還能讓用戶選擇圖示色調。控制中心也進一步升級,例如加入了音樂播放和智慧家電控制的介面。此外,開放的API讓第三方軟體可以加入控制中心。部分控制中心的功能在鎖定畫面上也能使用,用戶還可以透過動作按鈕快速調用。

隱私保護方面則新增加了 App 上鎖功能,用戶進入應用程式需要密碼或Face ID驗證,程式也能完全隱藏,隱藏狀態下的資料無法被搜尋到。針對需要存取聯絡人的應用程式,未來用戶可以選擇性開放聯絡人,而非全部開放。訊息 App 增加了更多文字格式選項(如底線、斜線)及特效,還可以透過衛星傳送訊息。並起訊息應用程式也將支援 RCS(Rich Communication Services)格式。

Mail 郵件 App 新增自動分類功能,並提供顯示摘要。新加入遊戲模式可以減少後台佔用,提高遊戲表現,並且降低手把和 AirPod 耳機的延遲。相片 App 會自動依照時間、地點、人員等條件來分類照片,也可以過濾特定內容例如截圖,讓搜尋照片變得更方便快速。最後兩個應該台灣暫時用不到,首先是地圖應用程式加入預設的路徑,例如登山訓練等,可以提供使用者參考並在過程中進行指引。Apple Pay 則新增 Tap to Cash,兩支手機只要透過輕觸即可完成轉帳。

iPad OS 18

基本上包括上述所有 iOS 18 的新特色。其他主要是針對大螢幕以及與 Apple Pencil 相關的應用。首先是 iPad 終於將支援計算機 App,除了因應大螢幕而調整介面布局外,也加入了支援 Apple Pencil 手寫輸入功能,的「Math Notes」應用以及 Smart Script 功能,可以直接手寫公式甚至繪製圖形來進行自算,且還可以修改數字,計算機會即時配合修改計算結果。

筆記的部分則可以分析使用者的書寫習慣,將手寫文字的字跡變得比較整齊美觀,但又還是兼具個人手寫的特徵(可以理解為手寫筆跡的美顏濾鏡)。甚至也支援透過鍵盤輸入文字後,透過使用者的字跡顯示出來。並能自由調整字跡的位置、修改內容、剪下貼上等。新增 SharePlay 功能可以將畫面與他人共享,甚至讓對方進行遠端操作。App 內可以加入浮動選項,讓使用者方便快速檢視、使用App內特定功能。

Audio & Home

AirPods 可以通過點頭或搖頭來回應,例如點頭接聽電話、搖頭掛斷電話。新增語音隔離(Voice Isolation)功能,能降低背景噪音並凸顯人的語音。另外現在遊戲也支援空間音訊,不過要遊戲本身有支援才行。

Apple TV 方面強化了字幕顯示的效果,能夠在適當的時候顯示字幕。新的 inSight 功能讓用戶能快速查看播放中影片的相關資訊。如果用戶使用iPhone作為遙控器,也可以快速顯示這些資訊,這類似於亞馬遜影音的功能。tvOS 的部分則新增支援 21:9 比例畫面投影、更多螢幕保護程式等。

Watch OS 11

全新 Vitals App 可以將用戶的健康資訊例如心率、呼吸頻率、手腕溫度、睡眠時間和血氧等,集中在一個頁面上顯示,並提供更深入的分析與建議。新的「Training Load」功能可以追蹤運動強度並給予適當建議,讓使用者能夠有效鍛鍊且避免受傷。健身 App 的頁面可以自定義顯示順序。經期 App 可以顯示孕期,並能監控相關的生理數據。加入翻譯功能,可以直接使用語音進行翻譯。其他例如加入簽到功能、加入新的雙擊手勢操作自定義功能,還有一些介面美化上的調整。

macOS

本次公布最新版本 macOS 名稱為 Sequoia。功能上最大的更新在於允許 iPhone 將畫面投放到 Mac 電腦中顯示,並支援反向控制,可以在 Mac 上點選手機功能或是輸入文字等,甚至也可以直接透過拖曳方式在兩個裝置之間傳送檔案或內容資訊。手機上的通知資訊也會在 Mac 中顯示。而在使用這些功能時,iPhone 可以維持上鎖的狀態。macOS Sequoia 也支援螢幕分割功能,操作方式與 Windows 類似,透過拖視窗到畫面邊緣或角落就會自動調整尺寸。

新的密碼 App 搭配 iCloud 鑰匙圈可以記錄各種密碼,包括登入資訊或是 Wi-Fi 密碼都可以。FaceTime 加入快速去除 / 更換背景功能。Safari 瀏覽器優化了影片瀏覽的耗電量,且針對個人化和隱私性等使用體驗方面進行了提升。新版 Safari 瀏覽器將結合 AI 功能,可生成網頁內容的摘要,或是擷取地址與電話等資訊。

遊戲方面蘋果推出了新版 Metal 3 以及新版遊戲轉譯工具 Game Porting Toolkit 2,不僅讓開發者更容易將遊戲轉移至 Mac 平台,這次甚至還支援了 iPhone 或 iPad 平台的轉譯。此次發表會也預告了更多遊戲將登陸蘋果裝置,包括 Ubisoft 即將推出的《刺客教條:暗影者》就會在 Mac 與 iPad 平台上推出。

Apple Intelligence

蘋果這次推出 Apple Intelligence,並深度整合於 iOS 18 中。全新的全系統「Writing Tools」,讓使用者無論在「郵件」、「備忘錄」、Pages 還是第三方應用中,都能進行文字改寫、校對和摘要處理。iPhone 15 Pro 上展示的「Writing Tools」界面,讓人見識到這項功能如何在日常訊息撰寫中提供幫助。

在圖像創作方面,Apple 推出了「Image Playground」,使得溝通和自我表現更加有趣。使用者可以在幾秒鐘內創作出動畫、插圖或素描風格的圖像,這些功能不僅內建於「訊息」等應用中,還可在特定應用中使用,操作簡單直觀。「照片」app 也得到升級,新增了「回憶」和「Clean Up」功能。使用者只需輸入描述,即可創作出由 Apple Intelligence 挑選最佳照片和影片編排成的故事。此外,「Clean Up」功能能夠智能辨別並移除照片背景中的不相干物品,確保照片主體不受影響。Siri 在 Apple Intelligence 的加持下,邁出了巨大的一步,變得更自然、更符合語境,且更加個人化。現在,使用者可以選擇打字或語音與 Siri 互動,自由切換,根據當下需求選擇最合適的交流方式。

在隱私保護方面,Apple 設立了新的標準。透過「Private Cloud Compute」,Apple 能夠靈活調配裝置端和伺服器端的計算能力,伺服器端的模型運行於專屬的 Apple 晶片伺服器上。使用者的指令資料在傳送過程中不會被儲存或被 Apple 取得,只用來執行指令,並且這一隱私承諾可受獨立專家檢驗。此外,ChatGPT 現已整合進 Siri 和全系統「Writing Tools」,使用者無需切換應用程式,即可利用其專業知識和對圖片與文件的理解能力,進一步提升使用體驗。

支援裝置方面,iPhone 15 Pro 以及搭載 M1 以上處理器的 iPad / Mac 將可以使用 Apple Intelligence 的功能(iPhone 15 與 iPhone 15+ 用戶:?????)。預計今年夏季開放美國英文版本試用。預計秋季提供給 iOS 18、iPadOS 18 以及 macOS Sequoia 用戶使用。其他更多語言與功能預計明年陸續推出。

查看原始文章