面對 AI 戰局,Apple 也在 WWDC 2024 大會上宣布替 iOS、macOS 導入名為 Apple Intelligence,讓系統懂得分析串聯裝置內各種資訊的關聯性,使被詬病不夠聰明的 Siri 獲得大幅度的強化,當然生成式功能也沒缺席,實現創造圖片、重新編寫文章、整理郵件摘要功能。
Apple 持續堅持對於隱私重視,Apple Intelligence 在設計上會盡可能的裝置端進行運算,倘若真需要更大的運算需求時,系統只會將必要的內容上傳至 Apple 的雲端伺服器中,且所有資料都會進行加密,完成運算後也不會保留任何資料,避免資安外洩或是被挪作他用的疑慮。
Siri
Apple Intelligence 與其他大廠發展大型 AI 模型類似,能夠理解與推斷上下文意,讓本就是強調能以自然語言互動的 Siri 在功能上獲得及大幅度的提升,即使在對話過程中不小心結巴,或不小心說錯,也不需要退出 Siri,直接說明更正,並重新修正用詞即可。
更新後的 Siri 換上了新的介面,也整合了裝置內與線上即時資料的分析功能,例如查詢飛機航班時,系統會帶出郵件裡機票資訊,外加顯示飛機的航行狀態,確認是否會準時抵達。之後還可再對 Siri 要求設定導航,即使沒有明確要求要去機場,系統也能自動得出目的地是機場的結論。
更甚者,Siri 將可以用以辨識畫面、圖片或檔案,如果是圖片,還能提取文字內容,像是有時填寫表單需要付上與輸入證件資訊時,Siri 便能幫用戶找出埋藏在圖片庫裡的證件照,還能順便把證件的身分資料自動填入表格中。
與此同時,Siri 現在也有了鍵盤輸入的方式,不同於過往只能在語音辨識錯誤時才能用鍵盤修改,未來只要點擊畫面底部的橫槓兩下,便能叫出用手動輸入的方式對 Siri 下達命令,方便在一些不適合說話的場合進行操作。
生成式功能
Apple Intellignece 也同樣具備生成式 AI 的功能,Apple 為其準備了 Wirting Tool、Genmoji、Image Playground 三大功能。
Writing Tool
Wirting Tool 主要是針對文字類的內容,可以替編輯中的訊息、郵件、文章進行重新撰寫與修繕,在不改變文意的情況下調整用字遣詞,使其起來專業、溫和或簡明扼要,也能特別要求變成特定文體格式,例如將一段敘述變成詩詞。
如果不希望整篇改動,只想確認有沒有一些地方存在疏漏,系統也提供 Proofread 校對功能,可以用以比對文法或用詞是否存在錯誤。
而在非文字編輯的場合中,系統可以幫忙分析來自各方通知的內容,讓較具重要性的內容優先顯示,面對又臭又長電子郵件、簡訊時,AI 也會自動協助生成簡易摘意,方便一眼就能掌握重點。
當然,既然都能得知內容大綱了,AI 也能順便協助生成回覆文字,比較特別的是,系統保留部分的細節微調選項,例如答覆出席邀約時,可以選擇日期、前往的方式等。
Genmoji
現代聊天會用的 emoji 表情在 AI 的加持下,用戶將能夠透過輸入關鍵字的方式來自創貼圖樣式,這些貼圖將可以用在 iMessage 和其他程式中,但 Apple 並沒有說明非 iOS 裝置中是否可以正常顯示。
Image Playground
emoji 可以自創,其他圖片自然沒有理由不能。Image Playground 可以透過輸入關鍵字,或是點選特定的建議選項,讓 AI 去生成圖片,並提供「動畫」、「插圖」、「素描」三種畫風中。
Apple 也將提供對應 API 工具,讓 Image Playground 可以嵌入到第三方的 App 中,方便隨時在 使用 App 期間使用。
另外,在 iPad 上還額外獲得了名為「Image Wand」的延伸功能,只要用 Apple Pencil 圈起特定區快就能自動產生照片。
有趣的是,系統懂得辨識圈起區域的涵義,例如圈起的如果是張手繪插圖,便會根據插圖去重新生成一張新的圖片,但如果圈起的地方是空白區塊,AI 則會根據四周的文字,去創造一張符合描述的影像來填滿該區域。
最後,AI 也能讀取照片庫裡的資訊,依照用戶只定的要求,找出符合特定資訊的媒體檔案,也能以此自動創作出短影片,順便從 Apple Music 選擇合適音樂做為影片配樂。
整合 GPT-4o
一如先前的傳聞,Apple Intelligence 確定與 ChatGPT 進行合作,將 GPT-4o 整合到了其中,當系統偵測的相關提問在 ChatGPT 上有更合適的答案時,便會跳出對應的選項。
由於基於 Apple 對於隱私保護的關係,GPT-4o 的功能在預設上不需要是輸入任何帳號資訊的,同時特定內容如果需要上傳圖片、影像,系統也會有對應的提醒視窗,讓用戶決定是否要將內容提供到 ChatGPT 的伺服器上,而這些內容在完成運算後就會被刪除,不用擔心會被留存。
至於如果是付費的 ChatGPT 用戶,系統也會提供輸入帳號的地方,如此一來便能將 ChatGPT 上更多進階功能帶入到裝置上。
僅 iPhone 15 Pro 系列、M 系列晶片裝置支援
受限於 Apple Intelligence 講求盡可能在裝置內完成運算的關係,AI 功能相當考驗處理器的 NPU 核心的效能,因此只有手機上只有 A17 Pro 以上的處理器,以及使用 M 系列晶片的 iPad 和 Macbook 產品可以獲得這些功能。
換言之,目前能夠支援 Apple Intelligence 的 iPhone 手機僅有 iPhone 15 Pro、iPhone 15 Pro Max,而 iPad 家族中,iPad Pro、iPad Air 因為已經換上 M 系列晶片,所以能夠使用,但 iPad Mini、iPad(無印)就無緣獲得 AI 加持了。