整理 | 王軼群
責編 | 唐小引
出品丨AI 科技大本營(ID:rgznai100)
相比谷歌、微軟,蘋果近兩年在 AI 領域無所作為,如果本次重點在 AI 的 WWDC 沒有打贏翻身仗,那麽蘋果將面臨跌落神壇的命運。
在此次的 WWDC 上,蘋果將 AI 集合在自己的軟硬體生態中,讓大模型與人工智慧不再高高在上,從而變得觸手可得。
蘋果推出 Apple Intelligence 概念,庫克直接把 AI 一詞中原本的 Artificial(人工的)劫持替換了,讓 AI 搖身一變成了蘋果智慧。
庫克阿特曼甜 蜜「聯姻」,GPT-4o 入駐蘋果生態
本次 WWDC 的最大看點,在於蘋果的 AI 夥伴的選擇。
在釋出會現場,OpenAI 執行長 Sam Altman 頻頻現身,並與參會者合照,這無疑坐實了此前傳出的蘋果與 OpenAI 合作的訊息。
( Sam Altman 在現場各種合照、被偷拍,就差登台演講了)
正如此前爆料所言,蘋果與 OpenAI 強強聯手,GPT-4o 入駐蘋果生態。
Sam Altman 在最新的官方博文中表示:「我們很高興與 Apple 合作,以新的方式將 ChatGPT 帶給他們的使用者。Apple 與我們一樣致力於安全和創新,此次合作與 OpenAI 讓每個人都能使用先進 AI 的使命相一致。與 Apple 一起,我們將讓人們更輕松地從 AI 中受益。」
蘋果在AI夥伴的選擇中,「 從其中最好的開始,即 OpenAI 的先驅和市場領導者 ChatGPT,由 GPT-4o 提供支持。 」
蘋果正在將 ChatGPT 整合到 iOS、iPadOS 和 macOS 的體驗中,允許使用者存取 ChatGPT 的功能(包括影像和文件理解),而無需在工具之間切換。
具體的合作及 AI 功能在體現在:
在 Siri 中內建 ChatGPT,使用者可以在 Siri 內呼叫 ChatGPT 的智慧功能,如為為朋友制作一頓精致的飯菜的選單等,還可以在問題中附上照片,Siri 將確認是否可以與 ChatGPT 分享使用者的照片並帶回相關建議。「這是一個無縫整合。除了照片,使用者還可以詢問與文件、演示文稿或 PDF 相關的問題。」 Siri 會直接提供答案。
將 ChatGPT 與 Compose 整合到系統範圍的寫作工具中。使用者可以使用 ChatGPT 建立任何內容,使用者還可以利用 ChatGPT 影像工具生成各種風格的影像,以補充他們所寫的內容。假設使用者想為喜歡蝴蝶和解謎的六歲孩子建立一個自訂睡前故事,輸入初步想法並將其發送給 ChatGPT,即可以獲得孩子會喜歡的故事。Compose 還可以幫助使用者利用 ChatGPT 的影像功能,以各種樣式生成影像來說明睡前故事。
在 Siri 和寫作工具中存取 ChatGPT 時,私密保護功能已內建 — OpenAI 不會儲存請求,並且使用者的 IP 地址會被隱藏。使用者還可以選擇連線他們的 ChatGPT 帳戶,這意味著他們的數據偏好將受 ChatGPT 政策的約束。
由 GPT-4o 提供支持的 ChatGPT 整合將於今年晚些時候登陸 iOS、iPadOS 和 macOS。使用者無需建立帳戶即可免費存取,ChatGPT 訂閱者可以直接透過這些體驗連線他們的帳戶並存取付費功能。
蘋果表示: 「我們還打算在未來增加對其他 AI 模型的支持。 」 這裏也許就包括了此前透露出有合作訊息的谷歌 Gemini 和百度文心一言。
Apple Intelligence 跨平台互動生成式 AI 體驗
Siri 浴火重生
本次演講的重頭戲,在於蘋果宣布推出「Apple Intelligence」:Apple Intelligence 在全文出現了 61 次,而 AI 僅出現了 4 次,artificial intelligence 出現了 3 次。
「 我們很高興開啟 Apple 創新的新篇章。Apple Intelligence 將改變使用者使用我們產品的方式 ,以及我們的產品能為使用者做些什麽,」蘋果公司執行長 Tim Cook 表示。「最重要的是,它必須了解你,並紮根於你的個人背景,比如你的日常生活、你的人際關系、你的交流等等,」執行長提姆·庫克指出。「當然,它必須從一開始就與私密一起構建。所有這些都超越了人工智 能。這是個人智慧,也是蘋果的下一個重大舉措。」
高級副總裁 Craig Federighi 補充道:「Apple 智慧以使用者的個人數據和環境為基礎。」該功能將有效地建立在使用者輸入行事曆和地圖等應用程式的所有個人數據之上。
蘋果稱這是其「一大步」,是一段「新的旅程」!
Apple Intelligence 功能可在 iPhone、iPad 和 Mac 上使用,並結合使用裝置上和伺服器驅動的生成式 AI 模型。Apple Intelligence 的功能包括 iPhone 上通知的個人化優先級排序、跨應用程式的生成寫作工具、影像生成,等等。
蘋果表示,其生成式人工智慧脫穎而出,可以根據使用者的個人情況進行個人化設定,同時保護個人私密。例如,在閱讀電子信件時,Apple Intelligence 可以檢視電子信件、找出相關聯系人、給出指示並尋找相關檔。該產品還將以深刻的方式開啟多工處理,實作某種跨套用相容性。例如,這意味著使用者無需在行事曆、信件和地圖之間不斷切換來安排會議。
蘋果還推出了一款名為 Genmoji 的全新自訂表情符號工具。當使用者找不到合適的表情符號來表達自己想要表達的意思時,可以使用蘋果的人工智慧建立自己的表情符號。使用者還可以建立與朋友一模一樣的 Genmoji。使用者可以透過在鍵盤上輸入描述來建立 Genmoji。
Apple Intelligence 主要由裝置上的模型提供支持,與 iPhone 15 Pro 上的 A17 Pro 以及 M1 及更高版本的 Apple Silicon Mac 相容。
蘋果正在推出可執行更復雜模型的伺服器基礎設施,稱為私有雲端運算。蘋果表示,這允許更強大的生成式人工智慧模型處理使用者的數據,而不會泄露任何私密。蘋果表示,使用私有雲端運算時,使用者的數據永遠不會被儲存或讓蘋果存取。
13 年前,蘋果推出了語音助手 Siri,如今 Siri 迎來重大變革。
Apple Intelligence 還包含可能是 Siri 自十多年前釋出以來最大的更新。該公司表示,該功能「更深入地融入」其作業系統。對於 iOS 來說,這意味著將熟悉的 Siri 圖示換成使用時環繞桌面的藍色發光邊框。
Siri 不再只是一個語音界面。 Apple 還增加了直接在系統中輸入查詢的功能,以存取其基於AI的生成智慧。 這承認了語音通常不是這些系統的最佳界面。
與此同時,App Intents 能夠將助手更直接地整合到不同的應用程式中。這將從第一方應用程式開始,但該公司還將向第三方開放存取許可權。這一新增功能將大大改善 Siri 可以直接執行的操作。
第三方開發者還可以利用這些新功能,透過新的「套用意向框架(app intents framework)」來利用 Apple Intelligence,使某些操作與 Siri 相容。
Siri 將不再僅是語音啟用的助手。蘋果正在添加「Type to Siri」功能,使其更接近其他生成式人工智慧聊天機器人的體驗。本次重大革新還在於,Siri 還將能夠在應用程式內及跨應用程式執行操作。這些功能相當強大。比如,Siri 可以執行找到駕照的照片、提取使用者的身份證號碼、並將其輸入到網頁表單中等一系列操作。
Apple Intelligence 將推廣到其作業系統的最新版本,包括 iOS 和 iPadOS 18、macOS Sequoia 和 visionOS 2。這些更新可免費使用。
該功能將出現在 iPhone 15 Pro 和 M1 Mac 和 iPad 裝置上。標準版 iPhone 15 將不會獲得該功能,可能是由於芯片的限制。
6 大軟體系統升級,全面 AI 化
WWDC 的前半段,蘋果花費大量時間介紹了其 6 大軟體平台的升級。這也是其 AI 功能如何觸達使用者的關鍵一環。
其中最受矚目的是,AI 功能加持下的 iOS 18。
本次 WWDC 上,iOS 18 已正式釋出。
蘋果公司全球行銷高級副總裁 Greg Joswiak 介紹了 iPadOS 18 和全新的設計以及新的 Pencil 功能。其中的數學備忘錄功能,配合新釋出的 Apple Pencil,蘋果可以辨識手寫的數學演算公式並給出答案,如果修改步驟,答案也會隨之更新。
同時,使用者還可以選擇根據方程式式建立圖表的功能。
此次更新還包括新的主螢幕自訂、暗模式改進等。新的主螢幕客製:應用程式圖示的新主題選項,使用者可以將應用程式圖示放置在任何位置,並使用暗模式自動為圖示著色。經過改進的控制中心具有多頁布局。還有一個新的「控制項庫」,它還將允許第三方開發人員為控制中心提供小部件。使用者還可以將新控制項交換到釘選螢幕上,替換手電筒和相機圖示。iOS 18 支持使用 Face ID 釘選單個應用程式。iOS 18 將添加 RCS、行事曆中的提醒整合、使主螢幕圖示更大的選項等。
在資訊套用中,Tapbacks 已經重新設計,現在使用者可以使用任意表情符號或貼紙點選返回。資訊應用程式現在支持預定發送。支持文本效果和文本格式選項,如底線、刪除線等。透過衛星發送資訊允許 iPhone 14 和 iPhone 15 使用者在沒有 Wi-Fi 或蜂窩服務的情況下發送 iMessage,也可以透過衛星發送簡訊。
除此之外,iOS 18 還包括信件應用程式的功能升級:自動分類,完全在裝置上處理。Apple Maps 增加了詳細的地形圖,包括離線支持。Apple Wallet 增加了 Apple Cash 的點選支付、新的 Apple Pay Online 平台以及對活動門票的改進支持。日誌應用程式現在支持記錄使用者的心理狀態和跟蹤目標、新的 Insights 檢視和搜尋支持。遊戲模式即將登陸 iPhone,它可以最大限度地減少後台活動以確保最高的幀速率。
對於照片套用,蘋果表示,我們將進行有史以來最大的重新設計。旨在讓相片圖庫規模不斷擴大,處理起來更加輕松。新增選項可輕松隱藏螢幕截圖。新的「收藏」功能可幫助跟蹤最近的照片和建議。照片應用程式現在可以將人們分組在一起。
visionOS 2 將提供由 2D 影像生成 3D 空間檢視功能,以及只需看一眼就可透過眼動辨識把 Mac 的螢幕投射到 Vision Pro 的 4K 虛擬顯示器的互動功能。
watchOS 11 中引入了訓練負荷,來衡量鍛煉強度和持續時間,並在健康套用中加入了懷孕的檢測場景,同時內建了機器轉譯的大模型。
蘋果還釋出了最新版本的 MacOS:MacOS Sequoia。
其中引人註目的一項功能是 iPhone 映像。使用者透過 MacOS 的 Continuity 功能,可以映像 iPhone 的螢幕,包括圖示、主螢幕、應用程式等,並直接從 Mac 控制它。
在映像功能下,iPhone 任何應用程式都可以直接從 Mac 開啟,使用者的 iPhone 音訊、計畫和檔都可以無縫拖放到 Mac。而此時並不需要擔心 iPhone 的螢幕泄露私密,其螢幕可以保持釘選狀態,他人無法存取。
「25 年來,我們一直在 Keychain 上添加功能以便更輕松地登入帳戶。現在,我們推出了密碼應用程式。」Craig 表示。
他介紹了一個新的專用密碼應用程式,可讓使用者管理 Wi-Fi 密碼、應用程式和網站密碼、驗證碼等。密碼可跨裝置同步,macOS 使用自動填充功能在密碼應用程式中填充密碼。使用者可以在 Mac、iPad、iPhone、Vision Pro 和 Windows 上找到該應用程式,並使用適用於 Windows 的 iCloud 應用程式。如果使用自動填充,所有密碼都會在使用者的個人裝置之間安全同步。
此外,蘋果還帶來了使用者「盼了二十年」的通話錄音,有人甚至戲稱其為「史詩級功能升級」。
據介紹,該功能將支持在 Phone 或 Notes 套用中錄制通話資訊,並會生成內容摘要。該功能將支持英語(美國、英國、澳洲、加拿大、印度、愛爾蘭、紐西蘭、新加坡)、西班牙語(美國、墨西哥、西班牙)、法語(法國)、德語(德國)、日語(日本) 、普通話(中國大陸、台灣地區)、粵語(中國大陸、香港地區)和葡萄牙語(巴西)。
不過,由於該功能基於 Apple Intelligence 實作,因此僅有 iPhone 15 Pro 與 iPhone 15 Pro Max 能夠使用。此外,蘋果稱,為了確保使用者知情,在通話錄音開啟後,所有參與者都將收到通知。
有關其軟體平台的細節太多,有網友整理了可愛的手寫體筆記:
顛覆性變革正在發生
本次釋出會,蘋果在前一個小時都在在闡述軟體系統的升級,AI提及次數很少,與開發者也並無較大關聯。屆時,蘋果自身股價一度下跌 3%,直到庫克提及 Apple Intelligence 時才有所回升。截至收盤,蘋果股價下跌近 2%,總市值 2.96 萬億,已跌破 3 萬億,並未反超輝達。
但蘋果的此次釋出無疑是顛覆性變革的開始。前特斯拉 AI 總監、李飛飛高徒 Karpathy 發推文表示「「這一定是一個非常激動人心的時刻,因為他們在整個作業系統之上添加了 AI」,包括多模式輸入/輸出啟用文本/音訊/影像/視訊、Agents、無縫銜接、模組化、私密保護等突出功能。
Zoom 客戶端工程師 Cyandev 表示:
智譜 AI 首席生態官劉江表示:Apple Intelligence 在教整個行業怎麽做大模型產品。
「蘋果一口氣幾乎把所有終端使用者的 AI 工具在系統層全部做完了。」
「蘋果不需要今天就把所有事情都做好,只需要證明自己有能力在未來幾年內做好人工智慧。現在的問題是蘋果是否擁有人工智慧的核心競爭力。相比之下,蘋果在網路和蘋果裝置上的搜尋並沒有核心競爭力。」蘋果分析師 Gene Munster 發文表示,「相反,蘋果在硬體、軟體和服務方面都很強大。蘋果有機會在人工智慧領域做一些其他公司無法做到的事情;在硬體、軟體和服務中註入人工智慧體驗。」
相比安卓這種開放的系統而言,蘋果自己的生態更容易直接統一植入大模型。本次 GPT-4o 整合在蘋果生態的舉動,無疑將引發軟體終端體驗及開發方式的顛覆性變革。
One More Thing……
整場主題演講並不是只有津津樂道的推文,也有不少推文討論了這場 變革背後的爭議 ,私密數據自然成為了廣大使用者擔憂的重點。
當然,反應最為激烈的莫屬埃隆·馬斯克(Elon Musk),他直接宣稱要讓每一個人在進園區之前把 iPhone 都裝在法拉第籠裏:「 如果蘋果在作業系統層面整合 OpenAI,那麽蘋果裝置將被我的公司禁止使用。 這是不可接受的安全違規行為。 遊客必須在門口檢查他們的蘋果裝置,然後將它們存放在法拉第籠中。 」
對於 Apple Intelligence 引發的一系列爭議,你有哪些看法呢?歡迎在評論區分享你的真知灼見。
參考連結:
https://9to5mac.com/2024/06/10/apple-ai-apple-intelligence-iphone-ipad-mac/
https://9to5mac.com/2024/06/10/ios-18-new-features-launch-release-date/
https://www.youtube.com/watch?v=RXeOiIDNNek
https://openai.com/index/openai-and-apple-announce-partnership/
開發者正在迎接新一輪的技術浪潮變革。由 CSDN 和高端 IT 咨詢和教育平台 Boolan 聯合主辦的 2024 年度「全球軟體研發技術大會」秉承幹貨實料(案例)的內容原則,將於 7 月 4 日-5 日在北京正式舉辦。大會共設定了 12 個大會主題:大模型智慧套用開發、軟體開發智慧化、AI 與 ML 智慧運維、雲原生架構……詳情👉: http://sdcon.com.cn/