蘋果邁入AI時代,Siri總算有智商了

文 / 道哥

當安卓機圍繞ai大做文章時,果粉們都在等待蘋果ai登場。這一天終於來了。 

6月11日凌晨1點,蘋果wwdc 2024(全球開發者大會)如期而至。

不同於去年,此次大會蘋果沒有推出任何硬體產品,而是將焦點完全集中在了操作系統更新上,依次分享了visionos、ios、ipados、macos、watchos等各大操作系統的全新版本,就是蘋果家族os的一次大更新。

之後,apple intelligenc(蘋果智能)壓軸出場,蘋果正式宣布與openai公司合作。但是,就像往年一樣,蘋果仍然免不了迎接「缺乏創新」的吐槽,也遭到了馬斯克連續發文「炮轟」。那麼,蘋果wwdc 2024到底講了什麼?

01 更加「個性化」的ios 18

按照發布會的時間線,我們捋一下蘋果具體講了哪些東西。 

首先登場的是apple tv+,這個和國人關係不大,我們可以直接略過。然後正式登場的是備受關注的visionpro最新系統:visionos 2。 

本次全新升級的visionos 2帶來了空間照片功能。通過ai計算分析,visionos 2可以把圖庫中的所有2d圖像轉化成空間3d實景尺寸的圖像。而且在整體交互上也有所升級,提供了更多快捷手勢。

最讓果粉感興趣的可能就是visionpro要在中國大陸發售了,售價29999元。但據智百道了解,這價格比閑魚上貴了一個w,蘋果對國內用戶還真是自信。

visionpro之後就是重頭戲,ios 18正式登場。而如果給這次的ios的更新總結一個關鍵詞,就是「個性化」。

首先,ios 18擁有可定製的主屏幕,你可以自由地將應用程序圖標放置在你想要的任何位置。

比如你可以把喜愛的牆紙、應用程序和各種小組件添加到主屏幕中。而且,現在蘋果還可以設置全新的深色外觀模式,匹配你喜歡的桌面色調和風格。

而且,你還可以自定義所有app小組件的主題色,ios也會根據壁紙風格自動推薦匹配色調。

控制中心的升級也體現了「個性化」,你可以在多個控制項之間滑動。面向開發者,ios推出了新的控制api,支持開發者把app加進控制中心,長掃即可調出其它控制項,布局、大小均可調整。

而且,在鎖屏狀態下,原來的相機和手電筒功能,都可以替換為其它控制項。

安全隱私方面,ios 18也推出了個性化設置。

你可以單獨鎖定某一個應用,給它「上鎖」,打開它需要通過驗證,且上鎖後該應用的內部信息不會出現在搜索、通知等手機系統的其它地方。更進一步,你還可以把不想被外人知道的應用藏起來,放進一個新的帶鎖的隱藏app文件夾。

具體的應用app上,ios 18在「個性化」上也下了功夫。其中就包括被官方稱作「迄今為止最重磅的設計更新」的圖庫(photos)新功能。

在圖庫的上半部分,ios 18延續之前的的網格視圖,適合瀏覽所有圖片;下半部分新增了對圖片按時間、主題進行分類整理的「小相冊」。此外,還包括人臉識別分類、照片集置頂等一系列快捷訪問功能。

另一個最常用的app簡訊(messages)上,在信息回復中,蘋果增加了更多的表情符號,並且將有粗體、下劃線、刪除線和斜體的新格式展示。而且,還可以給給文字添加特效。

這裡智百道感覺最值得一提的是,蘋果還增加了衛星通信功能,在沒有聯網的情況下,可以通過衛星進行信息發送。

這個功能國內高端機型已開始普及,蘋果看起來是跟上潮流了,但發布會上沒有公布具體細節,具體效果還不清楚。

其它方面,ios 18還推出了safari、地圖、錢包、遊戲模式等等一堆細枝末節的更新,就不逐一說明了。

對於ios 18的這次更新,有人吐槽說是「ios18史上最小更新」。對此,智百道認為,ios 18現在已經不是蘋果的重頭戲,期待不要太高,最近這些年以來,也應該習慣蘋果在創新方面的調性了。能在原來的基礎上優化體驗,就已經算是及格。

02 其它os更新的亮點

ios 18之後,發布會依次介紹了macos、ipados、tvos和watchos等幾大系統,智百道挑選重要的亮點說一下。

macos方面,蘋果正式公布了macos 15 sequoia。

這裡值得關注的是iphone鏡像(iphone mirroring),通過這個功能,你可以用mac來控制手機。比如,你可以點咖啡、加備註,iphone的通知、音頻可以與mac上互通,mac的內容也可以更方便地傳送到iphone上。

這個功能確實非常方便,演示中可以看到,通過iphone mirroring,可以像操作手機一樣滑動屏幕,甚至可以通過mac鍵盤在手機上進行打字。

此外,macos 15 sequoia還新增一個跨平台的passwords應用,可以存儲多種新類型的帳戶信息,包括wi-fi密碼、密鑰、驗證碼和共享密碼等,未來將在ios、ipad、mac、visionos和windows上使用。

ipados 18也有一個重大更新,就是終於引入了計算器,添加了math note系統。

新的系統支持識別手寫公式、自動求解、自動畫函數曲線等功能,你可以利用pencel直接手寫數學算式,然後直接幫助你計算出結果,甚至能幫你計算複雜公式,並且可以理解所有不等式里的變數變化。

比如你用apple pencil寫一個數學表達式,寫下等號之後,計算器會自動算出結果。如果修改表達式,結果也會實時更新。

而且,新功能還支持更複雜的計算,比如一個物理題,以不同角度和速度擊打乒乓球時,乒乓球能到達的最高高度。

你只需在數學筆記中寫出各種變數的數字,然後計算器就可以直接在公式中進行計算。寫成函數表達式,點擊等號,還能直接畫出函數曲線。調整變數,函數曲線隨之改變。

而且,在手寫方面,系統利用機器學習,還可以模仿你的筆跡,讓書寫更加自然。同時,其還支持將鍵盤打出的內容一鍵生成手寫筆記、拼寫檢查、校對糾錯等。

總結下來,智百道感覺蘋果在六大系統的更新上有些亮點,但不算多,主要是一些細節體驗上的提升。所以,不少熬夜看發布會的果粉吐槽快看睡著了,甚至有的已經預定了「罵蘋果」的熱搜。

壓軸的apple intelligence給蘋果救了場。

03 蘋果ai登場,siri重獲新生

相比其它廠商,蘋果沒有過多強調ai手機這個偏宏大的概念,而是把ai都落在了具體的應用場景上。

文字處理上,apple intelligence推出了「優先通知」的功能。

開啟這項功能後,系統可根據通知內容的重要性進行排序,最重要的信息,比如,寫有用戶航班登機牌的郵件會被放在最上方展示。

但是,對於「重要信息」的判定標準,蘋果並沒有說明,可能是基於用戶的使用習慣、app的使用頻次,也可能是基於對自然語言理解力。

文字處理當然離不開寫作,apple intelligence還推出了全系統內的寫作工具,應用範圍涵蓋郵件、備忘錄、pages及各類第三方應用,用戶可以在各種應用場景中擴寫、校對和總結文本,同時還能調整措辭語氣,或是獲得智能回復的建議。

圖片處理上,apple intelligence引入了genmoji和inmage wand功能。

前者可以根據你的描述,生成最符合你心意的圖片及表情包,還能根據相冊中的人物進行定製,目前還僅支持素描、卡通和插畫三種風格;後者可以幫助用戶將粗略的手繪草圖,轉化為更加精美的圖片,或直接實現文生圖。

這裡智百道需要指出,對比實際演示中的效果和其它如stable diffusion等大模型,apple intelligence的能力還存在一定的差距。

此外,apple intelligence還支持清除照片中的干擾物、使用自然語言搜索圖像視頻等功能。比如你想尋找上周發的文件、和女朋友的照片等等,開口說出來,系統就會自動進行尋找。

語音通話方面,apple intelligence能夠對錄音內容自動生成摘要、總結電話錄音等。這個功能雖然看起來很普通,但智百道認為能夠解決蘋果用戶的一個痛點,非常實用。

需要指出的是,在使用此功能時,電話對方會接到一則通知。

隱私保護方面,apple intelligence提供了兩種解決方案。首先,能在端內運行的大模型功能就會僅通過端側ai運行,蘋果只在端內收集信息,但不會傳送到雲端。大多數ai功能均可在端側完成,這主要是蘋果的超強晶元的功勞。

其次,如果複雜到非要用雲端模型的話,為了保證雲端使用和信息安全,蘋果打造了私人云端計算。這些模型都會在他們使用apple silicon專門創建的伺服器上運行,因此也擁有極強的隱私保護功能。

蘋果軟體工程高級副總裁craig fedrighi表示,「這些上傳到雲端的數據絕對不會被儲存,就連蘋果都無法訪問,數據只用來執行請求。」

對比不久前微軟recall被黑客破解事件,蘋果在隱私保護上提出的解決方案更為完備。

以上就是apple intelligence在ai方面的能力,都將隨著ios 18、ipados 18、macos sequoia免費提供。

如果蘋果到此為止,智百道認為這場發布會只能算勉強及格,但蘋果還有大招,就是聯手chatgpt,對siri進行了全新升級,siri 2.0正式登場。

其實,當初siri推出時,喬布斯將其視為一個能夠顛覆行業的產品,他相信,通過siri的智能語音交互,能夠讓人們的生活更加便捷,進而拉近人與科技的距離。

眾所周知,多年來,喬布斯的這個設想一直沒能實現。

如今,喬布斯的夢想看到了實現的希望,因為蘋果與openai達成了深度合作意向,前不久發布的gpt-4o模型,已經被完全整合在siri中。

你不用創建賬戶,就可以免費使用這個模型的大部分功能。而在gpt-4o的加持下,siri有了質的提升。

首先在外觀上,siri在對話時,屏幕邊緣會環繞一圈光暈,顯得非常有科幻感。

在響應上,siri真正有了「智能體」的感覺。在對話中,即便新增了連續對話功能,siri也能夠很自然地理解上下文內容。而且,siri可以基於用戶的照片、日曆、文件、郵件等信息進行「語義索引庫」排列,實現更加智能的信息搜索及提取。

比如,用戶需要在一份文件中填寫駕駛證編號,siri可以調用相冊中的駕駛證圖片,自動將編號填寫進文件。

而且,siri還可以支持跨應用操作app,比如,你要尋找某個人的照片,siri找到之後,可以按照你的指令進行修圖優化,然後再放入指定備忘錄中對應人物的簡介裡面。

作為受益最大的應用,這次更新,說siri重獲新生也不為過。

未來,蘋果表示,明年將會為siri推出更多新功能,包括讓siri了解顯示屏內容的屏幕感知功能,讓siri代表用戶在應用程序中採取行動。

是不是有了點鋼鐵俠中,人工智慧管家「賈維斯」的感覺?

說在最後

其實,在智百道看來,此次蘋果發布會上諸如文本摘要、圖片生成、照片查找、ai智能助理等一系列ai功能,安卓機其實早就有了,apple intelligence的創新性並不高。

而且,蘋果未來在ai方面有多大的進步,很大程度上取決於openai。以蘋果的調性,如果自己能夠搞定,絕不會去擁抱別人,更何況openai和老對手微軟有著千絲萬縷的聯繫。

但儘管如此,相比競爭對手,蘋果的優勢在於軟硬體結合,對自家系統生態擁有著絕對控制權。這就能夠使ai與系統原有的app或功能更好的融合,給用戶一種更加無感、更加自然的使用體驗。

系統體驗好,一直都是蘋果的殺手鐧。

最後需要指出,apple intelligence仍處於內部開發測試狀態,今年秋季前不會向開發者開放,並且目前apple intelligence僅支持英語,部分功能、更多語言和平台支持需要等到明年,國內用戶還需要耐心等待。

發布會結束後,面對蘋果+openai的強強聯合,馬斯克發起「炮轟」,直言"蘋果不夠聰明,無法製造自己的ai,卻認為能夠確保 openai 保護你的安全和隱私,這顯然是荒謬的!"

他甚至表示,要在自己公司禁用蘋果設備。

蘋果ceo庫克也發了一條推特,表示「apple intelligence是蘋果ai的下一篇章」。

蘋果終於擁抱了ai,智百道願意將之稱為「迎頭趕上」,但遠談不上領先對手。在ai手機這條路上,大家都在搶跑,而蘋果無疑是最強的選手之一。