Windows 11 24H2 帶來了一系列激動人心的新功能，特別是在 AI 領(lǐng)域?qū)崿F(xiàn)了重大突破。本文將深入剖析這些 AI 新特性，探討它們的重要性，以及如何充分利用它們，打造更加智能、高效的使用體驗。

Windows Copilot 運行時：本地 AI 的基石

Windows 11 24H2 引入了多項開創(chuàng)性的 AI 功能，這些功能會在你的設(shè)備本地運行，并不依賴云端分析和處理數(shù)據(jù)。

在這些創(chuàng)新功能的背后，是全新的 Windows Copilot 運行時系統(tǒng)組件。它整合了 40+ 本地運行的 AI 模型，并提供了維護和管理這些模型的基礎(chǔ)設(shè)施。這一設(shè)計不僅顯著提升了系統(tǒng)性能，還為開發(fā)者打開了無限可能。借助 Windows Copilot 庫提供的新 API，就能夠輕松將 AI 功能融入自己的應(yīng)用程序中，打造更加智能化、個性化的用戶體驗。

Windows Copilot Runtime 架構(gòu)示意

如上圖所示，Windows Copilot 運行時主要分為三層：

第一層

第一層提供了 AI 開發(fā)的基礎(chǔ)設(shè)施，包含框架和工具：

• AI 框架：包括 DirectML、ONNX Runtime、PyTorch 和 WebNN。
• 工具鏈：包括 Olive、適用于 Visual Studio Code 的 AI 工具包，以及其他面向開發(fā)人員的工具。

第二層

第二層是 Windows Copilot 運行時的核心，包括 Windows Copilot 庫（API）和本地 AI 模型：

• Windows Copilot 庫：提供了一組全新 API，方便開發(fā)人員將 AI 功能集成到應(yīng)用中。
• 本地模型：集成了 40 多個本地 AI 模型，為許多全新的 Windows AI 功能提供支持，例如 Windows Recall、實時字幕翻譯、Windows Studio Effects、自動超級分辨率、「畫圖」應(yīng)用中的圖像創(chuàng)建器、語音清晰度、以及「照片」應(yīng)用中的 Restyle 圖像等多種酷炫功能。

作為全新運行時的一部分，微軟還集成了 Phi Silica 小型語言模型（SLM）和其他模型，如 OCR 光學(xué)字符識別器、屏幕區(qū)域檢測器、自然語言解析器、圖像編碼器、向量嵌入、RAG 檢索增強生成、文本摘要和用戶活動識別等。

第三層

第三層是面向用戶的應(yīng)用層，通過調(diào)用底層功能實現(xiàn)各種 AI 體驗：

• 在這一層中，各種應(yīng)用程序（包括 Windows 原生和第三方應(yīng)用）可以通過調(diào)用第二層的 AI 模型和 Windows Copilot 庫提供的 API，來實現(xiàn)各種 AI 功能，為用戶提供更智能、更便捷的使用體驗。
• 開發(fā)者如果要在自己的應(yīng)用中集成最新的 AI 功能，也需要通過 Windows Copilot 運行時來實現(xiàn)。

Windows Copilot 運行時工作得非常底層，直接基于 NPU 和 GPU 來處理 AI 任務(wù)，并不依賴于云端服務(wù)，即使在沒有網(wǎng)絡(luò)的情況下也能正常工作。

接下來，我們將深入探討 Windows 11 24H2 的 AI 新功能，看看它們將如何改變我們使用 Windows 的方式，以及為什么它們對提高生產(chǎn)力和用戶體驗至關(guān)重要。

一、Windows Recall：你的智能數(shù)字記憶助手

Windows Recall 是 Windows 11 24H2 中最引人注目的 AI 功能之一。它就像一個智能數(shù)字記憶助手，默默地記錄著你在電腦上的每一次操作。該功能依托本地運行的多個 AI 模型，不僅能夠分析你的操作，還可以通過自然語言輕松搜索所有內(nèi)容（包括文本和圖像），幫助你高效完成工作和獲取靈感。

Windows Recall 功能

Recall 功能核心優(yōu)勢

• 強勁硬件支持：專為 Copilot+ PC 設(shè)計，需要搭載最新款 Qualcomm Snapdragon X 系列處理器和 NPU，并配備 16GB 內(nèi)存和 256GB SSD。
• 智能截屏與索引：每隔幾秒自動截屏，并創(chuàng)建本地加密的向量索引，為快速精準的搜索奠定基礎(chǔ)。
• 自然語言搜索：使用自然語言即可輕松查找過去的活動和內(nèi)容，極大提升工作效率。
• 隱私保護至關(guān)重要：所有數(shù)據(jù)只在本地進行處理，不會上傳到云端，用戶隱私安全得到嚴格保護。

Windows Recall 功能在 Microsoft Build 2024 大會上首次亮相時，便立即吸引了眾多目光。盡管有人對隱私問題表示擔(dān)憂，但微軟一再強調(diào)其本地數(shù)據(jù)處理的特性，以求打消用戶疑慮。

二、Windows Studio Effects：AI 賦能的視頻通話新體驗

Windows Studio Effects 是一套利用 AI 技術(shù)來增強視頻通話和音頻質(zhì)量的組合功能，它依賴于設(shè)備的 NPU 為用戶帶來前所未有的通話體驗。

Studio Effects 快速設(shè)置面板

Studio Effects 包括 6 大主要效果

• 自動取景：即使你在移動，也能讓你始終保持在鏡頭中心。
• 背景虛化：在視頻通話中模糊背景，提升隱私保護或隱藏雜亂環(huán)境。
• 眼神接觸：讓你在看屏幕時，看起來像是在與對方保持眼神交流。
• 語音聚焦：減少背景噪音，讓你的聲音更加清晰。
• 肖像光：優(yōu)化視頻中的光線效果，提升畫面質(zhì)量。
• 創(chuàng)意濾鏡：為視頻添加個性化濾鏡效果。

雖然 Studio Effects 功能在 Windows 11 中早就存在，但從 24H2 版本開始，微軟計劃在 Copilot+ PC 認證的電腦上更廣泛地推廣該功能。這意味著，更多用戶將能享受到 AI 增強的通話體驗。

Studio Effects 依賴于設(shè)備的 NPU，因此并不是所有設(shè)備都能支持。

三、實時字幕翻譯：打破語言障礙的 AI 利器

Windows 11 的 實時字幕功能在 24H2 更新中迎來了重磅升級，新增的「實時字幕翻譯」功能帶來了跨語言交流的全新體驗。這項改進不僅能為聽障人士提供更有效的輔助，也為所有用戶帶來了更加便捷、高效的語言交流體驗。

實時字幕翻譯

實時字幕翻譯功能核心優(yōu)勢

• 實時翻譯：支持將視頻或語音內(nèi)容實時翻譯成你的母語，包括 YouTube 等平臺的視頻內(nèi)容。
• 廣泛兼容性：可以實時翻譯電腦上的任何音頻源，涵蓋實時和預(yù)錄音頻。
• 多語言支持：支持將超過 40 種語言翻譯成英語，顯著拓展使用場景。
• 離線功能：可依托 NPU 運行，即使斷網(wǎng)也能流暢使用。
• 音視頻通話支持：新增對音頻和視頻通話的實時字幕支持，助力無障礙溝通。

新版本雖然尚未明確離線功能的具體支持情況，但已經(jīng)擴展了多種非英語語言的支持。

四、語音清晰度：AI 驅(qū)動的音頻增強體驗

Windows 11 的語音清晰度功能融合了 AI 技術(shù)，可以為你帶來更清晰的音頻體驗。在 Windows 11 24H2 中，該功能不再局限于 Surface 設(shè)備，而是擴展到了更多 Windows 設(shè)備上，讓更多用戶能夠享受到 AI 驅(qū)動的清晰通話效果。

語音清晰度功能核心優(yōu)勢

• 智能噪音消除：能有效過濾背景噪音，確保通話時聲音清晰。
• 回聲消除：精準降低音頻回聲，提升通話質(zhì)量。
• 實時混響降低：在視頻或語音通話及錄音時，實時降低混響，讓聲音更加純凈自然。
• 游戲體驗優(yōu)化：顯著提升在線游戲時的語音質(zhì)量，讓你暢享更沉浸的游戲體驗。
• 深度噪音抑制：應(yīng)用程序可以輕松調(diào)用此功能，確保在線會議時的語音清晰度。
• 自動化處理：支持 NPU 的硬件和應(yīng)用程序會自動開啟此功能，無需手動操作。

在支持的應(yīng)用程序和搭載 NPU 的硬件上，語音清晰度功能會自動開始工作，用戶無需也無法手動控制。

五、自動超級分辨率：AI 驅(qū)動的游戲畫質(zhì)革命

Windows 11 24H2 中的自動超級分辨率（Auto Super Resolution, SR）功能，標(biāo)志著微軟在游戲體驗優(yōu)化方面的一大飛躍。它通過 AI 技術(shù)來顯著提升游戲畫質(zhì)和性能，為玩家?guī)砀恿鲿场⒊两挠螒蚴澜纭?/p>

在「設(shè)置」中啟用自動超級分辨率

自動超級分辨率功能核心優(yōu)勢

• AI 增強畫質(zhì)：依托強大的 AI 技術(shù)，智能提升游戲分辨率和視覺效果，讓畫面更加細膩逼真。
• 性能優(yōu)化：在提升畫質(zhì)的同時有效改善游戲幀率，帶來更流暢的游戲體驗。
• 行業(yè)合作：微軟攜手 Nvidia、AMD 和 Intel 共同研發(fā)了 DirectSR API，為下一代游戲集成 SR 技術(shù)奠定基礎(chǔ)。
• NPU 驅(qū)動：不同于傳統(tǒng)的 GPU 驅(qū)動，自動超級分辨率利用設(shè)備的 NPU 進行處理，帶來更高效的運算能力。
• 易于控制：你可在 Windows 11 的「系統(tǒng)」>「屏幕」>「顯示卡」設(shè)置中輕松找到并啟用此功能。

自動超級分辨率的工作原理與業(yè)界知名的 AMD FSR 和 Nvidia DLSS 技術(shù)類似，但它采用了 NPU 進行運算，而非傳統(tǒng)的 GPU。這種創(chuàng)新方法不僅能帶來更高效的處理，還能為不同硬件配置的用戶提供畫質(zhì)提升的機會，打破了硬件性能對游戲體驗的限制。

目前僅適用于搭載 Qualcomm Snapdragon X 系列處理器的 Copilot+ PC。

六、「畫圖」中的圖像創(chuàng)建器：AI 輔助創(chuàng)意繪畫的新旅程

Windows 11 24H2 為經(jīng)典的「畫圖」應(yīng)用帶來了革命性的「圖像創(chuàng)建器」功能。這一 AI 驅(qū)動的工具將徹底改變你的繪畫體驗，為創(chuàng)意過程注入新的活力。

圖像創(chuàng)建器實時生成

圖像創(chuàng)建器功能核心優(yōu)勢

• 智能掃描：能夠分析現(xiàn)有的草圖或繪畫，而不是從空白畫布開始創(chuàng)建 AI 圖像，讓創(chuàng)作更加自然順暢。
• 協(xié)作創(chuàng)作：基于你現(xiàn)有的繪畫或草圖進行創(chuàng)作，激發(fā)靈感，推動創(chuàng)作過程向前邁進。
• 高度可定制：可以根據(jù)你自己的想法完善、編輯和改進 AI 生成的內(nèi)容，擁有完全掌控權(quán)。
• 擴散算法：采用先進的基于擴散的算法，即使是簡單的線條或涂鴉，也能生成高質(zhì)量圖像。
• 風(fēng)格調(diào)整：提供多種樣式選項，方便調(diào)整圖像風(fēng)格，使其更加寫實或更具表現(xiàn)力。
• 實時生成：能夠在繪制時實時生成圖像，反應(yīng)速度快，創(chuàng)作效率高。

對于藝術(shù)愛好者、設(shè)計師和創(chuàng)意工作者來說，「圖像創(chuàng)建器」的出現(xiàn)無疑是個令人振奮的消息。它不僅可以快速實現(xiàn)創(chuàng)意構(gòu)想，還能激發(fā)新的靈感，推動創(chuàng)作過程向前邁進。即使繪畫技能比較拉胯的用戶，也能創(chuàng)造出令人驚嘆的作品。

「圖像創(chuàng)建器」是 Copilot+ PC 專屬功能。它與云端的「Image Creator」功能不同，利用設(shè)備的 NPU 在本地處理圖像生成。這不僅可以確保用戶隱私，還能提供更快的響應(yīng)速度和更穩(wěn)定的體驗。

七、「照片」中的 Restyle 圖像功能：AI 驅(qū)動的圖片風(fēng)格革新

Windows 11 24H2 為「照片」應(yīng)用帶來了「Restyle 圖像」功能，這將徹底改變你編輯和創(chuàng)作圖片的方式，為照片賦予全新的藝術(shù)風(fēng)格和創(chuàng)意表達。

Restyle 圖像處理

Restyle 圖像功能核心優(yōu)勢

• AI 技術(shù)驅(qū)動：依托設(shè)備的 NPU 和強大的 AI 算法進行圖像處理，實現(xiàn)高效、智能的圖片風(fēng)格轉(zhuǎn)換。
• 風(fēng)格轉(zhuǎn)換：能夠徹底改變照片的風(fēng)格，從復(fù)古懷舊到現(xiàn)代時尚，自由切換，打造多元化的視覺效果，宛如為照片增添了全新的藝術(shù)濾鏡。
• 文本引導(dǎo)創(chuàng)作：支持使用文本提示來創(chuàng)建全新的背景，為照片注入新的創(chuàng)意元素，激發(fā)無限的想象力和表達力。
• 本地處理：所有操作都在設(shè)備本地完成，無需上傳云端，確保用戶隱私安全，并提供更快的處理速度，滿足你對效率和隱私的雙重需求。
• 高度定制：可以根據(jù)個人喜好和需求自由調(diào)整圖片風(fēng)格的強度和細節(jié)，打造專屬的個性化視覺效果。

通過「Restyle 圖像」功能，無論你是專業(yè)攝影師、平面設(shè)計師，還是普通用戶，都能輕松實現(xiàn)復(fù)雜的圖像編輯和創(chuàng)作效果，打造令人驚艷的視覺作品。

「Restyle 圖像」是 Copilot+ PC 專屬功能。它的本地處理特性不僅確保了用戶隱私，還提供了更快的處理速度，對于需要快速批量編輯的專業(yè)用戶來說尤為重要。

八、Copilot 應(yīng)用：全新升級的獨立 AI 助手

Windows 11 24H2 已將 Copilot 功能獨立抽出，成為了全新的 AI 助手，提供更靈活、更強大的 AI 輔助體驗，助力你更高效地完成工作和任務(wù)。

Copilot 應(yīng)用

Copilot 應(yīng)用核心優(yōu)勢

• 獨立應(yīng)用：Copilot 現(xiàn)已成為一款獨立應(yīng)用，可像其他應(yīng)用程序一樣進行管理和使用。
• 便捷訪問：你可以自由地將它固定在任務(wù)欄上或取消固定，方便快速訪問。
• 靈活操作：支持調(diào)整界面大小和在屏幕上自由移動，提供更加靈活的使用體驗。
• 全新界面：采用簡潔明了的界面設(shè)計，并借鑒了 OpenAI ChatGPT 的設(shè)計風(fēng)格，提供更直觀的用戶體驗。
• 強大模型：微軟計劃將 Copilot 升級到 OpenAI 最新的 GPT-4o 模型。它能夠理解和處理多種格式的信息，包括文本、圖像和音頻，能為 Copilot 帶來更強大的功能和更智能的 AI 輔助體驗。
• 跨版本支持：你還可以在早期 Windows 11 和 Windows 10 上安裝 Copilot 應(yīng)用。

新的 Copilot 應(yīng)用不僅提供了更靈活的使用方式，還通過更先進的 AI 模型和增強的交互能力，大大提升了實用性和智能水平，能為你帶來更加個性化、高效的 AI 輔助體驗。

其它坊間傳聞AI

深度壁紙：桌面體驗的創(chuàng)新突破

AI 深度壁紙

微軟正在醞釀一項名為「AI 深度壁紙」的全新功能，能夠為 Windows 11 用戶帶來顛覆性的桌面視覺體驗。這項創(chuàng)新基于深度學(xué)習(xí)技術(shù)，能夠通過創(chuàng)造逼真的三維視覺效果，讓靜態(tài)桌面壁紙更加生動、充滿活力，并融入用戶交互之中。

• 視差效果：隨著光標(biāo)的移動和用戶交互，桌面背景圖像會產(chǎn)生輕微的移動和視差效果，營造出更加逼真的三維空間感和沉浸感。
• 動態(tài)響應(yīng)：壁紙能夠根據(jù)時間、天氣、音樂等環(huán)境因素實時變化，甚至與用戶的操作進行互動，為你提供更加個性化和身臨其境的桌面體驗。
• AI 驅(qū)動：依托強大的 AI 技術(shù)，AI 深度壁紙能夠根據(jù)你的興趣、喜好和習(xí)慣，自動生成或推薦個性化的壁紙內(nèi)容，打造獨一無二的桌面視覺效果。

該功能尚未在最新的 Windows 11 Insider 版本中出現(xiàn)，但根據(jù)可靠消息，它有望在今年晚些時候隨 Windows 11 24H2 正式版發(fā)布。

「記事本」中的 AI 協(xié)作：文字處理的智能助手

「記事本」中的 AI 協(xié)作

Windows 11 24H2 將為「記事本」引入 AI 協(xié)作寫作功能，為你提供更加高效、智能的文字處理體驗。

• 內(nèi)容重寫：利用 AI 技術(shù)自動重新組織和表達文本內(nèi)容，幫助你快速理清思路和優(yōu)化表達。
• 調(diào)整格式：快速自動調(diào)整文本格式，如字體、大小、對齊方式等，提高排版效率。
• 調(diào)整語氣：根據(jù)你的需求，自動調(diào)整文本的語氣和風(fēng)格，讓文章更加正式、嚴謹或生動、活潑。
• 長度控制：智能調(diào)整段落長度，讓文章結(jié)構(gòu)更加合理，避免冗長或過于簡短的情況。
• Copilot 解釋：你還可以通過右鍵菜單中的「Explain with Copilot」選項，對選定的文本內(nèi)容進行解釋和說明。

該功能可能會以白名單的形式逐步向用戶開放，并有可能限制每月使用次數(shù)，以控制資源使用。

最新評論