Windows 11 24H2 帶來了一系列激動人心的新功能，特別是在 AI 領域實現(xiàn)了重大突破。本文將深入剖析這些 AI 新特性，探討它們的重要性，以及如何充分利用它們，打造更加智能、高效的使用體驗。

Windows Copilot 運行時：本地 AI 的基石

Windows 11 24H2 引入了多項開創(chuàng)性的 AI 功能，這些功能會在你的設備本地運行，并不依賴云端分析和處理數據。

在這些創(chuàng)新功能的背后，是全新的 Windows Copilot 運行時系統(tǒng)組件。它整合了 40+ 本地運行的 AI 模型，并提供了維護和管理這些模型的基礎設施。這一設計不僅顯著提升了系統(tǒng)性能，還為開發(fā)者打開了無限可能。借助 Windows Copilot 庫提供的新 API，就能夠輕松將 AI 功能融入自己的應用程序中，打造更加智能化、個性化的用戶體驗。

Windows Copilot Runtime 架構示意

如上圖所示，Windows Copilot 運行時主要分為三層：

第一層

第一層提供了 AI 開發(fā)的基礎設施，包含框架和工具：

• AI 框架：包括 DirectML、ONNX Runtime、PyTorch 和 WebNN。
• 工具鏈：包括 Olive、適用于 Visual Studio Code 的 AI 工具包，以及其他面向開發(fā)人員的工具。

第二層

第二層是 Windows Copilot 運行時的核心，包括 Windows Copilot 庫（API）和本地 AI 模型：

• Windows Copilot 庫：提供了一組全新 API，方便開發(fā)人員將 AI 功能集成到應用中。
• 本地模型：集成了 40 多個本地 AI 模型，為許多全新的 Windows AI 功能提供支持，例如 Windows Recall、實時字幕翻譯、Windows Studio Effects、自動超級分辨率、「畫圖」應用中的圖像創(chuàng)建器、語音清晰度、以及「照片」應用中的 Restyle 圖像等多種酷炫功能。

作為全新運行時的一部分，微軟還集成了 Phi Silica 小型語言模型（SLM）和其他模型，如 OCR 光學字符識別器、屏幕區(qū)域檢測器、自然語言解析器、圖像編碼器、向量嵌入、RAG 檢索增強生成、文本摘要和用戶活動識別等。

第三層

第三層是面向用戶的應用層，通過調用底層功能實現(xiàn)各種 AI 體驗：

• 在這一層中，各種應用程序（包括 Windows 原生和第三方應用）可以通過調用第二層的 AI 模型和 Windows Copilot 庫提供的 API，來實現(xiàn)各種 AI 功能，為用戶提供更智能、更便捷的使用體驗。
• 開發(fā)者如果要在自己的應用中集成最新的 AI 功能，也需要通過 Windows Copilot 運行時來實現(xiàn)。

Windows Copilot 運行時工作得非常底層，直接基于 NPU 和 GPU 來處理 AI 任務，并不依賴于云端服務，即使在沒有網絡的情況下也能正常工作。

接下來，我們將深入探討 Windows 11 24H2 的 AI 新功能，看看它們將如何改變我們使用 Windows 的方式，以及為什么它們對提高生產力和用戶體驗至關重要。

一、Windows Recall：你的智能數字記憶助手

Windows Recall 是 Windows 11 24H2 中最引人注目的 AI 功能之一。它就像一個智能數字記憶助手，默默地記錄著你在電腦上的每一次操作。該功能依托本地運行的多個 AI 模型，不僅能夠分析你的操作，還可以通過自然語言輕松搜索所有內容（包括文本和圖像），幫助你高效完成工作和獲取靈感。

Windows Recall 功能

Recall 功能核心優(yōu)勢

• 強勁硬件支持：專為 Copilot+ PC 設計，需要搭載最新款 Qualcomm Snapdragon X 系列處理器和 NPU，并配備 16GB 內存和 256GB SSD。
• 智能截屏與索引：每隔幾秒自動截屏，并創(chuàng)建本地加密的向量索引，為快速精準的搜索奠定基礎。
• 自然語言搜索：使用自然語言即可輕松查找過去的活動和內容，極大提升工作效率。
• 隱私保護至關重要：所有數據只在本地進行處理，不會上傳到云端，用戶隱私安全得到嚴格保護。

Windows Recall 功能在 Microsoft Build 2024 大會上首次亮相時，便立即吸引了眾多目光。盡管有人對隱私問題表示擔憂，但微軟一再強調其本地數據處理的特性，以求打消用戶疑慮。

二、Windows Studio Effects：AI 賦能的視頻通話新體驗

Windows Studio Effects 是一套利用 AI 技術來增強視頻通話和音頻質量的組合功能，它依賴于設備的 NPU 為用戶帶來前所未有的通話體驗。

Studio Effects 快速設置面板

Studio Effects 包括 6 大主要效果

• 自動取景：即使你在移動，也能讓你始終保持在鏡頭中心。
• 背景虛化：在視頻通話中模糊背景，提升隱私保護或隱藏雜亂環(huán)境。
• 眼神接觸：讓你在看屏幕時，看起來像是在與對方保持眼神交流。
• 語音聚焦：減少背景噪音，讓你的聲音更加清晰。
• 肖像光：優(yōu)化視頻中的光線效果，提升畫面質量。
• 創(chuàng)意濾鏡：為視頻添加個性化濾鏡效果。

雖然 Studio Effects 功能在 Windows 11 中早就存在，但從 24H2 版本開始，微軟計劃在 Copilot+ PC 認證的電腦上更廣泛地推廣該功能。這意味著，更多用戶將能享受到 AI 增強的通話體驗。

Studio Effects 依賴于設備的 NPU，因此并不是所有設備都能支持。

三、實時字幕翻譯：打破語言障礙的 AI 利器

Windows 11 的 實時字幕功能在 24H2 更新中迎來了重磅升級，新增的「實時字幕翻譯」功能帶來了跨語言交流的全新體驗。這項改進不僅能為聽障人士提供更有效的輔助，也為所有用戶帶來了更加便捷、高效的語言交流體驗。

實時字幕翻譯

實時字幕翻譯功能核心優(yōu)勢

• 實時翻譯：支持將視頻或語音內容實時翻譯成你的母語，包括 YouTube 等平臺的視頻內容。
• 廣泛兼容性：可以實時翻譯電腦上的任何音頻源，涵蓋實時和預錄音頻。
• 多語言支持：支持將超過 40 種語言翻譯成英語，顯著拓展使用場景。
• 離線功能：可依托 NPU 運行，即使斷網也能流暢使用。
• 音視頻通話支持：新增對音頻和視頻通話的實時字幕支持，助力無障礙溝通。

新版本雖然尚未明確離線功能的具體支持情況，但已經擴展了多種非英語語言的支持。

四、語音清晰度：AI 驅動的音頻增強體驗

Windows 11 的語音清晰度功能融合了 AI 技術，可以為你帶來更清晰的音頻體驗。在 Windows 11 24H2 中，該功能不再局限于 Surface 設備，而是擴展到了更多 Windows 設備上，讓更多用戶能夠享受到 AI 驅動的清晰通話效果。

語音清晰度功能核心優(yōu)勢

• 智能噪音消除：能有效過濾背景噪音，確保通話時聲音清晰。
• 回聲消除：精準降低音頻回聲，提升通話質量。
• 實時混響降低：在視頻或語音通話及錄音時，實時降低混響，讓聲音更加純凈自然。
• 游戲體驗優(yōu)化：顯著提升在線游戲時的語音質量，讓你暢享更沉浸的游戲體驗。
• 深度噪音抑制：應用程序可以輕松調用此功能，確保在線會議時的語音清晰度。
• 自動化處理：支持 NPU 的硬件和應用程序會自動開啟此功能，無需手動操作。

在支持的應用程序和搭載 NPU 的硬件上，語音清晰度功能會自動開始工作，用戶無需也無法手動控制。

五、自動超級分辨率：AI 驅動的游戲畫質革命

Windows 11 24H2 中的自動超級分辨率（Auto Super Resolution, SR）功能，標志著微軟在游戲體驗優(yōu)化方面的一大飛躍。它通過 AI 技術來顯著提升游戲畫質和性能，為玩家?guī)砀恿鲿?、沉浸的游戲世界?/p>

在「設置」中啟用自動超級分辨率

自動超級分辨率功能核心優(yōu)勢

• AI 增強畫質：依托強大的 AI 技術，智能提升游戲分辨率和視覺效果，讓畫面更加細膩逼真。
• 性能優(yōu)化：在提升畫質的同時有效改善游戲幀率，帶來更流暢的游戲體驗。
• 行業(yè)合作：微軟攜手 Nvidia、AMD 和 Intel 共同研發(fā)了 DirectSR API，為下一代游戲集成 SR 技術奠定基礎。
• NPU 驅動：不同于傳統(tǒng)的 GPU 驅動，自動超級分辨率利用設備的 NPU 進行處理，帶來更高效的運算能力。
• 易于控制：你可在 Windows 11 的「系統(tǒng)」>「屏幕」>「顯示卡」設置中輕松找到并啟用此功能。

自動超級分辨率的工作原理與業(yè)界知名的 AMD FSR 和 Nvidia DLSS 技術類似，但它采用了 NPU 進行運算，而非傳統(tǒng)的 GPU。這種創(chuàng)新方法不僅能帶來更高效的處理，還能為不同硬件配置的用戶提供畫質提升的機會，打破了硬件性能對游戲體驗的限制。

目前僅適用于搭載 Qualcomm Snapdragon X 系列處理器的 Copilot+ PC。

六、「畫圖」中的圖像創(chuàng)建器：AI 輔助創(chuàng)意繪畫的新旅程

Windows 11 24H2 為經典的「畫圖」應用帶來了革命性的「圖像創(chuàng)建器」功能。這一 AI 驅動的工具將徹底改變你的繪畫體驗，為創(chuàng)意過程注入新的活力。

圖像創(chuàng)建器實時生成

圖像創(chuàng)建器功能核心優(yōu)勢

• 智能掃描：能夠分析現(xiàn)有的草圖或繪畫，而不是從空白畫布開始創(chuàng)建 AI 圖像，讓創(chuàng)作更加自然順暢。
• 協(xié)作創(chuàng)作：基于你現(xiàn)有的繪畫或草圖進行創(chuàng)作，激發(fā)靈感，推動創(chuàng)作過程向前邁進。
• 高度可定制：可以根據你自己的想法完善、編輯和改進 AI 生成的內容，擁有完全掌控權。
• 擴散算法：采用先進的基于擴散的算法，即使是簡單的線條或涂鴉，也能生成高質量圖像。
• 風格調整：提供多種樣式選項，方便調整圖像風格，使其更加寫實或更具表現(xiàn)力。
• 實時生成：能夠在繪制時實時生成圖像，反應速度快，創(chuàng)作效率高。

對于藝術愛好者、設計師和創(chuàng)意工作者來說，「圖像創(chuàng)建器」的出現(xiàn)無疑是個令人振奮的消息。它不僅可以快速實現(xiàn)創(chuàng)意構想，還能激發(fā)新的靈感，推動創(chuàng)作過程向前邁進。即使繪畫技能比較拉胯的用戶，也能創(chuàng)造出令人驚嘆的作品。

「圖像創(chuàng)建器」是 Copilot+ PC 專屬功能。它與云端的「Image Creator」功能不同，利用設備的 NPU 在本地處理圖像生成。這不僅可以確保用戶隱私，還能提供更快的響應速度和更穩(wěn)定的體驗。

七、「照片」中的 Restyle 圖像功能：AI 驅動的圖片風格革新

Windows 11 24H2 為「照片」應用帶來了「Restyle 圖像」功能，這將徹底改變你編輯和創(chuàng)作圖片的方式，為照片賦予全新的藝術風格和創(chuàng)意表達。

Restyle 圖像處理

Restyle 圖像功能核心優(yōu)勢

• AI 技術驅動：依托設備的 NPU 和強大的 AI 算法進行圖像處理，實現(xiàn)高效、智能的圖片風格轉換。
• 風格轉換：能夠徹底改變照片的風格，從復古懷舊到現(xiàn)代時尚，自由切換，打造多元化的視覺效果，宛如為照片增添了全新的藝術濾鏡。
• 文本引導創(chuàng)作：支持使用文本提示來創(chuàng)建全新的背景，為照片注入新的創(chuàng)意元素，激發(fā)無限的想象力和表達力。
• 本地處理：所有操作都在設備本地完成，無需上傳云端，確保用戶隱私安全，并提供更快的處理速度，滿足你對效率和隱私的雙重需求。
• 高度定制：可以根據個人喜好和需求自由調整圖片風格的強度和細節(jié)，打造專屬的個性化視覺效果。

通過「Restyle 圖像」功能，無論你是專業(yè)攝影師、平面設計師，還是普通用戶，都能輕松實現(xiàn)復雜的圖像編輯和創(chuàng)作效果，打造令人驚艷的視覺作品。

「Restyle 圖像」是 Copilot+ PC 專屬功能。它的本地處理特性不僅確保了用戶隱私，還提供了更快的處理速度，對于需要快速批量編輯的專業(yè)用戶來說尤為重要。

八、Copilot 應用：全新升級的獨立 AI 助手

Windows 11 24H2 已將 Copilot 功能獨立抽出，成為了全新的 AI 助手，提供更靈活、更強大的 AI 輔助體驗，助力你更高效地完成工作和任務。

Copilot 應用

Copilot 應用核心優(yōu)勢

• 獨立應用：Copilot 現(xiàn)已成為一款獨立應用，可像其他應用程序一樣進行管理和使用。
• 便捷訪問：你可以自由地將它固定在任務欄上或取消固定，方便快速訪問。
• 靈活操作：支持調整界面大小和在屏幕上自由移動，提供更加靈活的使用體驗。
• 全新界面：采用簡潔明了的界面設計，并借鑒了 OpenAI ChatGPT 的設計風格，提供更直觀的用戶體驗。
• 強大模型：微軟計劃將 Copilot 升級到 OpenAI 最新的 GPT-4o 模型。它能夠理解和處理多種格式的信息，包括文本、圖像和音頻，能為 Copilot 帶來更強大的功能和更智能的 AI 輔助體驗。
• 跨版本支持：你還可以在早期 Windows 11 和 Windows 10 上安裝 Copilot 應用。

新的 Copilot 應用不僅提供了更靈活的使用方式，還通過更先進的 AI 模型和增強的交互能力，大大提升了實用性和智能水平，能為你帶來更加個性化、高效的 AI 輔助體驗。

其它坊間傳聞AI

深度壁紙：桌面體驗的創(chuàng)新突破

AI 深度壁紙

微軟正在醞釀一項名為「AI 深度壁紙」的全新功能，能夠為 Windows 11 用戶帶來顛覆性的桌面視覺體驗。這項創(chuàng)新基于深度學習技術，能夠通過創(chuàng)造逼真的三維視覺效果，讓靜態(tài)桌面壁紙更加生動、充滿活力，并融入用戶交互之中。

• 視差效果：隨著光標的移動和用戶交互，桌面背景圖像會產生輕微的移動和視差效果，營造出更加逼真的三維空間感和沉浸感。
• 動態(tài)響應：壁紙能夠根據時間、天氣、音樂等環(huán)境因素實時變化，甚至與用戶的操作進行互動，為你提供更加個性化和身臨其境的桌面體驗。
• AI 驅動：依托強大的 AI 技術，AI 深度壁紙能夠根據你的興趣、喜好和習慣，自動生成或推薦個性化的壁紙內容，打造獨一無二的桌面視覺效果。

該功能尚未在最新的 Windows 11 Insider 版本中出現(xiàn)，但根據可靠消息，它有望在今年晚些時候隨 Windows 11 24H2 正式版發(fā)布。

「記事本」中的 AI 協(xié)作：文字處理的智能助手

「記事本」中的 AI 協(xié)作

Windows 11 24H2 將為「記事本」引入 AI 協(xié)作寫作功能，為你提供更加高效、智能的文字處理體驗。

• 內容重寫：利用 AI 技術自動重新組織和表達文本內容，幫助你快速理清思路和優(yōu)化表達。
• 調整格式：快速自動調整文本格式，如字體、大小、對齊方式等，提高排版效率。
• 調整語氣：根據你的需求，自動調整文本的語氣和風格，讓文章更加正式、嚴謹或生動、活潑。
• 長度控制：智能調整段落長度，讓文章結構更加合理，避免冗長或過于簡短的情況。
• Copilot 解釋：你還可以通過右鍵菜單中的「Explain with Copilot」選項，對選定的文本內容進行解釋和說明。

該功能可能會以白名單的形式逐步向用戶開放，并有可能限制每月使用次數，以控制資源使用。

最新評論