Windows 11 24H2 帶來了一系列激動(dòng)人心的新功能，特別是在 AI 領(lǐng)域?qū)崿F(xiàn)了重大突破。本文將深入剖析這些 AI 新特性，探討它們的重要性，以及如何充分利用它們，打造更加智能、高效的使用體驗(yàn)。

Windows Copilot 運(yùn)行時(shí)：本地 AI 的基石

Windows 11 24H2 引入了多項(xiàng)開創(chuàng)性的 AI 功能，這些功能會(huì)在你的設(shè)備本地運(yùn)行，并不依賴云端分析和處理數(shù)據(jù)。

在這些創(chuàng)新功能的背后，是全新的 Windows Copilot 運(yùn)行時(shí)系統(tǒng)組件。它整合了 40+ 本地運(yùn)行的 AI 模型，并提供了維護(hù)和管理這些模型的基礎(chǔ)設(shè)施。這一設(shè)計(jì)不僅顯著提升了系統(tǒng)性能，還為開發(fā)者打開了無限可能。借助 Windows Copilot 庫(kù)提供的新 API，就能夠輕松將 AI 功能融入自己的應(yīng)用程序中，打造更加智能化、個(gè)性化的用戶體驗(yàn)。

Windows Copilot Runtime 架構(gòu)示意

如上圖所示，Windows Copilot 運(yùn)行時(shí)主要分為三層：

第一層

第一層提供了 AI 開發(fā)的基礎(chǔ)設(shè)施，包含框架和工具：

• AI 框架：包括 DirectML、ONNX Runtime、PyTorch 和 WebNN。
• 工具鏈：包括 Olive、適用于 Visual Studio Code 的 AI 工具包，以及其他面向開發(fā)人員的工具。

第二層

第二層是 Windows Copilot 運(yùn)行時(shí)的核心，包括 Windows Copilot 庫(kù)（API）和本地 AI 模型：

• Windows Copilot 庫(kù)：提供了一組全新 API，方便開發(fā)人員將 AI 功能集成到應(yīng)用中。
• 本地模型：集成了 40 多個(gè)本地 AI 模型，為許多全新的 Windows AI 功能提供支持，例如 Windows Recall、實(shí)時(shí)字幕翻譯、Windows Studio Effects、自動(dòng)超級(jí)分辨率、「畫圖」應(yīng)用中的圖像創(chuàng)建器、語音清晰度、以及「照片」應(yīng)用中的 Restyle 圖像等多種酷炫功能。

作為全新運(yùn)行時(shí)的一部分，微軟還集成了 Phi Silica 小型語言模型（SLM）和其他模型，如 OCR 光學(xué)字符識(shí)別器、屏幕區(qū)域檢測(cè)器、自然語言解析器、圖像編碼器、向量嵌入、RAG 檢索增強(qiáng)生成、文本摘要和用戶活動(dòng)識(shí)別等。

第三層

第三層是面向用戶的應(yīng)用層，通過調(diào)用底層功能實(shí)現(xiàn)各種 AI 體驗(yàn)：

• 在這一層中，各種應(yīng)用程序（包括 Windows 原生和第三方應(yīng)用）可以通過調(diào)用第二層的 AI 模型和 Windows Copilot 庫(kù)提供的 API，來實(shí)現(xiàn)各種 AI 功能，為用戶提供更智能、更便捷的使用體驗(yàn)。
• 開發(fā)者如果要在自己的應(yīng)用中集成最新的 AI 功能，也需要通過 Windows Copilot 運(yùn)行時(shí)來實(shí)現(xiàn)。

Windows Copilot 運(yùn)行時(shí)工作得非常底層，直接基于 NPU 和 GPU 來處理 AI 任務(wù)，并不依賴于云端服務(wù)，即使在沒有網(wǎng)絡(luò)的情況下也能正常工作。

接下來，我們將深入探討 Windows 11 24H2 的 AI 新功能，看看它們將如何改變我們使用 Windows 的方式，以及為什么它們對(duì)提高生產(chǎn)力和用戶體驗(yàn)至關(guān)重要。

一、Windows Recall：你的智能數(shù)字記憶助手

Windows Recall 是 Windows 11 24H2 中最引人注目的 AI 功能之一。它就像一個(gè)智能數(shù)字記憶助手，默默地記錄著你在電腦上的每一次操作。該功能依托本地運(yùn)行的多個(gè) AI 模型，不僅能夠分析你的操作，還可以通過自然語言輕松搜索所有內(nèi)容（包括文本和圖像），幫助你高效完成工作和獲取靈感。

Windows Recall 功能

Recall 功能核心優(yōu)勢(shì)

• 強(qiáng)勁硬件支持：專為 Copilot+ PC 設(shè)計(jì)，需要搭載最新款 Qualcomm Snapdragon X 系列處理器和 NPU，并配備 16GB 內(nèi)存和 256GB SSD。
• 智能截屏與索引：每隔幾秒自動(dòng)截屏，并創(chuàng)建本地加密的向量索引，為快速精準(zhǔn)的搜索奠定基礎(chǔ)。
• 自然語言搜索：使用自然語言即可輕松查找過去的活動(dòng)和內(nèi)容，極大提升工作效率。
• 隱私保護(hù)至關(guān)重要：所有數(shù)據(jù)只在本地進(jìn)行處理，不會(huì)上傳到云端，用戶隱私安全得到嚴(yán)格保護(hù)。

Windows Recall 功能在 Microsoft Build 2024 大會(huì)上首次亮相時(shí)，便立即吸引了眾多目光。盡管有人對(duì)隱私問題表示擔(dān)憂，但微軟一再?gòu)?qiáng)調(diào)其本地?cái)?shù)據(jù)處理的特性，以求打消用戶疑慮。

二、Windows Studio Effects：AI 賦能的視頻通話新體驗(yàn)

Windows Studio Effects 是一套利用 AI 技術(shù)來增強(qiáng)視頻通話和音頻質(zhì)量的組合功能，它依賴于設(shè)備的 NPU 為用戶帶來前所未有的通話體驗(yàn)。

Studio Effects 快速設(shè)置面板

Studio Effects 包括 6 大主要效果

• 自動(dòng)取景：即使你在移動(dòng)，也能讓你始終保持在鏡頭中心。
• 背景虛化：在視頻通話中模糊背景，提升隱私保護(hù)或隱藏雜亂環(huán)境。
• 眼神接觸：讓你在看屏幕時(shí)，看起來像是在與對(duì)方保持眼神交流。
• 語音聚焦：減少背景噪音，讓你的聲音更加清晰。
• 肖像光：優(yōu)化視頻中的光線效果，提升畫面質(zhì)量。
• 創(chuàng)意濾鏡：為視頻添加個(gè)性化濾鏡效果。

雖然 Studio Effects 功能在 Windows 11 中早就存在，但從 24H2 版本開始，微軟計(jì)劃在 Copilot+ PC 認(rèn)證的電腦上更廣泛地推廣該功能。這意味著，更多用戶將能享受到 AI 增強(qiáng)的通話體驗(yàn)。

Studio Effects 依賴于設(shè)備的 NPU，因此并不是所有設(shè)備都能支持。

三、實(shí)時(shí)字幕翻譯：打破語言障礙的 AI 利器

Windows 11 的 實(shí)時(shí)字幕功能在 24H2 更新中迎來了重磅升級(jí)，新增的「實(shí)時(shí)字幕翻譯」功能帶來了跨語言交流的全新體驗(yàn)。這項(xiàng)改進(jìn)不僅能為聽障人士提供更有效的輔助，也為所有用戶帶來了更加便捷、高效的語言交流體驗(yàn)。

實(shí)時(shí)字幕翻譯

實(shí)時(shí)字幕翻譯功能核心優(yōu)勢(shì)

• 實(shí)時(shí)翻譯：支持將視頻或語音內(nèi)容實(shí)時(shí)翻譯成你的母語，包括 YouTube 等平臺(tái)的視頻內(nèi)容。
• 廣泛兼容性：可以實(shí)時(shí)翻譯電腦上的任何音頻源，涵蓋實(shí)時(shí)和預(yù)錄音頻。
• 多語言支持：支持將超過 40 種語言翻譯成英語，顯著拓展使用場(chǎng)景。
• 離線功能：可依托 NPU 運(yùn)行，即使斷網(wǎng)也能流暢使用。
• 音視頻通話支持：新增對(duì)音頻和視頻通話的實(shí)時(shí)字幕支持，助力無障礙溝通。

新版本雖然尚未明確離線功能的具體支持情況，但已經(jīng)擴(kuò)展了多種非英語語言的支持。

四、語音清晰度：AI 驅(qū)動(dòng)的音頻增強(qiáng)體驗(yàn)

Windows 11 的語音清晰度功能融合了 AI 技術(shù)，可以為你帶來更清晰的音頻體驗(yàn)。在 Windows 11 24H2 中，該功能不再局限于 Surface 設(shè)備，而是擴(kuò)展到了更多 Windows 設(shè)備上，讓更多用戶能夠享受到 AI 驅(qū)動(dòng)的清晰通話效果。

語音清晰度功能核心優(yōu)勢(shì)

• 智能噪音消除：能有效過濾背景噪音，確保通話時(shí)聲音清晰。
• 回聲消除：精準(zhǔn)降低音頻回聲，提升通話質(zhì)量。
• 實(shí)時(shí)混響降低：在視頻或語音通話及錄音時(shí)，實(shí)時(shí)降低混響，讓聲音更加純凈自然。
• 游戲體驗(yàn)優(yōu)化：顯著提升在線游戲時(shí)的語音質(zhì)量，讓你暢享更沉浸的游戲體驗(yàn)。
• 深度噪音抑制：應(yīng)用程序可以輕松調(diào)用此功能，確保在線會(huì)議時(shí)的語音清晰度。
• 自動(dòng)化處理：支持 NPU 的硬件和應(yīng)用程序會(huì)自動(dòng)開啟此功能，無需手動(dòng)操作。

在支持的應(yīng)用程序和搭載 NPU 的硬件上，語音清晰度功能會(huì)自動(dòng)開始工作，用戶無需也無法手動(dòng)控制。

五、自動(dòng)超級(jí)分辨率：AI 驅(qū)動(dòng)的游戲畫質(zhì)革命

Windows 11 24H2 中的自動(dòng)超級(jí)分辨率（Auto Super Resolution, SR）功能，標(biāo)志著微軟在游戲體驗(yàn)優(yōu)化方面的一大飛躍。它通過 AI 技術(shù)來顯著提升游戲畫質(zhì)和性能，為玩家?guī)砀恿鲿场⒊两挠螒蚴澜纭?/p>

在「設(shè)置」中啟用自動(dòng)超級(jí)分辨率

自動(dòng)超級(jí)分辨率功能核心優(yōu)勢(shì)

• AI 增強(qiáng)畫質(zhì)：依托強(qiáng)大的 AI 技術(shù)，智能提升游戲分辨率和視覺效果，讓畫面更加細(xì)膩逼真。
• 性能優(yōu)化：在提升畫質(zhì)的同時(shí)有效改善游戲幀率，帶來更流暢的游戲體驗(yàn)。
• 行業(yè)合作：微軟攜手 Nvidia、AMD 和 Intel 共同研發(fā)了 DirectSR API，為下一代游戲集成 SR 技術(shù)奠定基礎(chǔ)。
• NPU 驅(qū)動(dòng)：不同于傳統(tǒng)的 GPU 驅(qū)動(dòng)，自動(dòng)超級(jí)分辨率利用設(shè)備的 NPU 進(jìn)行處理，帶來更高效的運(yùn)算能力。
• 易于控制：你可在 Windows 11 的「系統(tǒng)」>「屏幕」>「顯示卡」設(shè)置中輕松找到并啟用此功能。

自動(dòng)超級(jí)分辨率的工作原理與業(yè)界知名的 AMD FSR 和 Nvidia DLSS 技術(shù)類似，但它采用了 NPU 進(jìn)行運(yùn)算，而非傳統(tǒng)的 GPU。這種創(chuàng)新方法不僅能帶來更高效的處理，還能為不同硬件配置的用戶提供畫質(zhì)提升的機(jī)會(huì)，打破了硬件性能對(duì)游戲體驗(yàn)的限制。

目前僅適用于搭載 Qualcomm Snapdragon X 系列處理器的 Copilot+ PC。

六、「畫圖」中的圖像創(chuàng)建器：AI 輔助創(chuàng)意繪畫的新旅程

Windows 11 24H2 為經(jīng)典的「畫圖」應(yīng)用帶來了革命性的「圖像創(chuàng)建器」功能。這一 AI 驅(qū)動(dòng)的工具將徹底改變你的繪畫體驗(yàn)，為創(chuàng)意過程注入新的活力。

圖像創(chuàng)建器實(shí)時(shí)生成

圖像創(chuàng)建器功能核心優(yōu)勢(shì)

• 智能掃描：能夠分析現(xiàn)有的草圖或繪畫，而不是從空白畫布開始創(chuàng)建 AI 圖像，讓創(chuàng)作更加自然順暢。
• 協(xié)作創(chuàng)作：基于你現(xiàn)有的繪畫或草圖進(jìn)行創(chuàng)作，激發(fā)靈感，推動(dòng)創(chuàng)作過程向前邁進(jìn)。
• 高度可定制：可以根據(jù)你自己的想法完善、編輯和改進(jìn) AI 生成的內(nèi)容，擁有完全掌控權(quán)。
• 擴(kuò)散算法：采用先進(jìn)的基于擴(kuò)散的算法，即使是簡(jiǎn)單的線條或涂鴉，也能生成高質(zhì)量圖像。
• 風(fēng)格調(diào)整：提供多種樣式選項(xiàng)，方便調(diào)整圖像風(fēng)格，使其更加寫實(shí)或更具表現(xiàn)力。
• 實(shí)時(shí)生成：能夠在繪制時(shí)實(shí)時(shí)生成圖像，反應(yīng)速度快，創(chuàng)作效率高。

對(duì)于藝術(shù)愛好者、設(shè)計(jì)師和創(chuàng)意工作者來說，「圖像創(chuàng)建器」的出現(xiàn)無疑是個(gè)令人振奮的消息。它不僅可以快速實(shí)現(xiàn)創(chuàng)意構(gòu)想，還能激發(fā)新的靈感，推動(dòng)創(chuàng)作過程向前邁進(jìn)。即使繪畫技能比較拉胯的用戶，也能創(chuàng)造出令人驚嘆的作品。

「圖像創(chuàng)建器」是 Copilot+ PC 專屬功能。它與云端的「Image Creator」功能不同，利用設(shè)備的 NPU 在本地處理圖像生成。這不僅可以確保用戶隱私，還能提供更快的響應(yīng)速度和更穩(wěn)定的體驗(yàn)。

七、「照片」中的 Restyle 圖像功能：AI 驅(qū)動(dòng)的圖片風(fēng)格革新

Windows 11 24H2 為「照片」應(yīng)用帶來了「Restyle 圖像」功能，這將徹底改變你編輯和創(chuàng)作圖片的方式，為照片賦予全新的藝術(shù)風(fēng)格和創(chuàng)意表達(dá)。

Restyle 圖像處理

Restyle 圖像功能核心優(yōu)勢(shì)

• AI 技術(shù)驅(qū)動(dòng)：依托設(shè)備的 NPU 和強(qiáng)大的 AI 算法進(jìn)行圖像處理，實(shí)現(xiàn)高效、智能的圖片風(fēng)格轉(zhuǎn)換。
• 風(fēng)格轉(zhuǎn)換：能夠徹底改變照片的風(fēng)格，從復(fù)古懷舊到現(xiàn)代時(shí)尚，自由切換，打造多元化的視覺效果，宛如為照片增添了全新的藝術(shù)濾鏡。
• 文本引導(dǎo)創(chuàng)作：支持使用文本提示來創(chuàng)建全新的背景，為照片注入新的創(chuàng)意元素，激發(fā)無限的想象力和表達(dá)力。
• 本地處理：所有操作都在設(shè)備本地完成，無需上傳云端，確保用戶隱私安全，并提供更快的處理速度，滿足你對(duì)效率和隱私的雙重需求。
• 高度定制：可以根據(jù)個(gè)人喜好和需求自由調(diào)整圖片風(fēng)格的強(qiáng)度和細(xì)節(jié)，打造專屬的個(gè)性化視覺效果。

通過「Restyle 圖像」功能，無論你是專業(yè)攝影師、平面設(shè)計(jì)師，還是普通用戶，都能輕松實(shí)現(xiàn)復(fù)雜的圖像編輯和創(chuàng)作效果，打造令人驚艷的視覺作品。

「Restyle 圖像」是 Copilot+ PC 專屬功能。它的本地處理特性不僅確保了用戶隱私，還提供了更快的處理速度，對(duì)于需要快速批量編輯的專業(yè)用戶來說尤為重要。

八、Copilot 應(yīng)用：全新升級(jí)的獨(dú)立 AI 助手

Windows 11 24H2 已將 Copilot 功能獨(dú)立抽出，成為了全新的 AI 助手，提供更靈活、更強(qiáng)大的 AI 輔助體驗(yàn)，助力你更高效地完成工作和任務(wù)。

Copilot 應(yīng)用

Copilot 應(yīng)用核心優(yōu)勢(shì)

• 獨(dú)立應(yīng)用：Copilot 現(xiàn)已成為一款獨(dú)立應(yīng)用，可像其他應(yīng)用程序一樣進(jìn)行管理和使用。
• 便捷訪問：你可以自由地將它固定在任務(wù)欄上或取消固定，方便快速訪問。
• 靈活操作：支持調(diào)整界面大小和在屏幕上自由移動(dòng)，提供更加靈活的使用體驗(yàn)。
• 全新界面：采用簡(jiǎn)潔明了的界面設(shè)計(jì)，并借鑒了 OpenAI ChatGPT 的設(shè)計(jì)風(fēng)格，提供更直觀的用戶體驗(yàn)。
• 強(qiáng)大模型：微軟計(jì)劃將 Copilot 升級(jí)到 OpenAI 最新的 GPT-4o 模型。它能夠理解和處理多種格式的信息，包括文本、圖像和音頻，能為 Copilot 帶來更強(qiáng)大的功能和更智能的 AI 輔助體驗(yàn)。
• 跨版本支持：你還可以在早期 Windows 11 和 Windows 10 上安裝 Copilot 應(yīng)用。

新的 Copilot 應(yīng)用不僅提供了更靈活的使用方式，還通過更先進(jìn)的 AI 模型和增強(qiáng)的交互能力，大大提升了實(shí)用性和智能水平，能為你帶來更加個(gè)性化、高效的 AI 輔助體驗(yàn)。

其它坊間傳聞AI

深度壁紙：桌面體驗(yàn)的創(chuàng)新突破

AI 深度壁紙

微軟正在醞釀一項(xiàng)名為「AI 深度壁紙」的全新功能，能夠?yàn)?Windows 11 用戶帶來顛覆性的桌面視覺體驗(yàn)。這項(xiàng)創(chuàng)新基于深度學(xué)習(xí)技術(shù)，能夠通過創(chuàng)造逼真的三維視覺效果，讓靜態(tài)桌面壁紙更加生動(dòng)、充滿活力，并融入用戶交互之中。

• 視差效果：隨著光標(biāo)的移動(dòng)和用戶交互，桌面背景圖像會(huì)產(chǎn)生輕微的移動(dòng)和視差效果，營(yíng)造出更加逼真的三維空間感和沉浸感。
• 動(dòng)態(tài)響應(yīng)：壁紙能夠根據(jù)時(shí)間、天氣、音樂等環(huán)境因素實(shí)時(shí)變化，甚至與用戶的操作進(jìn)行互動(dòng)，為你提供更加個(gè)性化和身臨其境的桌面體驗(yàn)。
• AI 驅(qū)動(dòng)：依托強(qiáng)大的 AI 技術(shù)，AI 深度壁紙能夠根據(jù)你的興趣、喜好和習(xí)慣，自動(dòng)生成或推薦個(gè)性化的壁紙內(nèi)容，打造獨(dú)一無二的桌面視覺效果。

該功能尚未在最新的 Windows 11 Insider 版本中出現(xiàn)，但根據(jù)可靠消息，它有望在今年晚些時(shí)候隨 Windows 11 24H2 正式版發(fā)布。

「記事本」中的 AI 協(xié)作：文字處理的智能助手

「記事本」中的 AI 協(xié)作

Windows 11 24H2 將為「記事本」引入 AI 協(xié)作寫作功能，為你提供更加高效、智能的文字處理體驗(yàn)。

• 內(nèi)容重寫：利用 AI 技術(shù)自動(dòng)重新組織和表達(dá)文本內(nèi)容，幫助你快速理清思路和優(yōu)化表達(dá)。
• 調(diào)整格式：快速自動(dòng)調(diào)整文本格式，如字體、大小、對(duì)齊方式等，提高排版效率。
• 調(diào)整語氣：根據(jù)你的需求，自動(dòng)調(diào)整文本的語氣和風(fēng)格，讓文章更加正式、嚴(yán)謹(jǐn)或生動(dòng)、活潑。
• 長(zhǎng)度控制：智能調(diào)整段落長(zhǎng)度，讓文章結(jié)構(gòu)更加合理，避免冗長(zhǎng)或過于簡(jiǎn)短的情況。
• Copilot 解釋：你還可以通過右鍵菜單中的「Explain with Copilot」選項(xiàng)，對(duì)選定的文本內(nèi)容進(jìn)行解釋和說明。

該功能可能會(huì)以白名單的形式逐步向用戶開放，并有可能限制每月使用次數(shù)，以控制資源使用。