本文作者：李丹
來源：硬 AI
微軟本週二連出大招，個人人工智能（AI）助手 Copilot 迎來重磅升級，微軟開始向所有 Windows 系統的用户推出一系列新的 Copilot 功能，包括可以理解並回應電腦屏幕問題的新工具。同時，微軟網絡搜索引擎必應（Bing）正式上線 AI 生成概括摘要功能，正面硬剛谷歌的同類生成式 AI 搜索功能 AI Overviews。
從美東時間 10 月 1 日週二，微軟推出適用於蘋果系統 iOS、谷歌安卓系統、Windows 和網頁的 Copilot 新版 App，稱所有這些 App 的風格都更 “獨特”、更 “暖心”。微軟還將聊天機器人引入 Meta 旗下社交媒體 WhatsApp，讓用户通過直接消息（DM）與 Copilot 聊天，類似於在 Meta 的消息平台上使用其他機器人的體驗。
<h2>Copilot Vision 解讀網站內容 對話後數據即刻刪除</h2>
Copilot Vision 是 Copilot 擁有的最突出功能，顧名思義，它可以看到用户在個人電腦（PC）上查看的內容，具體來説，可以查看用户使用 微軟 AI 瀏覽器 Microsoft Edge 訪問的網站。
Copilot Vision 是一種全新 Copilot Pro 專屬實驗性可選功能。用户可以讓它分析網頁上的文本和圖像，並回答有關這些網頁內容的用户問題，例如用户可以問，怎麼做圖片顯示的食物，讓 Copilot 提供食譜。
用户可以通過在 Edge 的地址欄中輸入 “@copilot” 調出，和谷歌在安卓系統和 Chrome 瀏覽器中提供的搜索技術類似。但微軟表示，Copilot Vision 比過去的屏幕分析功能更強大，也更注重隱私。
微軟稱，Copilot Vision 可以建議用户接下來要採取哪些步驟，回答用户的問題，幫助引導指向用户想要做的任何事，並協助完成任務，用户只需用自然語言與它交談即可。比如用户想佈置一個新公寓。Copilot Vision 可以幫助搜索傢俱，找到合適的調色板，考慮從地毯到毯子等所有選擇，甚至建議如何佈置用户正在看的物品。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/6f9b797f-8fa0-46bb-bfc3-5401c92928d1.jpeg?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="866" height="452" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/6f9b797f-8fa0-46bb-bfc3-5401c92928d1.jpeg"/>
隱私方面，微軟強調，用户可以在同 Copilot Vision 對話後立即刪除對話數據。該功能處理過的音頻、圖像或文本不會被存儲或用於訓練模型，至少在這個預覽版本中不會。而且 Copilot Vision 能夠解析的網站類型也受到限制，只能分析解讀預先批准的 “熱門” 網站。目前，微軟阻止該功能處理付費牆內的網站收費內容和 “敏感” 內容，不過並未透露哪些屬於敏感內容。
Copilot Vision 目前僅在美國上線。微軟表示，該功能將尊重網站的 “對 AI 的機器可讀控制”，例如禁止機器人抓取用於 AI 訓練的數據的規定。但該公司尚未明確説明 Vision 將尊重哪些控制；目前有幾種控制正在使用。我們已要求微軟澄清。
<h2>Copilot Daily 提供語音時事摘要 微軟向合作出版商付費</h2>
微軟週二發佈了名為 Copilot Daily 的新聞功能，為用户提供天氣和時事的語音摘要。為支持該功能，微軟將向出版商支付費用，購買出現在 Copilot Daily 中的內容。
亞馬遜和谷歌的語音助手 Alexa 和 Google Assistant 早就在提供類似的每日簡報。微軟稱，Copilot Daily“可以化解人們熟悉的信息過載感覺”，它 “簡潔、簡單且易於理解，只會從授權內容來源中提取內容”，隨着使用時間推移，該功能將提供提醒和自定義選項。
微軟目前僅在美國和英國上線 Copilot Daily 功能。路透社、Axel Springer、Hearst Magazines、今日美國網絡和《金融時報》同微軟合作，提供該功能的信息來源。微軟稱，計劃 “很快” 增加付費出版商，並將 Copilot Daily 擴展到更多國家。
<h2>Think Deeper 推理複雜問題 或為 OpenAI o1 模型支持</h2>
與 Vision 一樣，Copilot 的新功能 Think Deeper 旨在讓微軟的 AI 助手更加靈活。
微軟表示，Think Deeper 讓 Copilot 能夠推理更復雜的問題，這要歸功於 “推理模型”，這累模型需要更多時間進行推理，然後給出分步驟的回答。微軟並未透露具體哪些推理模型，只是説用的是 “OpenAI 的最新模型，微軟進行了微調”。媒體判斷，應該是指 OpenAI 的 o1 模型定製版。
從本週二起，Think Deeper 向澳大利亞、加拿大、新西蘭、美國和英國的 Copilot Labs 限量的用户開放。
<h2>Copilot Voice 類似 ChatGPT 高級語音模式</h2>
Copilot 的新功能是 Copilot Voice 首先在新西蘭、加拿大、澳大利亞、英國和美國推出英語版本，微軟添加了四種合成的聲音，讓用户可以從中選擇交談的 Copilot 用哪種聲音。
和 OpenAI 為 ChatGPT 提供的高級語音模式 Advanced Voice Mode 一樣，Copilot Voice 可以在對話過程中識別用户的語氣，並做出相應的回應，用户還可以在 Copilot Voice 應答時隨時插話，和與人類對話時一樣。
不過，Copilot Voice 有使用時長方面的限制。微軟稱，Copilot Pro 的訂閲用户可以獲得更多的 Copilot Voice 對話時間，但具體時長是 “可變的”，視需求而定。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/4aab53aa-4bdd-4f49-84ac-da11ef46ef6b.jpeg?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="862" height="552" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/4aab53aa-4bdd-4f49-84ac-da11ef46ef6b.jpeg"/>
<h2>個性化（Personalization）利用過往互動推薦 Copilot 用法</h2>
微軟表示，啓用新的個性化設置後，Copilot 很快將更加符合用户的偏好。它將利用用户過去的互動和歷史記錄，以及與其他微軟應用和服務的互動，向用户推薦使用 Copilot 的方法。這樣可以幫助用户使用 Copilot 入門，“既提供了 Copilot 實用功能的便捷指南，也提供了對話開場白。”
Copilot 的個性化功能可以在 Windows 的 Copilot 設置菜單中關閉，近期不會在英國和歐盟國家推出。
<h2>必應生成式搜索週二在美國上線</h2>
今年 7 月，微軟推出了必應生成式搜索的試用版，本週二，該服務正式面向所有美國用户上線。調用它的最簡單方法是在 必應上搜索 “Bing generative search”。
微軟稱，將要推出一個選擇，以便用户更輕鬆地觸發 Bing 生成搜索以進行 “信息查詢”。
必應生成式搜索被視為微軟正面對戰谷歌 AI 搜索的產物。華爾街見聞 5 月曾介紹谷歌當月在 2024 Google I/O 開發者大會上推出的搜索模式三大革新，其中之首就是名為 AI Overviews 的 AI 生成摘要功能，它將生成的摘要展示在搜索結果頂部。
必應生成式搜索給予多種 AI 模型匯總來自互聯網的信息，生成響應搜索查詢的摘要內容。比如當用户搜索查看 “什麼是意大利式西部片？” 這個問題時，必應生成式搜索將顯示該類型片的歷史和示例的摘要，以及來源鏈接。
微軟認為，必應生成式搜索的功用不僅限於找答案。微軟稱它能理解搜索查詢，審查數百萬個信息源，動態匹配內容，並以新的 AI 生成佈局生成搜索的結果，從而更有效地滿足用户查詢的意圖。
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/ef284b39-ac5f-479b-a97a-7c68b2dda087.jpeg?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="826" height="423" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/ef284b39-ac5f-479b-a97a-7c68b2dda087.jpeg"/>
<img src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/5ec72c9a-a165-419f-bf10-0fc4acda1fe0.jpeg?x-oss-process=image/auto-orient,1/interlace,1/resize,w_1440,h_1440/quality,q_95/format,jpg" width="807" height="464" original-src="https://imageproxy.pbkrs.com/https://wpimg-wscn.awtmt.com/5ec72c9a-a165-419f-bf10-0fc4acda1fe0.jpeg"/>

微軟

微軟推出一系列新 Copilot 功能，其中 Copilot Vision 可解讀熱門網站內容，對話後數據即刻刪除，不可訪問付費牆和敏感內容；Copilot Daily 提供語音時事摘要，微軟為此向路透、金融時報等合作出版商付費；Think Deeper 推理複雜問題，或為 OpenAI o1 模型支持；個性化功能利用用户過往互動推薦 Copilot 用法；硬剛谷歌 AI Overviews 的必應生成式搜索週二在美國上線。

- 微軟推出 Copilot 新功能，包括 Copilot Vision 和 Copilot Daily。  
- Copilot Vision 可分析網頁內容並尊重用户隱私。  
- 必應生成式搜索正式上線，旨在與谷歌競爭。  

微軟硬剛谷歌 AI 搜索服務上線，Windows AI 助手重磅升級：Copilot 可分析網站內容、類 GPT 語音模式對話