不難理解微軟投入數十億美元押注的人工智能的未來——一個計算機能夠理解你所說並為你做事的世界。就在那裡 最新 Copilot PC 的廣告人們用筆記本電腦愉快地聊天，他們用自然語言回答問題，甚至為他們做事。標語很簡單：“一台可以與你交談的計算機。”
微軟的 Yusuf Mehdi 在 10 月份告訴我們：“你希望能夠與你的電腦交談，讓它理解你，然後讓魔法發生。” “電腦應該能夠代表你工作。”
這與微軟讓人工智能徹底重新思考計算的最終野心無關。在 最近的一張 矮人播客 面試微軟首席執行官薩蒂亞·納德拉（Satya Nadella）在提出主持人的想法時表示同意，即“這些模型可以使用計算機以及人類”，並提出了微軟重新構建其所有軟件的願景，使其成為以全新方式使用它的基礎設施。
這是一個大膽的願景和一個巨大的賭注。問題是，現在在 Windows 11 上與 Copilot 交談是一種純粹的挫敗感——這清楚地提醒我們，人工智能的現實遠沒有炒作的那麼好。
我在 CoPilot 上呆了一周，向微軟詢問了它所宣傳的相同問題，並試圖就我認為有用的事情獲得幫助。隨著時間的推移，副駕駛做錯了事，編造了一些事情，並且像我是個孩子一樣對我說話。
Copilot Vision 會掃描屏幕上的內容，並嘗試通過語音提示來幫助您。調用 Copilot 允許您共享屏幕，就像您正在進行 Teams 通話一樣。單身的。當它得到你的許可後，它的反應非常慢，每次我問什麼它都會叫我的名字。與其他人工智能助理和法學碩士一樣，它完全具有誤導性，但事實就是如此。
讓我們首先測試一下微軟的公告所顯示的內容。該廣告的多個版本已在網上發布，並將在 NFL 比賽期間在廣播電視上播出。對於微軟來說，重複數百萬人希望看到的某些任務當然應該很容易，特別是因為這是微軟重塑其整個業務的基礎。
在廣告中，Copilot Vision 掃描 YouTube 視頻並正確識別 HyperX QuadCast 2S “她在這段視頻中使用哪個麥克風？”當在我的測試中被問及麥克風時，助理首先介紹了動圈麥克風的優點的基礎知識。然後，它突然開始對我說話，說我就是視頻中的人（“我現在可以看到你的設置，我注意到你那裡有一個很大的設置！”），然後告訴我有問題的麥克風實際上是第一代 HyperX QuadCast。公平地說，HyperX 製造了非常相似的麥克風，但它曾一度表示，“在沒有看到確切的燈光模式或任何特定功能的情況下，很難確定這是什麼型號”，儘管它沐浴在圖像中的 RGB 燈光中。
在另外兩個案例中，它識別出麥克風為 Shure SM7b。當我問：“附近哪裡可以買到？”正如廣告所宣傳的那樣，它曾經給了我一個亞馬遜的死鏈接，然後又給了我一個指向錯誤麥克風的正確鏈接 最好的再見。
有人問：“這東西對它有什麼壓力？”它還顯示詢問。在展示有關土星五號火箭的 PowerPoint 演示文稿時。與廣告不同的是，副駕駛的視力無法從圖像（或屏幕上出現的“土星五號”字樣）中識別出火箭。當我告訴副駕駛這是土星五號飛機時，他告訴我推力通常以牛頓或千牛頓為單位測量，然後給了我估計為 750 萬磅的推力。正如廣告中所說，告訴副駕駛“在燃燒時間上運行一些模擬”，讓我說它不能。 MATLAB。
最後，廣告中的一名男子看著水洞的照片問道：“我怎樣才能到達那裡？”他問道。根據上下文，它應該是視頻中的一幀，但該視頻似乎不存在。上述語句的較長版本正確識別了圖像 秘密河 位於墨西哥普拉亞德爾卡門 我第一次看到的較短版本 根本沒有回答這個問題。手頭已經沒有答案了，我使用反向圖像搜索並發現了 與洞穴照片相匹配 從遊輪公司和 房地產網站兩人都聲稱來自伯利茲的一個洞穴。但它在其他地方被列為大開曼島的一個洞穴。
我將圖像全屏顯示，並詢問副駕駛如何到達那裡。溫和地說，結果不一致。
- 大約三分之一的時間，它引導我在文件資源管理器中查找照片。有一次它甚至告訴我，“這是任務欄上的第三個圖標”（這是第四個圖標）。
- Google 曾兩次告訴我如何啟動 Chrome。
- 它四次為我提供了有關預訂飛往伯利茲航班的一般建議以及有關在那裡做什麼的一些基本想法。這個洞穴位於墨西哥。
我重命名了該文件以提及大開曼島，它告訴我如何預訂飛往開曼群島的航班。在我確認 CoPilot 看到了文件名後，我決定嘗試欺騙它。我將圖像重命名為“new-jersey-crystal-caves-limestone.jpg”，果然，AI助手很快就告訴我有關著名的水晶洞的信息。 新澤西州奧格登斯堡。它從未正確定位圖像。
（公平地說，如果你還不知道圖像來自哪裡，那麼要弄清楚它並不容易。手動搜索後 旅行顧問 圖片，我的編輯找到了匹配的 用戶評論相冊 微軟的聲明證實了其對 Rio Secreto 的識別是正確的。從 該視頻拍攝於微軟的公告中 似乎不存在，目前還不清楚副駕駛使用什麼信息來定位洞穴。 ）
Microsoft Copilot 不只是觀察事物並試圖弄清楚它們，而是將事物描述為實際執行的情況。具體來說，我被要求“幫助我把我的作品集變成簡歷”，這實際上給我帶來了巨大的情感損失。在廣告中，副駕駛查看了一位藝術家的圖像組合（看起來可疑的是人工智能生成的）、他們的肖像和他們的貓的照片，並創建了一句話摘要，說明他們受到了他們的貓科動物朋友的啟發。真尷尬。
我沒有自己的（真實）照片的作品集網站，所以我在 Instagram 上推薦它。這就是我所說的“視覺講故事者”“捕捉生活的本質，一次一幀”，我想把它埋在地板下。每當我想到這件事，我就感到身體不適。而且它也沒有 提到 我的貓們，每天都很想念。你怎麼敢，副駕駛。
除了嘗試重複廣告中的提示之外，我還努力尋找副駕駛視覺的用途。我很確定它不是為我編寫的，並且它不會為您在 Windows 中執行正常操作 – 甚至不會切換黑暗模式等設置。微軟發言人布萊克·曼弗雷 (Blake Manfrey) 表示 邊緣“Windows 上的 Copilot 操作（可以對本地文件執行操作）尚不可用。這 可選的實驗功能 隨著我們了解並優化模型的性能，它很快就會在 Copilot 實驗室提供給 Windows Insider。它與副駕駛的願景不同。
在第三方應用程序中，它可以提供建議，例如如何在 Adobe Lightroom Classic 中獲得夢幻般的外觀，但提示很籠統。由於它通過音頻傳輸所有內容，因此它從非常死記硬背的介紹到快速瀏覽您擁有的設置，就像最糟糕的 YouTube 教程之一。
我請你幫我分析 Google 表格中的基準表。它可以正確計算基本百分比，但始終會誤讀電子表格和頁面審核中的晴天分數。那麼你怎麼能相信這一點呢？
在遊戲領域——一件事 微軟獨家做廣告 作為副駕駛視覺的用途，它提供了最基本和模糊的信息。為了 空洞騎士：絲之歌聽起來就像一個孩子只是根據封面給了我一份讀書報告，只給了我粗略的建議。 （實際上，與副駕駛交談 很像這樣這是不尋常的。 ） 巴拉特羅它無法準確識別我手中的牌，但它為我提供了與其他紙牌遊戲的機制無關的信息。
我試圖在副駕駛所在的位置與它會面，但它卻未能完成我要求它做的一切。與大多數高效的人工智能技術一樣，它在尋找問題方面並不是一個不完美的解決方案。如果有一天 Windows 能夠被完全控制，那麼這裡可能會有一些有用的東西，特別是對於輔助功能社區而言。但當今功能強大的計算機似乎無法與副駕駛交談。很難看出我們如何從微軟今天向真實用戶提供的內容中得出微軟對代理人工智能未來的大膽願景。
