回來了,都回來了。疫情一頁已經(jīng)翻過,科技大廠的年度大會今年全面回歸線下。繼兩周之前谷歌總部舉辦I/O開發(fā)者大會之后,微軟Build開發(fā)者大會今天也在總部西雅圖開幕。兩周之后,蘋果WWDC開發(fā)者大會也將在硅谷總部召開。
實際上,去年蘋果WWDC就已經(jīng)部分恢復線下舉辦,但今年的Build大會則是自2019年之后首次回歸線下舉辦。此前兩年在線收看主題演講之后,今年微軟生態(tài)平臺的開發(fā)者可以再次回到西雅圖,近距離聆聽微軟高管,并與技術專家交流。當然,門票價格也高達1525美元。
(相關資料圖)
兩周前的谷歌I/O大會,生成式AI成為了絕對主題。而以往的主角Android直到80分鐘之后才姍姍來遲,而且是簡要帶過。兩個小時的主題演講,谷歌高管一共說了140多次AI。雖然谷歌只提到一次OpenAI,但所有人都清楚,今年I/O大會的最大目的就是證明谷歌依然擁有強大競爭力,可以應對ChatGPT和微軟帶來的沖擊力。
今年的I/O已經(jīng)成為了谷歌的AI匯報展示。谷歌連續(xù)發(fā)布了15款功能覆蓋諸多領域的AI產品,其中最為重要的就是新的語言訓練模型PaLM 2以及基于新模型提升功能的生成式AI Bard。谷歌以此對旗下幾乎所有產品進行了AI體驗改造:從搜索到地圖到郵件到辦公組件,諸如此類不勝枚舉。
而今天的微軟Build大會,AI同樣也成為唯一焦點。微軟CEO納德拉一登臺就高度聚焦AI,宣布為開發(fā)者帶來50多項更新。今天發(fā)布的所有新品,都貫穿著明白無誤的戰(zhàn)略:微軟正全力以赴推進自家AI,并將ChatGPT與自家產品全面打通,強化自己在生產力領域的優(yōu)勢,并在搜索領域對谷歌施加更大的壓力。
今天微軟Build大會宣布了哪些重大產品和更新?
打通ChatGPT插件
今天最重要的消息是微軟宣布采用與OpenAI相同的開放插件Plugin標準,打通了ChatGPT和微軟兩個平臺之間的互通與相互操作,實現(xiàn)了產品與服務的互通。未來開發(fā)者的插件都可以同時支持ChatGPT和微軟的產品與服務。
這意味著微軟龐大的開發(fā)者群體在Azure OpenAI企業(yè)服務上開發(fā)的AI程序,也支持同樣的開發(fā)插件標準。開發(fā)者可以選擇人類自然語言交互,作為其軟件的互動方式。換句話說,他們的軟件和應用都能得到生成式AI的體驗。
而插件則是AI應用開發(fā)的關鍵一環(huán),開發(fā)者需要通過API接口接入其他軟件服務的實時信息與業(yè)務數(shù)據(jù)。插件能給AI帶來新的計算能力。
在微軟與OpenAI打通標準之后,開發(fā)者可通過“插件”將應用和服務接入Microsoft 365 Copilot。首批支持的插件包括ChatGPT、Teams信息擴展、Power Platform連接器等,開發(fā)者可以直接接入現(xiàn)有服務,也可使用Visual Studio Code和Visual Studio上的Microsoft Teams Toolkit開發(fā)工具,輕松開發(fā)新的Microsoft 365 Copilot插件。
開發(fā)者還可以將數(shù)據(jù)導入Microsoft Graph,通過近期發(fā)布的Semantic Index for Copilot語義索引功能構建關聯(lián)性與行動信息,從而進一步拓展Microsoft 365 Copilot的功能。公測期間將首先提供超過50個來自Atlassian、Adobe、ServiceNow、Thomson Reuters、Moveworks、Mural等合作伙伴的插件,在Microsoft 365 Copilot正式發(fā)布時,將有數(shù)千個插件可供選擇。
(Windows 11加入AI助手Copilot)
Windows 11加入AI助手
對消費用戶來說,今天Build發(fā)布的最重要產品則是Windows 11引入生成式AI助手Windows Copilot。與此前的智能語音助手Cortana相比,Copilot不僅智能程度高出了一個級別,系統(tǒng)權限也得到了顯著提升。
Copilot是微軟今年發(fā)布的戰(zhàn)略產品,又被翻譯為“智能副駕”。微軟和OpenAI深入合作,在Microsoft 365、Dynamics 365以及Power Platform等產品上推出了AI助手Copilot,這是基于大語言模型進行訓練的,基于自然語言理解和生成的人機交互體驗。
Windows 11的任務欄將接入Copliot圖標。用戶點擊圖標就會在屏幕右側出現(xiàn)Copilot對話框,對當前正在使用的應用和網(wǎng)頁內容進行分析解釋歸納。當然,這個助手也可以完成用戶的諸多指令,包括網(wǎng)絡搜索訂票等服務。
Windows Copilot目前還在測試階段。微軟計劃6月開始正式公測,逐步推廣給所有的Windows 11用戶。目前Windows 10和11的全球月活設備超過了14億部。
除了Copilot這一重大更新之外,Windows 11還加入10種新語言與方言的實時字幕支持,并且可以實時進行音頻聽抄處理。自然語言處理本身就是微軟的技術強項。此外,Windows 11還支持了低功耗藍牙技術Bluetooth lE,享受高品質音頻的同時降低功耗。
(AI助手Copilot加入Edge瀏覽器)
首個AI支持瀏覽器
除了在Windows 11加入Copilot之外,微軟還在Edge瀏覽器引入了365 Copilot功能。這是首個原生支持AI的瀏覽器。Edge瀏覽器的側邊欄會出現(xiàn)Copilot工具圖標,對用戶正在瀏覽的網(wǎng)頁內容進行分析,幫助用戶生成Word、Excel等Windows 365文檔,或用于撰寫Outlook郵件。
Edge for Business 商用瀏覽器支持更多企業(yè)管理、安全、隱私和生產力功能,以更好地滿足混合辦公的需求,面向托管設備的版本現(xiàn)已開啟預覽,非托管版本將在未來幾個月內推出。此外,支持多用戶協(xié)同工作的 Edge Workspaces 也將在幾個月內結束預覽,推出正式商用版本。
Statcounter的統(tǒng)計數(shù)據(jù)顯示,今年4月Chrome瀏覽器的市場份額高達66%,而蘋果Safari和微軟Edge瀏覽器則以11%的市場份額并列二三位。微軟希望與ChatGpt攜手,將生成式AI帶入Edge瀏覽器可以幫助Edge縮小與Chrome的差距,給谷歌帶來真正的沖擊。
(Windows應用上架加入AI評價)
Windows應用商店也迎來了AI體驗升級,加入AI生成的用戶評價總結。除了傳統(tǒng)的用戶評分之外,應用展示攔還會出現(xiàn)AI根據(jù)用戶評價生成的概要。不過,微軟并沒有透露AI是否會過濾一些人為差評。
(Windows Terminal加入AI支持)
終端應用程序Windows Terminal也加入生成式AI功能,這是通過GitHub Copilot實現(xiàn)的。開發(fā)者使用GitHub Copilot就可以在Terminal上使用聊天機器人,要求AI推薦代碼或者解釋錯誤。微軟還表示,WinDBG等其他開發(fā)工具也會通過GitHub Copilot加入AI聊天機器人。Windows Terminal是微軟在2019年發(fā)布的虛擬終端應用程序,用戶可以在Windows應用商店下載安裝,或者通過Github下載代碼自行安裝。這一工具實現(xiàn)了PowerShell、CMD以及WSL三大環(huán)境的統(tǒng)一。
(必應成為ChatGPT默認搜索引擎)
必應為ChatGPT聯(lián)網(wǎng)
這是所有人意料之中的事情,微軟今天正式宣布必應成為ChatGPT的默認搜索引擎。原本ChatGPT的訓練數(shù)據(jù)就是由微軟支持并在Azure云平臺上進行的,但此前的訓練數(shù)據(jù)只截止到2021年9月,這也是此前谷歌Bard相對于ChatGPt的最大優(yōu)勢。
從今天開始,ChatGPT Plus的用戶會在生成式AI的回復過程中看到標明來自必應搜索引擎提供的內容。換句話說,ChatGPT已經(jīng)實現(xiàn)了聯(lián)網(wǎng),可以提供實時和最新的內容。這是ChatGPT產品的一重大里程碑。
(微軟不斷擴大插件合作伙伴陣營)
此外,必應還向更多的企業(yè)合作伙伴推出了插件支持。除了此前宣布的訂餐平臺OpenTable和專業(yè)搜索引擎WolframAlpha,今天新宣布的合作企業(yè)還有出行服務平臺Expedia和TripAdvisor、外賣平臺Instacart、地產交易平臺Redfin和Zillow、信息提供商湯森路透等等。
在體驗展示過程中,用戶在必應中可以使用OpenTable的插件詢問周邊的餐館信息,并讓AI機器人為自己訂桌。值得一提的是,必應移動端也會加入此類功能,這意味著iOS和Android用戶也可以在必應應用體驗到插件支持。
顯然,微軟正試圖將越來越多的網(wǎng)絡用戶拉入自己的AI支持搜索陣營,以此與谷歌展開競爭。與服務無所不包的谷歌相比,微軟最大的競爭優(yōu)勢是他們和這些垂直服務平臺并沒有直接競爭關系,因此這些商家也不需要擔心微軟偏向自己的服務。
更多AI開發(fā)工具
基于微軟與OpenAI的深入合作,Azure OpenAI企業(yè)服務將ChatGPT、GPT-4等大模型以及Azure的企業(yè)服務整合在一起。目前已經(jīng)有4500多家企業(yè)用戶采用Azure OpenAI企業(yè)服務。微軟今天也在Build大會上宣布了諸多新的AI開發(fā)工具,幫助開發(fā)者基于微軟和OpenAI的服務開發(fā)自己的AI加持應用。
全新發(fā)布的Azure AI Studio,其能幫助開發(fā)者更便捷地將外部數(shù)據(jù)源整合到Azure OpenAI服務中,從而訓練出基于自有數(shù)據(jù)的對話模型。新發(fā)布預覽的Azure AI Content Safety能幫助開發(fā)者構建更安全的線上環(huán)境和社區(qū),其內置模型能檢測出文本或者圖片中的不當內容,并通知人工監(jiān)督員采取行動。這項原本用于GitHub Copilot等微軟服務的功能,將內置于Azure OpenAI企業(yè)版服務開放給第三方開發(fā)者,從而以負責任的方式生成智能內容。
微軟還發(fā)布了全新Azure Machine Learning工具,其中包括Responsible AI dashboard support for text and image data。在公眾預覽版中,該功能能夠讓開發(fā)者在構建、訓練或評估模型階段,評估使用非結構化數(shù)據(jù)來構建的大模型。這將有助于開發(fā)者在部署模型之前發(fā)現(xiàn)模型錯誤、公平性問題以及模型解釋,從而實現(xiàn)更具公平性的高性能計算機視覺和自然語言處理 (NLP) 模型。
Azure Machine Learning prompt flow,讓開發(fā)者可以借助如Semantic Kernel這樣熱門的開源提示詞編排解決方案,高效構建提示詞。在即將推出的預覽版中,prompt flow為開發(fā)者提供了更加簡便易用的提示、評估和調整大模型的方式。開發(fā)者能夠快速創(chuàng)建連接到各種語言模型和數(shù)據(jù)源的提示工作流,并通過真實性等方式評估工作流質量,從而根據(jù)實際情況為其選擇最佳的提示。
Prompt flow同時還集成了Azure AI Content Safety,幫助開發(fā)者檢測并刪除其工作流中有害的內容。此外,微軟還宣布將在未來幾個月內,在Microsoft Designer 和 Bing Image Creator中增加全新媒體來源功能。該技術使用加密方法對 AI 生成的內容進行標記和簽名,其中包含有關其來源的元數(shù)據(jù),從而幫助開發(fā)者驗證圖像或視頻是否由 AI 生成。
微軟OpenAI雙贏組合
毫無疑問,與OpenAI深入合作是微軟AI戰(zhàn)略的核心,也是今天Build大會的主題。無論是打通與OpenAI的補丁邊界,引入更多開發(fā)者開發(fā)擁有生成式AI體驗加持的產品,還是將基于ChatGPT的Copilot AI助手引入自己旗下的諸多產品,都體現(xiàn)著兩家公司密切不可分的戰(zhàn)略合作。
投資OpenAI是微軟CEO納德拉最成功的投資,沒有之一。微軟不僅牢牢地將OpenAI綁定在自己的云服務平臺,而且將ChatGPT與自己的AI產品結合,對旗下幾乎所有產品進行AI體驗改造,還迎來了彎道趕超谷歌的希望。
微軟是OpenAI的最重要的戰(zhàn)略股東。沒有微軟投資的幾十億美元和計算資源支持,OpenAI就不可能在過去幾年加速AI落地商用,比谷歌更快推出更為智能的生成式AI產品,成長為一家估值300億美元的AI新貴。ChatGPT去年年底的公測不僅改變了AI行業(yè)格局,也給原先的行業(yè)領先者谷歌施加了巨大的壓力。
盡管馬斯克在OpenAI創(chuàng)辦過程中起到了關鍵的牽頭作用,為這個開源非盈利研究機構吸引了足夠的曝光度和人才吸引力,甚至OpenAI的名字也是他取的,但他對OpenAI的影響力也只限于前兩年。從2018年開始,OpenAI的研發(fā)進展就和馬斯克沒有任何關系,馬斯克以利益沖突為由徹底退出了OpenAI董事會。
當時的OpenAI只是一個非盈利開源技術組織,資金依賴諸多超級富豪和企業(yè)巨頭的捐助,而AI領域的研發(fā)訓練和人才招聘都需要巨額資金投入。如果不進行商業(yè)化重組引入戰(zhàn)略投資,OpenAI根本無力和谷歌、Meta這樣的企業(yè)巨頭競爭。
2019年初,OpenAI重組成為有限盈利機構,開始引入戰(zhàn)略投資。微軟幾乎是第一時間進入,宣布投資10億美元,并且將OpenAI的AI訓練引入自己的云服務平臺。此后四年時間,微軟累計三次向OpenAI投入數(shù)十億美元。過去幾年,OpenAI幾乎所有的產品訓練研發(fā)都是在微軟的云平臺上實現(xiàn)。
看到OpenAI與微軟密不可分之后,馬斯克成為了OpenAI最主要的批評者,連續(xù)抨擊OpenAI已經(jīng)被微軟掌控,從一個開源非盈利機構淪為追逐利潤的企業(yè)。但他的說法也遭到OpenAI CEO艾特曼和微軟CEO納德拉的公開反駁。
OpenAI在重組過程中設置了復雜的混合結構,包括非盈利的母公司OpenAI Inch和有限盈利子公司OpenAI LP。盡管微軟向有限盈利子公司投資了幾十億美元,但他們并沒有母公司OpenAI Inc的董事會席位,無法控制OpenAI的決策。而且ChatGPT并不是微軟獨享,也向其他諸多企業(yè)開放。