当前位置: win11系统之家 >  微软资讯 >  微软大模型彻底改变操作系统和交互:最伟大Windows降临

微软大模型彻底改变操作系统和交互:最伟大Windows降临

更新时间:2023-05-24 14:35:40作者:relsound

2023 年微软 Build,注定是载入史册的一届。

ChatGPT 掀起 AI 热之后,微软已经成为这股浪潮中最重要的企业之一。不仅因为其是 OpenAI 的大股东,或者推出 AI 加持的 New Bing。

更重要的是:作为全球第一大操作系统服务商、全球第一大办公软件开发商,以及全球第二大云服务商,微软的动向已经成为大模型落地最重要的推动者和风向标。

微软 CEO 纳德拉也没有让等待的信徒们失望。

昨晚 Build 开场,他在不到 30 分钟的演讲里公布,微软将在 Build 期间带来超过 50 项 AI 相关的更新,其中有 5 个重中之重,涉及 Windows、Office 365、Copilot、Bing、Azure 云等微软当下最重要的产品和服务体系。

不需要改名或者挂在嘴边「All in」,微软已经用行动证明了自己全面拥抱 AI 的决心。

01 Copilot 全家桶:

一种全新的工作方式

「还记得软件没有连接到互联网的时候吗?」微软首席技术官 Kevin Scott 表示,几年后,对于没有 Copilot 助手的软件来说,情况也是如此。

Copilot 简单来说,就是一项嵌入各种不同软件服务的 AI 组件。基于 AI 和大语言模型构建的推理能力,Copilot 可以帮助用户完成所有需要的认知工作——从编写邮件、代码、宣传稿,到生成图像、视频,制定工作计划或者获取工作和生活建议。

大约两年前,微软在 GitHub 首次引入了 Copilot(副驾驶)的概念。GitHub Copilot 是一个辅助程序员的 AI 服务,帮助开发人员编写代码。

今年,在大模型的加持下,Copilot 迎来全面升级,可以解决更多更复杂的问题,微软也在更多核心产品和服务中心开始嵌入 Copilot。

Build 大会上,微软宣布 Copilot 生态的进一步扩展计划,包括推出 Dynamics 365 Copilot、Microsoft 365 Copilot 和 Power Platform Copilot。

其中,Power Platform 平台重要组件的 Power Pages 与 Power BI 中的 Copilot 开启公共预览,让用户更自如地通过自然语言创建网页和数据洞察。此外,Power Virtual Agent 中的生成式智能也将开启受邀预览,进一步提升构建对话机器人的体验,并为 Power Automate 增加更多的定制化可能性。

「Copilot 是一种全新的工作方式。」此前,Microsoft 365 负责人 Jared Spataro 说,「它与你一起工作,嵌入到数百万人每天使用的程序中:Word、Excel、PowerPoint、Outlook、Teams 等等」

02 Windows 11:AI 来了

Build 上公布的一众 Copilot 全家桶中,最重磅的当属 Windows Copilot 的到来,这意味着最先进的 AI 将作为一项基础的软件服务进入到 Windows 的核心系统。

新的 Windows Copilot 工具将位于 Windows 11 的底边栏——就像新 Bing 的 AI 聊天功能一样,用户可以在 Copilot 中输入问题并将其作为一个问答式搜索引擎使用。

表面上看,Windows Copilot 像是一个类似 ChatGPT 或者 New Bing 的对话式 AI 机器人或者文本生成工具。但与 Windows 深度集成的 Windows Copilt,可以调用其他 Windows 组件,这意味着它有潜力成为比 Siri 或者微软的小冰、小娜更强的个人 PC 智能助手。

现场演示了四个 Windows Copilot 的使用场景。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

调整 PC 的个性化设置,比如打开夜间模式。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

帮助处理文档,解释、重写或者总结,提升工作效率。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

控制 App,比如让它推荐音乐,然后根据用户的选择打开音乐软件并播放相应的歌单。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

还有辅助创意工作,根据你的要求生成一个宣传用的图片,并发送给聊天软件里的工作群组。

其实类似的处理语音或者文字命令的功能,过去在其他智能助手身上也有过尝试,包括微软自己的小娜、苹果的 Siri,以及亚马逊、阿里的智能音箱,但客观来说其效果都是令人失望。

微软 Copilot 本质上并没有换汤,但大语言模型强大的推理能力,却可能是补齐智能助手能力短板的良药。过去的智能助手处理事务的能力只有几岁小孩的水平,而至少从 ChatGPT 展现出的能力来看,已经不弱甚至很多方面强于普通的成年人。

Windows Copilot 预计将在 6 月开始提供预览版,让我们拭目以待。

03 Bing——ChatGPT

的默认搜索引擎

纳德拉在演讲中透露,Bing 也将有一些新的变化。OpenAI 将开始使用 Bing 作为 ChatGPT 的默认搜索引擎,提供实时检索的答案,并包括引用。

这项功能今天就向 ChatGPT Plus 用户推出,很快也将向所有免费的 ChatGPT 用户启用。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

值得注意的是,ChatGPT 在调用 Bing 回答问题时,会通知用户使用了 Bing。以 ChatGPT 的流量带 Bing,这似乎有助于 Bing 的品牌。

更重要的是,Bing 通过 ChatGPT 获得更多的使用来改善其答案,并且也可能在赢得内置浏览器的默认选择时,有更大胜算——成为 Mozilla 的 Firefox 和 Apple 的 Safari 浏览器中的默认搜索引擎。

04 Azure AI Studio

不止提供全方位的 copilot,现在,微软还提供怎么制作 copilot 的服务。纳德拉表示:「我们已经用一个通用的架构堆栈构建了所有这些 copilot。现在,我们希望使其可用,每个人都可以为他们的应用程序构建自己的 copilot,从 AI 基础设施到基础模型再到 AI 编排的一切,一直到 copilot 及其可扩展性。」

对此,微软推出的主要产品是 Azure AI Studio。这是一个完整的工具链,帮助开发者更便捷地将外部数据源整合到 Azure OpenAI 服务中,构建智能 AI 应用程序和 copilot。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

Azure AI Studio 简化了将外部数据源集成到 AzureOpenAI 服务中的过程,还引入 Azure 机器学习提示流,使开发人员更容易构建提示,同时利用 Semantic Kernel 等流行的开源提示编排解决方案。相比之下,传统的构建方式——获取数据、选择模型、训练模型、测试模型、部署模型,每个环节都很复杂。

对于 Azure AI 帮助开发者降低门槛的系列发布中,安全是微软反复提及的关键词。其中,Azure AI Content Safety 能帮助开发者构建更安全的线上环境和社区,其内置模型能检测出文本或者图片中的不当内容,并通知人工监督员采取行动。

另外,在 Azure Machine Learning 工具中,有一项功能——Responsible AI dashboard support for text and image data。该功能能够让开发者在构建、训练或评估模型阶段,评估使用非结构化数据来构建的大模型。这将有助于开发者在部署模型之前发现模型错误、公平性问题以及模型解释,从而实现更具公平性的高性能计算机视觉和自然语言处理 (NLP) 模型。

05 瞄准下一代 AI

应用程序的关键——数据

作为 Build 大会上一个完全的新品,微软看中了下一代 AI 应用程序的数据层,发布了端到端的数据分析产品——Microsoft Fabric。纳德拉表示,这可能是自 SQL Server 以来,微软推出的最大规模的数据产品。

Microsoft Fabric 的核心是「统一」,用一个产品、一种体验、一种架构、一种业务模型汇集了所需的所有数据和分析工具。包括数据工程、数据集成、数据仓库、数据科学、实时分析、应用可观察性和商业智能,所有这些都连接到一个名为 OneLake 的数据存储库。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

除此之外,借助 Microsoft Fabric 中的 Copilot,客户可以使用会话语言创建数据流和数据管道、生成代码和整个函数、构建机器学习模型或可视化结果。客户甚至可以创建自己的会话语言体验,将 AzureOpenAI 服务模型及其数据结合起来,并将其发布为插件。

Azure Data 副总裁 Arun Ulagaratchagan 解释道:「随着进入由 AI 定义的新时代,数据变得更加重要。为特定的 AI 体验提供动力,需要从管理良好、高度集成的分析系统持续提供干净的数据。过去,使不同服务一起运行需要高额的『集成税』」。同时,Microsoft Fabric 使开发人员能够利用生成式 AI 在其数据中获得见解。

06 AI插件生态系统

如果说 copilot 开启了大模型时代人机交互的新方式,那么插件(Plugin)就是扩展 copilot 能力的必要一环。事实上,继 OpenAI 3 月份推出了 ChatGPT 插件后,微软在本月早些时候也宣布了 Bing 插件。比如,插件允许 ChatGPT 和 Bing 聊天使用 OpenTable 插件查找和预订餐厅。

在今天面向开发者的 Build 大会上,微软宣布采用与 OpenAI ChatGPT 相同的开放插件标准,从而确保今后 ChatGPT 与微软一系列 copilot 产品服务之间的互操作性。

这意味着开发者使用任一平台开发的插件均同时适用于 ChatGPT 和微软的 Microsoft 365、Dynamics 365 Copilot 等服务,用以满足个人客户与商业客户的业务需求。开发者在 Azure OpenAI 企业版服务上开发的 AI 应用程序,也默认支持同样的开放插件标准——这意味着任何开发者都可以选择使用人类自然语言交互,作为其软件的互动方式。

并且,开发人员现在可以使用插件将他们的应用程序和服务集成到 Microsoft 365 Copilot 中。还可以通过将他们的数据带入 Microsoft Graph 来扩展 Microsoft 365 Copilot,使用最近宣布的 Copilot 语义索引将相关和可操作的信息上下文化。

微软大模型彻底改变操作系统和交互:最伟大Windows降临

在这个演示中,Teams 软件中的 Copilot 可以通过调用插件软件,在邮件、网站、本地数据库等各个不同地方检索信息、生成要点,还可以进一步调用其他插件,生成工单,分发给对应的人。通过插件调用,copilot 实现了深度检索、执行生成内容的步骤。

此外,Bing 正在增加对插件的支持。除了之前宣布的 OpenTable 和 Wolfram Alpha 之外,它还将在生态系统中拥有 Expedia、Instacart、Kayak、Klarna、Redfin、TripAdvisor 和 Zillow 等众多产品。

07 结尾

过去几个月,在「AI 正在吞噬软件」的浪潮中,一些软件创业者表示,不是 OpenAI,最怕的是微软。无论是工程能力,还是执行能力,Build 2023 都让 48 年的微软再次「刷新」。

再次立上潮头,是引领者的姿势——Copilot、插件生态、探索 PC 中的 AI 交互,微软瞄准了大模型时代的交互入口。

在过去,无论是 PC 时代的 Windows 操作系统和 Office,还是移动互联网时代逐渐追赶的智能云和在线办公软件,微软一直是跟随者的姿态。但跑进大模型时代的微软,一手让新业务领先行业,另一手让老业务焕发生机。但正如纳德拉的开场词,PC 到 iPhone,再到云,所有这些都将是一个连续的旅程。

本文源自极客公园