微软“Build 2024”大盘点:Copilot、大模型,生成式AI时代来啦!
专注AIGC领域的专业社区,关注微软&OpenAI、百度文心一言、讯飞星火等大语言模型(LLM)的发展和应用落地,聚焦LLM的市场研究和AIGC开发者生态,欢迎关注!
5月22日凌晨,微软在西雅图召开“Build 2024 ”全球开发者大会。为期3天,大模型、生成式AI成为本次大会的重中之重。
从第一天发布的内容来看,大模型、生成式AI几乎贯穿了微软所有的开发平台和产品矩阵,例如,Copilot Studio支持开发具有AI Agent功能的应用;全新开发平台Azure AI Studio,支持GPT-4o、Phi-3-vision等1600多种大模型。
由于第一天发布的内容实在太多,「AIGC开放社区」就为大家盘点一下所有重要内容。如果是已经正式发布的产品和大模型,都会附上详细地址方便大家体验。
目前,微软仍在进行大会直播,无法到达现场的小伙伴可以免费在线观看,深度了解微软最新的AI技术趋势。
Build大会详情:https://build.microsoft.com/en-US/home
Azure AI Studio正式发布
我们深知ChatGPT等生成式AI产品对生活、工作的重要性,但是想开发一款类似的应用并不容易。为了帮助开发者简化开发流程、部署,微软宣布Azure AI Studio正式全面上市。
开发者通过Azure AI Studio可快速使用RAG(检索增强生成)、测试评估大模型、大范围模型部署和持续监控等实用功能。
免费体验地址:https://azure.microsoft.com/en-us/products/ai-studio
Azure AI Studio另外一个重要亮点功能是支持GPT-4o、Phi-3-vision、Llama 3、TimeGen-1等,几乎市面上所有主流1600多种开/闭源大模型,帮助开发人员快速找到自己最想要的模型。
Phi-3系列模型正式发布:参数小,性能强
自微软发布Phi-1/2模型以来,其参数小、性能强、功耗低的特性获得了一大批开发者的喜爱。今年4月微软首次预览了Phi-3系列开源模型,现在已经全部上市可在Microsoft Azure上使用。
Phi-3一共有4种参数:Phi-3-vision有42亿参数,具备视觉识别和转化功能;Phi-3-mini 38亿参数,支持128K和8K上下窗口;
Phi-3-small有70亿参数,性能却比GPT-3.5更强;Phi-3-medium有140亿参数,性能优于谷歌Gemini 1.0 Pro。
从huggingface下载量来看,Phi-3-mini是目前最受欢迎的类型已经超过100万次。
免费在线体验地址:https://ai.azure.com/explore/models/Phi-3-vision-128k-instruct/version/1/registry/azureml
开源地址:https://huggingface.co/collections/microsoft/phi-3-6626e15e9585a200d2d761e3
Phi-3家族还有一个非常特殊的模型Phi Silica,这也是微软昨天发布Copilot+ PC内置的大模型。
据悉,Phi Silica只有33亿参数,但每秒却可生成27 tokens数据,功耗仅为1.5瓦,对CPU、GPU的要求非常低,很适合内置在笔记本、平板等移动设备中,这也是目前最强的小参数模型。
Phi Silica地址:https://learn.microsoft.com/en-us/windows/ai/apis/phi-silica?ref=maginative.com
微软已经开放了Phi Silica的SDK,有需要的可以去看看。
Copilot Studio,轻松开发AI Agent应用
AI Agent是目前生成式AI领域最火的分支赛道之一,它的高效、自动化、易使用被很多人誉为AGI的雏形。
微软在Copilot Studio开发平台中新增了开发AI Agent功能,以帮助用户快速创建量身定制的Copilot。
Copilot Studio的使用方法非常简单,你只需要描述想要Copilot自动做什么,以及拥有哪些知识,给出一个思维执行链便会立刻创建完成。简单来说,和按键精灵、RPA使用方法类似,无需任何专业编程知识。
此外,Copilot Studio创建的AI Agent可以与SharePoint、OneDrive、Microsoft Dataverse、第三方应用等集成使用。
体验地址:https://aka.ms/trycopilotstudio
例如,通过Copilot Studio开发一个人事AI Agent。当公司有新员工入职后,会自动为员工介绍公司的整体情况,工作规则、上班/下班时间、团建时间、实习期时间以及通过标准等,相比之前的人工,用AI来自动化完成便高效很多。
推出Windows Copilot Runtime
为了扩大、简化生成式AI应用的开发生态,微软推出了Windows Copilot Runtime,主要模块如下。
丰富的AI框架:包含DirectML、ONNX Runtime、PyTorch、WebNN 以及工具链如 Olive、Visual Studio Code 的 AI 工具包等,可以帮助开发人员快速引入自己的大模型,并在 Windows硬件生态系统的广泛范围内扩展其 AI 应用。
Windows Copilot Library:由 Windows搭载的40多个设备模型提供支持的一组API,包括用于支持 Windows 体验并可供开发人员使用的 API 和算法。
例如,微软最新发布的Copilot+PC的特色功能Recall就包含在这组API中,它可以帮助用户快速查找任何操作和看见的东西;以及可实时翻译40多种语言的视频、音频功能。
更多详细内容:https://learn.microsoft.com/zh-cn/windows/ai/
借助API,开发人员可以把这些特色功能集成在自己的AI应用中。
发布新的Azure 虚拟机
微软发布了搭载最新芯片Cobalt 100的Azure 虚拟机,一共包含通用型Dpsv6和 Dplsv6系列以及内存优化型Epsv6系列。
新的Dpsv6 和Dpdsv6通用型被设计为高效运行规模化工作负载和云原生计算解决方案,例如,在Azure Kubernetes Service上运行的解决方案。这些虚拟机非常适合小型到中型的开源数据库、应用服务器和 Web 服务器。
而Epsv6和Epdsv6内存优化虚拟机的每个CPU内存更高,可以满足大型数据库、内存缓存应用程序和数据分析工作负载的开发需求。
发布Team Copilot
为了提升Copilot性能和应用范围,微软发布了Team Copilot。该产品更像是一名“数字化员工”,可以参与到公司的日常运营、工作和团队协调当中。
例如,自动编写会议摘要,自动跟踪项目进程,帮助员工解读PDF、word等长文档等。
同时Team Copilot可以与Microsoft Teams、Microsoft Loop 和 Microsoft Planner等产品相结合使用。
这也就是说,可以实现跨部门的复杂工作链条协同工作,这可以帮助中大型企业极大提升工作效率、节省时间。
推出Build with AI
微软在Startups Founders Hub中新增了AI开发工具“Build with AI”,可以帮助用户简化开发流程。
Build with AI为用户提供了一组灵活、高效的应用模板,用户只需要选择适合自己的模板,根据向导提示快速实现AI应用的编辑、部署以及维护等。
这些模板的功能包括,将 ChatGPT添加到应用程序;使用Python将ChatGPT连接到应用程序的数据;使用 JavaScript将ChatGPT连接到应用程序的数据创建一个ChatGPT 插件等。
目前,部分AI创作助手处于私人预览状态,很快会开启大范围应用。更多详细:http://startups.microsoft.com/
本文素材来源微软官网,如有侵权请联系删除
END