首页 > 其他分享 >Azure - 机器学习企业级服务概述与介绍

Azure - 机器学习企业级服务概述与介绍

时间:2023-12-08 21:31:48浏览次数:34  
标签:机器 AI 模型 企业级 学习 MLOps 概述 Azure

Azure 机器学习 - 为端到端机器学习生命周期使用企业级 AI 服务。

关注TechLead,分享AI全维度知识。作者拥有10+年互联网服务架构、AI产品研发经验、团队管理经验,同济本复旦硕,复旦机器人智能实验室成员,阿里云认证的资深架构师,项目管理专业人士,上亿营收AI产品研发负责人。

file

一、什么是 Azure 机器学习?

Azure 机器学习是一种用于加速和管理机器学习项目生命周期的云服务。 机器学习专业人员、数据科学家和工程师可以在日常工作流中使用它:训练和部署模型,以及管理 MLOps。 可以在 Azure 机器学习中创建模型,也可以使用从开源平台构建的模型,例如 Pytorch、TensorFlow 或 scikit-learn。 MLOps 工具有助于监视、重新训练和重新部署模型。

大规模生成业务关键型机器学习模型

Azure 机器学习使数据科学家和开发人员能够更快、更自信地构建、部署和管理高质量模型。它通过行业领先的机器学习操作 (MLOps)、开源互操作性和集成工具加速价值。此受信任的平台专为机器学习中的负责任 AI 应用程序而设计。

二、Azure 机器学习适合哪些人群?

Azure 机器学习适用于要在其组织内实现 MLOps(以便在安全且可审核的生产环境中将机器学习模型投入生产)的个人和团队。

数据科学家和 ML 工程师将找到用于加快和自动执行其日常工作流的工具。 应用程序开发人员会找到用于将模型集成到应用程序或服务的工具。 平台开发人员将找到由持久 Azure 资源管理器 API 提供支持的一组可靠工具,用于构建高级 ML 工具。

使用 Microsoft Azure 云中的企业将在基础结构方面发现熟悉的安全性和基于角色的访问控制 (RBAC)。 可以设置项目以拒绝对受保护数据的访问并选择操作。

三、Azure 机器学习的价值点

加快价值实现速度

使用灵活、强大的 AI 基础结构支持的熟悉框架进行快速、自定义的模型开发 。

协作并简化 MLOps

用于跨工作区协作和 MLOps 的快速 ML 模型部署、管理和共享。

信心十足地开发

用于在任何位置运行机器学习工作负载的内置治理、安全性和符合性。

负责任地设计

负责任 AI 使用数据驱动的决策来构建可解释的模型,以实现透明度和责任。

四、端到端机器学习生命周期的支持

准备数据

file

生成和训练模型

file

验证和部署

file

管理和监视

file

机器学习深度学习

托管端到端的平台

使用本机MLOps功能简化整个深度学习生命周期和模型管理。借助企业级安全性,安全地在任意位置运行机器学习。使用负责任的 AI 仪表板缓解模型偏差并评估模型。

任何开发工具和框架

在所选的框架中使用PyTorch 和 TensorFlow,通过首选的集成开发环境 (IDE),从 Visual Studio Code 到 Jupyter Notebook 构建深度学习模型。Azure 机器学习与 ONNX Runtime和 DeepSpeed 进行互操作,以优化训练和推理。

世界一流性能

使用专门构建的 AI 基础结构 将最新的 NVIDIA GPU 和最高可达 400 Gbps 的 InfiniBand 网络解决方案组合在一起。在具有前所未有的规模的单个群集中纵向扩展到数千个 GPU。

五、实战场景

通过快速模型开发加快价值实现

使用支持机器学习任务的统一工作室体验提高工作效率。使用对常用开源框架和库的内置支持,使用 Jupyter Notebook 生成、训练和部署模型。通过自动化机器学习快速为表格、文本和图像模型创建准确的模型。使用 Visual Studio Code 无缝地从本地到云训练,并通过 NVIDIA Quantum-2 InfiniBand 平台提供支持的Azure AI 基础结构进行自动缩放。

file

使用 MLOps 协作并简化模型管理

file

在混合平台上构建企业级解决方案

使用 Microsoft Purview 中的内置数据治理,在机器学习生命周期中将安全性放在第一位。利用涵盖标识、数据、网络、监视和合规性的全面安全功能,这些功能均由 Microsoft 测试和验证。使用自定义基于角色的访问控制、虚拟网络、数据加密、专用终结点和专用 IP 地址保护解决方案。在任何位置(从本地到多云)训练和部署模型,以满足数据主权要求。使用内置策略和 60 项认证(包括 FedRAMP High 和 HIPAA)合规性自信地进行治理。

file

在整个生命周期中使用负责任 AI 做法

使用可重现和自动化的工作流评估机器学习模型,以评估模型公平性、可解释性、错误分析、因果分析、模型性能和探索性数据分析。在负责任 AI 仪表板中使用因果分析进行实时干预,并在部署时生成记分卡。将技术和非技术受众的负责任的 AI 指标上下文化为涉及利益干系人并简化合规性评审。

file

整个机器学习生命周期的关键服务功能

file

关注TechLead,分享AI全维度知识。作者拥有10+年互联网服务架构、AI产品研发经验、团队管理经验,同济本复旦硕,复旦机器人智能实验室成员,阿里云认证的资深架构师,项目管理专业人士,上亿营收AI产品研发负责人。

如有帮助,请多关注 TeahLead KrisChang,10+年的互联网和人工智能从业经验,10年+技术和业务团队管理经验,同济软件工程本科,复旦工程管理硕士,阿里云认证云服务资深架构师,上亿营收AI产品业务负责人。

标签:机器,AI,模型,企业级,学习,MLOps,概述,Azure
From: https://blog.51cto.com/u_15863876/8741807

相关文章

  • 一、Hive概述与安装部署
    1、Hive基本概念1.1Hive简介 Hive本质是将SQL转换为MapReduce的任务进行运算,底层由HDFS来提供数据存储,说白了hive可以理解为一个将SQL转换为MapReduce的任务的工具,甚至更近一步说hive就是一个MapReduce客户端。思考:计算文件user.txt中张三出现几次,使用mapreduce怎么写,然后......
  • 【UniApp】-uni-app概述
    前言好,经过我们前面文章的编写,大家可以了解到微信小程序开发相关的知识,了解完了这个微信小程序开发和云开发之后,从这篇文章开始,我再来给大家写一下关于Uniapp的知识。好,开始,那什么是Uniapp呢?这个时候我们不管三七二十一,先打开我们Uniapp官方文档,它官方地址也很简单,叫做d......
  • postgresql从入门到精通 - 第37讲:postgres物理备份和恢复概述
       PostgreSQL从小白到专家,是从入门逐渐能力提升的一个系列教程,内容包括对PG基础的认知、包括安装使用、包括角色权限、包括维护管理、、等内容,希望对热爱PG、学习PG的同学们有帮助,欢迎持续关注CUUGPG技术大讲堂。 第37讲:物理备份和恢复概述 第37讲:12月09日(周六)19......
  • 【Azure Entra ID】如何在中国区获取用户 StrongAuthenticationUserDetails 和 Strong
    问题描述如何在中国区获取用户StrongAuthenticationUserDetails和StrongAuthenticationMethods信息?StrongAuthenticationUserDetails:包含有关用户MFA设置的信息,例如他们首选的身份验证方法、电话号码和电子邮件地址。系统使用此信息在用户尝试访问受保护资源时验证用户的身......
  • 01-计算机网络概述
    01-计算机网络概述1.2因特网的概述1网络、互联网(互连网)和因特网网络(Network)由若干节点(Node)和连接这些节点的链路(Link)组成多个网络还可以通过路由器互连起来,这样就构成了一个覆盖范围更大的网络,即互联网(互连网)因特网(Internet)是世界上最大的互连网络(用户数以亿计,互连的网络数......
  • 第一单元 Mvc概述
    1.什么是Mvc模型-视图-控制器(MVC)体系结构模式将应用程序分成3个主要组件组:视图模型、视图和控制器。此模式有助于实现关注点分离。使用此模式,用户请求被路由到控制器,后者负责使用模型来执行用户操作和/或检索查询结果。控制器选择要显示给用户的视图,并为其提供所需的......
  • 【Azure Key Vault】客户端获取Key Vault机密信息全部失败问题分析
    问题描述在应用中获取存储在AzureKeyVault的机密信息,全部失败。报错日志内容如下:[reactor-http-epoll-4][reactor.netty.http.client.HttpClientConnect][WARN]-[c7a7d27e,L:/xxx.xxx.xxx.60:58756!R:xxxxxxxxxxxx.vault.azure.cn/xxx.xxx.xxx.xxx:443]Theconnectiono......
  • 【Azure Key Vault】客户端获取Key Vault机密信息全部失败问题分析
    问题描述在应用中获取存储在AzureKeyVault的机密信息,全部失败。报错日志内容如下:[reactor-http-epoll-4][reactor.netty.http.client.HttpClientConnect][WARN]-[c7a7d27e,L:/xxx.xxx.xxx.60:58756!R:xxxxxxxxxxxx.vault.azure.cn/xxx.xxx.xxx.xxx:443]Theconnecti......
  • PAC4J 新手入门,之一(概述及准备)
    什么是pac4jpac4j是一个简单而强大的安全框架,用于Java验证用户、获取用户配置文件和管理授权,以保护web应用程序和web服务。它提供了一套全面的概念和组件。它适用于大多数框架/工具,并支持大多数认证和授权机制。它的开源授权协议为Apache2。在JavaWeb项目开发中,涉......
  • 密码学概述
    密码学密码学是研究编制密码和破译密码的技术科学。研究密码变化的客观规律,应用于编制密码以保守通信秘密的,称为编码学;应用于破译密码以获取通信情报的,称为破译学,总称密码学。电报最早是由美国的摩尔斯在1844年发明的,故也被叫做摩尔斯电码。它由两种基本信号和不同的间隔时间组成......