2步打通ModelArts和Astro,实现AI应用快速落地

摘要:本文以 ModelArts 的“找云宝”自动学习 AI 应用为例,结合低代码平台 Astro 轻应用快速实现一个“找云宝”小应用。

本文分享自华为云社区《【我与ModelArts的故事】2步打通 ModelArts 和 Astro 实现 AI 应用落地》,作者:胡琦。

引言

随着 GPT 火爆全球, 人工智能(AI)逐渐成为当今最具创新性和前景的技术之一,它可以为各行各业带来巨大的价值和变革。然而,AI 应用的开发和部署并不是一件容易的事情,它需要涉及数据处理、算法开发、模型训练、应用构建、部署管理等多个环节,而且需要有专业的技术人员和复杂的工具链。对于很多企业来说,这是一个高门槛、高成本、高风险的挑战。那么,有没有一种方式,可以让 AI 应用的开发和部署变得更加简单、快速、低成本呢?答案是肯定的。华为云提供了两款强大的平台,分别是 ModelArts 和 Astro 轻应用,它们可以实现 AI 应用的快速落地,让 AI 开发者和业务人员都能轻松构建专业级的 AI 应用。

ModelArts 是华为云提供的一站式 AI 开发平台,支持机器学习和深度学习的全流程管理,包括数据处理、算法开发、模型训练、AI 应用、部署和管理等。ModelArts 提供了丰富的预置算法、模型和数据集,以及强大的 Notebook 服务、Codelab 服务、ML Studio 服务等工具,让 AI 开发者可以快速构建和训练 AI 模型,并将模型部署为在线服务或批量服务。

2步打通ModelArts和Astro,实现AI应用快速落地

Astro 轻应用是华为云提供的低代码开发平台,支持通过拖拉拽的方式快速构建专业级应用,包括轻应用、行业应用和业务大屏等。Astro 轻应用提供了丰富的功能组件、场景模板和可视化工作流,以及灵活的数据源接入和服务编排能力,让业务人员可以轻松搭建应用界面,并将 ModelArts 的模型服务接入 Astro 轻应用的连接器,实现应用的前端展示和交互。Astro 家族包括 Astro Zero、Astro Bot、Astro Pro、Astro Flow、Astro Canvas 等成员,只有一个目标:轻松构建专业级应用,创新随心所欲,敏捷超乎想象!

2步打通ModelArts和Astro,实现AI应用快速落地

本文将介绍如何通过 ModelArts 和 Astro 轻应用实现 AI 应用落地,并以一个物体检测应用为例进行演示。本次实践基于华北-北京四环境。

第一步:ModelArts 训练并部署模型

使用 ModelArts 的数据处理功能,对原始数据进行预处理和标注,生成训练所需的数据集。通过自动学习对数据集进行训练并发布部署模型。

数据是 AI 应用的基础,要构建一个高质量的 AI 模型,首先需要有一个高质量的数据集(在 GPT 时代数据集也许无需标注,但要求更高的质量和多样性)。ModelArts 提供了数据处理功能,可以帮助用户对原始数据进行预处理和标注,生成训练所需的数据集。ModelArts 也提供了自动学习,就算您是零基础的 AI 小白,根据教程点点鼠标就能训练出自己专属的模型。

2步打通ModelArts和Astro,实现AI应用快速落地

步骤描述

  • 准备好 Yunbao-Data-Custom 数据集并上传到 OBS (华北-北京四)或者直接在 AI Gallery 中下载(推荐),数据集的下载及上传需要些许时间。

2步打通ModelArts和Astro,实现AI应用快速落地

点击下载,选择华北-北京四

2步打通ModelArts和Astro,实现AI应用快速落地

下载到 ModelArts 数据集

  • 登录 ModelArts 控制台,在左侧导航栏中选择“自动学习”,进入自动学习页面并点击物体检测创建自动学习任务。(PS:由于下载的数据集默认在新版数据集管理中,无法一键创建自动学习任务,我们可以在自动学习页面用下载的数据集来创建新的数据集进行自动学习)

2步打通ModelArts和Astro,实现AI应用快速落地

创建找云宝自动学习任务

2步打通ModelArts和Astro,实现AI应用快速落地

自动学习任务创建完毕

  • 在 ModelArts 控制台点击左侧导航“数据管理--数据集“进入数据集页面并点击“前往新版”按钮,查看 hello-yunbao 数据集并进行智能标注,当前自动标注只支持识别和标注矩形框。除了可选主动学习还可以进行预标注。智能标注需要些许时间。

2步打通ModelArts和Astro,实现AI应用快速落地

新版数据集

2步打通ModelArts和Astro,实现AI应用快速落地

开启智能标注

  • 智能标注完的数据集我们还需要进行确认,毕竟主动学习也不一定百分之百准备,笔者在实践中遇到了难例和误检,这是需要我们人工纠正的。再回到自动学习任务,发现数据已经全部标注好了。

2步打通ModelArts和Astro,实现AI应用快速落地

数据标注完成

  • 开始训练,不难发现,在 ModelArts 自动学习中,我们还是可以对一些参数进行微调,比如训练偏好、训练验证比例等,还可以进行增量训练。

2步打通ModelArts和Astro,实现AI应用快速落地

开始训练

  • 不到一杯奶茶的时间,我们的找云宝自动学习就完成了,从结果来看还算满意,就用 66 张图片训练处理 84% 的准确率、 0.961 的精确率,我们已经迫不及待地想部署看看效果了。

2步打通ModelArts和Astro,实现AI应用快速落地

完成自动学习

  • 点击版本管理卡片中的“部署”按钮,进行模型部署上线,这里需要说明的是只能有一个免费的在线部署服务,如果创建失败,请检查“部署上线--在线服务”是否已存在免费实例。

2步打通ModelArts和Astro,实现AI应用快速落地

部署上线

  • 等待部署成功之后可以进行预测调试。在线服务将AI应用部署为一个Web Service,并且提供在线的测试UI与监控能力。值得注意的是,免费实例 1 小时之后就会自动停止,如需不间断运行只能使用付费运行或者使用脚本维持。这里,请记住服务 ID,比如: 70e15ea3-8669-49e2-84b9-503531cf7a07, 请保存调用指南中的 API 地址,前面一串数字是 模型Apig-Code、服务ID也就是后面那串数字是 模型Id

2步打通ModelArts和Astro,实现AI应用快速落地

预测调试在线服务

部署心得

ModelArts 的数据处理功能具有以下优势:

  • 支持多种数据类型和标注类型,覆盖图像、视频、音频、文本等多种数据类型,以及分类、检测、分割等多种标注类型,满足不同场景的数据需求。
  • 支持智能标注和团队标注,提高标注效率和质量。智能标注可以利用预置或自定义的模型服务,自动为数据打上标签,大大节省人工标注的时间和成本。团队标注可以支持多人协同完成数据标注任务,并提供打分和评价机制,保证标注结果的一致性和准确性。
  • 支持 OBS 存储和本地存储,方便数据管理和使用。OBS 存储是华为云提供的对象存储服务,可以实现海量数据的安全、可靠、低成本的存储和访问。本地存储是 ModelArts 提供的临时存储空间,可以实现快速上传和下载数据。
  • 当然 ModelArts 的优势远不止这些,只有深入去使用、实践,才会有更多的体会。

第二步:Astro 轻应用集成 ModelArts 在线服务

使用 Astro 轻应用的轻应用功能,通过拖拉拽的方式搭建应用界面,将 ModelArts 的模型服务接入 Astro 轻应用的连接器,实现应用的前端展示和交互。

应用是 AI 应用的载体,要构建一个高品质的 AI 应用,需要有一个高品质的应用界面,并能与 AI 模型服务进行有效的交互。Astro 轻应用提供了轻应用功能,可以帮助用户通过拖拉拽的方式搭建应用界面,并将 ModelArts 的模型服务接入 Astro 轻应用的数据源,实现应用的前端展示和交互。

步骤描述

  • 登录 Astro 轻应用控制台,在左侧导航栏中选择的“应用”,点击“新建空白应用”。

2步打通ModelArts和Astro,实现AI应用快速落地

新建空白应用

  • 下图是 Astro 轻应用开发的主界面,基本上我们所有的业务开发都围绕这些菜单进行,比如界面、数据、逻辑、集成、发布等等。

2步打通ModelArts和Astro,实现AI应用快速落地

Astro 轻应用开发主界面

  • 最最关键的,Astro 通过集成 ModelArts 连接器,实现了调用 ModelArts 在线服务。以前在没有 ModelArts 连接器的时候,我们需要自行开发 AKCK 鉴权、ModelArts API 调用、OBS 文件上传等等

2步打通ModelArts和Astro,实现AI应用快速落地

Astro 集成 ModelArts 连接器

  • 我们的环境默认是没有配置好的 ModelArts 连接器,需要开发者自行配置,我们可以导入上文中提到的实例安装包,再进行连接器配置。

2步打通ModelArts和Astro,实现AI应用快速落地

导入项目

  • 配置好连接器,我们可以在这个页面对在线模型检测简单的测试。

2步打通ModelArts和Astro,实现AI应用快速落地

配置 ModelArts 连接器

  • 接着进行拖拉拽开发页面,这里就不多说,重要的还是自己去动手实践。

2步打通ModelArts和Astro,实现AI应用快速落地

页面开发

  • 大概的实现效果如下

2步打通ModelArts和Astro,实现AI应用快速落地2步打通ModelArts和Astro,实现AI应用快速落地

找云宝应用效果

部署心得

Astro 轻应用具有以下优势:

  • 支持多种应用类型和场景,覆盖轻应用、行业应用和业务大屏等多种应用类型,以及行政办公、人力资源、运营协同、项目管理等多种场景,满足不同场景的应用需求。
  • 支持拖拉拽式页面构建,提供丰富的功能组件、场景模板和可视化工作流,让业务人员可以通过拖拉拽的方式快速搭建应用界面,无需编写任何代码。
  • 支持灵活的数据源接入和服务编排,提供灵活的数据源接入和服务编排能力,可以将 ModelArts 的模型服务或其他华为云服务或第三方服务接入 Astro 轻应用的数据源,并通过图形化的方式进行服务编排,实现应用的前端展示和交互。
  • 支持一键发布和管理,提供一键发布和管理功能,可以将应用发布为 PC 端、移动端、微信小程序/H5、WeLink 集成等多种形式,并提供应用的监控、统计、分享等能力,保证应用的可用性和可靠性。
  • 同样, Astro 轻应用的优势也不仅仅是这些,笔者有幸从早期的 APP Engine 到 APPCube 再到现在的 Astro,不断见证华为云零(低)代码的进化,未来,随着 AIGC 的不断推陈出新,我们或许能体验到更加先进的工具。

总结

本文介绍了如何通过 ModelArts 和 Astro 轻应用实现 AI 应用落地的两个步骤,并以“找云宝”物体检测为例进行演示。通过拉通 ModelArts 和 Astro 轻应用的强大功能和优势,我们可以实现 AI 应用的快速开发和部署,降低 AI 应用的门槛、成本、风险,提升 AI 应用的效率、质量、性能。ModelArts 和 Astro 轻应用是华为云为用户提供的一站式 AI 开发平台,是用户实现 AI 应用落地的最佳选择。如果您对 ModelArts 和 Astro 轻应用有兴趣,欢迎登录华为云官网进行体验和使用,感受 AI 应用落地的魅力和便捷。

 

点击关注,第一时间了解华为云新鲜技术~

原文链接:https://www.cnblogs.com/huaweiyun/p/17385016.html

本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:2步打通ModelArts和Astro,实现AI应用快速落地 - Python技术站

(0)
上一篇 2023年5月9日
下一篇 2023年5月10日

相关文章

  • 深度学习小白专场之循环神经网络和递归神经网络

    深度学习小白专场之循环神经网络和递归神经网络 全连接神经网络和卷积神经⽹网络,都只能单独的去处理单个的输入,且前后的输入之间毫无关系。但是在一些任务中,我们需要更好的去处理序列的信息,即前后的输⼊之间存在关系。比如,在理解一整句话的过程中,孤立理解组成这句话的词是不够的,我们需要整体的处理由这些词连接起来的整个序列;当我们处理视频时,我们也不能单独地仅仅分析…

    2023年4月8日
    00
  • 《从机器学习到深度学习》笔记(2)无监督学习

       有监督学习用于解决分类问题的前提是必须有一个带标签数据的样本集,但获得数据标签的代价往往是非常昂贵的。同时,这些标签通常都是人工标注,标注错误的情况也时有发生。这样就促使了无监督学习策略的发展,简单的说它就是:  对无标签数据进行推理的机器学习方法。 1. 场景 由于无监督学习的前提是不需要前期的人类判断,所以它一般是作为某项学习任务的前置步骤,用于规…

    机器学习 2023年4月12日
    00
  • YoloV5_RuntimeError: CUDA out of memory. Tried to allocate 100.00 MiB (GPU 0; 2.00 GiB total capacity; 1.15 GiB already allocated; 0 bytes free; 1.19 GiB reserved in total by PyTorch)

    报错信息: RuntimeError: CUDA out of memory. Tried to allocate 100.00 MiB (GPU 0; 2.00 GiB total capacity; 1.15 GiB already allocated; 0 bytes free; 1.19 GiB reserved in total by PyTorc…

    2023年4月8日
    00
  • 探究灰度图像对目标检测测试结果影响—-RGB转灰度图像、灰度图像扩充成三通道

    一、问题:直接将转好的灰度图像输入神经网络,发现 FileNotFoundError: [Errno 2] No such file or directory: ‘home/JPEGImages/Image_24.jpg’ 二、分析:灰度图像只有一个通道,而RGB有三个通道 三、解决:将一个通道的灰度图像,复制两次,得到三通道所需图像 import cv2i…

    目标检测 2023年4月7日
    00
  • 何为神经网络卷积层?

    摘要:本文深度讲解了卷积计算的原理,并详细介绍了构成所有卷积网络主干的基本元素,包括卷积层本身、填充和步幅的基本细节、用于在相邻区域汇聚信息的汇聚层,最后给出卷积层和汇聚层的代码示例和CNN框架结构图。 本文分享自华为云社区《神经网络基础部件-卷积层详解》,作者: 嵌入式视觉 。 前言 在全连接层构成的多层感知机网络中,我们要通过将图像数据展平成一维向量来送…

    2023年4月5日
    00
  • 斯坦福大学公开课 视觉识别卷积神经网络

    课程简介 ImageNet Challenge. 计算机视觉已经变得普适了,在我们的社会中应用,如搜索、图像理解、APP、地图、医疗、无人机和自动驾驶。这些应用中的很多核心都是视觉识别方面的任务,例如图像分类、定位和识别。   学习本课程的预备知识 Proficiency in Python, high-level familiarity in C/C++(…

    卷积神经网络 2023年4月8日
    00
  • 机器学习二 逻辑回归

    在生成模型中讲到了,可以利用手头的数据,假设数据是满足高斯分布,且是不同的均值,但是同一个协方差矩阵,基于贝叶斯的判别式,可以得到 p(c1|x)>0.5 是第一类   p(c1|x)可以转化为sigmod(z)=w*x +b     

    机器学习 2023年4月13日
    00
  • Keras载入mnist数据集出错问题解决方案

    找到本地keras目录下的mnist.py文件通常在这个目录下。 ..\Anaconda3\Lib\site-packages\keras\datasets 下载mnist.npz文件到本地下载链接如下。https://pan.baidu.com/s/1C3c2Vn-_616GqeEn7hQQ2Q 修改mnist.py文件为以下内容,并保存 from __f…

    Keras 2023年4月6日
    00
合作推广
合作推广
分享本页
返回顶部