【Copy攻城狮日志】ModelArts与AppCube双“魔”合璧庆双节

网友投稿 474 2022-05-30

双"魔"合璧庆双节

嘘,华为云内部都不知道的秘密玩法,我悄悄告诉您!

↑开局一张图,故事全靠编

华为云的一站式开发平台ModelArts和应用魔方AppCube居然能玩到一起,这是可能是华为云官方自己也没想到的场景,而我,从8月份开始体验公测应用魔方AppCube以来,一路坎坷,从给AppCube提Bug,到等待新版本发布完毕,再一步一步摸着石头过河,一直在探索AppCube与ModelArts的结合,缘由很简单--我希望低门槛开发AI应用、低门槛落地AI应用,不过,差强人意的是我在使用低代码平台AppCube时,还是Copy了好些代码……但我还是坚持探索,今天赶在中秋国庆双节之际,终于跑通了我的第一个落地Demo--命名实体识别。可以说这是前所未有的体验!

缘起

应用魔方 AppCube(以下简称AppCube)是低代码应用开发平台,顾名思义就如同魔方一样,可以通过任意组合,排列各种模块化元素,创建功能各异的应用。AppCube是在线多租的应用开发和运行的aPaaS平台。

就是这么一个牛掰的低代码平台深深地吸引了我,之前有用她完成过口罩分配系统的Demo,那时候好像还不叫AppCube。之后,很荣幸地参与了应用魔方AppCube的公测体验,通过深度体验AppCube,我进一步熟悉了解了她,加上刚好也在学习一站式AI开发平台ModelArts,通过ModelArts学习了一些简单AI模型的训练和在线部署,然后也尝试将这些AI服务“落地”--完成前端开发部署,有幸产出了基于Koa.js的体验小Demo--今天,您存了吗?。尽管很有趣,但还是摆脱不了对自由服务器的依赖,遇到应用魔方AppCube让我有了大胆的想法:结合ModelArts和AppCube实现AI在线服务的前端应用!于是,"JUST DO IT", 走上了一条无限踩坑的道路……

遇到的第一个坑,确是真·HW工程师给我挖的!调用过ModelArts在线服务的小伙伴都应该知道,我们在调用接口之前需要获取账号的AK和Sk,通过加密算法签名之后才能够正常获取调用的结果。整套流程本身是没有任务问题的,但是通过AppCube去调取ModelArts的在线服务,总是无法正常调通,一直是返回Incorrect IAM authentication information,也就是说无法正常认证,原因也无非两种,一是签名之后的token不正确,二是客户端(AppCube)的时间与服务端(ModelArts在线服务)的时间不一致且相差超过15分钟。经过反复验证,我确认是后者,于是提了8月18日晚上就提了工单,到8月20日晚上基本确定是AppCube的signer加密算法写得有点问题,然后就是漫长的等待发版……到9月16日终于等来了新版本并修复了这个坑。

然后,我开始“三天打鱼两天晒网”,又踩到了第二个坑--AppCube的标准页面不支持匿名访问,于是我赶紧想法将标准页面转为高级页面,结果又遇到了第三个坑--由于我的标准页面含有多语言组件导致转化后的高级页面仍然无法匿名访问。于是,我开始了转向高级页面的开发……

然而,高级页面确不是我想象的那么高级,就好比等级高但是装备还是得自己打,是的,高级页面中没有基础的布局,需要自行开发组件;高级页面还需自行开发桥接器,因为AppCube的安全策略不允许前台页面直接调用后端服务。

9月的月末,基本在这些坑里折腾……

ModelArts侧的开发

对我来说,目前开(拷)发(贝)一个AI在线服务已经如探囊取物,毕竟ModelArts平台就提供了各种Copy的能力:您可以基于自动学习开发AI在线服务;您也可以基于预置算法或者订阅算法训练并部署AI模型;您还可以从AI市场直接订阅模型来开发AI在线服务,甚至还可以直接从OBS加载元模型。总之,也许您没有AI基础,通过一站式AI开发平台ModelArts就能开发并部署一个AI在线服务。为了更加简便,我采用的OBS元模型方式,分分钟部署一个Bert命名实体识别在线服务。

简单介绍一下操作流程:

0. 准备阶段

注册华为云账号--这是一把金钥匙,开启了我的“云”世界。

访问“我的凭证”获取“访问密钥”--也就是AK/SK,这还是一把金钥匙,是我通过开发工具访问华为云的身份凭证。

开通OBS并新建桶和文件夹--这是40G容量的金桶,用来存放我Copy过来的数据、模型、算法……Y

开通ModelArts--这是真金白银打造的一站式AI开发平台,我却挥霍着免费算力(学艺不精,不学无术,浪费资源)。

1. 开(拷)发(贝)阶段

从AI市场数据集下载model到OBS

请访问model-test:https://marketplace.huaweicloud.com/markets/aihub/datasets/detail/?content_id=23441bfe-8c6b-4d0c-8076-13252bde17c0, 点击页面的下载按钮,配置下OBS路径,点击下一步即可下载model到OBS

从OBS导入元模型

我们需要进入到ModelArts平台点击模型管理 - 模型 - 导入 - 从对象存储服务(OBS)中选择,这里记得选择元模型是选择model文件夹的父级,会自动识别到Tensorflow引擎。点击立即创建就会自动构建模型。

2. 部署阶段

部署是最简单的一步,等待模型构建完毕点击部署 - 在线服务一路 Next 进行模型部署上线操作。稍等片刻,部署成功之后就是熟悉的在线调试等步骤。

AppCube侧开发

通过此次探索,我深刻地体会到AppCube的精妙之处--介是您没有玩过的船新版本。就像上文中提到的那些坑,主要还是自身技术不硬,没好好了解玩法和规则,然后就无限掉坑爬坑掉坑。不过,目标是明确的:一个页面,有输入框,有提交按钮,有结果显示,能调用AI服务。是不是超级简单?简单到我以为半个小时能搞定。结果……不说了,说多了都是泪!直接上手高级页面开发,我要做高级Copy攻城狮!

高级页面开发准备

自定义UI库

在开发高级页面前,您需要学习Widget、库、桥接器、事件和动作等相关内容。没办法,摸着石头过河,如果光脚的话,容易划伤;先来一个MintUI(尽管已经过时了),如果高级页面要使用前端框架或组件库,例如流行的Vue、Bootstrap、ElementUI等,需要将其制作成Library资产,然后上传到环境中使用。本次高级页面为自定义的Widget,我想用MintUI来完成前端布局,那就需要将自定义库进行上传以及在Widget使用库。好在官方文档提供了教科书般的Demo:管理并使用库,步骤也简单:

下载MintUI并上传到高级页面 > 库

自定义Widget中引用MintUI:

packageinfo.json

"requires": [   {       "name": "global_Vue",       "version": "100.7"   },   {       "name":"bingobingotesthuaweicom_mintui", // 库文件名称和版本号在库详情页面获取      "version": "1.0"   }]

工具包下载

开发高级页面比较狂拽炫酷的方式就是使用Scaffolding离线开发Widget。Scaffolding是AppCube系统提供的一个脚手架工程,方便创建本地资产工程,用于本地开发Widget、本地调测后上传至资产库,也可以通过该工具下载Widget至本地。对了Widget的概念非常不错,玩出来Flutter的感觉,万物皆Widget!您在浏览器中看到的一个系统网页,即是一个页面。Widget是可复用的高级页面组成元素,一个高级页面由一个或多个Widget拼装而成。如果将一个高级页面看成拼图游戏的完整图案,那么Widget相当于拼图的每一小块。而我们想在本地开发Widget就需要用到工具,这个工具有点特别,其实是一个前端的NPM包,我特意查了下,这个包不是公开的,需要我们从官方文档中下载:https://obs-ap1-appengine.obs.cn-north-1.myhuaweicloud.com/usermanual/assets_starter.zip。 如果后续版权允许的话,它应该会出现在NPM公共包中。说是工具,其实是一堆代码,依赖storybook来开发组件。从代码结构和bin目录来看,工具包提供一个mango的命令行,我们可以通过mango ui开启一个本地的组件开发环境,方便后续的开发调试。当然,还需要设置并获取客户端ID和客户端密钥。

项目准备

AppCube有开发环境和运行环境,我们通过AppCube的控制台进入到开发环境,新建一个空白的轻应用。从操作界面来看,应用魔方AppCube支持轻应用、行业应用、业务大屏以及移动小程序。目前构建的应用有四种发布渠道:AppCube仓库分发、Welink、讯盟以及下载到本地。关于项目的一些基本配置,这里不再赘述,具体查看官方文档的用户指南。

高级页面开发概要

在线开发脚本及服务流

理论上,我们的前端业务是不直接调用后端接口的,这次的探索,我们把调用AI在线服务交给APPCube的后端逻辑了来处理,由APPCube开发的前端业务调用后端业务,由AppCube的后端业务去调用AI在线服务,这样尽可能保障了我们传输过程中使用的敏感数据如AKSK不被泄露。于是,我们需要编写脚本,还需定义服务流、公共接口等,具体可查阅官方文档。如图中,我们定义了三个脚本:config--简单配置AKSK及AI在线服务地址;singer--签名用的,根据AKSK提供的Demo改写使之适应AppCube;getSinger--也就是调用服务的脚本,输入body,返回请求AI在线服务的响应。

服务流也定义得十分简单,只是调用了getSinger脚本,然后在下边服务中定义基于服务流的公共接口,给到桥接器方便前端页面调用。

自定义Widget

当我们使用上文工具时,执行mango ui能打开本地开发界面,如:http://localhost:8000/app/list。我们可以开发标准页面组件、高级页面组件以及Vue高级页面组件。通过设置,我们能直接连接到AppCube的在线环境,可以和在线环境进行交互,如组件上传下载、组件设置、组件编译等。

自定义桥接器

有时候弯路走多了,路越走越弯。为什么要自定义桥接器?因为自定义高级页面中要调用服务可能就要用到桥接器!总之,从一开始的标准页面不支持匿名访问,我就走上了一条不断踩坑的不归之路。截止发稿,还有一个坑没填上,所以尽管Demo已经开发完毕,开发环境能正常调试,但是运行态还存在脚本不存在或者未激活的Bug,目前真·HW工程师正在全力技术支持中!说回怎么自定义桥接器,三步走:

获取Demo代码并修改

// 核心代码  var widgetBridge = thisObj.getConnectorInstanceByName('BertDemo_getAKSK');  // ...  thisObj.callFlowConn("BertDemo_getAKSK", {            service: "/BertDemo__AKSK/0.0.1/getAKSKFlow"          },{},result =>{})

和自定义Widget一同发布

在高级页面中使用

发布

【Copy攻城狮日志】ModelArts与AppCube双“魔”合璧庆双节

AppCube的发布流程就像是软件开发的发布流程:先编译,再发布。在AppCube开发环境进入应用开发页面,点击左下角编译按钮进行编译,编译成功之后,页面会显示“编译XXX成功”。关闭编译成功的窗口。再点击左下角发布按钮,在“发布应用”页面选择“我的仓库”。发布成功后,页面显示“程序包已经被成功上传到我的仓库。”。在App开发页面左侧单击我的仓库,可在“已发布”下看到发布的应用。点击顶部首页按钮进入首页,在首页单击“管理”,选择“应用管理 > 我的仓库”可查看到发布的应用。

在AppCube开发环境右上角单击用户名,选择“运行环境”。在总览页面选择“我的仓库”进入“我的仓库”页面。单击“安装”,在弹出的确认框单击“确定”。安装该应用;在左侧菜单选择“总览”,进入“总览”页,单击“应用”,进入“应用程序列表”页面……

尽管步骤有些繁琐,不过文档中有详尽的示意图,一步一步跟着多走几遍就熟悉了。

看来目前AppCube主要是面向企业开发者,Copy攻城狮看来需要放弃了!接下来,探索一下ModelArts和鸿蒙OS看看能不能也擦出点啥来。

应用魔方 AppCube AI开发平台ModelArts

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:【AI实战】最强NLP预训练模型库PyTorch-Transformers正式开源!支持6个预训练框架,27个预训练模型
下一篇:2020HDC.Cloud | 前沿技术探秘:知识图谱构建流程及方法
相关文章