一站式AI开发平台ModelArt技术解读及开发实践 - 华为陈亮.pdf

所需积分/C币:49 2019-09-25 18:09:45 1.92MB PDF
0
收藏 收藏
举报

华为全联接大会2019,部分资源PPT文件,大概有几十个,需要的可以自行下载
华为A开发平台 Modelarts整体架构 通用A应用 行业解决方案 图像/视频语音/自然语言处理/…智慧城市/制造/医疗/金融/零售. 站式A开发平台 Modelarts Modelarts:是华为全栈全场景A解决方案 数据处理算法开发模型训练|部署上线A市场 面向用户和开发者的门户,作为一站式A|开发 AI开发服务层 端到端A开发全流程管理 智能运维管理 平台,提供全周期A工作流。 全栈 MindSpore TensorFlow/PyTorch/ MindSpore:支持端、边、云独立的和协同 PaddlePaddle A软件层 的统一训练和推理框架。 芯片使能CANN cANN:兼具最优开发效率和算子性能,以应 多规格高性能 Atlas系列基础硬件 A|硬件层 对学术研究和行业应用的蓬勃发展 Ascend a系列芯片 CPU 网络 存储 Ascend:基于统一、可扩展架构的系列化 Device设备端 Edge边绿 Cloud云 NPUP和芯片 全场景 HUAWEI 华为自研A计算框架 MindSpore 全场景、工业级业务 开发 博土生→本科生:当前基于 TensorFlow等 框架,模型开发需要深入了解计算机体系 门槛高知识 端协作训练推理边缘协作训练准理云 轻量 本地 大规模 异构 同构→异构:业界框架面向端、边、云异 构算力支持不足,无法发挥异构芯片最大 全场景统一开发体验 支持差算力 MindSpore端边云统一训练推理框架 全场景研究少生产:全场景业务关注性能体积、 异构算力最大化发挥 能耗、可信等工业级述求,开源框架多聚 Ascend Ascend Ascend Ascend- Ascend 能力不足 焦部分场景,无法满足端边云协同场景 -Nano -Ti -Lite Ascend Mini Max 降低A开放者门槛,支撑全场景A开发和生产部署 HUAWEI MindSpore实现性能、效率的最大化 L3 全场景A应用使能 ●灵活部署:端-边-云全场景统一架构,可大可小,端云协 Mindspore统一训练推理框架 √全场景统部署、端云协同学习 Mind Expression模型表达 全场景统一开发接口体验AP 函数式表达自动分布式动态图+静数据预处理 ●高效易用:面向数据科学家的函数式可微分编程范式,原 L2 可微分编程 并行表达 态图 与可视化 生数学表达 DL/ML引擎 算子级自动微分、数据+模型混合自动并行化、自动算子生成 Graph engine图引擎 统 Grap h iR 圄准备图拆分匚图編译匚郾执行性能优化:多维度追求极致性能,软硬协同,充分发挥芯 端-边-云协同分布式可信架构(部署、调度、通信等) 片的算力 深度图优化、 on device执行、二阶优化 CANN 芯片使能 EulerOs 开源开放:开放可扩展的开源架构,满足灵活定制诉求 LO AscendAscend- Ascend Ascend AscendAscend- 统- Graph ir,灵活扩展对接第三方框架和芯片平台 芯片 Iny -Mini Max HUAWEI 一站式、全流程A开发, Modelarts提供了哪些关键特性? 面向不同开发者:O数据科学家○算法工程师○业务开发者○初学者 数据优化 模型更新 数据 数据处理 模型训练 模型管理 部署 数据采集 ·自动混合精度训练(充分发挥计 模型库 在线服务 应用 自动数据标注、多人 算设备能力 ●模型溯源 ●批量服务 协作标注 动态超参调整 ●精度跟踪 边缘服务 ●自动难例挖掘,捕获 训练数据压缩、多级缓存 关键样本 分布式加速比 数据版本管理 分布式数据-模型混合并行 在线编码 市场 常用引擎 预置算法 模型 应用 模型可视化 数据集 odelarts深度技术架构解读文章:htos:// vwwinfoq. cn/ article/ WMZAP- QomgEaoug3uaA L HUAWEI 多场景支持—更多标注类型 像分关 物体检温! 声音分类 语音内容 音分割 别一张图片中是否包金种物 图片中何物体的位及光 对产行分奖 而内喜行你 刘白进行力你 guitar 一叫种中一 一小时动 文不英 命名实 本的时示笑行小 计到的片能进行⊥,奸间,六等 当前 Modelarts支持如下7种类型的数据集标注: = 口图像分类:识别一张图片中是否包含某种物体 口物体检测:识别出图片中每个物体的位置及类别 口声音分类:对声音进行分类 6o/ 语音内容:对语音内容进行标注 口语音分割:对语音进行分段标注 口文本分类:对文本的内容按照标签进行分类处理 →QQm 口命名实体:针对文本中的实体片段进行标注,如“时 间”、“地点”等 支持点、直线、虚线、折现、圆、矩形框、多边形 等多种标签工具。 HUAWEI 数据集管理——方便高效 ●多版本:提供多版本管理和数据特征评估及可视能力。 ●导入导出:方便跨平台数据共享,支持通过特定格式导出数据集和导入。 版本管理 又据特征 版木选择W001x 数据待征指标 Elur score x Aspect ratIo x Resolution x Brightness x v Blur score Blur score W001 Y Aspect ratio v Resolution v Brightness E Y Colorfulness v Saturation 0.6 Aspect ratio Brightness Colorfulness ■W1 0.8 0.6 0 109 150 30 Brightness Colorfulness HUAWEI 复合数据筛选——快速标注和整理数据 复合筛选提供了数据过滤功能,用户可以根据多种条件过滤出想要的数据进行打标、导出等操作 冋时多种内置算子对数据进行智能分类、添加标签等操作,对操作结果可以根据标签进行过滤筛 选,基于筛选结果进行多轮标注有助于模型精度的快速提升。 B5714标注3609已标注2105特确认2648 暂未选定过滤项 仝部签13 i」例 兰行车 仝部育行车座托车革马飞机汽车狗车 车 本创建时问 1个月内 彐完义 马 197 输入关键字后按国车健牛成过滤条件 示人 选标注主A 汽车 湾左择行下压性 无属性,i壮下点山自动分组”后,选挥幻任了生成您的数专它业需性。 铅 团盲删同认为例自动组导出 遮浑当前页 112 HUAWEI 智能标注 ·标注效率提升70%‰:基于主动学习和预置模型,系统边标边学,越标越准 标注质量有保障:用户可自建团队,灵活控制标注任务分发和质检策略 灵活数据管理:支持増量式导入、训练集导岀、多版本管理、难例管理、 團函 ca dog 屬公国R督 〖圖 ■園筐 自@鲁 国圖涵 圆面 HUAWEI

...展开详情
试读 15P 一站式AI开发平台ModelArt技术解读及开发实践 - 华为陈亮.pdf
立即下载 低至0.43元/次 身份认证VIP会员低至7折
一个资源只可评论一次,评论内容不能少于5个字
  • GitHub

    绑定GitHub第三方账户获取
  • 脉脉勋章

    绑定脉脉第三方账户获得
  • 签到新秀

    累计签到获取,不积跬步,无以至千里,继续坚持!
关注 私信 TA的资源
上传资源赚积分or赚钱
    最新推荐
    一站式AI开发平台ModelArt技术解读及开发实践 - 华为陈亮.pdf 49积分/C币 立即下载
    1/15
    一站式AI开发平台ModelArt技术解读及开发实践 - 华为陈亮.pdf第1页
    一站式AI开发平台ModelArt技术解读及开发实践 - 华为陈亮.pdf第2页
    一站式AI开发平台ModelArt技术解读及开发实践 - 华为陈亮.pdf第3页

    试读结束, 可继续读2页

    49积分/C币 立即下载 >