• [认证交流] 华为云人工智能入门级开发者认证 - HCCDA-AI 第④章 ModelArts服务介绍-知识传递
    获取您的EI红宝书:https://www.huaweicloud.com/ei/                     华为云EI服务介绍:华为云人工智能入门级开发者认证 - 第④章 ModelArts服务介绍 (qq.com)ModelArts是面向AI开发者的一站式开发平台,提供海量数据预处理及半自动化标注、大规模分布式训练、自动化模型生成及端-边-云模型按需部署能力,帮助用户快速创建和部署模型,管理全周期AI工作流面向不同经验的AI开发者面向业务开发者,不需关注模型或编码,可使用自动学习流程快速构建AI应用;面向AI初学者,不需关注模型开发,使用预置算法构建AI应用;面向AI工程师,提供多种开发环境,多种操作流程和模式,方便开发者编码扩展,快速构建模型及应用“一站式”是指AI开发的各个环节自动学习数据管理开发环境训练平台推理平台AI Gallery                                            云与数据- HCCDA-AI合集:https://mp.weixin.qq.com/mp/appmsgalbum?__biz=Mzg5Mjc4NjE1Nw==&action=getalbum&album_id=2398219468813811715&scene=173&from_msgid=2247483927&from_itemidx=1&count=3&nolastread=1#wechat_redirect**
  • [其他] 从架构、API到应用,华为云EI如何全局践行AI落地
    AI从2012年开始热度一直居高不下,俨然成为IT行业的新宠,与各行各业的结合也成为AI落地进程中的主流方向。AI技术如今已经成为IT行业的新宠,与各行各业的结合也成为AI落地进程中的主流方向,智慧城市的最新发展和现状是怎样的?如何更好地实现云上强大AI能力的价值落地?NLP(自然语言处理)和对话机器人有哪些典型落地场景和未来趋势?2019年12月21日上午,在AICon全球人工智能与机器学习技术大会"华为云AI技术应用和实践专场"上,来自华为云EI(企业智能)的三位技术专家分别就"华为云自然语言和对话机器人技术详解和应用场景"、"AI+城市智能体:聚焦新一代智慧城市的PISC架构"、"华为云HiLens:端云协同AI平台,助力企业快速智能化转型"主题详解了相关技术与应用。一、自然语言、对话机器人技术详解及应用场景随着智能助理、对话机器人、智能音箱等产品的兴起,NLP的风口正在到来,NLP领域突破不断,预训练模型的出现,迁移学习和多模态被越来越多的普遍使用,企业市场也涌现出丰富的应用场景。语言理解成为人工智能皇冠上的明珠。在华为云的演讲中,整体梳理了华为云自然语言、对话机器人技术详解及应用场景。(一)语音语义技术发展历程人类使用自然语言沟通的逻辑是:听到——>理解——>回答,而从计算机的角度,要想实现语音语义识别,需要4项技术与之对应:语音识别ASR、语言理解NLU、语言生成NLG和语音合成TTS。1、语音识别的发展:1952~1990年是模板匹配阶段,主要针对小词汇量、孤立词识别;1990~2010年,开始用统计模型做语音的识别;到了2010年以后,基于神经网络的模型如CTC出现,让语音识别的模型变得非常清晰简单;最近几年出现的attention demo,效果可以达到商业化应用标准。2、语音语义技术在行业的应用:一方面是虚拟的个人助手,另一项重要应用是智能客服,三是公司内部IT热线。(二)智能语言和对话机器人的应用华为EI语音语义团队基本上覆盖了三方面的线上服务,一是自然语言处理服务,包括NLP基础能力如分词,文本相似度等,也包括语言生成、语言理解、知识图谱、机器翻译等高阶能力;二是语音交互服务,包括语音识别,语音合成、语音扩展的能力;三是更加智能的交互技术,包括多轮问答、电话机器人等。1、对话式智能在企业场景中的应用对话式智能在企业中的应用,包括售前引导、售后服务以及智能外呼。其中,售前引导通过智能导购多轮对话,增加商业机会并减少运营成本;售后服务通过故障问答、售后咨询等提高客服效率,提升服务体验;而智能外呼由机器人自动执行外呼电话任务,例如营销、满意度回访,预约等,并自动生成呼叫语义报告,提升企业运营效率和客户满意度。在构建整个解决方案时,迁移学习在NLP领域可以解决很多场景的问题,这一点被越来越看好。比如开发者训练了某一个特定领域的模型,并积累了大量数据,但是当进入新领域时必然面临到现有数据少的难题,而通过迁移学习则可以把训练好的模型迁移到新的场景上,用现有的、较少的数据训练出好的模型,从而解决客户的问题。2、智能对话分析/质检在呼叫中心里,尤其是呼叫量比较大的时候,需要分析客服与客户的互动是否符合规范,以前都由专门的质检人员监听录音反馈信息。现在可以用机器替代人工,用自然语言理解和语音识别去做全量质检,不仅可以得到质检的结果,还可以得到商业的分析,用客户提供的反馈优化产品。3、自然语言的情感分析华为VMALL商城里面有大量的用户评价,对于一个公司来说,了解用户真实的反馈是非常有价值的,对商品评论自动过滤,负面评论供人工审核解决问题;对于属性级别的情感分析,辅助细粒度商业分析和决策。(三)语音语义未来发展趋势NLP会迎来黄金10年。华为云致力于把学术界最前沿的技术应用到商业场景里面,解决客户的具体问题。1、Voice UI会成为下一个趋势,聊天机器人将无处不在。现在越来越多的应用场景,各种不同的垂直领域都会有聊天机器人代替人工做一些工作,无论是售前咨询、售后服务、辅助购买等都会有机器人去引导你,辅助你把这个流程走完。所以习惯与机器人互动是接下来每个人要做的事。2、未来五到十年,机器人会具备分析大量文本的能力。从阅读、分析、理解到最后生成一个总结报告,所有的内容都是由机器人去完成。3、情感化、个性化的定制成为流行。高德地图中,使用明星语音引导就是例子,未来会有越来越多定制化的语音需求,满足不同场景的应用。二、AI+城市智能体:聚焦新一代智慧城市的PISC架构第二位华为专家从城市智能体的角度,以智能交通为例,系统地介绍了基于人工智能技术的PISC架构在交通态势感知(Perception)、推理(Inference) 到决策(Strategy)和控制(Control)上的应用。此外,他还详细讲解了基于胶囊投影的深度学习算法(Capsule Projection Networks)、交通图计算(Graph Computing)以及各种交通策略以及控制算法的实现。(一)智慧城市发展现状智慧城市最早起源于2008年11月RBM提出的智慧星球,直到2012年,RBM陆续从智慧星球概念中推出智慧城市。也是在2012年深度学习技术在计算机视觉取得非常大的成果后,智慧城市的落地应用才变得可行起来。有一个最经典的智慧城市解决方案——PC,P就是感知,C就是控制。通过对交通路网上的交通流进行实时分析,对交通流在不同的入口,甚至精确到不同的车道上的情况都有一个精确的感知结果。根据感知分析的结果,对路口的红绿灯进行流量控制,比如通过调节感应率的时间,实现最小化等待时间,防止出现二次排队的现象,从而制定合适的红绿灯方案。但PC结构是有本质上的缺点。一是PC得到的感知结果实际上是局部的,缺少对全局交通态势的认识。二是对于交通动态变化的分析和控制,由于规则不固定,很难做到最优的策略。三是认知与决策的鸿沟。也就是如何把感知上升到认知,并且把认知翻译成能够执行的策略和控制的方法。为了解决这三个问题,华为云在PC结构基础上构建出一个PISC。(二)PISC总体架构PISC就是在PC结构基础上,在P与C之间加入I(推理)和S(决策)。1、加入I(推理),目的是把局部的感知信号叠在一起形成全局交通态势的认知。比如对单点的交通流的信息推理,如何发现拥堵的区域,如何找到早高峰的数据,如何发现出入口的拥堵,不仅需要对当前态势进行推断,还要对交通态势随着时间的变化进行预测。2、把认知结果翻译成S(决策)。在决策里非常需要交警的专业知识和经验的引入。结合AI的控制技术、控制手段,形成一整套策略,并把策略通过红绿灯信号或者是导流屏或者导流短信实施下来。现在最常用的感知技术是摄像头技术,在此基础上提出新的一种更加高效的、精度更高的深度学习框架——胶囊投影。其思路是:分类,对每一个类别做一个胶囊子空间,每个子空间有特定识别的语义。做投影之后,它的长度跟角度利用胶囊网络最核心的思想,可以得到胶囊投影进行分类。在不改变网络复杂度的情况下,以网络的容量、参数规模和运算时间来做度量复杂度。在同样复杂度下能够比其他深度学习的网络分类准确率提高20%以上。另外,利用多模态的数据对多模态进行感知。选择多模态。一是因为电警数据有死角,需要结合其他多传感器的数据,比如地磁跟雷达数据,扩大探测范围,形成互补;二是要采集浮动车数据。利用浮动车数据,把浮动车低采样、低密度的数据恢复成高采样、全路网的数据。智能交通决策控制是把认知的信号通过推理的方法上升到感知跟语义信号的高度之后,就可以识别出来拥堵区。为了把语义地图转换成可以执行的控制交通策略,首先要把语义地图做一个表达,通过语义地图原始输入的data,把它翻译成交通地图做一个全景表达的representation,在这个过程中可以把专家的知识输入进去,就是Graph作为输入,然后专家的指挥数据作为一个输出,作为有监督的训练,这种方法是一种模仿型的自动决策的方法。除了模仿型方法之外,我们也可以利用强化学习的方法,强化学习仍然是基于Graph Representation全局的表达,但是这个时候不是用专家的知识,而是用全区的可以评估的指标。这两种方法可以融合起来,既可以把专家给出来的指挥策略作为信号,也可以用AI技术、强化学习来训练神经网络。PISC方案已经在很多城市进行试点,有的已经进行全方案的部署。以一个北京路口为例,利用TrafficGO系统把平均延误时间下降25%,全干道平均延误下降15%,这是用第三方浮动车数据测出来的结果,可见人工智能技术在试点的路口已经取得了好的结果。华为专家在演讲中提到,随着智慧城市建设的大力投入和深入开展,EI人工智能技术在高效疏导交通拥堵,提高城市出行效率,及时响应交通事故和其他紧急事件,快速建立应急车辆的绿色通道,以及保障和提高民生, 建成人和生态环境和谐发展的智能城市体等方面发挥关键性的作用。三、华为云HiLens:端云协同AI平台在AI技术实际落地过程中,诸多场景如摄像头智能监控、医疗影像分析、智能车载系统等遇到数据上云成本高、计算延时大、隐私风险、AI应用开发上手困难、AI应用本地维护困难等挑战,极大的阻碍了云上强大AI能力的价值落地。因此,将云上AI能力便利的部署到离应用场景更近的边缘或终端设备上,能很好解决这一系列问题。在2018年10月召开的华为全联接大会上,华为云重磅发布了一站式视觉AI应用开发、部署和管理服务平台——HiLens,以解决当下"端-边-云"场景下亟待解决的开发问题。在本次大会现场,华为云HiLens研发负责人也带来了相关演讲,详细拆解了HiLens平台架构及关键能力。演讲伊始,他先整体讲解了华为云EI布局,并引入对 HiLens的介绍。目前,云上AI服务落地依然存在很多的问题和挑战,主要的五项包括成本、延时、场景、隐私及边缘端侧AI应用的部署和维护难。针对高成本、低延时、复杂场景、数据安全和部署维护等问题,华为云推出了HiLens平台服务。其主要能力包括:一、可以管理高达百万量级的设备;二、通过在算法和业务层面将AI的应用拆分成端的部分和云的部分。以摄像头监控行业为例,在家用摄像头上可以做人形、人脸比对、家庭成员的搜索等等,华为将预处理或者基础的能力放在低成本的摄像头上,然后输出小图传输到云侧进行比对,并在端侧把大量的数据忽略掉,所以成本会大幅降低;三、HiLens平台构建的也是一个Skill Market的生态,到2019年,华为和第三方合作伙伴开发的针对各个行业的几百个技能、应用,都会放到Skill Market里。HiLens的整个平台架构主要分为三个部分,最上层是针对行业已经实现的应用,下层分成端侧和云侧,端侧主要是基于不同的芯片、不同OS系统开发的整个AI技能在端侧运营的软件,包括算法成本和库、基本图像、语音处理的部分软件等,通过一套叫Skill Framework的服务提供给开发者,开发者可以简单高效地可以在端侧运行应用或技能;云侧主要提供边缘设备的管理,也包括应用开发和数据的管理。例如,在设备上产生的数据可以从端侧软件推到云侧做一个视觉化存储。HiLens平台包含以下几大特性和关键能力:1、针对Skill生态的开发者做Skill服务。模型依然是AI应用开发的核心,在华为云上, 模型的开发可以使用ModelArts,或者通过线下的导入到上面来,然后通过Framework将模型打包成技能,就可以下发到HiLens支持的边缘或者终端设备上。2、端侧算法开发框架Skill Framework检测。Skill Framework封装了视频分析算法基础组件,如图像处理、推理、日志等,开发者通过少量代码即可开发自己的Skill,同时,HiLens还可结合芯片进行性能优化,提供Python和C++接口,在HiLens平台上开发的Skill可以运行到任何基于华为海思芯片的设备上。3、模型优化、自动模型转换及压缩能力。包括网络蒸馏、通道剪枝、权重稀疏化、量化、模型转换等。4、上文中所提到的丰富的Skill Market,方便模型快速构建。5、设备实时采集视频流传输到云端,可视化管理多路视频流。目前,HiLens具备非常丰富的应用场景。例如,在智能园区中可精准追踪行人轨迹、识别车牌&车型等;在智慧家庭中实现陌生人告警、异常声音检测等;此外,在智能车载、智慧工地等场景中,HiLens也可以发挥其功用,达成对疲劳驾驶检测、安全和姿态监测等。本文转自:今日头条原文链接:https://www.toutiao.com/i6644031954968642056/
  • [认证交流] 华为云人工智能入门级开发者认证 - HCCDA-AI 第3章华为云EI-API服务介绍-知识传递
    获取您的EI红宝书:https://www.huaweicloud.com/ei/                     华为云EI服务介绍:https://mp.weixin.qq.com/s/f1McTHORZ3OHLSGJHGrc-Q            01 图像识别API服务介绍  https://mp.weixin.qq.com/s/OdfsOTDkBpwLucHhipaXlg            02 图像搜索API服务介绍  https://mp.weixin.qq.com/s/wkelUMwPi7yrgEQfASgODQ            03 内容审核API服务介绍  https://mp.weixin.qq.com/s/HC_aZCfIIF1Ke8ofsUeijw            04 文字识别API服务介绍  https://mp.weixin.qq.com/s/1y6pG2LM83cs4OexHLTBjw            05 自然语言处理API服务介绍  https://mp.weixin.qq.com/s/C196lNKhiA4oeaelvh92hQ            06 语音交互API服务介绍  https://mp.weixin.qq.com/s/QeJ2e7XN9E-Rw3lFSKeA4Q                                            云与数据- HCCDA-AI合集:https://mp.weixin.qq.com/mp/appmsgalbum?__biz=Mzg5Mjc4NjE1Nw==&action=getalbum&album_id=2398219468813811715&scene=173&from_msgid=2247483927&from_itemidx=1&count=3&nolastread=1#wechat_redirect**
  • [认证交流] 华为云人工智能入门级开发者认证 - HCCDA-AI 第2章 人工智能应用集成分析-知识传递
    ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652462002460141317.png) 获取您的EI红宝书:https://www.huaweicloud.com/ei/ # 1.1 AI技术发展现状及技术挑战 ## 1.1.1 计算机视觉发展现状及技术挑战 ### 是什么? https://www.huaweicloud.com/product/image.html 计算机视觉是使计算机能理解采集设备采集的图像视频的一门学科。形象地说,就是给计算机安装上眼睛(照相机)和大脑(算法),让计算机能够感知环境。 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461416874478021.png) 如上图所示,真实的世界通过人眼成像,再传递给大脑进行理解,达到理解图像的目的;在机器视觉中,采集设备作为传感装置采集图像,将图像传递给计算机解读,最终达到计算机像人一样“读懂”图片的目的。 ### 能干什么? ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461565072415693.png) ### 有什么? ##### ① 视觉任务划分 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461621537644789.png) 中级视觉的物体检测包含2个任务:物体定位和分类 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461822933594109.png) 有时我们也会说计算机视觉有四大类任务:分类、定位、检测、分割。 ##### ② 视觉的三个层次 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461688891753994.png) 底层一般是像素级处理,比如亮度增强、直方图、直方图均化等; 中层即从中分析一些边缘、朝向、纹理等这些特征,可以对图片进行一个分割; 高层需要我们从中得到一些语义信息,比如图片中间是老虎,下边是沙滩,绿色的是草地,这可能是一个野外场景 ### 面临的挑战? ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461373371901001.png) ## 1.1.2 自然语言处理发展现状及技术挑战 ### 是什么? https://www.huaweicloud.com/product/nlpf.html 自然语言处理的处理主要包括两个部分:自然语言理解、自然语言生成 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461221554996108.png) ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652461261899121273.png) 自然语言理解(Natural Language Understanding,NLU) 使计算机理解自然语言(人类语言文字)等,重在理解。具体来说,就是理解语言、文本等,提取出有用的信息,用于下游的任务。如情感识别、意图识别、信息检索(包括个性化搜索和语义搜索,文本匹配等)、信息抽取(命名实体提取、关系抽取、事件抽取等)。 自然语言生成(Natural Language Generation, NLG) 提供结构化的数据、文本、图表、音频、视频等,生成人类可以理解的自然语言形式的文本。NLG又可以分为三大类,文本到文本(text-to-text),如翻译、摘要等;文本到其他(text-to-other),如文本生成图片;其他到文本(other-to-text),如视频生成文本。 ### 能干什么? 例: 智能问答 舆情分析 文本分类 实体抽取 摘要生成 AI写诗 机器翻译 内容审核 文本互译 ...... ### 面临的挑战? ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652460754955869960.png) ## 1.1.3 语音处理发展现状及技术挑战 ### 是什么? https://www.huaweicloud.com/product/rasr.html ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652460634874321882.png) ### 能干什么? 例: 实时字幕 会议记录 语音搜索 语音导航 有声阅读 ### 面临的挑战? ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652460728571303721.png) # 1.2 AI应用需求分析 ## 1.2.1 传统软件应用开发与AI应用开发对比 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459466560286171.png) ## 1.2.2 为什么需要进行需求分析 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652460021313211343.png) ### 1.2.2.1 AI应用开发需求分析步骤 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459658947449743.png) ### 案例:实例演练--智能人体测温监测系统 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459719675956096.png) ##### ① 需求背景 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459902567976285.png) ##### ② 需求价值 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459918708130176.png) ##### ③ 需求描述 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459926968703140.png) ##### ④ 问题抽象 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459936087416782.png) ##### ⑤ 可行性分析 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652459955955590397.png) 人工智能入门级开发者认证:https://edu.huaweicloud.com/certificationindex/developer/aaabf9760a3f4578aa620155e1fcae86 ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/14/1652462051683666717.png)
  • [认证交流] 华为云人工智能入门级开发者认证 - HCCDA-AI 更多Other章节 -- 云与数据
    ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/15/1652596136464466668.png) - **获取您的EI红宝书:https://www.huaweicloud.com/ei/** ![image.png](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/15/1652596251686657653.png) ![公众号.jpg](https://bbs-img.huaweicloud.com/data/forums/attachment/forum/20225/15/1652596841773138256.jpg) - **云与数据** https://mp.weixin.qq.com/mp/appmsgalbum?__biz=Mzg5Mjc4NjE1Nw==&action=getalbum&album_id=2398219468813811715&scene=173&from_msgid=2247483927&from_itemidx=1&count=3&nolastread=1#wechat_redirect**
  • [认证交流] 华为云人工智能入门级开发者认证 - HCCDA-AI 第1章 人工智能概览-知识传递
    获取您的EI红宝书:https://www.huaweicloud.com/ei/1.1 人工智能定义   人工智能 (Artificial Intelligence)是研究、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。                                1.1.1 两个智能:强人工智能 vs 弱人工智能          强:有可能制造出真正的推理和解决问题的智能机器;有知觉;有自我意识;有自己的价值观和世界观体系          弱:不能制造出真正的推理和解决问题的智能机器;看起来智能但并不拥有智能;无自主意识  1.1.2 三个阶段:  1.1.3 四个要素:数据、算法、算力、场景    AI、机器学习、深度学习的关系1.2 人工智能发展历史    1.3 人工智能产业生态  https://report.iresearch.cn/report/202201/3925.shtml(下载链接)  https://report.iresearch.cn/report/202203/3962.shtml(下载链接) 1.3.3 人工智能技术架构   1、基础架构层          大数据:数据是真实世界不同现象的抽象表达,我们可以处理这大数据并能挖掘有价值的信息,知识甚至“智慧”          计算机硬件:CPU、GPU、Ascend910  2、算法层          机器学习:脑海里寻找一个问题答案的过程就是一个机器学习的过程          神经网络和深度学习:人类神经网络、感知器、深度神经网络 (前馈网络,反馈网络,图网络)  3、技术方向          计算机视觉:内容审核、图像搜索、语义分割、人脸检测、车辆检测、图像分类          语音处理:          自然语言处理:   4、应用领域          智慧城市:全城感知、全城预警、全城检索、全城协同          金融:智能投顾、智能投研、智能理赔、智能支付(人脸、指纹、虹膜、声纹)、智能风控          零售:设计、生产制造、收益管理、供应链管理、电商、线下零售          医疗:语音录入病历、医疗影像分析、综合型诊疗、身体健康管理、医疗机器人、医学药物研发          农业:数据分析与预测、降低农药成本、智降低农业收割成本、临空系统1.4 人工智能落地挑战 1.4.1 数据的挑战  1、数据获取          数据积累不足          数据质量差          数据安全合规          数据归属权   2、数据治理          多源异构数据          非结构化数据          海量数据存储与应用   3、数据标注          小场景数据采集          复杂业务场景理解          数据安全 1.4.2 缺乏解释性          深度学习系统的弱解释性给现有的AI系统带来了安全性、稳定性的挑战 1.4.3 算法的偏见          算法的偏见主要源于数据的偏见(如:数据名词认知观点不一致,造成歧视,产生差异) 1.4.4 隐私问题          人工智能算法都是数据驱动,获取大量的用户数据1.5 人工智能发展趋势          1.5.1更完善的人工智能基础数据服务:  1.5.2 更安全的数据共享:          联邦学习在保证数据隐私安全的前提下,利用不同数据源合作训练模型,进一步突破数据的瓶颈 1.5.3 端-边-云全面发展的算力:          应用于云端、边缘设备、移动终端的人工智能芯片规模不断增长 1.5.4 大模型与轻量化:          应对移动终端及各种边缘设备部署的挑战             1.5.5 更易用的框架:          MindSpore、TensorFlow 2.x、Pytorch等主流开发框架都在朝易用、全能的方向演进,不断降低人工智能的开发门槛1.5.6 不断突破的应用场景:          缓解心理问题、自动车险定损、后端办公自动化、…… 1.6 华为AI解决方案          1.6.1 全栈全场景AI解决方案介绍全栈(Full Stack):          技术功能视角;指包括云底座、芯片(昇腾)、开发/训练/推理框架MindSpore和AI使能能力在内的全堆栈方案全场景(All Scenarios):          指包括公有云、私有云、各种边缘计算、物联网行业终端以及消费类终端等部署环境MindSpore:          支持端、边、云独立的和协同的统一训练和推理框架CANN:          芯片算子库和高度自动化算子开发工具Ascend:          基于统一、可扩展架构的系列化AI芯片(Ascend 310和Ascend 910芯片是一款华为自研的云端AI芯片)  1.6.2 企业智能AI开放能力介绍               1. ModelArts          面向AI开发者的一站式开发平台,提供海量数据预处理及半自动化标注、大规模分布式训练、自动化模型生成及端-边-云模型按需部署能力,帮助用户快速创建和部署模型,管理全周期AI工作流。             面向不同经验的AI开发者,提供便捷易用的使用流程          1、面向业务开发者,不需关注模型或编码,可使用自动学习流程快速构建AI应用;          2、面向AI初学者,不需关注模型开发,使用预置算法构建AI应用;          3、面向AI工程师,提供多种开发环境,多种操作流程和模式,方便开发者编码扩展,快速构建模型及应用。  2.ModelArts Pro           面向企业可以拿来即用的专业AI开发套件。基于华为云的先进算法和快速训练能力,ModelArts Pro提供预置工作流和模型,提升企业AI应用的开发效率,降低开发难度。            同时,支持客户自主进行工作流编排,快速实现应用的开发、共享和发布,共建开放生态,实现普惠行业AI落地,真正实现赋能行业AI 应用开发者,全面提升行业AI 开发效率和落地效果。ModelArts Pro套件包括自然语言处理套件、文字识别套件、视觉套件等,能够快速响应不同行业、不同场景的AI落地需求。  3.HiLens  4.AI Gallery          http://huaweicloud.ai  5.盘古大模型          盘古大模型承载在AI Gallery平台,从AI Gallery订阅之后,即可在ModelArts中使用          华为云盘古大模型可以实现一个AI大模型在众多场景通用、泛化和规模化复制,减少对数据标注的依赖。相对于以前的作坊式开发,AI工业化开发效率可以提升10~100倍,同时AI模型具备更佳的性能。  6.智能体          华为云智能体以云为基础,以AI为核心,通过统一的平台和架构,将云、大数据、AI等创新技术与行业机理、专家知识融合,提供一体化协同的智能服务,挖掘数据价值,助力政企智能升级,构筑领先优势  城市智能体:( 1+ X + N    平台+引擎+应用)          城市AI开发运营平台 + (数据管理引擎、全域感知引擎、知识计算引擎、机器人引擎 、调度引擎等)+  一网通办、一网通管、一号通、智慧供热、智慧公交  交通智能体:(宏观--中观--微观)          市级交通大屏          区级交通大屏          路口交通大屏          诊断数据大屏  工业智能体:          焦化配煤(质量预测精度提升)、炼钢配料(成分预测准确率提升)、板材切割(利用率提升)  医疗智能体:(医院、制药公司、研究机构)          靶基因发现、新应用发现、生物标志物研院、AI辅助药物设计等          在线推理 -- AI预测服务、开发环境 -- Notebook分析服务人工智能入门级开发者认证:https://edu.huaweicloud.com/certificationindex/developer/aaabf9760a3f4578aa620155e1fcae86
  • [热门活动] 【华为伙伴暨开发者大会-EI大数据分会场】参与EI社区互动,寻找答案赢好礼
     活动说明:欢迎参与评论区留言互动,活动结束我们将选取5位高赞的留言赠送精美礼物一份。活动话题:说说你理解的数据治理平台需要包含哪些功能,可以解决哪些业务卡点?活动时间:         2022年5月23日-2022年6月30日奖励说明:活动小助手将会用心查看参与活动的用户评论,选取5位高赞的留言赠送蓝牙鼠标一份解锁问卷答案:下列哪个大数据服务可以提供数据调度、数据建模、数据治理、数据分析等能力?答案:B.DGC分析:数据湖治理中心(DGC)是数据全生命周期一站式开发运营平台,提供数据集成、数据开发、数据治理、数据服务、数据可视化等功能,支持行业知识库智能化建设,支持大数据存储、大数据计算分析引擎等数据底座,帮助企业客户快速构建数据运营能力。官网:https://www.huaweicloud.com/product/dayu.html知识大比拼,你答对了吗?《智能数据湖》微信公众号:ei-datalake大数据免费资源领取:https://activity.huaweicloud.com/Date-free.html
  • [其他] EI企业智能2022年4月高热贴合集
    ## EI企业智能2022年4月高热贴合集 以下是EI企业智能板块在2022年4月份的高热贴的合集。从合集中基本可以看出,本月DWS板块的热度是相对比较高的。 ## 数仓GaussDB(DWS) dws-分区表,可以根据字段值分区吗:https://bbs.huaweicloud.com/forum/thread-185029-1-1.html GAUSSDB200 怎么样通过系统表批量查看所有的表是行存储、还是例存储方式?:https://bbs.huaweicloud.com/forum/thread-185026-1-1.html GaussDB A 8.0.0.1线下版本,100+节点时,其中50+节点为扩容时加入,使用一段时间后存在原本节点和扩容节点存在:https://bbs.huaweicloud.com/forum/thread-184869-1-1.html There is no hash distributable column:https://bbs.huaweicloud.com/forum/thread-184799-1-1.html 【DWS】【登录认证】如何实现免密登录?:https://bbs.huaweicloud.com/forum/thread-184822-1-1.html gds建立外表固定字段长度含中文字符报错: https://bbs.huaweicloud.com/forum/thread-185940-1-1.html copy query 与copy table 语法执行效率问题:https://bbs.huaweicloud.com/forum/thread-185667-1-1.html 高斯数据库select和drop某个表报错:https://bbs.huaweicloud.com/forum/thread-185310-1-1.html like '%XXX%' 这种条件的语句如何优化性能:https://bbs.huaweicloud.com/forum/thread-185581-1-1.html GaussDB DWS对磁盘数量的要求:https://bbs.huaweicloud.com/forum/thread-186188-1-1.html GaussDB A 800版本,使用连接池疑问:https://bbs.huaweicloud.com/forum/thread-186100-1-1.html spark 读hive 写gaussdb 问题求助:https://bbs.huaweicloud.com/forum/thread-186137-1-1.html 【GaussDB DWS】请问有没有适用于Euler-aarch64系统的GaussDB性能测试工具?:https://bbs.huaweicloud.com/forum/thread-186136-1-1.html ## ModelArts 【ModelArts产品】【训练管理功能】无法解决error: unrecognized arguments:https://bbs.huaweicloud.com/forum/thread-184768-1-1.html 用ModelArts预训练完Bert后,想进行网络评估,为什么无法找到评估数据集? https://bbs.huaweicloud.com/forum/thread-185981-1-1.html 使用官方的bert源码,运行报错run task error: https://bbs.huaweicloud.com/forum/thread-185786-1-1.html 【vscode插件】链接实例后打不开:https://bbs.huaweicloud.com/forum/thread-185729-1-1.html 【npu_convert_dropout】无法导入npu_convert_dropout:https://bbs.huaweicloud.com/forum/thread-185424-1-1.html ## MRS 【MRS产品】【hive功能】报错 return code 2 from org.apache.hadoop.hive.ql:https://bbs.huaweicloud.com/forum/thread-184739-1-1.html 华为云mrs中habse如何按照时间戳查询habse数据并抽取到关系数据库中?:https://bbs.huaweicloud.com/forum/thread-184891-1-1.html ## 自然语言处理 【知识图谱】【产品文档】文档中“创建信息抽取模型”中“准备数据”问题:https://bbs.huaweicloud.com/forum/thread-185008-1-1.html 【知识图谱】【模型】MRC-BM中Dataset数据创建和修改问题:https://bbs.huaweicloud.com/forum/thread-185846-1-1.html ## 数据湖处理中心DGC 数据开发-hive脚本页面如何使用变量:https://bbs.huaweicloud.com/forum/thread-184952-1-1.html 【DGC产品】【规范设计功能】拉链表和镜像表一类应该放在哪一层:https://bbs.huaweicloud.com/forum/thread-184669-1-1.html 请问怎么把乌兰一数据同步到乌兰二零三中,环境防火墙是否可以打通:https://bbs.huaweicloud.com/forum/thread-184511-1-1.html 作业开发-restClient模块如何操作MRS的es索引:https://bbs.huaweicloud.com/forum/thread-185459-1-1.html ## DIS DIS添加转储MRS任务时填写HDFS路径显示无效的: https://bbs.huaweicloud.com/forum/thread-185767-1-1.html ## FusionInsight kafka接口调用样例中,创建机机账号测试时,身份认证报错:https://bbs.huaweicloud.com/forum/thread-185886-1-1.html FI产品 使用idea本地调式spark sql 如何配置:https://bbs.huaweicloud.com/forum/thread-185621-1-1.html 【mrs产品】【hive功能】springboot启动可以登录zk,hive连接执行语句报错:https://bbs.huaweicloud.com/forum/thread-185497-1-1.html 【Spark】【提交任务】提交Spark任务时,报错找不到主类:https://bbs.huaweicloud.com/forum/thread-186395-1-1.html
  • [其他] 【EI企业智能】2022年3月高热贴合集
    ## EI企业智能2022年3月高热贴合集 以下是EI企业智能板块在2022年3月份的高热贴的合集。从合集中基本可以看出,ModelArts子板块的热度是相对比较高的。 ## 语音交互服务 【SIS】【SIS】语音服务不支持跨区访问OBS :https://bbs.huaweicloud.com/forum/thread-181862-1-1.html 【SIS】【SIS】服务区有点少 : https://bbs.huaweicloud.com/forum/thread-181672-1-1.html ## 数仓GaussDB(DWS) 升级8,.0.0.9补丁后更换jdbc包和gds包,会有一个过程替换,使用以前的8.0.0.1的jdbc包和gds包是否有问题? : https://bbs.huaweicloud.com/forum/thread-182347-1-1.html data studio 导出ddl 失败,提示:导出/显示DDl执行过程失败: https://bbs.huaweicloud.com/forum/thread-181175-1-1.html GaussDB 产品是否可以部署在 海光、飞腾、龙芯、申威服务器上? : https://bbs.huaweicloud.com/forum/thread-181970-1-1.html Jmeter连接gaussdb报错 : https://bbs.huaweicloud.com/forum/thread-182616-1-1.html ## ModelArts pyltp无法安装 : https://bbs.huaweicloud.com/forum/thread-181292-1-1.html 【modelarts训练找不到路径】 : https://bbs.huaweicloud.com/forum/thread-181332-1-1.html 【XXX产品】【XXX功能】一句话描述问题(编者注:Python依赖库安装问题) :https://bbs.huaweicloud.com/forum/thread-180799-1-1.html 【jupyterLab】【notebook】python版本环境可以指定吗?:https://bbs.huaweicloud.com/forum/thread-180813-1-1.html ModelArts数据集在训练中如何使用 : https://bbs.huaweicloud.com/forum/thread-183412-1-1.html 模型精度过低应该如何改进 : https://bbs.huaweicloud.com/forum/thread-183516-1-1.html 【JupterLab】【Pytorch1.0.0】conda环境更新了某个库,重启后如何可以不再次更新?https://bbs.huaweicloud.com/forum/thread-183410-1-1.html 【ModelArts】【Notebook】在notebook中无法存储网络的训练结果 : https://bbs.huaweicloud.com/forum/thread-183040-1-1.html ## 文字识别 现在ocr服务支持电子驾驶证识别吗? https://bbs.huaweicloud.com/forum/thread-175667-1-1.html ## MRS 【MRS产品】【Flink功能】table api的maven信息是什么 : https://bbs.huaweicloud.com/forum/thread-182573-1-1.html ## Hilens Hilens 播放音频报错 : https://bbs.huaweicloud.com/forum/thread-181994-1-1.html
  • [其他] EI论坛ModelArts技术干货FAQ合集
    AI市场原版YOLOv3实现人车检测--ModelArts与Atlas 200 DK的端云协同看图学NumPy:掌握n维数组基础知识点,看这一篇就够了【手摸手学ModelArts】一键抠图,轻松上手!【手摸手学ModelArts】Copy攻城狮信手”粘“来 AI 对对联手把手教您体验ModelArts NotebookModelArts自动学习实现北京冬奥会与残奥会吉祥物识别基于华为云智能问答机器人的AI诗歌生成保姆级视频教学-[联动]"蚂蚁牙黑"学习记录&实操练习 【基于ModelArts】带你零代码开发检测口罩是否佩戴的模型用ModelArts轻松玩转Python正则表达式和魔法方法
  • [技术干货] 应用场景分享——WeAutomate华为云EI-OCR服务控件的使用
    一、EI-OCR操作控件介绍二、环境准备       华为云EI-OCR提供了两种识别方式:本地识别和华为云识别。其中本地识别是通过连接调用本地环境中的华为一体机上部署的华为云OCR服务,完成OCR识别,华为云识别则是通过用户自己的华为云IAM账号连接华为云端的华为OCR服务,完成OCR识别本地版环境准备:      1. 部署有华为云EI-OCR服务的华为一体机,并保证其服务处于启动状态,由于部署成本较高,非情况特殊不推荐使用华为云版环境准备:1、安装WeAutomate的pc可以连接华为云;2、已完成实名认证的可以正常使用的华为云账号 ,登录后获取账号下IAM账号信息。获取方法:通过登录华为云账号打开进入链接cid:link_1创建用户,生成IAM子用户账号,如下图所示:3、开通订阅所需的相关的OCR服务,通过使用华为云账号登录如下链接 cid:link_0,选择华为云region代号(目前ocr主力region是: 华北-北京一(cn-north-1)、华北-北京四(cn-north-4)、华东-上海一(cn-east-3)、华东-上海二(cn-east-2)、华南-广州(cn-south-1)),然后点击开通服务,如下图所示:注意:账号需要开通对应地区的华为云OCR服务,可自行下单购买。三、EI-OCR操作控件的使用使用EI-OCR识别控件,首先需要使用前置控件连接EI-OCR服务,连接服务的方式分为如下本地版和华为云版两种方式,具体情况如下图所示,填入参数连接服务即可:1、前置控件-本地版/inputAccountNoToken控件的返回值retValue可以看到是否取到token,务必取到token以后再继续下一步。  2、前置控件-华为云版/inputAccountByToken控件的返回值retValue可以看到是否取到token,务必取到token以后再继续下一步。  下图以EI_OCR火车票识别控件为例为例实现识别提取火车票中的文字信息
  • [其他] ECF安装-Region:EI 公共CDK集群 master 节 失败
    问题现象:1.Region:EI 公共CDK集群 master 节 失败 2.错误信息:‘ConsoleOnlieUtil' object has no attbute 'online_silvan_address'问题版本:HCS 8.0.3问题处理:1.查看日志,失败报错:consoleOnlieUtil object has no attbute 'online_silvan_address'2.查看报错日志/opt/FusionCloudDeploy/FusionCloudDeploy/utils/business/consoleoneline_util.py 文件25行执行失败3.登录到部署工具后台进入到目录:vim /opt/FusionCloudDeploy/FusionCloudDeploy/utils/business/consoleoneline_util.py 文件25行脚本问题,更改slef.online_silvan_address = self.get_online_silvan_address()4.重启工具服务:/opt/FusionCloudDeploy/fspscripts/fsp restart5.重新试工程,问题解决
  • [技术干货] 智慧园区Cube数字平台部署华为云EI边缘算法(实时告警和统计)
    园区支持EI算法目前园区支持场景对应的华为云EI算法如下:表1 EI算法范围算法场景视觉分析服务功能(X86)关键岗位检测告警边缘关键岗位-T4M烟火检测告警边缘烟火检测-T4M占道经营告警边缘占道经营检测-T4M园区进出人流统计边缘人流量统计-T4M打架检测告警边缘打架检测-T4M消防通道占用告警消防通道占用-T4M吸烟动作告警边缘吸烟动作-T4M人员倒地告警边缘个体动作-T4M前提条件部署边缘算法的华为云账号具有以下权限。华为云IAM账号权限请参考华为云官方文档。IEF部署权限:Tenant AdministratorIVA权限:至少以下自定义策略权限:{ "Version": "1.1", "Statement": [ { "Action": [ "iam:agencies:createAgency", "iam:agencies:listAgencies", "iam:agencies:getAgency", "iam:permissions:listRolesForAgencyOnDomain", "iam:permissions:listRolesForAgencyOnProject", "iam:permissions:grantRoleToAgencyOnProject", "iam:permissions:revokeRoleFromAgencyOnProject", "iam:permissions:grantRoleToAgencyOnDomain", "iam:permissions:revokeRoleFromAgencyOnDomain", "iam:permissions:checkRoleForAgencyOnProject", "iam:permissions:checkRoleForAgencyOnDomain", "iam:roles:createRole", "iam:roles:listRoles", "iam:roles:getRole" ], "Effect": "Allow" } ] }边缘节点已经注册并纳管到IEF。参考环境准备中的“纳管边缘节点”。摄像头已经注册到IEF设备管理或接入VCN。操作步骤下面以部署入侵检测算法(X86)为例介绍,其他算法的部署方法类似。登录视觉分析控制台(VAS)。选择“边缘运行池”,单击“新增”。选择“视觉分析作业”,单击“创建”。
  • [技术干货] EI-OCR中的“前置控件-华为云版”如何配置与使用 ||报错信息“flag_token缺失,可能是因为前置组件未添加”
    【EI-OCR中的“前置控件-华为云版”如何配置与使用】或者是【报错信息有“flag_token缺失,可能是因为前置组件未添加”字样】--->      都是需要添加与配置“inputAccountByToken”控件1. 进入 https://console.huaweicloud.com/iam/?region=cn-north-4#/iam/users, 在图1中点击创建用户,需要创建一个子用户,用于填入图2中的“华为云IAM用户名”和“华为云IAM密码”(保证华为云账号名与华为云IAM用户名不一样),过程中有个权限“admin”,需要将其右移(这个在操作的过程中会出现,很简单,看到相应的页面就会了)。图1图22. 点击上一点网页中的左上角的“三条线”按钮,再在输入框中输入“ocr”,之后点击“文字识别 OCR”,如图3图33. 在图4选择“北京四”(此地区包含的服务较多),并在图5中选择需要的产品,在对应的产品描述的后面中选择“开通服务”(有一定免费次数的调用,标号1是未开通的情况,标号2是开通的情况)图4图54. (仅针对华为内网用户) 需要在http、https代理处设置相应的值,http设置为http://W3账号:密码@proxy.huawei.com:8080/,https设置为https://W3账号:密码@proxy.huawei.com:8080/ 。且因为使用的是proxy代理,所以用EI-OCR控件,需要确保图片大小(最好小一些,不然会报错,proxy代理携带不了太大的图片的base值)
  • [内容拦截申诉] 【EI企业智能】论坛帖子,1*24小时了也没审核通过呀~
    2个帖子,地址是:https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=157931和https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=157928
总条数:150 到第
上滑加载中