• [其他] EI企业智能2022年7月高热贴合集
    ## EI企业智能2022年7月高热贴合集 以下是EI企业智能板块在2022年7月份的高热贴的合集,虽然今年的三伏天已热的突破历史,但本月AI开发平台ModelArts、数仓GaussDB(DWS)板块的热度更高。 另外板块名称有一些小小的修改,比如 **ModelArts** 改为了 `AI开发平台ModelArts` **HiLens** 改为了 `华为HiLens & ModelBox` 新名称新气象啊~ ## 数仓GaussDB(DWS) GaussDB 8.0.0.1版本 巡检工具806,互信中提到的sshTool.sh文件从哪里获取?https://bbs.huaweicloud.com/forum/thread-193193-1-1.html autovacuum如何配置可以实现定时全库全表analyse?https://bbs.huaweicloud.com/forum/thread-193348-1-1.html 【DWS】【sql】pg_stat_user_functions 为什么没有数据:https://bbs.huaweicloud.com/forum/thread-193726-1-1.html dws中sql在执行Streaming(type: REDISTRIBUTE)之前先进行HashAggregate是否能提升性能:https://bbs.huaweicloud.com/forum/thread-193978-1-1.html 【GaussDB 8.1.1】【Oracle的months_between函数迁移】Oracle函数迁移效率不行:https://bbs.huaweicloud.com/forum/thread-193925-1-1.html gaussdb如果查询所有表名及主键字段名称?或者如何查询单表的主键字段名称:https://bbs.huaweicloud.com/forum/thread-193958-1-1.html 如何通过sql实现全表的分析:https://bbs.huaweicloud.com/forum/thread-194033-1-1.html 修改autovacuum参数时报错:https://bbs.huaweicloud.com/forum/thread-193927-1-1.html MRS的Flink连接DWS,运行12小时报错:https://bbs.huaweicloud.com/forum/thread-194438-1-1.html dws执行计划中的actual time代表什么:https://bbs.huaweicloud.com/forum/thread-194574-1-1.html 为何 DWS to_date(xxx,'yyyymmdd')关联比 cast(xxx as date) 关联效率慢:https://bbs.huaweicloud.com/forum/thread-194316-1-1.html 【数仓GaussDB(DWS)】【bytea类型】使用postgresql.jar驱动包解析出错:https://bbs.huaweicloud.com/forum/thread-195190-1-1.html 【华为云DWS】【ODBC】PHP ODBC连接公有云上的DWS数据库怎么操作啊:https://bbs.huaweicloud.com/forum/thread-195440-1-1.html 【GaussDB】【bytea类型】column "bytes_" is of type bytea but expressio:https://bbs.huaweicloud.com/forum/thread-195501-1-1.html GaussDB(DWS)存储过程exception捕捉others异常后,记录日志的语句不会提交:https://bbs.huaweicloud.com/forum/thread-195599-1-1.html ## AI开发平台ModelArts 【CodeLab】开发环境有点老,有计划更新吗:https://bbs.huaweicloud.com/forum/thread-192975-1-1.html 2022华为开发者大赛 · 崇本英才·智汇吴江· 无人车挑战赛 判分失败 scoring job failed:https://bbs.huaweicloud.com/forum/thread-193791-1-1.html 【沈阳昇腾创新中心+openlab训练回归模型警告问题】(NPU使用问题):https://bbs.huaweicloud.com/forum/thread-193768-1-1.html 用yolov5模型训练,上传数据集应该遵循哪种格式,是否需要添加验证集?https://bbs.huaweicloud.com/forum/thread-193706-1-1.html ModelArts支持视频流分析吗? https://bbs.huaweicloud.com/forum/thread-193943-1-1.html modelarts训练作业时,从obs下载文件,下载速率是多少?https://bbs.huaweicloud.com/forum/thread-193705-1-1.html 【Codelab】请问下Codelab里打开的notebook,是否可能SSH接入:https://bbs.huaweicloud.com/forum/thread-194854-1-1.html 【ModelArts】【Notebook】VScode不能用SSH连接ModelArts Notebook:https://bbs.huaweicloud.com/forum/thread-194556-1-1.html ModelArts训练开发故障“临终遗言“:https://bbs.huaweicloud.com/forum/thread-194442-1-1.html 【在线服务】【404】在线服务部署后预测失败是什么原因呀:https://bbs.huaweicloud.com/forum/thread-194910-1-1.html 【数据集】【分割】请教一下这个数据集的annotation怎么看?https://bbs.huaweicloud.com/forum/thread-194873-1-1.html 【ModelArts产品】【模型训练功能】用coco2014数据集训练yolov3-darknet53模型报错:https://bbs.huaweicloud.com/forum/thread-194920-1-1.html 金融情绪分析FinBERT 无法正常跑通(调小batch):https://bbs.huaweicloud.com/forum/thread-195281-1-1.html 【ModelArts产品】【模型训练功能】tacotron2训练报错,缺少unidecode模组:https://bbs.huaweicloud.com/forum/thread-195327-1-1.html notebook的资费是不是涨了:https://bbs.huaweicloud.com/forum/thread-195442-1-1.html ## 华为HiLens & ModelBox 用hilens studio创建技能时,再导入OM文件时,一直在报导入模型失败:https://bbs.huaweicloud.com/forum/thread-194172-1-1.html hilens 技能开发页面导入自己模型,启动技能没反应:https://bbs.huaweicloud.com/forum/thread-193032-1-1.html HiLens如何用HDMI来连接显示屏:https://bbs.huaweicloud.com/forum/thread-193510-1-1.html hilens设备告警看不懂,日志内容怎么看:https://bbs.huaweicloud.com/forum/thread-194133-1-1.html hilens studio与手机摄像头实现视频流显示的错误:https://bbs.huaweicloud.com/forum/thread-194162-1-1.html hilens怎么保存视频(推理后):https://bbs.huaweicloud.com/forum/thread-194037-1-1.html hilens的摄像头如何录制视频,并且保存在自己想要保存 的位置:https://bbs.huaweicloud.com/forum/thread-194434-1-1.html 打不开hilens kit的ip地址:https://bbs.huaweicloud.com/forum/thread-194688-1-1.html ## 混合云FusionInsight hive元数据库连接:https://bbs.huaweicloud.com/forum/thread-192987-1-1.html Flink的准备安全认证问题:https://bbs.huaweicloud.com/forum/thread-193349-1-1.html flink提交任务运行失败:https://bbs.huaweicloud.com/forum/thread-193657-1-1.html 如何查看sceurity 是否配置成功(Flink客户端):https://bbs.huaweicloud.com/forum/thread-193744-1-1.html Flink的JDBCsink,batchintervalMs和BatchSize参数问题:https://bbs.huaweicloud.com/forum/thread-195124-1-1.html spark客户端提交代码报错Unable to obtain password from user 找不到密码:https://bbs.huaweicloud.com/forum/thread-195544-1-1.html ## MapReduce服务 【MRS产品】【hetuengine功能】hetu配置clickhouse数据源与clickhouse查询的结果不一致:https://bbs.huaweicloud.com/forum/thread-192997-1-1.html 【MRS产品】【hetu配置数据源功能】hetu是否能配置hive的内置元数据库数据源:https://bbs.huaweicloud.com/forum/thread-193786-1-1.html 【MRS】【hetu查询】进入hetu命令行不管输入什么都报错:Error running command: java.net.:https://bbs.huaweicloud.com/forum/thread-195417-1-1.html
  • [其他] EI企业智能2022年6月高热贴合集
    ## EI企业智能2022年6月高热贴合集 以下是EI企业智能板块在2022年6月份的高热贴的合集。从合集中基本可以看出,本月HiLens、ModelArts、DWS板块的热度是相对比较高的。 ## 数仓GaussDB(DWS) 哪张系统表记录最后一次vacuum full时间:https://bbs.huaweicloud.com/forum/thread-190851-1-1.html GaussDB 200 6.5.1 配置规划工具 04.xlsm---求模板:https://bbs.huaweicloud.com/forum/thread-192240-1-1.html 【DWS】想把所有存储过程的定义导出来,有什么办法?:https://bbs.huaweicloud.com/forum/thread-192467-1-1.html 如何定时analyse所有库所有表,或者特定库的所有表:https://bbs.huaweicloud.com/forum/thread-192662-1-1.html 安装gaussdb出现Failed to umount cgroup问题:https://bbs.huaweicloud.com/forum/thread-192748-1-1.html ## ModelArts 【modelarts】【codelab】试用的p100 gpu不生效,还是cpu机器:https://bbs.huaweicloud.com/forum/thread-189823-1-1.html python包如何导入:https://bbs.huaweicloud.com/forum/thread-190016-1-1.html 模型发布问题,请专家进来看看(model目录下存在多个模型):https://bbs.huaweicloud.com/forum/thread-59795-1-1.html 预置算法(怎么总结预置算法开发这一流程):https://bbs.huaweicloud.com/forum/thread-190684-1-1.html 如何使用np将文件写入fromfile,存储在OBS系统上:https://bbs.huaweicloud.com/forum/thread-191162-1-1.html 【NPU910产品】【tf1迁移模型】运行提示没有用到NPU:https://bbs.huaweicloud.com/forum/thread-190152-1-1.html Notebook中matplotlib使用中文显示问题:https://bbs.huaweicloud.com/forum/thread-192208-1-1.html 预置算法-华为云AI开发流水线:https://bbs.huaweicloud.com/forum/thread-190684-1-1.html 在modelarts跑bert的下游任务,报错。用的modelzoo上的案例代码,并将2分类修改为17分类。数据是客户自己的。:https://bbs.huaweicloud.com/forum/thread-192877-1-1.html 【Modelarts】【LSTM模型训练】数据集格式转换问题:https://bbs.huaweicloud.com/forum/thread-192876-1-1.html 【Modelarts】【STGCN模型训练】数据集格式转换问题:https://bbs.huaweicloud.com/forum/thread-192846-1-1.html ## HiLens 想要用pytorch 来部署一个技能,有没有可参考的文档,(从0开始部署的)(怎么在Studio转换om模型):https://bbs.huaweicloud.com/forum/thread-190225-1-1.html 【Hilens产品】【语音功能】应用pyttsx3文本转语音调试错误:https://bbs.huaweicloud.com/forum/thread-191381-1-1.html 播放acc音频报错:https://bbs.huaweicloud.com/forum/thread-191377-1-1.html 用Hilens Studio调试下发到Hilens kit的模型跑不起来:https://bbs.huaweicloud.com/forum/thread-192053-1-1.html 用Hilens Studio调试,加载模型失败:https://bbs.huaweicloud.com/forum/thread-192001-1-1.html ## MRS 下载MRS样例代码,maven报错(依赖问题):https://bbs.huaweicloud.com/forum/thread-191674-1-1.html ## FusionInsight 【数据可视化DLV】【数据连接是数据湖探索DLT】利用SQL语句查询时仅能传回50条数据?https://bbs.huaweicloud.com/forum/thread-190342-1-1.html 关于河图引擎:https://bbs.huaweicloud.com/forum/thread-192255-1-1.html ## MapReduce MapReduce 使用hue提交自己的spark jar 包不能执行成功:https://bbs.huaweicloud.com/forum/thread-190496-1-1.html 【MRS产品】如何从开源大数据平台切换MRS大数据平台:https://bbs.huaweicloud.com/forum/thread-192468-1-1.html ## DGC 单表迁移作业报错Timestamp format must be yyyy-mm-dd hh:mm:ss[.fffffffff]:https://bbs.huaweicloud.com/forum/thread-192575-1-1.html ## 云数据迁移 【CDM】【单表迁移】DWS自动建表报错“column name “tid” conflicts with a system:https://bbs.huaweicloud.com/forum/thread-192566-1-1.html 【CDM】抽取HBASE表数据报错”HBASE_CONNECTOR_1104:Failed to open tablble.:https://bbs.huaweicloud.com/forum/thread-192571-1-1.html
  • [技术干货] 华为云人工智能入门级开发者认证 HCCDA-AI - 知识传递 & 领取考试劵
    【第1章 人工智能概览-知识传递】华为云人工智能入门级开发者认证 - HCCDA-AI 第1章 人工智能概览-知识传递-云社区-华为云 (huaweicloud.com)【第②章 人工智能应用集成分析】华为云人工智能入门级开发者认证 - 第②章 人工智能应用集成分析-云社区-华为云 (huaweicloud.com)【第③章 华为云EI服务介绍】 华为云人工智能入门级开发者认证 - 第③章 华为云EI服务介绍-云社区-华为云 (huaweicloud.com)【第④章 ModelArts服务介绍】 华为云人工智能入门级开发者认证 - 第④章 ModelArts服务介绍-云社区-华为云 (huaweicloud.com)【第⑤章 HiLens服务介绍】 华为云人工智能入门级开发者认证 - 第⑤章 HiLens服务介绍-云社区-华为云 (huaweicloud.com)【第⑥章 人工智能应用集成产品测试】 华为云人工智能入门级开发者认证 - 第⑥章 人工智能应用集成产品测试-云社区-华为云 (huaweicloud.com)                                                     获取您的EI红宝书:https://www.huaweicloud.com/ei/                                                               感兴趣的请关注:微信公众号:合集  #HCCDA-AI (qq.com
  • [认证交流] 华为云人工智能入门级开发者认证 HCCDA-AI - 知识传递 & 领取考试劵
    【第1章 人工智能概览-知识传递】华为云人工智能入门级开发者认证 - HCCDA-AI 第1章 人工智能概览-知识传递-云社区-华为云 (huaweicloud.com)【第②章 人工智能应用集成分析】华为云人工智能入门级开发者认证 - 第②章 人工智能应用集成分析-云社区-华为云 (huaweicloud.com)【第③章 华为云EI服务介绍】 华为云人工智能入门级开发者认证 - 第③章 华为云EI服务介绍-云社区-华为云 (huaweicloud.com)【第④章 ModelArts服务介绍】 华为云人工智能入门级开发者认证 - 第④章 ModelArts服务介绍-云社区-华为云 (huaweicloud.com)【第⑤章 HiLens服务介绍】 华为云人工智能入门级开发者认证 - 第⑤章 HiLens服务介绍-云社区-华为云 (huaweicloud.com)【第⑥章 人工智能应用集成产品测试】 华为云人工智能入门级开发者认证 - 第⑥章 人工智能应用集成产品测试-云社区-华为云 (huaweicloud.com)                                                     获取您的EI红宝书:https://www.huaweicloud.com/ei/                                                              感兴趣的请关注:微信公众号:合集  #HCCDA-AI (qq.com) 
  • [沙箱纠错] 【基于深度学习算法的语音识别】【完全做不了】
    【功能模块】【操作步骤&问题现象】问题一:沙箱里上传预计时1小时50min问题二:ModelArts已经没有了访问授权,只有委托,沙箱根本没法做问题三:购买的资源描述时GPU。。。。,但后面又说选择CPU,在沙箱里购买后只会规格不符合自动删除【截图信息】【日志信息】(可选,上传日志内容或者附件)
  • [认证交流] 论微认证《大数据板块》大满贯
    什么是微认证?          华为云微认证是基于线上学习与在线实践,快速获得场景化技能提升的认证。微认证清单 - 大数据1、基于Spark实现车主驾驶行为分析未来城市交通是智能交通融合的场景,车与周围环境是一个紧密联系的实体,通过Spark数据分析,会让您加快了解智能汽车领域。基于Spark实现车主驾驶行为分析_华为云培训中心-华为云 (huaweicloud.com)2、球星薪酬决定性因素分析随着大数据、云计算的发展,数据规模也随之扩大,也更加关注数据的存放、处理以及分析。利用数据仓库服务,带您探索球星薪酬影响的决定性因素。薪酬数据大数据分析技术学习认证_球星薪酬决定性因素分析微认证_华为云学院-华为云 (huaweicloud.com)3、基于流计算的双十一大屏开发案例面对每天大量的实时数据,及时、高效的处理这些数据显得十分必要。本课程主要介绍如何搭建一个可视化大屏,为企业提供精准、高效的支持。可视化大屏大数据分析技术学习认证_基于流计算的双十一大屏开发案例微认证_华为云学院-华为云 (huaweicloud.com)4、使用DLI Flink SQL进行电商实时业务数据分析开发电商通常有web,小程序等多种接入方式,为掌握其实时变化,需统计各平台的实时访问量、订单数等,从而针对性地调整营销策略。使用DLI Flink SQL进行电商实时业务数据分析开发_华为云培训中心-华为云 (huaweicloud.com)5、逃杀游戏数据分析随着电竞行业的火热发展,用户数据分析成为急需解决的问题。借助大数据平台服务进行数据分析,能妥善处理海量的用户数据,帮助游戏厂商和俱乐部进行更好的战略决策。大数据分析游戏电竞行业技术学习认证_逃杀游戏数据分析微认证_华为云学院-华为云 (huaweicloud.com)6、黑色星期五消费者行为研究大数据时代消费者行为复杂多样,通过对消费者行为进行数据分析,找寻其中的变化规律,对用户进行定位进而优化销售方式。用户消费行为分析技术学习认证_黑色星期五消费者行为研究微认证_华为云学院-华为云 (huaweicloud.com)7、网站消费者行为分析大数据时代背景下,用户消费数据暗藏许多商机。通过网站用户消费行为分析实践,了解华为云大数据产品的使用方法,帮助商户发掘潜在客户。消费行为大数据分析技术学习认证_网站消费者行为分析微认证_华为云学院-华为云 (huaweicloud.com)8、外卖红包推送策略及菜品推荐随着外卖业务快速增长,如何实现客户、商家的共赢?本课程借助华为大数据方案进行客户画像,实现外卖红包推送策略及菜品推荐。大数据分析智能推荐技术学习认证_外卖红包推送策略及菜品推荐微认证_华为云学院-华为云 (huaweicloud.com)9、车联网大数据驾驶行为分析作为智能交通的基础,车联网的应用预示着工业技术,交通效率,出行方式的重大改变。微认证为您揭秘车联网大数据背后的密码,实现科学高效的车队管理。无人驾驶数据分析技术学习认证_车联网大数据驾驶行为分析微认证_华为云学院-华为云 (huaweicloud.com)
  • [技术干货] DGC学习课程链接
                                                                                DGC学习链接数据湖治理中心(DGC)伙伴赋能课程第1章 华为云数据使能实施方案介绍第2章 数据湖治理中心(DGC)产品服务概述第3章 DGC案例实操指导https://education.huaweicloud.com/courses/course-v1:HuaweiX+CBUCNXE133+Self-paced/about数据湖治理中心(DGC)第1章 为什么需要DGC第2章 DGC是什么第3章 DGC应用场景第4章 DGC购买与使用第5章 FAQ&随堂测试第6章 参考材料https://education.huaweicloud.com/courses/course-v1:HuaweiX+CBUCNXE076+Self-paced/about数据湖治理中心(DGC)中级工程师课程第1章 DGC概述第2章 DGC平台操作实践https://education.huaweicloud.com/courses/course-v1:HuaweiX+CBUCNXE099+Self-paced/about?isAuth=0&cfrom=hwc数据湖治理中心(DGC)高级工程师课程第1章 DGC业务对接实践第2章 DGC操作指南第3章 DGC数据集成运维第4章 DGC数据开发运维第5章 DGC数据治理运维https://education.huaweicloud.com/courses/course-v1:HuaweiX+CBUCNXE103+Self-paced/about数据湖治理中心(DGC)伙伴赋能实操课程考试https://education.huaweicloud.com/courses/course-v1:HuaweiX+CBUCNXE134+Self-paced/about
  • [业务动态] DAYU数据治理方法论
    DAYU数据治理方法论:智能数据治理中心_DAYU_数据治理方法论_华为云 (huaweicloud.com)DAYU数据治理方法论是华为数据管理方法论的精华总结,旨在帮助客户持续完善数据管理体系,沿企业主业务流打通信息链和数据流,提升数据质量,实现数据“清洁”,以支撑运营效率提升和经营结果的真实呈现,实现智慧数据驱动有效增长,充分实现数据资产价值。数据治理框架数据是企业核心资产,企业需要建立起数据字典,有效管理其日益重要的数据和信息资源;同时建立数据持续改进机制,来不断提升数据质量。数据的价值和风险应被有效管理,以支撑企业管理简化、业务流集成、运营效率提升和经营结果的真实呈现。数据准确是科学决策的基础,数据架构和标准的统一是全流程高效运作、语言一致的前提。方法论流程落地DAYU数据治理方法论是华为数据管理方法论的精华总结,方法论的流程落地和功能落地均参考了业界数据治理最佳实践,并结合华为数字化转型成功经验优化而成。方法论功能落地华为数据治理实践以财经为例,在数据治理前存在很多问题,如由于IT系统的烟囱式建设,导致一个角色跨多个IT系统操作,效率低;数据获取难,手工处理多,单一个收入管理需要从5个系统导出数据,约11个人总共花费50小时完成分析。通过数据治理,华为可以做到3天月度财务报告出初稿、5天月度财务报告出终稿、11天年度财务报告完成初稿,要把一家业务遍及170多个国家和地区的全球化公司的“总账”算清楚可真不容易。要做到财报的高效、准确、完整,离不开高度集成的全球结账管理系统,更离不开数据治理,通过交易核算自动化、ERP优化、数据调度优化、数据质量监控以及提升数据分析平台的性能,华为实现了全球核算实时可视,过程可跟踪、可管理。
  • [业务动态] 什么是数据治理?
                    数据治理(Data Governance)   对数据质量的管理、专注在数据本身。从广义上讲,数据治理是对数据的全生命周期进行管理,包含数据采集、清洗、转换等传统数据集成和存储环节的工作、同时还包含数据资产目录、数据标准、质量、安全、数据开发、数据价值、数据服务与应用等,整个数据生命期而开展开的业务、技术和管理活动都属于数据治理范畴。   过去数十年间,企业的数据面临很多的问题:没有统一的数据标准,各业务系统间数据无法充分共享,关键核心数据无法识别及跨系统无法拉通等。为有效管理企业数据资产,实现数据价值的最大化,急需建立一个完善的数据治理框架体系,为企业数字化转型打下坚实的数据基础。   DAYU数据治理方法论是华为数据管理方法论的精华总结,参考了业界数据治理最佳实践,并结合华为数字化转型成功经验优化而成。DAYU数据治理方法论能有效帮助客户持续完善数据管理体系,沿企业主业务流打通信息链和数据流,提升数据质量,实现数据“清洁”,以支撑运营效率提升和经营结果的真实呈现,实现智慧数据驱动有效增长,充分实现数据资产价值。   DAYU数据治理方法论已经在华为云云服务数据湖治理中心DGC上落地实现,包括流程落地和功能落地。流程落地是指有一套详细的流程规范(需求、设计、实施、验证、发布等阶段)指导用户使用DGC开展数据治理工作;功能落地是指DGC平台提供自动化、智能化的工具帮助用户高效完成数据治理工作。帮助中心链接:图解数据湖治理中心DGC_数据湖治理中心 DGC_产品介绍_华为云 (huaweicloud.com)数据治理方法论:智能数据治理中心_DAYU_数据治理方法论_华为云 (huaweicloud.com)产品首页链接:数据湖治理中心_DGC_数据运营_数据运营-华为云 (huaweicloud.com)
  • [其他] EI企业智能2022年5月高热贴合集
    ## EI企业智能2022年5月高热贴合集 以下是EI企业智能板块在2022年5月份的高热贴的合集。从合集中基本可以看出,本月HiLens、ModelArts、DWS板块的热度是相对比较高的。可能是弄到HiLens后,有个硬件设备还是比较有兴趣一些,有兴趣一些就玩的多一些,玩的多一些就问题多一些,问题多一些就发帖多一些了~而且弄到二手的HiLens其实涉及到账号解绑重新绑定的问题,所以如果是新手的话问题就多一些了。 ## 图像识别 【图像识别Image】【调用API】使用token认证鉴权出现API不存在] :https://bbs.huaweicloud.com/forum/thread-187742-1-1.html 【 image_celebrity_recognition产品】【名人识别功能】一不会用,界面不友好 :https://bbs.huaweicloud.com/forum/thread-187682-1-1.html ## 数仓GaussDB(DWS) 【DWS产品】【SQL功能】查询表报错(no data is read from xxx):https://bbs.huaweicloud.com/forum/thread-188110-1-1.html 【DWS】【vacuum功能】行存分区表,对单分区做vacuum full操作是否锁整表:https://bbs.huaweicloud.com/forum/thread-188020-1-1.html 【GaussDB A产品】【XXX功能】创建Function时入参使用的是TYPE类型的参数但显示入参是未知:https://bbs.huaweicloud.com/forum/thread-187834-1-1.html 【高斯产品】【存储功能】表无法操作,提示counld not open relation with OID(集群故障修复后):https://bbs.huaweicloud.com/forum/thread-188569-1-1.html ## ModelArts 【Modelarts产品】【远程开发】用Pycharm Toolkit远程连接notebook:https://bbs.huaweicloud.com/forum/thread-187666-1-1.html ModelArts部署出现ImportError: /lib/x86_64-linux-gnu/libm.so.6:https://bbs.huaweicloud.com/forum/thread-188383-1-1.html (ModelArts的vscode插件)点击按钮配置用户信息没反应:https://bbs.huaweicloud.com/forum/thread-187167-1-1.html notebook运行报错(AI象棋):https://bbs.huaweicloud.com/forum/thread-188832-1-1.html 【训练作业】【YOLOv3_Darknet53算法】如何增加参数支持Balanced Loss?:https://bbs.huaweicloud.com/forum/thread-188703-1-1.html ## HiLens Atlas 200 HiLens Kit 注册失败,提示"The username or password is wrong.":https://bbs.huaweicloud.com/forum/thread-188212-1-1.html HiLens Kit为什么不把其他接口开放出来呢:https://bbs.huaweicloud.com/forum/thread-187769-1-1.html 【hilens产品】如何更新固件:https://bbs.huaweicloud.com/forum/thread-189092-1-1.html hilens 想请问一下技能的开源代码在哪里找:https://bbs.huaweicloud.com/forum/thread-188782-1-1.html 找不到原注册设备的账号,能申请解绑吗?:https://bbs.huaweicloud.com/forum/thread-188539-1-1.html 在哪里查看,检测的图像,并且查看一秒能获取多少帧:https://bbs.huaweicloud.com/forum/thread-189404-1-1.html hilens设备开启之后,信息储存在哪,是否可以指定存储信息:https://bbs.huaweicloud.com/forum/thread-189407-1-1.html pytorch框架能否使用,或者pytorch转caffe/TensorFlow能否使用:https://bbs.huaweicloud.com/forum/thread-189408-1-1.html ## MRS IDEA本地连接用Spark连接HIVE的问题:https://bbs.huaweicloud.com/forum/thread-189094-1-1.html 代码执行安全认证出错:https://bbs.huaweicloud.com/forum/thread-189362-1-1.html 【MRS产品】大数据MRS 对接Streamx安装配置教程:https://bbs.huaweicloud.com/forum/thread-189287-1-1.html ## FusionInsight FusionInsight 做主备HA检测时,备节点能ha替代主,但是主节点一直无法启动oms.sh也无法启动HA:https://bbs.huaweicloud.com/forum/thread-189397-1-1.html
  • [认证交流] 微认证 - 大数据板块 -《基于Spark实现车主驾驶行为分析》 - 学习分享
    什么是微认证?          华为云微认证是基于线上学习与在线实践,快速获得场景化技能提升的认证。微认证清单 - 大数据          前景概述:该课程的考试内容部分来自于 微认证课程《车联网大数据驾驶行为分析》,因为这是该课程的早期前身版本,车联网的概述介绍等基于Spark实现车主驾驶行为分析     课程简介:未来城市交通是智能交通融合的场景,车与周围环境是一个紧密联系的实体,基于此背景,我们使用华为云MRS服务中的Spark组件来分析统计指定时间内,车主急加速、急刹车、空挡滑行、超速、疲劳驾驶等违法行为的次数。结合实际的案例,能够让我们更好的掌握Spark及MRS的使用。     课程结构:车联网的背景及案例4了解车联网的背景及应用场景华为车联网常用EI服务介绍31了解华为车联网EI服务,包括OBS和MRSSpark车主驾驶行为分析实验介绍18掌握MRS服务的使用,学习Spark程序的执行过程1、车联网的背景及案例      汽车技术重大变革的历程     技术革命引爆出行方式变革,智能、网联成就智慧出行    未来场景驱动汽车行业数字化转型            典型应用1 - 车辆监控及历史信息的统计分析     典型应用2 - 站点、班线、任务、区域管理2、华为车联网常用EI服务介绍     对象存储服务 OBS(基础服务)          一个基于对象的存储服务,为客户提供海量、安全、高可靠、低成本的数据存储能力,使用时无需考虑容量限制,并且提供多种存储类型供选择,满足客户各类业务场景诉求        业务模型           每个租户在OBS只能创建100给桶(所以区域桶个数之和不超过100),桶的名字在OBS系统内唯一,如果租户准备使用的桶名已经被其他租户使用需要更换桶名使用。         可靠性        数据可靠性保证机制           冗余分片分别放在不同服务器中,小于冗余个数的服务器故障业务完全不受影响; EC算法替代3副本,存储利用率从33%提升到80%+; 一个对象会被拆分为2048~4096个条带,单对象理论峰值带宽:2400 MB/s ~ 4800 MB/s。           多AZ冗余算法使磁盘利用率达到55%,同时支持1个AZ完全故障 为了减少AZ间恢复流量,每个AZ有2份AZ内冗余数据,AZ内故障两给服务器,数据恢复能在AZ内完成。           服务器或者硬盘故障时,后台会以2 TB/s的速度触发重构,确保数据在最短时间内恢复到正常状态。         存算分离方案      MapReduce服务 MRS           为客户提供Hudi、ClickHouse、Spark、Flink、Kafka、HBase等Hadoop生态的高性能大数据组件,支持数据湖、数据仓库、BI、AI融合等能力。          MRS同时支持混合云和公有云两种形态:            混合云版本,一个架构实现离线、实时、逻辑三种数据湖,以云原生架构助力客户智能升级;            公有云版本,协助客户快速构建低成本、灵活开放、安全可靠的一站式大数据平台。        架构图        产品优势     Spark        Spark简介          2009年诞生于美国加州大学伯克利分校AMP实验室。          Apache Spark是一种基于内存的快速、通用、可扩展的大数据计算引擎。          Spark 是一站式解决方案,集批处理(Spark Core )、实时流处理(Spark Streaming )、交互式查询(Spark SQL )、图计算(GraphX )与机器学习(MLLib )于一体。         Spark应用场景           批处理可用于ETL (抽取、转换、加载)。          机器学习可用于自动判断淘宝的买家评论是好评还是差评。          交互式分析可用于查询Hive数据仓库。          流处理可用于页面点击流分析,推荐系统,舆情分析等实时业务。         Spark架构        Spark特点        SparkSQL          Spark SQL是Spark中用于结构化数据处理的模块。          在Spark应用中,可以无缝的使用SQL语句亦或是DataFrame API对结构化数据进行查询。         SparkStreaming          Spark Streaming的基本原理是将实时输入数据流以时间片(秒级)为单位进行拆分,然后经Spark引擎以类似批处理的方式处理每个时间片数据。动手实验:实验避坑分享:论 《基于Spark实现车主驾驶行为分析》 实验避坑,100%完成_华为云开发者学堂_华为云论坛 (huaweicloud.com)下一期预告:使用DLI Flink SQL进行电商实时业务数据分析开发
  • [其他] EI企业智能2022年4月高热贴合集
    ## EI企业智能2022年4月高热贴合集 以下是EI企业智能板块在2022年4月份的高热贴的合集。从合集中基本可以看出,本月DWS板块的热度是相对比较高的。 ## 数仓GaussDB(DWS) dws-分区表,可以根据字段值分区吗:https://bbs.huaweicloud.com/forum/thread-185029-1-1.html GAUSSDB200 怎么样通过系统表批量查看所有的表是行存储、还是例存储方式?:https://bbs.huaweicloud.com/forum/thread-185026-1-1.html GaussDB A 8.0.0.1线下版本,100+节点时,其中50+节点为扩容时加入,使用一段时间后存在原本节点和扩容节点存在:https://bbs.huaweicloud.com/forum/thread-184869-1-1.html There is no hash distributable column:https://bbs.huaweicloud.com/forum/thread-184799-1-1.html 【DWS】【登录认证】如何实现免密登录?:https://bbs.huaweicloud.com/forum/thread-184822-1-1.html gds建立外表固定字段长度含中文字符报错: https://bbs.huaweicloud.com/forum/thread-185940-1-1.html copy query 与copy table 语法执行效率问题:https://bbs.huaweicloud.com/forum/thread-185667-1-1.html 高斯数据库select和drop某个表报错:https://bbs.huaweicloud.com/forum/thread-185310-1-1.html like '%XXX%' 这种条件的语句如何优化性能:https://bbs.huaweicloud.com/forum/thread-185581-1-1.html GaussDB DWS对磁盘数量的要求:https://bbs.huaweicloud.com/forum/thread-186188-1-1.html GaussDB A 800版本,使用连接池疑问:https://bbs.huaweicloud.com/forum/thread-186100-1-1.html spark 读hive 写gaussdb 问题求助:https://bbs.huaweicloud.com/forum/thread-186137-1-1.html 【GaussDB DWS】请问有没有适用于Euler-aarch64系统的GaussDB性能测试工具?:https://bbs.huaweicloud.com/forum/thread-186136-1-1.html ## ModelArts 【ModelArts产品】【训练管理功能】无法解决error: unrecognized arguments:https://bbs.huaweicloud.com/forum/thread-184768-1-1.html 用ModelArts预训练完Bert后,想进行网络评估,为什么无法找到评估数据集? https://bbs.huaweicloud.com/forum/thread-185981-1-1.html 使用官方的bert源码,运行报错run task error: https://bbs.huaweicloud.com/forum/thread-185786-1-1.html 【vscode插件】链接实例后打不开:https://bbs.huaweicloud.com/forum/thread-185729-1-1.html 【npu_convert_dropout】无法导入npu_convert_dropout:https://bbs.huaweicloud.com/forum/thread-185424-1-1.html ## MRS 【MRS产品】【hive功能】报错 return code 2 from org.apache.hadoop.hive.ql:https://bbs.huaweicloud.com/forum/thread-184739-1-1.html 华为云mrs中habse如何按照时间戳查询habse数据并抽取到关系数据库中?:https://bbs.huaweicloud.com/forum/thread-184891-1-1.html ## 自然语言处理 【知识图谱】【产品文档】文档中“创建信息抽取模型”中“准备数据”问题:https://bbs.huaweicloud.com/forum/thread-185008-1-1.html 【知识图谱】【模型】MRC-BM中Dataset数据创建和修改问题:https://bbs.huaweicloud.com/forum/thread-185846-1-1.html ## 数据湖处理中心DGC 数据开发-hive脚本页面如何使用变量:https://bbs.huaweicloud.com/forum/thread-184952-1-1.html 【DGC产品】【规范设计功能】拉链表和镜像表一类应该放在哪一层:https://bbs.huaweicloud.com/forum/thread-184669-1-1.html 请问怎么把乌兰一数据同步到乌兰二零三中,环境防火墙是否可以打通:https://bbs.huaweicloud.com/forum/thread-184511-1-1.html 作业开发-restClient模块如何操作MRS的es索引:https://bbs.huaweicloud.com/forum/thread-185459-1-1.html ## DIS DIS添加转储MRS任务时填写HDFS路径显示无效的: https://bbs.huaweicloud.com/forum/thread-185767-1-1.html ## FusionInsight kafka接口调用样例中,创建机机账号测试时,身份认证报错:https://bbs.huaweicloud.com/forum/thread-185886-1-1.html FI产品 使用idea本地调式spark sql 如何配置:https://bbs.huaweicloud.com/forum/thread-185621-1-1.html 【mrs产品】【hive功能】springboot启动可以登录zk,hive连接执行语句报错:https://bbs.huaweicloud.com/forum/thread-185497-1-1.html 【Spark】【提交任务】提交Spark任务时,报错找不到主类:https://bbs.huaweicloud.com/forum/thread-186395-1-1.html
  • [其他] 【EI企业智能】2022年3月高热贴合集
    ## EI企业智能2022年3月高热贴合集 以下是EI企业智能板块在2022年3月份的高热贴的合集。从合集中基本可以看出,ModelArts子板块的热度是相对比较高的。 ## 语音交互服务 【SIS】【SIS】语音服务不支持跨区访问OBS :https://bbs.huaweicloud.com/forum/thread-181862-1-1.html 【SIS】【SIS】服务区有点少 : https://bbs.huaweicloud.com/forum/thread-181672-1-1.html ## 数仓GaussDB(DWS) 升级8,.0.0.9补丁后更换jdbc包和gds包,会有一个过程替换,使用以前的8.0.0.1的jdbc包和gds包是否有问题? : https://bbs.huaweicloud.com/forum/thread-182347-1-1.html data studio 导出ddl 失败,提示:导出/显示DDl执行过程失败: https://bbs.huaweicloud.com/forum/thread-181175-1-1.html GaussDB 产品是否可以部署在 海光、飞腾、龙芯、申威服务器上? : https://bbs.huaweicloud.com/forum/thread-181970-1-1.html Jmeter连接gaussdb报错 : https://bbs.huaweicloud.com/forum/thread-182616-1-1.html ## ModelArts pyltp无法安装 : https://bbs.huaweicloud.com/forum/thread-181292-1-1.html 【modelarts训练找不到路径】 : https://bbs.huaweicloud.com/forum/thread-181332-1-1.html 【XXX产品】【XXX功能】一句话描述问题(编者注:Python依赖库安装问题) :https://bbs.huaweicloud.com/forum/thread-180799-1-1.html 【jupyterLab】【notebook】python版本环境可以指定吗?:https://bbs.huaweicloud.com/forum/thread-180813-1-1.html ModelArts数据集在训练中如何使用 : https://bbs.huaweicloud.com/forum/thread-183412-1-1.html 模型精度过低应该如何改进 : https://bbs.huaweicloud.com/forum/thread-183516-1-1.html 【JupterLab】【Pytorch1.0.0】conda环境更新了某个库,重启后如何可以不再次更新?https://bbs.huaweicloud.com/forum/thread-183410-1-1.html 【ModelArts】【Notebook】在notebook中无法存储网络的训练结果 : https://bbs.huaweicloud.com/forum/thread-183040-1-1.html ## 文字识别 现在ocr服务支持电子驾驶证识别吗? https://bbs.huaweicloud.com/forum/thread-175667-1-1.html ## MRS 【MRS产品】【Flink功能】table api的maven信息是什么 : https://bbs.huaweicloud.com/forum/thread-182573-1-1.html ## Hilens Hilens 播放音频报错 : https://bbs.huaweicloud.com/forum/thread-181994-1-1.html
  • [其他] 【资讯】【转载】共筑金融安全屏障,华为云金融安全CXO思享会成功举办
    来源:南早网原文链接: https://baijiahao.baidu.com/s?id=1718754606138823220&wfr=spider&for=pc近日,《中华人民共和国个人信息保护法》正式施行,隐私保护、信息安全再度成为各界的热议话题。信息技术的快速发展和广泛普及,成为了互联网金融行业发展的重要推动力,与此同时,也为企业在数据治理方面增加了诸多前所未有的挑战。妥善经管隐私数据、筑建信息安全堡垒成为互联网金融企业进阶发展的关键。大会合影  为探索数字时代个人信息保护以及更为广泛的数据治理方案,12月9日,华为云联合北京市互联网金融行业协会、祥云科技举办了以“发展金融科技,保障金融安全”为主题的金融 安全 CXO 思享会。会议活动邀请华为云中国区金融行业总经理朱兵、北京市互联网金融行业协会秘书长王思聪、中国银行法学研究会理事肖飒、华为云金融行业总监诸旻、华为云 EI 可信智能计算服务 TICS 首席架构师张煜及北京市互联网金融行业协会会员单位代表、祥云科技代表等人,来到华为北京高端交流中心进行行业交流,共同探讨金融行业安全管理与发展趋势、分享互联网金融行业信息安全最佳实践,探索数字时代个人信息保护以及广泛的数据治理方案。嘉宾热切交谈  金融行业的新赛道,可信治理是大势所趋  对于金融业而言,《个人信息保护法》的颁布影响深远。近年来,金融科技快速发展,大数据被视为行业转型升级的一大助推器。在数字经济时代下,作为资产的数据能够产生财富效应,拥有了数据就拥有了资产。中国银行法学研究会理事,肖飒女士  中国银行法学研究会理事肖飒表示,随着个保法的正式实施,公民个人信息授权方式也发生了极大变化,国家将不再认可概括授权的合法性,获取公民个人信息,必须先取得公民的同意。在我国,只要公民同意授权,企业获取数据就是合法合规的。肖飒提出,金融行业属于数据密集型行业,对数据依赖性极强,如何守护好个人信息,更好地保障数据安全,是金融业必须面对的重要课题。企业应当及时调整“隐私协议”、“注册协议”等及内部数据合规体系。同时,应当采取必要措施,保障境外接收方处理个人信息的活动达到《个信法》规定的个人信息保护标准。  深耕数字化,共建全场景智慧金融  全场景、智慧、生态是走向全场景智慧金融的三个关键词。“全场景”就是通过人、物、应用的全互联,将金融服务带向千行百业。“智慧”指的是将AI引入金融行业的核心生产系统和业务主流程,通过AI与应用的结合,提供智慧服务。“生态”是指全场景智慧金融的目标是打造生态型金融产业,共建开放、共赢的产业环境。华为云金融行业总监,诸旻先生  华为云金融行业总监诸旻在会上指出,云原生正在成为金融机构云基础设施的标配,华为云云原生2.0提供资源高效,极致体验,敏捷创新,数据智能,安全合规的云基础设施,为金融客户提供以应用为中心的金融云数字底座。帮助金融客户进行全面的创新升级,真正打造出科技与金融业务协同发展的数字化优势,携手共建全场景智慧金融。华为云EI可信智能计算服务 TICS首席架构师,张煜女士  华为云EI可信智能计算服务TICS首席架构师张煜表示,数据是重要的资产已经成为社会共识,数据创造价值必须实现流通,尤其在数据安全上升到国家战略层面时,更需要在保护隐私的前提下挖掘数据的价值。隐私计算技术在多种金融场景中极大的满足了大家的合规需求, 实现“可用不可见”、“可用并可控”、“可控可计量”。预计到2024年,在一些大数据平台,隐私计算技术将成为数据保护刚需。华为云TICS为了保护用户隐私,一方面,在各类数据提供方的信任域内,通过构筑安全代理,实现数据的安全提供;另一方面,通过构筑可信执行环境TEE或采用安全多方计算MPC技术,实现数据的安全聚合,将数据资源范围从企业扩张到海量的社会数据,在数据隐私保护前提下实现多方数据联邦探查分析和联邦学习,通过数据流通创造更大价值。圆桌会议  在圆桌讨论环节上,参会人员围绕国家政策对金融科技行业的影响、技术驱动金融科技行业业务发展以及金融科技行业对云技术的诉求等议题展开了讨论。  华为云目前自服务220+金融客户,已经成为全球五朵云之一。华为云作为金融数字化转型的重要伙伴,不仅在技术上追求创新,同时积极地与客户一同探索,以实现数智融合,升级有道。展望未来,华为云希望与金融伙伴共同成长,以技术创新引领产业发展,实现共创共赢。
  • [公告] 可信智能计算TICS通过金标委《多方安全计算金融应用》评测
总条数:61 到第
上滑加载中