- ambari 安装 HBase HA选择HBase 点击Next部署HA HBase 选择多节点 点击Next选择默认配置Review 没有问题的话点击 DEPLOYSummary 注意提示 Important: After closing this wizard, please restart all services that have the restart indicator ... ambari 安装 HBase HA选择HBase 点击Next部署HA HBase 选择多节点 点击Next选择默认配置Review 没有问题的话点击 DEPLOYSummary 注意提示 Important: After closing this wizard, please restart all services that have the restart indicator ...
- 这个比较靠谱,下面操作的是单机https://blog.csdn.net/high2011/article/details/90272331从github上clone ambari-flink-service到对应目录sudo git clone https://github.com/abajwa-hw/ambari-flink-service.git /var/lib/ambari-s... 这个比较靠谱,下面操作的是单机https://blog.csdn.net/high2011/article/details/90272331从github上clone ambari-flink-service到对应目录sudo git clone https://github.com/abajwa-hw/ambari-flink-service.git /var/lib/ambari-s...
- 选择Atlas服务选择Atlas选择多节点部署HA集群分配从站和客户端,选择客户端全节点安装 NextADVANCED Advaced atlas-env 设置管理员密码为admin123,管理员用户默认为admin:这里是HBase主堆大小没达到最小设置值,可以不用改,Proceed Anyway仍要继续 Atlas is configured to use the HBase in... 选择Atlas服务选择Atlas选择多节点部署HA集群分配从站和客户端,选择客户端全节点安装 NextADVANCED Advaced atlas-env 设置管理员密码为admin123,管理员用户默认为admin:这里是HBase主堆大小没达到最小设置值,可以不用改,Proceed Anyway仍要继续 Atlas is configured to use the HBase in...
- Atlas集成外部组件安装好Atlas只是第一步,接下来我们得采集相关大数据组件的元数据,所以得跟大数据组组件做集成。如果是手工安装的Apache版本的Atlas,我们还需要单独做Atlas跟其他组件的集成配置才能管理他们的元数据,比如HBase、Hive、Storm、kafka等。我们所要做的就是采集元数据和使用即可。1、集成Hive没有任何表,第一次你会没有看见database,后续操作... Atlas集成外部组件安装好Atlas只是第一步,接下来我们得采集相关大数据组件的元数据,所以得跟大数据组组件做集成。如果是手工安装的Apache版本的Atlas,我们还需要单独做Atlas跟其他组件的集成配置才能管理他们的元数据,比如HBase、Hive、Storm、kafka等。我们所要做的就是采集元数据和使用即可。1、集成Hive没有任何表,第一次你会没有看见database,后续操作...
- 1、DS源码编译1.1 版本规划DS在成为Apache孵化项⽬之后的最新稳定版是1.3.4,并提供了Flink的⽀持,我们就使⽤1.3.4即可https://github.com/apache/incubator-dolphinscheduler/releases1.2 克隆代码git clone https://github.com/apache/incubator-dolphinsche... 1、DS源码编译1.1 版本规划DS在成为Apache孵化项⽬之后的最新稳定版是1.3.4,并提供了Flink的⽀持,我们就使⽤1.3.4即可https://github.com/apache/incubator-dolphinscheduler/releases1.2 克隆代码git clone https://github.com/apache/incubator-dolphinsche...
- eureka访问地址http://ambari-03:20303/1、 安装java# 上传jdk8稳定版压缩包到服务器目录&解压sudo tar -zxvf jdk-8u231-linux-x64.tar.gz -C /usr/local/# 链接jdk - jdk1.8.0_231sudo ln -s /usr/local/jdk1.8.0_231/ /usr/local/jdk# 移除... eureka访问地址http://ambari-03:20303/1、 安装java# 上传jdk8稳定版压缩包到服务器目录&解压sudo tar -zxvf jdk-8u231-linux-x64.tar.gz -C /usr/local/# 链接jdk - jdk1.8.0_231sudo ln -s /usr/local/jdk1.8.0_231/ /usr/local/jdk# 移除...
- 安装完毕linkis后1、部署Scriptshttps://github.com/WeBankFinTech/Scriptis/blob/master/docs/zh_CN/README.md Scripts本质上是Linkis的前端程序,Scripts通过restapi跟Linkis交互,因此我们部署Scripts到nginx即 可。1.1 下载安装包https://github.com/... 安装完毕linkis后1、部署Scriptshttps://github.com/WeBankFinTech/Scriptis/blob/master/docs/zh_CN/README.md Scripts本质上是Linkis的前端程序,Scripts通过restapi跟Linkis交互,因此我们部署Scripts到nginx即 可。1.1 下载安装包https://github.com/...
- 一、前期准备工作1、准备一台CentOS虚拟机,虚拟机需要能够联网,采用root角色编译2、准备以下安装包(hadoop源码、JDK8、maven、ant、protobuf),分别从各自的官网下载即可hadoop-2.10.1-src.tar.gzjdk-8u281-linux-x64.tar.gzapache-ant-1.10.9-bin.tar.gzapache-maven-3.6.3... 一、前期准备工作1、准备一台CentOS虚拟机,虚拟机需要能够联网,采用root角色编译2、准备以下安装包(hadoop源码、JDK8、maven、ant、protobuf),分别从各自的官网下载即可hadoop-2.10.1-src.tar.gzjdk-8u281-linux-x64.tar.gzapache-ant-1.10.9-bin.tar.gzapache-maven-3.6.3...
- 一、什么是Hadoop 1、Hadoop是什么(1)Hadoop是一个由Apache基金会所开发的分布式系统基础架构(2)主要解决海量数据的存储和海量数据的分析计算问题(3)广义上来说,Hadoop通常是指一个更广泛的概念–Hadoop生态圈 2、Hadoop发展历史:(1)Lucene框架是Doug Cutting开创的开源软件,用Jav a书写代码,实现与Google类似的全文搜索功能... 一、什么是Hadoop 1、Hadoop是什么(1)Hadoop是一个由Apache基金会所开发的分布式系统基础架构(2)主要解决海量数据的存储和海量数据的分析计算问题(3)广义上来说,Hadoop通常是指一个更广泛的概念–Hadoop生态圈 2、Hadoop发展历史:(1)Lucene框架是Doug Cutting开创的开源软件,用Jav a书写代码,实现与Google类似的全文搜索功能...
- 一、大数据概念大数据:指无法在一定时间范围内用常用软件工具进行捕捉、管理和处理的数据集合,是需要新的处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。存储单位:bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB1Byte = 8bit 1KB = 1024Byte1MB = 1024KB1GB = 1024MB以此类推... 一、大数据概念大数据:指无法在一定时间范围内用常用软件工具进行捕捉、管理和处理的数据集合,是需要新的处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。存储单位:bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB1Byte = 8bit 1KB = 1024Byte1MB = 1024KB1GB = 1024MB以此类推...
- 随着数字划时代的到来,社会生产生活产生大量的数据,数据量越来越大,种类越来越多、企业迫切对大量数据的背后价值进行挖掘、华为云大数据服务帮助企业构筑从数据接入、存储、计算和分析的全生命周期大数据解决方案,帮助企业客户进一步挖掘数据价值,快速完成数字化转型,激发制造企业的创新活力、发展潜力和转型动力。 随着数字划时代的到来,社会生产生活产生大量的数据,数据量越来越大,种类越来越多、企业迫切对大量数据的背后价值进行挖掘、华为云大数据服务帮助企业构筑从数据接入、存储、计算和分析的全生命周期大数据解决方案,帮助企业客户进一步挖掘数据价值,快速完成数字化转型,激发制造企业的创新活力、发展潜力和转型动力。
- 随着时代发展,数据变得更加开放、共享,客户的业务也面临着多元化处理,原有的集群亟待扩容,另外,推到原有小规模集群的烟囱建设,打造一体化数据湖的诉求也越来越迫切。在这一背景下,原本上千规模的集群已经远远无法满足客户的业务诉求,于是,迫切需要建设上万规模的数据湖。 而上万规模的数据湖如何在进行实验室进行功能、性能、可靠性等方面的测试,也成为我们研发团队需要考虑的问题。 ... 随着时代发展,数据变得更加开放、共享,客户的业务也面临着多元化处理,原有的集群亟待扩容,另外,推到原有小规模集群的烟囱建设,打造一体化数据湖的诉求也越来越迫切。在这一背景下,原本上千规模的集群已经远远无法满足客户的业务诉求,于是,迫切需要建设上万规模的数据湖。 而上万规模的数据湖如何在进行实验室进行功能、性能、可靠性等方面的测试,也成为我们研发团队需要考虑的问题。 ...
- 写给1024,写给物联网大数据的我和你们 作为一个大数据中心 ,每分 每秒 收到 来自不同 数据库 接口的 数不清的 数据急需一个 软件 来 替代人工 进行 自动化 完成上面操作 写入 数据库 ,后面由前端 UI展示出来 的步骤暂不用我参与。 最终选择了一款 开源 ,稳定的 数据 集成 工具下面分享下我下载 这个 软件 的一些过程,也帮助 更多的人 排坑带来点思路第一步,肯定是找... 写给1024,写给物联网大数据的我和你们 作为一个大数据中心 ,每分 每秒 收到 来自不同 数据库 接口的 数不清的 数据急需一个 软件 来 替代人工 进行 自动化 完成上面操作 写入 数据库 ,后面由前端 UI展示出来 的步骤暂不用我参与。 最终选择了一款 开源 ,稳定的 数据 集成 工具下面分享下我下载 这个 软件 的一些过程,也帮助 更多的人 排坑带来点思路第一步,肯定是找...
- openLooKeng是华为的一款性能强大的引擎,基于业界著名的开源SQL引擎Presto来提供交互式查询分析基础能力, 用于支持数据探索、即席查询和批处理,具有100+毫秒至分钟级的近实时时延,而无需移动数据。openLooKeng还支持层次化部署,使地理上远程的openLooKeng集群能够参与相同的查询。利用其跨区域查询计划优化能力,涉及远程数据的查询可以接近“本地”的性能 openLooKeng是华为的一款性能强大的引擎,基于业界著名的开源SQL引擎Presto来提供交互式查询分析基础能力, 用于支持数据探索、即席查询和批处理,具有100+毫秒至分钟级的近实时时延,而无需移动数据。openLooKeng还支持层次化部署,使地理上远程的openLooKeng集群能够参与相同的查询。利用其跨区域查询计划优化能力,涉及远程数据的查询可以接近“本地”的性能
- 智慧养老的概念最早是由英国生命信托基金提出的,它的原名为“全智能老年系统(Intelligent Older System)”,即老年人可以脱离时间和空间的束缚享受到高质量的老年生活,主要是通过先进的管理技术、计算机技术、无限传感网络,将老人、社区、医护人员、医疗机构、政府、服务机构形成一个有机的整体,为老年人提供便捷、高效、物联化、互联化、智能化的养老服务。具体来说,智慧养老是指利用互联网... 智慧养老的概念最早是由英国生命信托基金提出的,它的原名为“全智能老年系统(Intelligent Older System)”,即老年人可以脱离时间和空间的束缚享受到高质量的老年生活,主要是通过先进的管理技术、计算机技术、无限传感网络,将老人、社区、医护人员、医疗机构、政府、服务机构形成一个有机的整体,为老年人提供便捷、高效、物联化、互联化、智能化的养老服务。具体来说,智慧养老是指利用互联网...
上滑加载中
推荐直播
-
Skill 构建 × 智能创作:基于华为云码道的 AI 内容生产提效方案2026/03/25 周三 19:00-20:00
余伟,华为云软件研发工程师/万邵业(万少),华为云HCDE开发者专家
本次直播带来两大实战:华为云码道 Skill-Creator 手把手搭建专属知识库 Skill;如何用码道提效 OpenClaw 小说文本,打造从大纲到成稿的 AI 原创小说全链路。技术干货 + OPC创作思路,一次讲透!
回顾中 -
码道新技能,AI 新生产力——从自动视频生成到开源项目解析2026/04/08 周三 19:00-21:00
童得力-华为云开发者生态运营总监/何文强-无人机企业AI提效负责人
本次华为云码道 Skill 实战活动,聚焦两大 AI 开发场景:通过实战教学,带你打造 AI 编程自动生成视频 Skill,并实现对 GitHub 热门开源项目的智能知识抽取,手把手掌握 Skill 开发全流程,用 AI 提升研发效率与内容生产力。
回顾中 -
华为云码道:零代码股票智能决策平台全功能实战2026/04/18 周六 10:00-12:00
秦拳德-中软国际教育卓越研究院研究员、华为云金牌讲师、云原生技术专家
利用Tushare接口获取实时行情数据,采用Transformer算法进行时序预测与涨跌分析,并集成DeepSeek API提供智能解读。同时,项目深度结合华为云CodeArts(码道)的代码智能体能力,实现代码一键推送至云端代码仓库,建立起高效、可协作的团队开发新范式。开发者可快速上手,从零打造功能完整的个股筛选、智能分析与风险管控产品。
回顾中
热门标签