- 在实际的大数据工程部署中,多个业务部门经常需要运行多个数据应用,在搭建Hadoop集群时,经常面临如何划分大数据集群及进行资源隔离的问题。本文分析如何综合使用物理多租和逻辑多租,来进行大数据集群划分和资源管理。 在实际的大数据工程部署中,多个业务部门经常需要运行多个数据应用,在搭建Hadoop集群时,经常面临如何划分大数据集群及进行资源隔离的问题。本文分析如何综合使用物理多租和逻辑多租,来进行大数据集群划分和资源管理。
- 2021年6月18日,华为云TechWave全球技术峰会(人工智能&数据)在上海举行,以“创新普惠”为主题,分享技术创新与行业实践。华为云大力投入数据、人工智能领域,发布数据和AI系列新品,加速千行百业智能升级。华为云FusionInsight智能数据湖在峰会上呈现了创新技术及成功实践案例。 2021年6月18日,华为云TechWave全球技术峰会(人工智能&数据)在上海举行,以“创新普惠”为主题,分享技术创新与行业实践。华为云大力投入数据、人工智能领域,发布数据和AI系列新品,加速千行百业智能升级。华为云FusionInsight智能数据湖在峰会上呈现了创新技术及成功实践案例。
- 中国太平洋财产保险基于华为云FusionInsight大数据平台,整合客户信息、运营服务资源和气象数据,搭建起气象灾害的风控信息化平台,并逐步深化大数据应用,延伸到其他风险领域打造了风险管理的数字化产品“风险雷达”,不断提升非车险业务风险评估、灾害预防和客户全生命周期风险管理、风险大数据等风险管理能力;在个客风控平台方面,打通承保理赔数据,形成客户的风控画像,结合经营风险,及时干预,避免损失 中国太平洋财产保险基于华为云FusionInsight大数据平台,整合客户信息、运营服务资源和气象数据,搭建起气象灾害的风控信息化平台,并逐步深化大数据应用,延伸到其他风险领域打造了风险管理的数字化产品“风险雷达”,不断提升非车险业务风险评估、灾害预防和客户全生命周期风险管理、风险大数据等风险管理能力;在个客风控平台方面,打通承保理赔数据,形成客户的风控画像,结合经营风险,及时干预,避免损失
- 和国网河南省电力一起聊聊“碳中和” 和国网河南省电力一起聊聊“碳中和”
- Spark 无疑是一个强大的处理引擎和一个用于更快处理的分布式集群计算框架。不幸的是,Spark在一些方面也存在不足。如果我们将 Apache Spark 与 Apache CarbonData 结合使用,它可以克服这些不足:1. 不支持 ACID transaction2. 没有quality enforcement3. 小文件问题4. 低效的data skipping什么是ACID?Sp... Spark 无疑是一个强大的处理引擎和一个用于更快处理的分布式集群计算框架。不幸的是,Spark在一些方面也存在不足。如果我们将 Apache Spark 与 Apache CarbonData 结合使用,它可以克服这些不足:1. 不支持 ACID transaction2. 没有quality enforcement3. 小文件问题4. 低效的data skipping什么是ACID?Sp...
- 本文旨在介绍如何使用华为云EI服务来进行大数据开发的架构与实践,希望能给准备使用华为云EI服务来进行数据研发的小伙伴提供一些借鉴和帮助。 本文旨在介绍如何使用华为云EI服务来进行大数据开发的架构与实践,希望能给准备使用华为云EI服务来进行数据研发的小伙伴提供一些借鉴和帮助。
- @[toc]之前写过一篇八种排序算法的博客,不过都是基于小数据量进行的排序,没有像这篇这样做大数据排序。文末会放出链接。 桶排序(Bucket sort)首先,我们来看桶排序。桶排序,顾名思义,会用到“桶”,核心思想是将要排序的数据分到几个有序的桶里,每个桶里的数据再单独进行排序。桶内排完序之后,再把每个桶里的数据按照顺序依次取出,组成的序列就是有序的了。看图说话啊。桶排序的时间复杂度,是O... @[toc]之前写过一篇八种排序算法的博客,不过都是基于小数据量进行的排序,没有像这篇这样做大数据排序。文末会放出链接。 桶排序(Bucket sort)首先,我们来看桶排序。桶排序,顾名思义,会用到“桶”,核心思想是将要排序的数据分到几个有序的桶里,每个桶里的数据再单独进行排序。桶内排完序之后,再把每个桶里的数据按照顺序依次取出,组成的序列就是有序的了。看图说话啊。桶排序的时间复杂度,是O...
- MRS 3.1.1-lts版本预计将于2021年6月30日前后发布,在这个新版本中,HetuEngine将带来哪些振奋人心的新特性呢? 让我们一起先睹为快~~ MRS 3.1.1-lts版本预计将于2021年6月30日前后发布,在这个新版本中,HetuEngine将带来哪些振奋人心的新特性呢? 让我们一起先睹为快~~
- 天气,关乎地球上所有人的生产生活。古时候,人们看天吃饭,如今,我们是看天气预报,提前做好工作生活的准备,比如:预测台风、洪水,给出预警,做好应急方案;结合污染排放数据和大气流动预报空气质量;海洋养殖根据气候变化及时修改培养策略;……除此之外,国防、交通、保险、智慧城市等等领域,都依赖着气象数据。在这样一个关乎民生的行业里,人工智能、大数据、超算这些技术,可发挥的潜力也是无限的,华为云MVP周... 天气,关乎地球上所有人的生产生活。古时候,人们看天吃饭,如今,我们是看天气预报,提前做好工作生活的准备,比如:预测台风、洪水,给出预警,做好应急方案;结合污染排放数据和大气流动预报空气质量;海洋养殖根据气候变化及时修改培养策略;……除此之外,国防、交通、保险、智慧城市等等领域,都依赖着气象数据。在这样一个关乎民生的行业里,人工智能、大数据、超算这些技术,可发挥的潜力也是无限的,华为云MVP周...
- 当下,“智慧能源”作为城市大脑的一个细分领域,成为很多企业争相追逐的香饽饽。而这个领域既充满机会,却也伴随着无数个挑战。以供热系统领域为例,想要实现调控的自动化、智能化,数据是基础更是核心。所以,及时、准确的数据采集,对数据提供高性能的读写和计算毫无疑问成为智慧供热企业的重心之一。华为云MVP眭少剑作为某专注于智慧能源领域的企业大数据组的负责人,在过去几年的不断摸索和实战开发过程中,对此有着... 当下,“智慧能源”作为城市大脑的一个细分领域,成为很多企业争相追逐的香饽饽。而这个领域既充满机会,却也伴随着无数个挑战。以供热系统领域为例,想要实现调控的自动化、智能化,数据是基础更是核心。所以,及时、准确的数据采集,对数据提供高性能的读写和计算毫无疑问成为智慧供热企业的重心之一。华为云MVP眭少剑作为某专注于智慧能源领域的企业大数据组的负责人,在过去几年的不断摸索和实战开发过程中,对此有着...
- 6月3日至4日,华为智慧既然弄峰会2021在上海成功举办,华为云FusionInsight总经理携手工商银行、北明软件等客户与伙伴,共同分享金融数据平台建设之道。同时,华为云FusionInsight联合伙伴,发布了一系列云原生2.0金融大数据解决方案,发展共创共享共赢的金融生态。 6月3日至4日,华为智慧既然弄峰会2021在上海成功举办,华为云FusionInsight总经理携手工商银行、北明软件等客户与伙伴,共同分享金融数据平台建设之道。同时,华为云FusionInsight联合伙伴,发布了一系列云原生2.0金融大数据解决方案,发展共创共享共赢的金融生态。
- 时空大数据是智慧系列应用(智慧交通,智慧水利,智慧农业,智慧气象,智慧楼宇,智慧园区,乃至于更广泛意义上的智慧城市)中的关键技术。本文讲述时空大数据的场景、业界现状、华为目前的实践、在智慧城市系列中时空大数据遇到的问题和挑战。 时空大数据是智慧系列应用(智慧交通,智慧水利,智慧农业,智慧气象,智慧楼宇,智慧园区,乃至于更广泛意义上的智慧城市)中的关键技术。本文讲述时空大数据的场景、业界现状、华为目前的实践、在智慧城市系列中时空大数据遇到的问题和挑战。
- 结合华为自身技术能力使能,张平安谈到,今年,华为云将聚焦云原生与政企双赛道,协同华为终端云服务、流程IT云等,重点投入人工智能、大数据等云服务领域的创新,推出一系列重磅新品,构建有韧性的产业生态,为发挥数据价… 结合华为自身技术能力使能,张平安谈到,今年,华为云将聚焦云原生与政企双赛道,协同华为终端云服务、流程IT云等,重点投入人工智能、大数据等云服务领域的创新,推出一系列重磅新品,构建有韧性的产业生态,为发挥数据价…
- 华为云GaussDB(DWS)实时数据分析技术为了响应政企用户在IoT和运维监控等场景下对数据仓库时效性的需求,2020年华为云发布了GaussDB(DWS)实时数仓新品,其具备快、易、简、省四大特点:在金融… 华为云GaussDB(DWS)实时数据分析技术为了响应政企用户在IoT和运维监控等场景下对数据仓库时效性的需求,2020年华为云发布了GaussDB(DWS)实时数仓新品,其具备快、易、简、省四大特点:在金融…
- 校园管理如何做好数字化转型?最新福利方案,助力建设智慧校园原创2021-05-14 18:05:37·永洪科技01建设基于大数据的教学管理平台的必要性中共中央、国务院印发的《中国教育现代化2035》指出,加快信息化时代教育变革。建设智能化校园,统筹建设一体化智能化教学、管理与服务平台。利用现代技术加快推动人才培养模式改革,实现规模化教育与个性化培养的有机结合。创新教育服务业态,建立数字教育资... 校园管理如何做好数字化转型?最新福利方案,助力建设智慧校园原创2021-05-14 18:05:37·永洪科技01建设基于大数据的教学管理平台的必要性中共中央、国务院印发的《中国教育现代化2035》指出,加快信息化时代教育变革。建设智能化校园,统筹建设一体化智能化教学、管理与服务平台。利用现代技术加快推动人才培养模式改革,实现规模化教育与个性化培养的有机结合。创新教育服务业态,建立数字教育资...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
关于RISC-V生态发展的思考2025/09/02 周二 17:00-18:00
中国科学院计算技术研究所副所长包云岗教授
中科院包云岗老师将在本次直播中,探讨处理器生态的关键要素及其联系,分享过去几年推动RISC-V生态建设实践过程中的经验与教训。
回顾中 -
一键搞定华为云万级资源,3步轻松管理企业成本2025/09/09 周二 15:00-16:00
阿言 华为云交易产品经理
本直播重点介绍如何一键续费万级资源,3步轻松管理成本,帮助提升日常管理效率!
回顾中
热门标签