- 本文简单介绍了如何使用DAYU规范设计,完成基于关系建模的数据资产管理 本文简单介绍了如何使用DAYU规范设计,完成基于关系建模的数据资产管理
- 走向拥有GT手表之路(完结篇) 走向拥有GT手表之路(完结篇)
- 数据仓库服务GaussDB(DWS)使用OBS作为集群数据与外部数据互相转化的平台,支持用户将数据从集群外导入到集群中,快速将样例数据从OBS导入集群。 本示例将加载8.9亿条交通卡口车辆通行模拟数据到数据仓库单个数据库表中,并进行车辆精确查询和车辆模糊查询,展示GaussDB(DWS)对于历史详单数据的高性能查询能力。 数据仓库服务GaussDB(DWS)使用OBS作为集群数据与外部数据互相转化的平台,支持用户将数据从集群外导入到集群中,快速将样例数据从OBS导入集群。 本示例将加载8.9亿条交通卡口车辆通行模拟数据到数据仓库单个数据库表中,并进行车辆精确查询和车辆模糊查询,展示GaussDB(DWS)对于历史详单数据的高性能查询能力。
- 项目交付过程中可能会遇到系统响应慢、用户体验差等性能问题,影响客户感知和工作效率。系统性能优化的目的是通过调整系统软硬件配置、参数优化、架构优化、SQL优化等手段,使系统能高效的运行,提升用户的满意度,本文旨在通过常规手段的介绍给大家提供一些思考和启发。 项目交付过程中可能会遇到系统响应慢、用户体验差等性能问题,影响客户感知和工作效率。系统性能优化的目的是通过调整系统软硬件配置、参数优化、架构优化、SQL优化等手段,使系统能高效的运行,提升用户的满意度,本文旨在通过常规手段的介绍给大家提供一些思考和启发。
- 在RES推荐系统的数据源接入中,支持接入实时行为数据,同时基于实时行为可以完成近线召回,画像更新等实时策略,完成信息流实时传递、召回、画像快速更新等功能 在RES推荐系统的数据源接入中,支持接入实时行为数据,同时基于实时行为可以完成近线召回,画像更新等实时策略,完成信息流实时传递、召回、画像快速更新等功能
- 什么是资源负载管理,大型分布式数仓是如何实现负载管理的,本文就来解密GaussDB(DWS)负载管理的实现机制和应用场景。 什么是资源负载管理,大型分布式数仓是如何实现负载管理的,本文就来解密GaussDB(DWS)负载管理的实现机制和应用场景。
- 1、 默认分页(1) 创建API时,取数方式为配置方式对于配置方式取数的API来说,当用户配置了API之后,DLM服务会在用户调试/调用的时候生成相应的SQL进行取数,其分页方式为默认分页。例如,如果将API的请求参数、返回参数、排序参数按照以下配置的话:DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ... 1、 默认分页(1) 创建API时,取数方式为配置方式对于配置方式取数的API来说,当用户配置了API之后,DLM服务会在用户调试/调用的时候生成相应的SQL进行取数,其分页方式为默认分页。例如,如果将API的请求参数、返回参数、排序参数按照以下配置的话:DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ...
- 作为Jupyter主打的最新数据科学生产工具,JupyterLab是一个基于web的交互式开发环境,可以使用它编写Notebook、操作终端、编辑MarkDown文本、打开交互模式、查看csv文件及图片等功能。 作为Jupyter主打的最新数据科学生产工具,JupyterLab是一个基于web的交互式开发环境,可以使用它编写Notebook、操作终端、编辑MarkDown文本、打开交互模式、查看csv文件及图片等功能。
- 某天发现es集群堆内存暴涨,持续在90%以上,并且一直降不下去,持续告警。这种问题首先就是怀疑内存泄漏,但是没有定位出来哪里泄漏了,用jmap dump了一个20G的内存文件下来,使用MAT打开问题分析可以看到SearchService里的ConcurrentHashMap占了78%的内存,打开SearchService的源码,只能是这个activeContexts了:private fin... 某天发现es集群堆内存暴涨,持续在90%以上,并且一直降不下去,持续告警。这种问题首先就是怀疑内存泄漏,但是没有定位出来哪里泄漏了,用jmap dump了一个20G的内存文件下来,使用MAT打开问题分析可以看到SearchService里的ConcurrentHashMap占了78%的内存,打开SearchService的源码,只能是这个activeContexts了:private fin...
- 简要介绍了数据库透明加密的基本概念,分析了加密粒度和优缺点,介绍了GaussDB(DWS)和其他系统的实现。 简要介绍了数据库透明加密的基本概念,分析了加密粒度和优缺点,介绍了GaussDB(DWS)和其他系统的实现。
- GaussDB(DWS)提供了数据服务工具GDS来帮助分发待导入的用户数据及实现数据的高速导入。本节云小课通过一个导入任务帮您了解GDS导入的全过程。 GaussDB(DWS)提供了数据服务工具GDS来帮助分发待导入的用户数据及实现数据的高速导入。本节云小课通过一个导入任务帮您了解GDS导入的全过程。
- debug原理和调试技巧 debug原理和调试技巧
- 生命不息,折腾200DK不止。。。。如有机会,折腾HiLens也不止。。。 生命不息,折腾200DK不止。。。。如有机会,折腾HiLens也不止。。。
- Spark推出Tungsten计划用于提升Spark的性能与资源使用,其中为了消除JVM对象模型和GC代价,提供了UnsafeRow对象类型。它由jvm提供的sun.misc.Unsafe实现,内部存储的是二进制,继承自InternalRow,是SparkSQL中的中间算子的处理和输出数据类型。正是由于UnsafeRow的特殊性,我们发现在某些情况下可能会无法正确序列/持久化该类型,产生数据... Spark推出Tungsten计划用于提升Spark的性能与资源使用,其中为了消除JVM对象模型和GC代价,提供了UnsafeRow对象类型。它由jvm提供的sun.misc.Unsafe实现,内部存储的是二进制,继承自InternalRow,是SparkSQL中的中间算子的处理和输出数据类型。正是由于UnsafeRow的特殊性,我们发现在某些情况下可能会无法正确序列/持久化该类型,产生数据...
- 相信很多研究大数据的都会接触到“数据倾斜”这个令人头疼的问题。那么数据倾斜到底是什么,redis如何避免这类问题,我们一起来揭开它的神秘面纱。 简单的讲,数据倾斜就是我们在计算数据的时候,数据不够分散,大量的数据集中到了一台或者几台机器节点上计算,从而导致这些节点负载多大,而其他节点处于空闲等待中,导致最终整体效率低下。 相信很多研究大数据的都会接触到“数据倾斜”这个令人头疼的问题。那么数据倾斜到底是什么,redis如何避免这类问题,我们一起来揭开它的神秘面纱。 简单的讲,数据倾斜就是我们在计算数据的时候,数据不够分散,大量的数据集中到了一台或者几台机器节点上计算,从而导致这些节点负载多大,而其他节点处于空闲等待中,导致最终整体效率低下。
上滑加载中
推荐直播
-
OpenHarmony应用开发之网络数据请求与数据解析
2025/01/16 周四 19:00-20:30
华为开发者布道师、南京师范大学泰州学院副教授,硕士研究生导师,开放原子教育银牌认证讲师
科技浪潮中,鸿蒙生态强势崛起,OpenHarmony开启智能终端无限可能。当下,其原生应用开发适配潜力巨大,终端设备已广泛融入生活各场景,从家居到办公、穿戴至车载。 现在,机会敲门!我们的直播聚焦OpenHarmony关键的网络数据请求与解析,抛开晦涩理论,用真实案例带你掌握数据访问接口,轻松应对复杂网络请求、精准解析Json与Xml数据。参与直播,为开发鸿蒙App夯实基础,抢占科技新高地,别错过!
回顾中 -
Ascend C高层API设计原理与实现系列
2025/01/17 周五 15:30-17:00
Ascend C 技术专家
以LayerNorm算子开发为例,讲解开箱即用的Ascend C高层API
回顾中
热门标签