- 在上期博客中,介绍了数据服务的基本组成与概念。本期博客将对数据服务API创建中所涉及的基础属性进行说明。 API基本配置l 请求path: 请求路径,即一个完整的url中,域名之后,查询参数之前的部分。例如图1-1中所展示的/blogs/188138图1-1 统一资源定位符url说明 在请求路径中,可以使用大括号{}标识路径中的参数,作为通配符,由请求时动态匹配。如上述请求路径... 在上期博客中,介绍了数据服务的基本组成与概念。本期博客将对数据服务API创建中所涉及的基础属性进行说明。 API基本配置l 请求path: 请求路径,即一个完整的url中,域名之后,查询参数之前的部分。例如图1-1中所展示的/blogs/188138图1-1 统一资源定位符url说明 在请求路径中,可以使用大括号{}标识路径中的参数,作为通配符,由请求时动态匹配。如上述请求路径...
- 本文简单介绍了如何使用DAYU规范设计,完成基于关系建模的数据资产管理 本文简单介绍了如何使用DAYU规范设计,完成基于关系建模的数据资产管理
- 走向拥有GT手表之路(完结篇) 走向拥有GT手表之路(完结篇)
- 数据仓库服务GaussDB(DWS)使用OBS作为集群数据与外部数据互相转化的平台,支持用户将数据从集群外导入到集群中,快速将样例数据从OBS导入集群。 本示例将加载8.9亿条交通卡口车辆通行模拟数据到数据仓库单个数据库表中,并进行车辆精确查询和车辆模糊查询,展示GaussDB(DWS)对于历史详单数据的高性能查询能力。 数据仓库服务GaussDB(DWS)使用OBS作为集群数据与外部数据互相转化的平台,支持用户将数据从集群外导入到集群中,快速将样例数据从OBS导入集群。 本示例将加载8.9亿条交通卡口车辆通行模拟数据到数据仓库单个数据库表中,并进行车辆精确查询和车辆模糊查询,展示GaussDB(DWS)对于历史详单数据的高性能查询能力。
- 项目交付过程中可能会遇到系统响应慢、用户体验差等性能问题,影响客户感知和工作效率。系统性能优化的目的是通过调整系统软硬件配置、参数优化、架构优化、SQL优化等手段,使系统能高效的运行,提升用户的满意度,本文旨在通过常规手段的介绍给大家提供一些思考和启发。 项目交付过程中可能会遇到系统响应慢、用户体验差等性能问题,影响客户感知和工作效率。系统性能优化的目的是通过调整系统软硬件配置、参数优化、架构优化、SQL优化等手段,使系统能高效的运行,提升用户的满意度,本文旨在通过常规手段的介绍给大家提供一些思考和启发。
- 在RES推荐系统的数据源接入中,支持接入实时行为数据,同时基于实时行为可以完成近线召回,画像更新等实时策略,完成信息流实时传递、召回、画像快速更新等功能 在RES推荐系统的数据源接入中,支持接入实时行为数据,同时基于实时行为可以完成近线召回,画像更新等实时策略,完成信息流实时传递、召回、画像快速更新等功能
- 什么是资源负载管理,大型分布式数仓是如何实现负载管理的,本文就来解密GaussDB(DWS)负载管理的实现机制和应用场景。 什么是资源负载管理,大型分布式数仓是如何实现负载管理的,本文就来解密GaussDB(DWS)负载管理的实现机制和应用场景。
- 1、 默认分页(1) 创建API时,取数方式为配置方式对于配置方式取数的API来说,当用户配置了API之后,DLM服务会在用户调试/调用的时候生成相应的SQL进行取数,其分页方式为默认分页。例如,如果将API的请求参数、返回参数、排序参数按照以下配置的话:DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ... 1、 默认分页(1) 创建API时,取数方式为配置方式对于配置方式取数的API来说,当用户配置了API之后,DLM服务会在用户调试/调用的时候生成相应的SQL进行取数,其分页方式为默认分页。例如,如果将API的请求参数、返回参数、排序参数按照以下配置的话:DLM服务生成的SQL为: SELECT c,x FROM tableName Where c = {p} AND x = {h} ...
- 作为Jupyter主打的最新数据科学生产工具,JupyterLab是一个基于web的交互式开发环境,可以使用它编写Notebook、操作终端、编辑MarkDown文本、打开交互模式、查看csv文件及图片等功能。 作为Jupyter主打的最新数据科学生产工具,JupyterLab是一个基于web的交互式开发环境,可以使用它编写Notebook、操作终端、编辑MarkDown文本、打开交互模式、查看csv文件及图片等功能。
- 某天发现es集群堆内存暴涨,持续在90%以上,并且一直降不下去,持续告警。这种问题首先就是怀疑内存泄漏,但是没有定位出来哪里泄漏了,用jmap dump了一个20G的内存文件下来,使用MAT打开问题分析可以看到SearchService里的ConcurrentHashMap占了78%的内存,打开SearchService的源码,只能是这个activeContexts了:private fin... 某天发现es集群堆内存暴涨,持续在90%以上,并且一直降不下去,持续告警。这种问题首先就是怀疑内存泄漏,但是没有定位出来哪里泄漏了,用jmap dump了一个20G的内存文件下来,使用MAT打开问题分析可以看到SearchService里的ConcurrentHashMap占了78%的内存,打开SearchService的源码,只能是这个activeContexts了:private fin...
- 简要介绍了数据库透明加密的基本概念,分析了加密粒度和优缺点,介绍了GaussDB(DWS)和其他系统的实现。 简要介绍了数据库透明加密的基本概念,分析了加密粒度和优缺点,介绍了GaussDB(DWS)和其他系统的实现。
- GaussDB(DWS)提供了数据服务工具GDS来帮助分发待导入的用户数据及实现数据的高速导入。本节云小课通过一个导入任务帮您了解GDS导入的全过程。 GaussDB(DWS)提供了数据服务工具GDS来帮助分发待导入的用户数据及实现数据的高速导入。本节云小课通过一个导入任务帮您了解GDS导入的全过程。
- debug原理和调试技巧 debug原理和调试技巧
- 生命不息,折腾200DK不止。。。。如有机会,折腾HiLens也不止。。。 生命不息,折腾200DK不止。。。。如有机会,折腾HiLens也不止。。。
- Spark推出Tungsten计划用于提升Spark的性能与资源使用,其中为了消除JVM对象模型和GC代价,提供了UnsafeRow对象类型。它由jvm提供的sun.misc.Unsafe实现,内部存储的是二进制,继承自InternalRow,是SparkSQL中的中间算子的处理和输出数据类型。正是由于UnsafeRow的特殊性,我们发现在某些情况下可能会无法正确序列/持久化该类型,产生数据... Spark推出Tungsten计划用于提升Spark的性能与资源使用,其中为了消除JVM对象模型和GC代价,提供了UnsafeRow对象类型。它由jvm提供的sun.misc.Unsafe实现,内部存储的是二进制,继承自InternalRow,是SparkSQL中的中间算子的处理和输出数据类型。正是由于UnsafeRow的特殊性,我们发现在某些情况下可能会无法正确序列/持久化该类型,产生数据...
上滑加载中