- 基于CentOS6.4环境编译Spark-2.1.0源码 1 写在前面的话 有些小伙伴可能会问:Spark官网不是已经提供了Spark针对不同版本的安装包了吗,我们为什么还需要对Spark源码进行编译呢?针对这个问题我们到Spark官网: spark.apache.org来看下,如下图所示: Spark官网的确是提供了一些Hadoop版本的Spark安装包,但... 基于CentOS6.4环境编译Spark-2.1.0源码 1 写在前面的话 有些小伙伴可能会问:Spark官网不是已经提供了Spark针对不同版本的安装包了吗,我们为什么还需要对Spark源码进行编译呢?针对这个问题我们到Spark官网: spark.apache.org来看下,如下图所示: Spark官网的确是提供了一些Hadoop版本的Spark安装包,但...
- 一、前提准备 (1)下载 elasticsearch、logstash、kibana、filebeat 的压缩包,并将 四个压缩包上传到 /opt/elk 目录下 (2)修改系统参数、创建elk 用户(es 需要用 普通用户启动) 确保系统有足够资源启动ES 设置内核参数 vi /etc/sysctl.conf# 增加以下参数vm.max_map_... 一、前提准备 (1)下载 elasticsearch、logstash、kibana、filebeat 的压缩包,并将 四个压缩包上传到 /opt/elk 目录下 (2)修改系统参数、创建elk 用户(es 需要用 普通用户启动) 确保系统有足够资源启动ES 设置内核参数 vi /etc/sysctl.conf# 增加以下参数vm.max_map_...
- centos7或redhat上安装docker 前置条件 64-bit 系统kernel 3.10+1.检查内核版本,返回的值大于3.10即可。 $ uname -r 2.使用 sudo 或 root 权限的用户登入终端。 3.卸载旧版本(如果安装过旧版本的话) $ yum remove docker \ dock... centos7或redhat上安装docker 前置条件 64-bit 系统kernel 3.10+1.检查内核版本,返回的值大于3.10即可。 $ uname -r 2.使用 sudo 或 root 权限的用户登入终端。 3.卸载旧版本(如果安装过旧版本的话) $ yum remove docker \ dock...
- 你是否遇到过两个(多个)系统间需要通过定时任务来同步某些数据?你是否在为异构系统的不同进程间相互调用、通讯的问题而苦恼、挣扎?如果是,那么恭喜你,消息服务让你可以很轻松地解决这些问题。 消息服务擅长于解决多系统、异构系统间的数据交换(消息通知/通讯)问题,你也可以把它用于系统间服务的相互调用(RPC) 一、下载erlang 和 rabbitmq 的rpm 包 到/usr/l... 你是否遇到过两个(多个)系统间需要通过定时任务来同步某些数据?你是否在为异构系统的不同进程间相互调用、通讯的问题而苦恼、挣扎?如果是,那么恭喜你,消息服务让你可以很轻松地解决这些问题。 消息服务擅长于解决多系统、异构系统间的数据交换(消息通知/通讯)问题,你也可以把它用于系统间服务的相互调用(RPC) 一、下载erlang 和 rabbitmq 的rpm 包 到/usr/l...
- 在linux上运行jar包谁都会啊。为什么我还要单独拎出来讲呢。细心的朋友可能已经在标题中发现关键词Centos7和最佳方式。 这就说明我不是随便写点东西水一篇博客的ヾ(◍°∇°◍)ノ゙ 首先Centos7 推荐我们这么运行项目 首先执行命令: cd /ets/systemd/system 到这个目录下,新建一个 yourProjectName.serv... 在linux上运行jar包谁都会啊。为什么我还要单独拎出来讲呢。细心的朋友可能已经在标题中发现关键词Centos7和最佳方式。 这就说明我不是随便写点东西水一篇博客的ヾ(◍°∇°◍)ノ゙ 首先Centos7 推荐我们这么运行项目 首先执行命令: cd /ets/systemd/system 到这个目录下,新建一个 yourProjectName.serv...
- 本节书摘来自华章计算机《跟老男孩学Linux运维:核心基础篇(上)(第2版)》一书中第2章,第2.3节,作者是老男孩 。 本节书摘来自华章计算机《跟老男孩学Linux运维:核心基础篇(上)(第2版)》一书中第2章,第2.3节,作者是老男孩 。
- 本节书摘来自华章计算机《跟老男孩学Linux运维:核心基础篇(上)(第2版)》一书中第2章,第2.2节,作者是老男孩 。 本节书摘来自华章计算机《跟老男孩学Linux运维:核心基础篇(上)(第2版)》一书中第2章,第2.2节,作者是老男孩 。
- 本节书摘来自华章计算机《跟老男孩学Linux运维:核心基础篇(上)(第2版)》一书中第2章,第2.1节,作者是老男孩 。 本节书摘来自华章计算机《跟老男孩学Linux运维:核心基础篇(上)(第2版)》一书中第2章,第2.1节,作者是老男孩 。
- 这几天在 CentOS 升级PHP7 版本的时候,整理了和 RHEL/CentOS 相关的几个仓库源,如果以后你在 RHEL/CentOS 下找不到特定软件的时候,那么这篇文章适合你。下面的例子在 CentOS 6 下运行通过。EPELEPEL 源比较流行,它相当于官方 CentOS/RHEL 源仓库的一个补充,比如我的 Amazon EC2 默认不能安装 redis, 安装 EPEL 源后... 这几天在 CentOS 升级PHP7 版本的时候,整理了和 RHEL/CentOS 相关的几个仓库源,如果以后你在 RHEL/CentOS 下找不到特定软件的时候,那么这篇文章适合你。下面的例子在 CentOS 6 下运行通过。EPELEPEL 源比较流行,它相当于官方 CentOS/RHEL 源仓库的一个补充,比如我的 Amazon EC2 默认不能安装 redis, 安装 EPEL 源后...
- 这篇文章是《一文解剖ubuntu,curl,openssl更新根证书的细节》的姐妹篇,主要描述在 CentOS 系统中基于 NSS 的 SSL 客户端(比如 curl)是如何更新根证书的(这段话请仔细理解)。顺藤摸瓜找到 ca-certificates其实在 CentOS 中,如果基于 Yum 包安装,基于 OpenSSL 库的应用程序和基于 NSS 库的应用程序使用的证书路径是一样的,默认... 这篇文章是《一文解剖ubuntu,curl,openssl更新根证书的细节》的姐妹篇,主要描述在 CentOS 系统中基于 NSS 的 SSL 客户端(比如 curl)是如何更新根证书的(这段话请仔细理解)。顺藤摸瓜找到 ca-certificates其实在 CentOS 中,如果基于 Yum 包安装,基于 OpenSSL 库的应用程序和基于 NSS 库的应用程序使用的证书路径是一样的,默认...
- 最近在 CentOS 系统中折腾了 LAMP 相关软件的升级,写了两篇文章。就顺带研究 Ubuntu 操作系统升级软件的相关细节,并和 CentOS 软件升级做了一些比较。我平时学习、测试、写一些代码都是在 Ubuntu 14 系统中运行的(阿里云 ECS),每天到公司第一件事情就是 ssh 连接 ECS。Ubuntu 升级是比较频繁的,每年二个大版本的更新,而 CentOS 更新频率小了很... 最近在 CentOS 系统中折腾了 LAMP 相关软件的升级,写了两篇文章。就顺带研究 Ubuntu 操作系统升级软件的相关细节,并和 CentOS 软件升级做了一些比较。我平时学习、测试、写一些代码都是在 Ubuntu 14 系统中运行的(阿里云 ECS),每天到公司第一件事情就是 ssh 连接 ECS。Ubuntu 升级是比较频繁的,每年二个大版本的更新,而 CentOS 更新频率小了很...
- 本书摘自《Docker技术入门与实战(第3版)》——书中的第2章,第2.2.2节作者是杨保华、戴王剑、曹亚仑。 本书摘自《Docker技术入门与实战(第3版)》——书中的第2章,第2.2.2节作者是杨保华、戴王剑、曹亚仑。
- 本书摘自《基于Kubernetes的容器云平台实战》——书中的第1章,第1.5.3节作者是陆平、左奇、付光、张晗、赵培、单良 本书摘自《基于Kubernetes的容器云平台实战》——书中的第1章,第1.5.3节作者是陆平、左奇、付光、张晗、赵培、单良
- 1.官方安装方式sudo curl -L https://github.com/docker/compose/releases/download/1.18.0/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-composesudo chmod +x /usr/local/bin/docker-compose 给doc... 1.官方安装方式sudo curl -L https://github.com/docker/compose/releases/download/1.18.0/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-composesudo chmod +x /usr/local/bin/docker-compose 给doc...
- ElasticSearch简介什么是ElasticSearch:ElasticSearch是基于Apache Lucene构建的开源搜索引擎采用Java编写,提供了简单易用的RESTFul API轻松的横向扩展,可支持PB级的结构化或非结构化的数据处理应用场景:海量数据分析引擎站内搜索引擎作为数据仓库一线公司实际应用场景:英国卫报 - 实时分析公众对文章的回应维基百科、GitHub - 站内... ElasticSearch简介什么是ElasticSearch:ElasticSearch是基于Apache Lucene构建的开源搜索引擎采用Java编写,提供了简单易用的RESTFul API轻松的横向扩展,可支持PB级的结构化或非结构化的数据处理应用场景:海量数据分析引擎站内搜索引擎作为数据仓库一线公司实际应用场景:英国卫报 - 实时分析公众对文章的回应维基百科、GitHub - 站内...
上滑加载中
推荐直播
-
华为云DataArts+DWS助力企业数据治理一站式解决方案及应用实践
2024/11/27 周三 16:30-18:00
Walter.chi 华为云数据治理DTSE技术布道师
想知道数据治理项目中,数据主题域如何合理划分?数据标准及主数据标准如何制定?数仓分层模型如何合理规划?华为云DataArts+DWS助力企业数据治理项目一站式解决方案和应用实践告诉您答案!本期将从数据趋势、数据治理方案、数据治理规划及落地,案例分享四个方面来助力企业数据治理项目合理咨询规划及顺利实施。
正在直播 -
大模型+知识库(RAG):如何使能行业数智化?—华为行业数字化转型实践分享
2024/11/27 周三 19:00-20:00
华为人工智能专家史老师
本次直播,我们特别邀请了华为人工智能专家史老师,将以大模型知识库为切入点,详细揭示大模型与知识库结合的过程,并分享利用大模型+知识库(RAG)使能行业数智化转型的实践经验。
即将直播 -
2024年川渝职工软件创新应用技能竞赛·开幕式
2024/11/28 周四 09:30-10:30
华为云讲师团
数字川渝,智创未来。2024年川渝职工软件创新应用技能竞赛决赛在即,科技精英蓄势待发!直击开幕式直播现场,共同点燃科技激情!
即将直播
热门标签