• [openEuler] 在openEuler操作系统上部署nginx 1.21
    一、【环境要求】和 架构信息(软件版本信息)确认CPU架构:x86_64/aarch64OS版本:openEuler20.03-LTS-SP1kernel version:4.19.90   命令确认:cat /etc/os-release uname -i二、安装nginx 1.21切换到 /usr/local 下 # 切换到 /usr/local 下 [root@localhost ~]# cd /usr/local下载并解压nginx-1.21.1wget https://nginx.org/download/nginx-1.21.1.tar.gz tar -zvxf nginx-1.21.1.tar.gz安装nginx环境依赖支持yum -y install pcre-devel openssl openssl-devel进入到 nginx-1.21.1里面执行安装命令 cd nginx-1.21.1 ./configure # 执行安装命令 make install执行完 make install 成功后,会在 nginx-1.21.1 的同级目录下,生成 nginx 就是最终程序.开启服务和检测启动成功[root@localhost sbin]# /usr/local/nginx/sbin/nginx [root@localhost sbin]# ps -ef |grep nginx浏览器输入ip【默认端口80】说明:如果Nginx欢迎页出现403 forbbiden,可能启动用户和nginx工作用户不一致所致将nginx.config的user改为和启动用户一致即可,然后重启nginx
  • [技术干货] 检查nginx运行状态脚本
    检查nginx运行状态脚本:cat > /etc/keepalived/check_nginx.sh << "EOF"#!/bin/bashcount=$(ps -ef |grep nginx |egrep -cv "grep|$$")if [ "$count" -eq 0 ];then  exit 1else  exit 0fiEOFchmod +x /etc/keepalived/check_nginx.sh脚本中最主要的语句是count=$(ps -ef |grep nginx |egrep -cv "grep|$$")ps 是显示系统运行的进程;-e 显示所有进程。-f 全格式。管道输出给grep,筛选出nginx的进程。egrep实际上是grep的增强版,拓展了grep对正则表达式的支持,相当于"grep -E"。-c 仅显示匹配行的计数。-v 显示除了与指定的模式匹配的行之外的所有行。$$ 代表当前的进程号。网上另一种写法是COUNT=$(ps -C nginx --no-header |wc -l)效果也是一样的。
  • [DevKit] 【Hyper Tuner调优实践 15】基于系统性能分析工具的Nginx调优实践
    调优介绍 Hyper Tuner是一款鲲鹏性能调优工具,本实践中使用Tuning Kit工具对nginx所在系统执行系统性能全景分析,找到性能瓶颈点,并根据分析结果进行优化修改,从而实现nginx自身性能增强。组网环境说明:本实践以TaiShan 200服务器(型号2280)+ "CentOS7.6组网举例。项目说明服务器TaiShan   200 服务器(型号2280)CPU2 * Kunpeng 920-4826OSCentOS Linux7(AltArch)应用Nginx前提条件1.服务器和操作系统正常运行。2.PC端已经安装SSH远程登录工具。3.目标环境上HyperTuner工具已经安装完成,并正常运行。调优思路1.向nginx发送大量请求,用HyperTuner工具对目标环境的空载系统进行全局的系统性能分析。对全景性能分析中,有异常的指标进一步分析,并根据优化建议进行优化修改。3.对优化后的代码再次进行全景性能分析,验证调优后的效果。操作步骤系统全景分析执行time ab -n200000 -c1000 url性能瓶颈分析在性能全景分析的结果中,查看网络IO中的网络设备统计,发现rxpck/s、txpck/s都比基准值高出很多,经分析可能是网卡收到报文之后立即产生中断,导致数值增大。性能瓶颈优化关闭网口中断聚合自适应(ethtool -C 网卡名称 adaptive-rx off adaptive-tx off)若数值无降低可修改中断聚合采纳数(ethtool -C 网卡名称  rx-usecs 200 rx-frames 16 tx-usecs 200 tx-frames 16)调优后结果关闭网口中断聚合后,查看网络IO中的网络设备统计,发现rxpck/s、txpck/s都有降低。本实践中,通过系统全景分析的采集,查看优化建议可能是网口中断聚合未关闭,关闭网口中断聚合后,网络IO性能得到明显提升。总结200000请求rxpck/stxpck/s网口中断聚合开启1000并发32315.4832289.90网口中断聚合关闭1000并发26,720.6526,661.48 
  • [WEB] Nginx测试调优案例分享
    一、测试环境服务端环境:硬件:TaiShan 200 2280,kunpeng 3210*2,内存4*32G,板载千兆网络  x 2台OS: CentOS Linux release 7.7.1908 (AltArch)Proton SLB主机版(Nginx): 1.14.2docker版本19.03.11客户端环境:硬件:TaiShan 200 2280,kunpeng 3210*2,内存4*32G,板载千兆网络  x 1台OS: CentOS Linux release 7.7.1908 (AltArch)测试客户端软件: wrk-4.1.0二、测试场景1、无状态应用:Hello , This is a test. 静态页面,返回Body大小260B(网络IO成为瓶颈,尽量小的index.html)2、主机版本:nginx 1.17.6(后端服务)反向代理nginx版本:nginx:1.14.2Nginx配置(反向代理nginx和后端服务nginx):在客户端运行:wrk -t20 -c1000 -d60s --latency http://192.168.101.15:8006/三、物理机上部署的调优方法参考基线的nginx调优文档部署BIOS、操作系统以及nginx调优。1、BIOS调优1) 进入BIOS:“Advanced > MICC Config > Support Smmu” ,将“Support Smmu”设置为“Disabled”。(适用于物理机、负载均衡场景,不适用于Nginx虚拟机场景。虚拟机场景请选用调优指南中的方式二)2) “Advanced > MISC Config > CPU Prefetching Configuration”,将“CPU Prefetching Configuration”设置为“Disabled”。按“F10”保存退出(永久有效)。 2、操作系统调优1)    配置最大打开文件数为102400在“/etc/security/limits.conf”文件中写入以下配置,保存文件并重启服务器。*   soft     nofile      102400*   hard     nofile      1024002)    调优内核参数执行vim /etc/sysctl.conf命令,并输入下列内核参数;写入参数后保存配置文件,执行/sbin/sysctl -p生效。net.ipv4.tcp_tw_reuse = 1net.ipv4.tcp_keepalive_time = 60net.ipv4.tcp_fin_timeout = 1net.ipv4.tcp_max_tw_buckets = 5000net.ipv4.ip_local_port_range = 1024    65500net.core.somaxconn = 65535net.ipv4.tcp_max_syn_backlog = 262144net.core.netdev_max_backlog = 262144net.core.rmem_max = 16777216net.core.wmem_max = 16777216 3)    关闭SELinux执行vim /etc/sysconfig/selinux命令,打开SELinux文件,将"SELINUX=enforcing" 改为 "SELINUX=disabled"。保存文件,并重启服务器后生效。4)    网卡中断绑核a)  增加接收数据包队列个数(这里板载千兆网卡TM210只有1个队列,当前不支持修改队列数)ethtool -l eth0                  //查看网卡队列长度//ethtool -L eth0 combined N       //N为node节点上cpu数//b)  先关闭irqbalancesystemctl status irqbalance      //查看irqbalance//systemctl disable irqbalance       //关闭irqbalance//c)  中断绑核cat /sys/class/net/ eth0/device/numa_node //查询网卡所属的NUMAcat /proc/interrupts | grep eth0 | awk -F ':' '{print $1}' //查询中断号采用手动中断绑核方法:echo $cpunum > /proc/irq/$irq/smp_affinity_list  //把中断绑在对应的numa的core下或者,采用脚本中断绑核方法:./smart_irq_affi.sh -d eth0 -c 0-9 //把中断绑在对应的numa的core下for((i=75;i<107;i++));do cat /proc/irq/${i}/smp_affinity_list;done //查询中断绑核信息5)    单队列网卡中断散列由于本次使用的是板载网卡TM210,只有1个网卡队列。对单队列网卡可以使用RPS将中断分散到各个core处理,避免软中断集中到一个core导致该core软中断过高形成性能瓶颈。通过直接修改网卡队列参数设置RPS ,能够立即生效,无需重启服务器。但是设置后如果重启了服务器RPS会恢复为0。修改前:/sys/class/net/enp125s0f0/queues/rx-0/rps_cpus 0/sys/class/net/enp125s0f0/queues/rx-0/rps_flow_cnt 0/proc/sys/net/core/rps_sock_flow_entries 0修改方法:#echo ff > /sys/class/net/enp125s0f0/queues/rx-0/rps_cpus# echo 4096 > /sys/class/net/enp125s0f0/queues/rx-0/rps_flow_cnt# echo 32768 > /proc/sys/net/core/rps_sock_flow_entries说明:这里以单个网卡为例说明,ff对应的是core 0-7,意思是将软中断散列到0-7个core上。如果是多个网卡,对应的ff需要修改;如果有其他业务进程已绑核到0-7,可以错开绑核到其他CPU核。将并发活动连接的最大预期数目设置为32768,是因为这个是linux官方内核推荐值。具体可参考 鲲鹏论坛《鲲鹏性能调优十板斧》 :https://bbs.huaweicloud.com/forum/thread-62954-1-1.html3、Nginx调优Nginx进程绑核和nginx配置文件调优。1)修改nginx.conf中的worker_processes和worker_cpu_affinity配置,本次是使用6个进程并绑核进行了验证;可以适当增减CPU核数进行验证。其他参考调优请参考Nginx调优指南。调优原则:以压满业务核为前提,用尽量少的中断核       2)关闭access_log,并清除之前产生的access.log日志文件       3)本次使用的index.html文件是Hello , This is a test.静态页面,返回Body大小260B附:具体可参考Nginx调优指南(里面也涉及到容器或虚拟化的调优):https://support.huaweicloud.com/tngg-kunpengwebs/kunpengnginx_05_0006.html附:Wrk是一款开源的性能测试工具 ,简单易用,没有Load Runner那么复杂。采用C语言编写,wrk GitHub 源码:https://github.com/wg/wrkWrk只支持运行在linux/unix系统上,需要编译安装;下载源码,然后make即可。安装过后的包可以直接cp到其他环境上直接使用。
  • [技术干货] nginx容器日志管理
    nginx容器的日志管理:用k8s拉起一个nginx容器root@ecs-beijing1:~# kubectl run nginx --image=nginx   kubectl run --generator=deployment/apps.v1 is DEPRECATED and will be removed in a future version. Use kubectl run --generator=run-pod/v1 or kubectl create instead.Error from server (AlreadyExists): deployments.apps "nginx" already existsroot@ecs-beijing1:~# kubectl run nginx --image=nginx --generator=run-pod/v1  pod/nginx createdroot@ecs-beijing1:~# kubectl get podsNAME                     READY   STATUS    RESTARTS   AGEnginx                    1/1     Running   0          15mnginx-7bb7cd8db5-gpd7z   1/1     Running   0          16mweb1-788bfc97d4-4x4n9    1/1     Running   2          16dweb1-788bfc97d4-wcwj9    1/1     Running   2          16d进入到nginx容器里面:root@ecs-beijing1:~# kubectl exec -it nginx -- bash默认在/var/log/nginx/目录下面有两个文件:root@nginx:/# ls /var/log/nginx/access.log  error.logroot@nginx:/# cat /var/log/nginx/access.log^C开启另一个终端root@ecs-beijing1:~# kubectl get pod -o wideNAME                     READY   STATUS    RESTARTS   AGE   IP            NODE           NOMINATED NODE   READINESS GATESnginx                    1/1     Running   0          17m   10.244.0.64   ecs-beijing1            nginx-7bb7cd8db5-gpd7z   1/1     Running   0          18m   10.244.0.63   ecs-beijing1            web1-788bfc97d4-4x4n9    1/1     Running   2          16d   10.244.0.59   ecs-beijing1            web1-788bfc97d4-wcwj9    1/1     Running   2          16d   10.244.0.60   ecs-beijing1            root@ecs-beijing1:~# curl 10.244.0.64///<!DOCTYPE html><html><head><title>Welcome to nginx!</title><style>    body {        width: 35em;        margin: 0 auto;        font-family: Tahoma, Verdana, Arial, sans-serif;    }</style></head><body><h1>Welcome to nginx!</h1><p>If you see this page, the nginx web server is successfully installed andworking. Further configuration is required.</p><p>For online documentation and support please refer to<a href="http://nginx.org/">nginx.org</a>.<br/>Commercial support is available at<a href="http://nginx.com/">nginx.com</a>.</p><p><em>Thank you for using nginx.</em></p></body></html>回到之前的终端:root@nginx:/# cat /var/log/nginx/access.log^Caccess.log并没有生成一个访问日志记录。这是因为nginx容器系统默认重定向到标准输出中去了。root@nginx:/# ls -l /var/log/nginx/total 0lrwxrwxrwx 1 root root 11 May 25 15:43 access.log -> /dev/stdoutlrwxrwxrwx 1 root root 11 May 25 15:43 error.log -> /dev/stderrroot@nginx:/# 转到另一个终端,使用kubectl logs 查看日志:root@ecs-beijing1:~# kubectl logs nginx2021/06/15 06:45:52 [notice] 1#1: using the "epoll" event method2021/06/15 06:45:52 [notice] 1#1: nginx/1.21.02021/06/15 06:45:52 [notice] 1#1: built by gcc 8.3.0 (Debian 8.3.0-6) 2021/06/15 06:45:52 [notice] 1#1: OS: Linux 4.15.0-136-generic2021/06/15 06:45:52 [notice] 1#1: getrlimit(RLIMIT_NOFILE): 1048576:10485762021/06/15 06:45:52 [notice] 1#1: start worker processes2021/06/15 06:45:52 [notice] 1#1: start worker process 3010.244.0.1 - - [15/Jun/2021:07:02:52 +0000] "GET / HTTP/1.1" 200 612 "-" "curl/7.58.0" "-"root@ecs-beijing1:~#可以看到有一条10.244.0.1的nginx的访问记录。
  • [云实验室] nginx工作负载创建实例失败
    基于云容器引擎部署NGINX应用 实验 中按照手册弄到后面的nginx工作负载创建实例失败,怎么回事啊
  • [教程] K8S--运行nginx容器
    运行容器(1)运行Nginx应用运行Nginx应用。[root@master ~]# cat nginx.yamlapiVersion: apps/v1 kind: Deployment metadata:   name: nginxspec:  replicas: 1   selector:     matchLabels:       app: nginx  template:     metadata:      labels:         app: nginx    spec:       containers:      - name: nginxapp-container        image: nginx:latest        imagePullPolicy: IfNotPresent        ports:         - name: nginxapp          containerPort: 80[root@master ~]# kubectl create -f nginx.yamldeployment.apps/nginx created(2)查看Pods验证Pods是否正常运行。[root@master ~]# kubectl get podsNAME                    READY   STATUS    RESTARTS   AGEnginx-75dcbbc897-c4xbp        1/1       Running    0            93s……(3)开放端口使用expose将service的80端口开放出去。[root@master ~]# kubectl expose deploy/nginx --port 80service/nginx exposed(4)测试Nginx应用[root@master ~]# kubectl get svcNAME         TYPE        CLUSTER-IP     EXTERNAL-IP   PORT(S)   AGEkubernetes       ClusterIP     10.96.0.1         <none>        443/TCP   3h18mnginx           ClusterIP     10.100.220.6      <none>        80/TCP    9s[root@master ~]#  curl 10.100.220.6:80……<h1>Welcome to nginx!</h1><p>If you see this page, the nginx web server is successfully installed andworking. Further configuration is required.</p><p>For online documentation and support please refer to<a href="http://nginx.org/">nginx.org</a>.<br/>Commercial support is available at<a href="http://nginx.com/">nginx.com</a>.</p><p><em>Thank you for using nginx.</em></p></body></html>使用curl工具可以成功获取到Nginx网页信息,说明80端口已开放成功。3.3.Kubernetes运维(1)Node的隔离与恢复在硬件升级、硬件维护等情况下,需要将某些Node隔离。使用kubectl cordon <node_name>命令可禁止Pod调度到该节点上(单节点不需执行),在其上运行的Pod并不会自动停止,管理员需要手动停止在该Node上运行的Pod。[root@master ~]# kubectl cordon node查看Node的状态,可以观察到在node的状态中增加了一项SchedulingDisabled,对于后续创建的Pod,系统将不会再向该Node进行调度。[root@master ~]# kubectl get nodes通过kubectl uncordon命令可完成对Node的恢复。[root@master ~]# kubectl uncordon node[root@master ~]# kubectl get nodes可以看到Node节点已恢复调度,允许Pod调度到该节点上。通过kubectl drain <node>命令可实现对node节点的驱逐,该命令会删除该节点上的所有Pod(DaemonSet除外),在其他Node上重新启动它们。(2)Pod动态扩容和缩放在实际生产系统中,经常会遇到某个服务需要扩容的场景,也可能会遇到由于资源紧张或者工作负载降低而需要减少服务实例数量的场景。此时可以利用kubectl scale deployment命令来完成这些任务。通过执行下面的命令将Nginx Deployment控制的Pod副本数量从初始的1更新为5。[root@master ~]# kubectl scale deployment nginx --replicas=5deployment.extensions/nginx scaled执行kubectl get pods命令来验证Pod的副本数量增加到5。[root@master ~]# kubectl get podsNAME                    READY   STATUS    RESTARTS   AGEnginx-ccb467dc5-2f6n2   1/1     Running   0          34s......将--replicas设置为比当前Pod副本数量更小的数字,系统将会“杀掉”一些运行中的Pod,即可实现应用集群缩容。[root@master ~]# kubectl scale deployment nginx --replicas=2deployment.extensions/nginx scaled[root@master ~]# kubectl get podsNAME                    READY   STATUS    RESTARTS   AGEnginx-ccb467dc5-bl4jp   1/1     Running   0          2m50snginx-ccb467dc5-jlr4c   1/1     Running   0          5m21s(3)应用滚动升级当集群中的某个服务需要升级时,需要停止目前与该服务相关的所有Pod,然后重新拉取镜像并启动。如果集群规模比较大,这个工作就变成了一个挑战。如果采取先全部停止,然后逐步升级的方式,会导致较长时间的服务不可用。Kubernetes提供了rolling-update(滚动升级)功能来解决上述问题。滚动升级通过执行kubectl rolling-update命令一键完成,该命令创建了一个新的Deployment,然后自动控制旧的Deployment中的Pod副本数量逐渐减少到0,同时新的Deployment中的Pod副本数量从0逐步增加到目标值,最终实现了Pod的升级。注意:系统要求新的Deployment需要与旧的Deployment在相同的命名空间(Namespace)内,即不能把别人的资产偷偷转移到自家名下。下面的示例在第一次部署时使用httpd:2.2.31,然后使用滚动升级更新到httpd:2.2.32。定义httpd.yaml文件。[root@master ~]# cat httpd.yamlapiVersion: apps/v1kind: Deploymentmetadata:  name: httpdspec:  selector:     matchLabels:       app: httpd  replicas: 3  template:    metadata:      labels:        app: httpd    spec:      containers:        - name: httpd          image: httpd:2.2.31          imagePullPolicy: IfNotPresent          ports:            - containerPort: 80启动Deployment。[root@master ~]# kubectl create -f httpd.yaml deployment.apps/httpd created[root@master ~]# kubectl get podsNAME                     READY   STATUS    RESTARTS   AGEhttpd-5ddb558f47-46tf5   1/1     Running   0          49shttpd-5ddb558f47-5dg96   1/1     Running   0          49shttpd-5ddb558f47-672sk   1/1     Running   0          49s查看Deployment。[root@master ~]# kubectl get deployments httpd -o wideNAME READY UP-TO-DATE AVAILABLE AGE CONTAINERS IMAGES SELECTORhttpd    3/3      3           3        93s    httpd     httpd:2.2.31  run=httpd可以看到,IMAGES为httpd:2.2.31。把配置文件中的httpd:2.2.31改为httpd:2.2.32,再次启动。[root@master ~]# cat httpd.yaml apiVersion: apps/v1kind: Deploymentmetadata:  name: httpdspec:  selector:     matchLabels:       app: httpd  replicas: 3  template:    metadata:      labels:        app: httpd    spec:      containers:        - name: httpd          image: httpd:2.2.32          imagePullPolicy: IfNotPresent          ports:            - containerPort: 80[root@master ~]# kubectl apply -f httpd.yamlWarning: kubectl apply should be used on resource created by either kubectl create --save-config or kubectl applydeployment.apps/httpd configured再次查看Deployment。[root@master ~]# kubectl get deployments httpd -o wideNAME READY UP-TO-DATE AVAILABLE AGE CONTAINERS IMAGES SELECTORhttpd    3/3      3       3            7m53s   httpd   httpd:2.2.32  run=httpd查看Deployment的详细信息。[root@master ~]# kubectl describe deployment httpd…...Events:  Type    Reason             Age   From                   Message  ----    ------             ----  ----                   -------  Normal  ScalingReplicaSet  22m   deployment-controller  Scaled up replica set httpd-5ddb558f47 to 3  Normal  ScalingReplicaSet  15m   deployment-controller  Scaled up replica set httpd-8bdffc6d8 to 1  Normal  ScalingReplicaSet  14m   deployment-controller  Scaled down replica set httpd-5ddb558f47 to 2  Normal  ScalingReplicaSet  14m   deployment-controller  Scaled up replica set httpd-8bdffc6d8 to 2  Normal  ScalingReplicaSet  14m   deployment-controller  Scaled down replica set httpd-5ddb558f47 to 1  Normal  ScalingReplicaSet  14m   deployment-controller  Scaled up replica set httpd-8bdffc6d8 to 3  Normal  ScalingReplicaSet  13m   deployment-controller  Scaled down replica set httpd-5ddb558f47 to 0上面的日志信息就描述了滚动升级的过程:① 启动一个新版Pod。② 把旧版Pod数量降为2。③ 再启动一个新版,数量变为2。④ 把旧版Pod数量降为1。⑤ 再启动一个新版,数量变为3。⑥ 把旧版Pod数量降为0。这就是滚动的意思,始终保持副本数量为3,控制新旧Pod的交替,实现了无缝升级。kubectl apply每次更新应用时,kubernetes都会记录下当前的配置,保存为一个revision,这样就可以回滚到某个特定的版本。创建3个配置文件,内容中唯一不同的就是镜像的版本号。httpd.v1.yaml:[root@master ~]# cat httpd.v1.yaml apiVersion: apps/v1kind: Deploymentmetadata:  name: httpdspec:  selector:     matchLabels:       app: httpd  revisionHistoryLimit: 10 # 指定保留最近的几个revision  replicas: 3  template:    metadata:      labels:        app: httpd    spec:      containers:        - name: httpd          image: httpd:2.2.31          ports:            - containerPort: 80httpd.v2.yaml:[root@master ~]# cat httpd.v2.yaml apiVersion: apps/v1kind: Deploymentmetadata:  name: httpdspec:  selector:    matchLabels:       app: httpd  revisionHistoryLimit: 10 # 指定保留最近的几个revision  replicas: 3  template:    metadata:      labels:        app: httpd    spec:      containers:        - name: httpd          image: httpd:2.2.32          ports:            - containerPort: 80部署Deployment。[root@master ~]# kubectl apply -f httpd.v1.yaml --recorddeployment.apps/httpd configured[root@master ~]# kubectl apply -f httpd.v2.yaml --recorddeployment.apps/httpd configured--record的作用是将当前命令记录到revision中,可以知道每个revision对应的是哪个配置文件。查看Deployment。[root@master ~]# kubectl get deployments -o wideNAME READY UP-TO-DATE AVAILABLE AGE CONTAINERS IMAGES SELECTORhttpd    3/3        1           3      31m      httpd   httpd:2.2.32 app=httpd查看revision历史记录。[root@master ~]# kubectl rollout history deployment httpddeployment.apps/httpd REVISION  CHANGE-CAUSE1         <none>2         kubectl apply --filename=httpd.v2.yaml --record=trueCHANGE-CAUSE即-record的结果。执行如下操作,回滚到指定版本revision 1。[root@master ~]# kubectl rollout undo deployment httpd --to-revision=1deployment.extensions/httpd rolled back[root@master ~]# kubectl get deployments -o wideNAME READY UP-TO-DATE AVAILABLE AGE CONTAINERS IMAGES SELECTORhttpd    3/3       3            3      35m     httpd    httpd:2.2.31 app=httpd再次查看Deployment可以看到httpd版本已经回退了。查看revision历史记录,可以看到revision记录也发生了变化。[root@master ~]# kubectl rollout history deployment httpddeployment.extensions/httpd ......
  • [整体安全] Nginx高危漏洞预警CVE-2021-23017
    日前著名Web服务器和反向代理服务器Nginx暴露严重漏洞NS解析器Off-by-One堆写入漏洞,该漏洞存在于Nginx的DNS解析模块ngx_resolver_copy()。攻击者可以利用该漏洞进行远程DDos攻击,甚至远程执行。概述  ngx_resolver_copy()在处理DNS响应时出现一个off-by-one错误,利用该漏洞网络攻击者可以在堆分配的缓冲区中写一个点字符(.’, 0x2E)导致超出范围。 所有配置解析器语法的(resolver xxxx)Nginx实例可以通过DNS响应(响应来自Nginx的DNS请求)来触发该漏洞。 特制数据包允许使用0x2E覆盖下一个堆块元数据的最低有效字节,利用该漏洞攻击者,可以实现Ddos拒绝服务,甚至可能实现远程代码执行。  由于Nginx中缺乏DNS欺骗缓解措施,并且在检查DNS事务ID之前调用了易受攻击的功能,因此远程攻击者可能能够通向中毒服务器注入受毒的DNS响应来利用此漏洞。  漏洞影响  严重等级: 高  漏洞向量: 远程/DNS  确认的受影响版本: 0.6.18-1.20.0  确认的修补版本: 1.21.0,1.20.1  供应商: F5,Inc.  状态: 公开  CVE: CVE-2021-23017  CWE: 193  CVSS得分: 8.1  CVSS向量:CVSS:3.1/AV:N/AC:H/PR:N/UI:N/S:U/C:H/I:H/A:H/E:U/RL:O/RC:C  漏洞分析  当Nginx配置中设置resolver时,Nginx DNS解析器(core/ngx_resolver.c)用于通过DNS解析多个模块的主机名。  Nginx中通过ngx_resolver_copy()调用来验证和解压缩DNS响应中包含的每个DNS域名,接收网络数据包作为输入和指向正在处理的名称的指针,并在成功后返回指向包含未压缩名称的新分配缓冲区的指针。调用整体上分两步完成的,  1)计算未压缩的域名大小的长度len并验证输入包的合法性,丢弃包含大于128个指针或包含超出输入缓冲区边界的域名。  2)分配输出缓冲区,并将未压缩的域名复制到其中。  第1部分中的大小计算与第2部分中的未压缩的域名之间的不匹配,导致一个len的一个off-by-one错误,导致允许以一个字节为单位写一个点字符超出name->data的边界。  当压缩名称的最后一部分包含一个指向NUL字节的指针时,就会发生计算错误。 尽管计算步骤仅考虑标签之间的点,但每次处理标签并且接着的字符为非NUL时,解压缩步骤都会写入一个点字符。当标签后跟指向NUL字节的指针时,解压缩过程将:  // 1) copy the label to the output buffer,  ngx_strlow(dst, src, n);  dst += n;  src += n;  // 2) read next character,  n = *src++;  // 3) as its a pointer, its not NUL,  if (n != 0) {  // 4) so a dot character that was not accounted for is written out of bounds  *dst++ = '.';  // 5) Afterwards, the pointer is followed,  if (n & 0xc0) {  n = ((n & 0x3f) << 8) + *src;  src = &buf[n];  n = *src++;  // 6) and a NULL byte is found, signaling the end of the function  if (n == 0) {  name->len = dst - name->data;  return NGX_OK;  如果计算的大小恰好与堆块大小对齐,则超出范围的点字符将覆盖下一个堆块长度的元数据中的最低有效字节。这可能会直接导致下一个堆块的大小写入,但还会覆盖3个标志,从而导致 PREV_INUSE被清除并 IS_MMAPPED被设置。  ==7863== Invalid write of size 1  ==7863== at 0x137C2E: ngx_resolver_copy (ngx_resolver.c:4018)  ==7863== by 0x13D12B: ngx_resolver_process_a (ngx_resolver.c:2470)  ==7863== by 0x13D12B: ngx_resolver_process_response (ngx_resolver.c:1844)  ==7863== by 0x13D46A: ngx_resolver_udp_read (ngx_resolver.c:1574)  ==7863== by 0x14AB19: ngx_epoll_process_events (ngx_epoll_module.c:901)  ==7863== by 0x1414D4: ngx_process_events_and_timers (ngx_event.c:247)  ==7863== by 0x148E57: ngx_worker_process_cycle (ngx_process_cycle.c:719)  ==7863== by 0x1474DA: ngx_spawn_process (ngx_process.c:199)  ==7863== by 0x1480A8: ngx_start_worker_processes (ngx_process_cycle.c:344)  ==7863== by 0x14952D: ngx_master_process_cycle (ngx_process_cycle.c:130)  ==7863== by 0x12237F: main (Nginx.c:383)  ==7863== Address 0x4bbcfb8 is 0 bytes after a block of size 24 alloc'd  ==7863== at 0x483E77F: malloc (vg_replace_malloc.c:307)  ==7863== by 0x1448C4: ngx_alloc (ngx_alloc.c:22)  ==7863== by 0x137AE4: ngx_resolver_alloc (ngx_resolver.c:4119)  ==7863== by 0x137B26: ngx_resolver_copy (ngx_resolver.c:3994)  ==7863== by 0x13D12B: ngx_resolver_process_a (ngx_resolver.c:2470)  ==7863== by 0x13D12B: ngx_resolver_process_response (ngx_resolver.c:1844)  ==7863== by 0x13D46A: ngx_resolver_udp_read (ngx_resolver.c:1574)  ==7863== by 0x14AB19: ngx_epoll_process_events (ngx_epoll_module.c:901)  ==7863== by 0x1414D4: ngx_process_events_and_timers (ngx_event.c:247)  ==7863== by 0x148E57: ngx_worker_process_cycle (ngx_process_cycle.c:719)  ==7863== by 0x1474DA: ngx_spawn_process (ngx_process.c:199)  ==7863== by 0x1480A8: ngx_start_worker_processes (ngx_process_cycle.c:344)  ==7863== by 0x14952D: ngx_master_process_cycle (ngx_process_cycle.c:130)  虽然目前还没有Poc出来,理论上该漏洞可以被用来进行远程代码执行。  攻击向量分析  DNS响应可以通过多种方式触发漏洞。  首先,Nginx必须发送了DNS请求,并且必须等待响应。 然后,可以在DNS响应的多个部分进行投毒:  DNS问题QNAME,  DNS回答名称,  DNS会回答RDATA以获得CNAME和SRV响应,  通过使用多个中毒的QNAME,NAME或RDATA值制作响应,可以在处理响应时多次击中易受攻击的函数,从而有效地执行多次脱机写入。  此外,当攻击者提供中毒的CNAME时,它将以递归方式解决,从而在执行过程中触发了额外的OOB写操作 ngx_resolve_name_locked() 调用ngx_strlow()(ngx_resolver.c:594)和其他OOB读取期间 ngx_resolver_dup()(ngx_resolver.c:790)和 ngx_crc32_short()(ngx_resolver.c:596)。  用于“example.net”请求的DNS响应示例负载,其中包含被污染的CNAME:  稍微不同的有效负载(poc.py中的有效负载)填充了足够的字节以覆盖 next_chunk.mchunk_size带点的最低有效字节:  24字节的标签导致分配了24字节的缓冲区,该缓冲区填充有24字节+一个超出范围的点字符。  漏洞修复和解决  通过向域名解析时,在域名末尾写入的伪造的点字符分配一个额外的字节可以缓解此问题。  受漏洞影响的配置  daemon off;  http{  access_log logs/access.log;  server{  listen 8080;  location / {  resolver 127.0.0.1:1053;  set $dns example.net;  proxy_pass $dns;  events {  worker_connections 1024;
  • 云实验容器部署nginx体验
    云实验增加了许多新实验,HDC大会圆满闭幕,终于有时间做实验啦~因为最近做了很多docker和k8s的功课,想着先复习下容器的实验。可能因为上次做完了还剩20多分钟的时间,所以这次进来发现因为密钥配额的原因,实验不能进行下去,只能把实验的时间耗完然后,明天再来!
  • [体验官] docker 部署nginx成功后不可访问的处理
    直接运行docker run -p 8080:80 nginx运行之后,一直卡住,也没有任何输出。使用浏览器输入ECS的EIP:8080测试访问,结果返回connection refused。首先反应的是,防火墙了,抓包分析了一下,ecs确实返回了rst的包。查询ecs上的docker状态,docker ps没有显示docker ps -a可以查看到刚才生成的容器id这说明容器虽然生成了,但是并没有启用,直接用docker start 容器id再次浏览器访问,就可以正常访问了。
  • [问题求助] 福建党校项目--需要添加3Dgis地图,请问我们这边需要Nginx怎么把路径给加进去
    这是我们现有的gis服务配置,现在想继续添加3D地图的配置:请问我们需要在哪里加相应的配置信息请联系我电话:15755136053
  • [问题求助] zabbix移植时nginx调用php文件失败。
    【操作步骤&问题现象】1、麒麟V10移植zabbix4.0时,最后通过nginx调用index.php无法显示界面。2、自己写test.php可以显示。【截图信息】【日志信息】(可选,上传日志内容或者附件)
  • [基础服务] 华为2 基于云容器引擎部署NGINX应用
    华为2 基于云容器引擎部署NGINX应用
  • [技术干货] 超图私有iserver和ioc如何 对接?
    我们现在是用私有的iserver地址,且希望能直接用私有iserver上的服务,这个怎么对接到ioc上,怎么操作?已参考问题https://bbs.huaweicloud.com/forum/thread-108243-1-1.html   处理完成前两步,然后第三步遇到错误 ,如图:联系了华为的人说是要配置nginx,马上提交 url,于今天中午配置好了nginx。我这边下一步操作是直接把上上图的步骤 1改成nginx地址,然后继续第三步吗? 从上面第三步,是使用appEngine上传地图,我怎么用当前私有iserver上的服务呢 ?还请华为的大拿对以上问题给予解答。或者提供更 详细的操作文档(目前只拿 到如下的文档,步骤很简,没有专题文档)。谢谢!
  • [问题求助] 【应用迁移】【安装Dependency Advisor】报错 Job for nginx_dep.service failed
    【功能模块】安装Dependency Advisor时。用途:鲲鹏HCIA认证授课实验。【操作步骤&问题现象】1、安装Dependency Advisor,在需要输入IP时输入了公网IP(非正确操作),端口号等后续选项使用默认。安装文件来自实鲲鹏HCIA认证验指导书。 cd /home/ wget https://hcia.obs.cn-north-4.myhuaweicloud.com/v1.5/Dependency-advisor-Kun peng-linux-2.1.1.SPC100.tar.gz2、安装到最后报错。如下图所示。3、uninstall后尝试重新安装,IP使用默认或者使用私网IP均出现相同报错。排除相关动作,1、在相同一台云环境下安装PortingAdvisor是ok的。PortingAdvisor也要调用nginx_dep.service 为什么没有报错呢。2、在相同一台云环境下安最新版Code-scanner,安装成功。获取链接参考了下面这个帖子。https://bbs.huaweicloud.com/forum/thread-87118-1-1.html 所以,如果IP输入错误(写成公网IP)会触发这个问题么?
总条数:276 到第 页
上滑加载中