From 0e36bd347dafc687bc17900747cf4b5af494081b Mon Sep 17 00:00:00 2001 From: fanqinyuan Date: Fri, 18 Apr 2025 09:17:40 +0000 Subject: [PATCH] =?UTF-8?q?=E6=98=93=E7=94=A8=E6=80=A7?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit Signed-off-by: fanqinyuan --- ...05\344\270\216\351\203\250\347\275\262.md" | 220 ++++++++++-------- 1 file changed, 118 insertions(+), 102 deletions(-) diff --git "a/docs/zh/docs/A-Tune/\345\256\211\350\243\205\344\270\216\351\203\250\347\275\262.md" "b/docs/zh/docs/A-Tune/\345\256\211\350\243\205\344\270\216\351\203\250\347\275\262.md" index 2b9bb426e..0302429a0 100644 --- "a/docs/zh/docs/A-Tune/\345\256\211\350\243\205\344\270\216\351\203\250\347\275\262.md" +++ "b/docs/zh/docs/A-Tune/\345\256\211\350\243\205\344\270\216\351\203\250\347\275\262.md" @@ -4,7 +4,7 @@ ## 软硬件要求 -### 硬件要求 +### 硬件要求\ - 鲲鹏920处理器 @@ -34,10 +34,9 @@ A-Tune支持单机模式、分布式模式安装和集群模式安装： 由一台client机器和大于一台server机器组成。 - 三种安装模式的简单图示如下： -![](./figures/zh-cn_image_0231122163.png) +\![](./figures/zh-cn_image_0231122163.png) ### 安装操作 @@ -45,7 +44,7 @@ A-Tune支持单机模式、分布式模式安装和集群模式安装： 1. 挂载openEuler的iso文件。 - ``` + ```shell # mount openEuler-{version}-everything-x86_64-dvd.iso /mnt ``` @@ -53,13 +52,13 @@ A-Tune支持单机模式、分布式模式安装和集群模式安装： 2. 配置本地yum源。 - ``` + ```shell # vim /etc/yum.repos.d/local.repo ``` 配置内容如下所示： - ``` + ```shell [local] name=local baseurl=file:///mnt @@ -69,29 +68,29 @@ A-Tune支持单机模式、分布式模式安装和集群模式安装： 3. 将RPM数字签名的GPG公钥导入系统。 - ``` + ```shell # rpm --import /mnt/RPM-GPG-KEY-openEuler ``` 4. 安装A-Tune服务端。 - >![](./public_sys-resources/icon-note.gif) **说明：** + >\![](./public_sys-resources/icon-note.gif) **说明：** >本步骤会同时安装服务端和客户端软件包，对于单机部署模式，请跳过**步骤5**。 - ``` + ```shell # yum install atune -y # yum install atune-engine -y ``` -5. 若为分布式部署，请安装A-Tune客户端。 +5. 若为分布式部署，请在客户端安装atune-client。 - ``` + ```shell # yum install atune-client -y ``` 6. 验证是否安装成功。命令和回显如下表示安装成功。 - ``` + ```shell # rpm -qa | grep atune atune-client-xxx atune-db-xxx @@ -109,42 +108,42 @@ A-Tune配置文件/etc/atuned/atuned.cnf的配置项说明如下： - A-Tune服务启动配置（可根据需要进行修改）。 - - protocol：系统gRPC服务使用的协议，unix或tcp，unix为本地socket通信方式，tcp为socket监听端口方式。默认为unix。 - - address：系统gRPC服务的侦听地址，默认为unix socket，若为分布式部署，需修改为侦听的ip地址。 - - port：系统gRPC服务的侦听端口，范围为0\~65535未使用的端口。如果protocol配置是unix，则不需要配置。 - - connect：若为集群部署时，A-Tune所在节点的ip列表，ip地址以逗号分隔。 - - rest_host：系统rest service的侦听地址，默认为localhost。 - - rest_port：系统rest service的侦听端口，范围为0~65535未使用的端口，默认为8383。 - - engine_host：与系统atune engine service链接的地址。 - - engine_port：与系统atune engine service链接的端口。 - - sample_num：系统执行analysis流程时采集样本的数量，默认为20。 - - interval：系统执行analysis流程时采集样本的间隔时间，默认为5s。 - - grpc_tls：系统gRPC的SSL/TLS证书校验开关，默认不开启。开启grpc_tls后，atune-adm命令在使用前需要设置以下环境变量方可与服务端进行通讯： - - export ATUNE_TLS=yes - - export ATUNED_CACERT=<客户端CA证书路径> - - export ATUNED_CLIENTCERT=<客户端证书路径> - - export ATUNED_CLIENTKEY=<客户端密钥路径> - - export ATUNED_SERVERCN=server - - tlsservercafile：gRPC服务端CA证书路径。 - - tlsservercertfile：gRPC服务端证书路径。 - - tlsserverkeyfile：gRPC服务端密钥路径。 - - rest_tls：系统rest service的SSL/TLS证书校验开关，默认开启。 - - tlsrestcacertfile：系统rest service的服务端CA证书路径。 - - tlsrestservercertfile：系统rest service的服务端证书路径 - - tlsrestserverkeyfile：系统rest service的服务端密钥路径。 - - engine_tls：系统atune engine service的SSL/TLS证书校验开关，默认开启。 - - tlsenginecacertfile：系统atune engine service的客户端CA证书路径。 - - tlsengineclientcertfile：系统atune engine service的客户端证书路径 - - tlsengineclientkeyfile：系统atune engine service的客户端密钥路径 + -protocol：系统gRPC服务使用的协议，unix或tcp，unix为本地socket通信方式，tcp为socket监听端口方式。默认为unix。 + -address：系统gRPC服务的侦听地址，默认为unix socket，若为分布式部署，需修改为侦听的ip地址。 + -port：系统gRPC服务的侦听端口，范围为0\~65535未使用的端口。如果protocol配置是unix，则不需要配置。 + -connect：若为集群部署时，A-Tune所在节点的ip列表，ip地址以逗号分隔。 + -rest_host：系统rest service的侦听地址，默认为localhost。 + -rest_port：系统rest service的侦听端口，范围为0~65535未使用的端口，默认为8383。 + -engine_host：与系统atune engine service链接的地址。 + -engine_port：与系统atune engine service链接的端口。 + -sample_num：系统执行analysis流程时采集样本的数量，默认为20。 + -interval：系统执行analysis流程时采集样本的间隔时间，默认为5s。 + -grpc_tls：系统gRPC的SSL/TLS证书校验开关，默认不开启。开启grpc_tls后，atune-adm命令在使用前需要设置以下环境变量方可与服务端进行通讯： + -export ATUNE_TLS=yes + -export ATUNED_CACERT=<客户端CA证书路径> + -export ATUNED_CLIENTCERT=<客户端证书路径> + -export ATUNED_CLIENTKEY=<客户端密钥路径> + -export ATUNED_SERVERCN=server + -tlsservercafile：gRPC服务端CA证书路径。 + -tlsservercertfile：gRPC服务端证书路径。 + -tlsserverkeyfile：gRPC服务端密钥路径。 + -rest_tls：系统rest service的SSL/TLS证书校验开关，默认开启。 + -tlsrestcacertfile：系统rest service的服务端CA证书路径。 + -tlsrestservercertfile：系统rest service的服务端证书路径 + -tlsrestserverkeyfile：系统rest service的服务端密钥路径。 + -engine_tls：系统atune engine service的SSL/TLS证书校验开关，默认开启。 + -tlsenginecacertfile：系统atune engine service的客户端CA证书路径。 + -tlsengineclientcertfile：系统atune engine service的客户端证书路径 + -tlsengineclientkeyfile：系统atune engine service的客户端密钥路径 - system信息 system为系统执行相关的优化需要用到的参数信息，必须根据系统实际情况进行修改。 - - disk：执行analysis流程时需要采集的对应磁盘的信息或执行磁盘相关优化时需要指定的磁盘。 - - network：执行analysis时需要采集的对应的网卡的信息或执行网卡相关优化时需要指定的网卡。 + -disk：执行analysis流程时需要采集的对应磁盘的信息或执行磁盘相关优化时需要指定的磁盘。 + -network：执行analysis时需要采集的对应的网卡的信息或执行网卡相关优化时需要指定的网卡。 - - user：执行ulimit相关优化时用到的用户名。目前只支持root用户。 + -user：执行ulimit相关优化时用到的用户名。目前只支持root用户。 - 日志信息 @@ -158,12 +157,12 @@ A-Tune配置文件/etc/atuned/atuned.cnf的配置项说明如下： tuning为系统进行离线调优时需要用到的参数信息。 - - noise：高斯噪声的评估值。 - - sel_feature：控制离线调优参数重要性排名输出的开关，默认关闭。 + -noise：高斯噪声的评估值。 + -sel_feature：控制离线调优参数重要性排名输出的开关，默认关闭。 -### 配置示例 +### 配置示例\ -``` +```shell #################################### server ############################### # atuned config [server] @@ -259,20 +258,20 @@ A-Tune engine配置文件/etc/atuned/engine.cnf的配置项说明如下： - A-Tune engine服务启动配置（可根据需要进行修改）。 - - engine_host：系统atune engine service的侦听地址，默认为localhost。 - - engine_port：系统atune engine service的侦听端口，范围为0~65535未使用的端口，默认为3838。 - - engine_tls：系统atune engine service的SSL/TLS证书校验开关，默认开启。 - - tlsenginecacertfile：系统atune engine service的服务端CA证书路径。 - - tlsengineservercertfile：系统atune engine service的服务端证书路径 - - tlsengineserverkeyfile：系统atune engine service的服务端密钥路径。 + -engine_host：系统atune engine service的侦听地址，默认为localhost。 + -engine_port：系统atune engine service的侦听端口，范围为0~65535未使用的端口，默认为3838。 + -engine_tls：系统atune engine service的SSL/TLS证书校验开关，默认开启。 + -tlsenginecacertfile：系统atune engine service的服务端CA证书路径。 + -tlsengineservercertfile：系统atune engine service的服务端证书路径 + -tlsengineserverkeyfile：系统atune engine service的服务端密钥路径。 - 日志信息 根据情况修改日志的级别，默认为info级别，日志信息打印在/var/log/messages中。 -### 配置示例 +\### 配置示例\ -``` +```shell #################################### engine ############################### [server] # the tuning optimizer host and port, start by engine.service @@ -297,42 +296,46 @@ A-Tune engine配置文件/etc/atuned/engine.cnf的配置项说明如下： ## 启动A-Tune A-Tune安装完成后，需要配置A-Tune服务，然后启动A-Tune服务。 + - 配置A-Tune服务： + 修改atuned.cnf配置文件中网卡和磁盘的信息 > 说明: > > 如果通过'make install'安装了atuned服务，网卡和磁盘已经自动更新为当前机器中的默认设备。如果需要从其他设备收集数据，请按照以下步骤配置 atuned 服务。 - + 通过以下命令可以查找当前需要采集或者执行网卡相关优化时需要指定的网卡，并修改/etc/atuned/atuned.cnf中的network配置选项为对应的指定网卡。 - ``` + + ```shell ip addr ``` + 通过以下命令可以查找当前需要采集或者执行磁盘相关优化时需要指定的磁盘，并修改/etc/atuned/atuned.cnf中的disk配置选项为对应的指定磁盘。 - ``` + + ```shell fdisk -l | grep dev ``` -- 关于证书： + +-关于证书： 因为A-Tune的引擎和客户端使用了grpc通信协议，所以为了系统安全，需要配置证书。因为信息安全的原因，A-Tune不会提供证书生成方法，请用户自行配置系统证书。 如果不考虑安全问题，可以将/etc/atuned/atuned.cnf中的rest_tls 和 engine_tls配置选项设置为false，并且将/etc/atuned/engine.cnf中的engine_tls配置选项设为false。 如果不配置安全证书导致的一切后果与A-Tune无关。 - - 启动atuned服务： - ``` + ```shell # systemctl start atuned ``` - - 查询atuned服务状态： - ``` + ```shell # systemctl status atuned ``` 若回显为如下，则服务启动成功。 - ![](./figures/zh-cn_image_0214540398.png) + \![](./figures/zh-cn_image_0214540398.png) ## 启动A-Tune engine @@ -340,56 +343,60 @@ A-Tune安装完成后，需要配置A-Tune服务，然后启动A-Tune服务。 - 启动atune-engine服务： - ``` + ```shell # systemctl start atune-engine ``` - - 查询atune-engine服务状态： - ``` + ```shell # systemctl status atune-engine ``` 若回显为如下，则服务启动成功。 - ![](./figures/zh-cn_image_0245342444.png) - + \![](./figures/zh-cn_image_0245342444.png) + ## 分部式部署 ### 分部式部署目的 + 为了实现分布式架构和按需部署的目标，A-Tune支持分部式部署。可以将三个组件分开部署，轻量化组件部署对业务影响小，也避免安装过多依赖软件，减轻系统负担。
部署方式：本文档只介绍常用的一种部署方式：在同一节点部署客户端和服务端，在另一个节点上部署引擎模块。其他的部署方式请咨询A-Tune开发人员。 -**部署关系图：**
+**部署关系图：** \
![输入图片说明](figures/picture1.png) ### 配置文件 + 分部式部署需要修改配置文件，将引擎的ip地址和端口号写入配置文件中，别的组件才能访问该ip地址上的引擎组件。 -1. 修改服务端节点上的`/etc/atuned/atuned.cnf`文件： - - 34行的`engine_host`和`engine_port`修改为引擎节点的ip地址和端口号。如上图，应该修改为`engine_host = 192.168.0.1 engine_port = 3838`。 - - 将49行和55行的 rest_tls 和engine_tls 改为false，否则需要申请和配置证书。在测试环境中可以不用配置ssl证书，但是正式的现网环境需要配置证书，否则会有安全隐患。 -2. 修改引擎节点/etc/atuned/engine.cnf文件： - - 17行和18行的`engine_host`和`engine_port`修改为引擎节点的ip地址和端口号。如上图，应该修改为`engine_host = 192.168.0.1 engine_port = 3838`。 - - 第22行的engine_tls的值改成false。 -3. 修改完配置文件后需要重启服务，配置才会生效： - - 服务端节点输入命令：`systemctl restart atuned`。 - - 引擎端节点输入命令：`systemctl restart atune-engine`。 -4. （可选步骤）在`A-Tune/examples/tuning/compress`文件夹下运行tuning命令： - - 请先参考`A-Tune/examples/tuning/compress/README`的指导进行预处理。 - - 执行`atune-adm tuning --project compress --detail compress_client.yaml`。 - - 本步骤的目的是检验分部式部署是否成功。 +1.修改服务端节点上的`/etc/atuned/atuned.cnf`文件： +-34行的`engine_host`和`engine_port`修改为引擎节点的ip地址和端口号。如上图，应该修改为`engine_host = 192.168.0.1 engine_port = 3838`。 +-将49行和55行的 rest_tls 和engine_tls 改为false，否则需要申请和配置证书。在测试环境中可以不用配置ssl证书，但是正式的现网环境需要配置证书，否则会有安全隐患。 +2.修改引擎节点/etc/atuned/engine.cnf文件： +-17行和18行的`engine_host`和`engine_port`修改为引擎节点的ip地址和端口号。如上图，应该修改为`engine_host = 192.168.0.1 engine_port = 3838`。 +-第22行的engine_tls的值改成false。 +3.修改完配置文件后需要重启服务，配置才会生效： +-服务端节点输入命令：`systemctl restart atuned`。 +-引擎端节点输入命令：`systemctl restart atune-engine`。 +4.（可选步骤）在`A-Tune/examples/tuning/compress`文件夹下运行tuning命令： +-请先参考`A-Tune/examples/tuning/compress/README`的指导进行预处理。 +-执行`atune-adm tuning --project compress --detail compress_client.yaml`。 +-本步骤的目的是检验分部式部署是否成功。 ### 注意事项 -1. 本文档不对认证证书配置方法作详细说明，如有需要也可以将atuned.cnf和engine.cnf中的rest_tls/engine_tls设成false。 -2. 修改完配置文件后需要重启服务，否则修改不会生效。 -3. 注意使用atune服务时不要同时打开代理。 -4. atuned.cnf 文件中的[system]模块的disk和network项需要修改，修改方法见[A-Tune用户指南2.4.1章节](https://gitee.com/gaoruoshu/A-Tune/blob/master/Documentation/UserGuide/A-Tune%E7%94%A8%E6%88%B7%E6%8C%87%E5%8D%97.md)，本文不展开描述。 + +1.本文档不对认证证书配置方法作详细说明，如有需要也可以将atuned.cnf和engine.cnf中的rest_tls/engine_tls设成false。 +2.修改完配置文件后需要重启服务，否则修改不会生效。 +3.注意使用atune服务时不要同时打开代理。 +4.auned.cnf 文件中的[system]模块的disk和network项需要修改，修改方法见[A-Tune用户指南2.4.1章节](https://gitee.com/gaoruoshu/A-Tune/blob/master/Documentation/UserGuide/A-Tune%E7%94%A8%E6%88%B7%E6%8C%87%E5%8D%97.md)，本文不展开描述。 ### 举例 + #### atuned.cnf + ```bash # ...前略... @@ -401,7 +408,9 @@ engine_port = 3838 # ...后略... ``` + #### engine.cnf + ```bash [server] # the tuning optimizer host and port, start by engine.service @@ -410,33 +419,39 @@ engine_port = 3838 engine_host = 192.168.0.1 engine_port = 3838 ``` + ## 集群部署 ### 集群部署的目的 + 为了支持多节点场景快速调优，A-Tune支持对多个节点里的参数配置同时进行动态调优，避免用户单独多次对每个节点进行调优，从而提升调优效率。
集群部署的方式：分为一个主节点和若干个从节点。在主节点部署客户端和服务端，负责接受命令和引擎交互。其他节点接受主节点的指令，对当前节点的参数进行配置。 -**部署关系图：**
+**部署关系图：** \
![输入图片说明](figures/picture4.png) 上图中客户端和服务端部署在ip为192.168.0.0的节点上，项目文件存放在该节点上，其他节点不用放置项目文件。
主节点和从节点之间通过tcp协议通信，所以需要修改配置文件。 -### atuned.cnf配置文件修改： -1. protocol 值设置为tcp。 -2. address设置为当前节点的ip地址。 -3. connect设置为所有节点的ip地址，第一个为主节点，其余为从节点ip，中间用逗号隔开。 -4. 在调试时，可以设置rest_tls 和engine_tls 为false。 -5. 所有的主从节点的atuned.cnf都按照上方描述修改。 +### atuned.cnf配置文件修改 -### 注意事项 -1. 将engine.cnf中的`engine_host`和`engine_port`设置为服务端atuned.cnf中`engine_host`和`engine_port`一样的ip和端口号。 -2. 本文档不对认证证书配置方法作详细说明，如有需要也可以将atuned.cnf和engine.cnf中的rest_tls和engine_tls设置为false。 -3. 修改完配置文件后需要重启服务，否则修改不会生效。 -4. 注意使用atune服务时不要同时打开代理。 +1.protocol 值设置为tcp。 +2.address设置为当前节点的ip地址。 +3.connect设置为所有节点的ip地址，第一个为主节点，其余为从节点ip，中间用逗号隔开。 +4.在调试时，可以设置rest_tls 和engine_tls 为false。 +5.所有的主从节点的atuned.cnf都按照上方描述修改。 + +\### 注意事项 + +1.将engine.cnf中的`engine_host`和`engine_port`设置为服务端atuned.cnf中`engine_host`和`engine_port`一样的ip和端口号。 +2.本文档不对认证证书配置方法作详细说明，如有需要也可以将atuned.cnf和engine.cnf中的rest_tls和engine_tls设置为false。 +3.修改完配置文件后需要重启服务，否则修改不会生效。 +4.注意使用atune服务时不要同时打开代理。 + +\### 举例 + +\#### atuned.cnf -### 举例 -#### atuned.cnf ```bash # ...前略... @@ -472,7 +487,8 @@ engine_port = 3838 # ...后略... ``` -#### engine.cnf +\#### engine.cnf + ```bash [server] # the tuning optimizer host and port, start by engine.service @@ -482,4 +498,4 @@ engine_host = 192.168.1.1 engine_port = 3838 ``` -**备注：** engine.cnf参考分部式部署的配置文件。 \ No newline at end of file +**备注：** engine.cnf参考分部式部署的配置文件。 -- Gitee