^-^
工智道部署完成后续动作
  1. 配置ES索引
  2. 添加主机监控
    1. 添加windows监控
    2. 添加linux监控
  3. 添加数据库监控
  4. 添加网站监控
  5. 比格云数据库备份
    1. 数据库服务器备份到无锡节点
    2. 无锡节点备份到北京节点

配置ES索引

  1. 创建生命周期策略

    ESweb页面侧边栏，点击开发工具，输入语句后执行：

    demo需要替换为客户小写简拼，code需要替换为客户代码

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    PUT _ilm/policy/demo_code_production_policy
    {
      "policy": {
        "phases": {
          "hot": {
            "min_age": "0ms",
            "actions": {
              "set_priority": {
                "priority": 100
              }
            }
          },
          "delete": {
            "min_age": "7d",
            "actions": {
              "delete": {
                "delete_searchable_snapshot": true
              }
            }
          }
        }
      }
    }

  2. 创建模板

    demo需要替换为客户小写简拼，code需要替换为客户代码

    1
    2
    3
    4
    PUT _template/demo_code_production_template
    {
      "index_patterns": ["demo_code_production*"]
    }

  3. 生命周期策略匹配模板

    侧边栏——stackmanagement——索引生命周期策略——搜索刚创建的生命周期策略——点击右侧+号，将策略添加到索引模板——显示旧版索引模板——搜索刚创建的索引模板——添加策略

添加主机监控

监控服务器连接信息

1
2
3
服务器: 163.53.168.109
用户名: root
密码: s4~5A2J1C8Y3vL

添加windows监控

  1. 下载监控服务软件，双击安装，然后浏览器输入http://localhost:9182/metrics验证

    1
    https://3dview-1251252938.cos.ap-shanghai.myqcloud.com/dengjinjun/software/windows_export_0.25.1.msi

  2. 在监控服务器上添加windows主机信息

    DEMO替换为客户简拼，IP替换为主机的IP

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    vim /usr/local/prometheus/windows/DEMO.json
    [
      {
        "targets": [
          "IP:9182"
        ],
        "labels": {
          "server": "DEMO-db",
          "user": "客户名称"
        }
      }
    ]

  3. 重新加载配置文件

    1
    curl -X POST http://localhost:9011/-/reload

添加linux监控

  1. 安装node_export

    1
    2
    3
    4
    cd 
    wget https://3dview-1251252938.cos.ap-shanghai.myqcloud.com/dengjinjun/scripts/install_exporter.sh
    chmod +x install_exporter.sh
    sh install_exporter.sh

  2. 在监控服务器上添加linux主机信息

    DEMO替换为客户简拼，IP替换为主机的外网IP

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    vim /usr/local/prometheus/node/DEMO.json 
    [
      {
        "targets": [
         "IP:9100"
        ],
        "labels": {
         "services": "DEMO-web",
         "user": "客户名称"
        }
      }
    ]

  3. 重新加载配置文件

    1
    curl -X POST http://localhost:9011/-/reload

添加数据库监控

数据库监控服务器连接信息(只能内网登录)

1
2
3
4
外网地址：163.53.168.5
内网地址: 10.100.14.151
用户名: root
密码: MN2Z+0Pb8M7Re5

  1. 创建数据库监控服务

    1
    2
    # 执行脚本，demo替换为客户简拼，port自行选择一个空闲的端口（可以自动扫描获取）
    sh /root/install_sqlexporter.sh demo port

  2. 修改任务文件

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    # 修改history_work.collector.yml任务文件，修改相关数据库，demo替换为客户简拼
    vim /usr/local/sql_exporter_demo/history_work.collector.yml

    collector_name: history_work
    metrics:
      - metric_name: history_wrok
        type: counter
        help: '监控sqlserver历史作业执行状态:0表示失败,1表示成功,2表示重新尝试,3表示取消,4表示进行中'
        key_labels:
          - workname
        value_label: operation
        values:
          - workstatus
          - workdata
          - worktime
          - spendtime
        query: |
          SELECT jobs.name AS workname,history.run_date AS workdata,history.run_time AS worktime,history.run_status AS workstatus,history.run_duration AS spendtime
          FROM msdb.dbo.sysjobhistory AS history
          LEFT JOIN msdb.dbo.sysjobs as jobs ON history.job_id = jobs.job_id
          WHERE history.run_date = convert(varchar(100),getdate(),112)  AND history.step_name LIKE '%(作业结果)%' 

      - metric_name: history_wrok_row
        type: gauge
        help: '统计客户历史作业执行情况'
        values: [history_wrok_row]
        query: |
          SELECT count(*) history_wrok_row FROM msdb.dbo.sysjobhistory AS history WHERE  history.run_date = convert(varchar(100),getdate(),112) AND history.run_status != 1
    #备注：以下修改数据库名称.Inroad-DEMO替换为客户数据库名称
      - metric_name: job_ticket_number
        type: gauge
        help: '客户当日开票的数量'
        values: [job_ticket]
        query: |
          SELECT COUNT(*) job_ticket FROM [Inroad-DEMO].dbo.SafeOperationLicenseRecord AS a WHERE datediff(dd, a.planbegintime,getdate())=0 AND isdeleted=0

      - metric_name: effective_person_number
        type: gauge
        help: '统计客户有效人员的数量'
        values: [effective_person]
        query: |
          SELECT count(c_id) AS effective_person FROM [Inroad-DEMO].dbo.Accounts WHERE status = 1

      - metric_name: inspection_number
        type: gauge
        help: '统计客户当天巡检数量'
        values: [inspection]
        query: |
          select count(1) AS inspection from [Inroad-DEMO].dbo.InspectionPlanRecord  WHERE c_createtime > convert(nvarchar(10),getdate(),121)

      - metric_name: hiddanger_number
        type: gauge
        help: '统计客户当天隐患的数量'
        values: [hiddanger]
        query: |
          select count(1) AS hiddanger from [Inroad-DEMO].dbo.PotentialDangerRecord WHERE c_createtime > convert(nvarchar(10),getdate(),121)

  3. 修改配置文件

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    # 修改配置文件，demo替换为客户简拼
    vim /usr/local/sql_exporter_demo/sql_exporter.yml    

    global:
      scrape_timeout_offset: 500ms
      min_interval: 0s
      max_connections: 3
      max_idle_connections: 3
    target:
      # Data source name always has a URI schema that matches the driver name. In some cases (e.g. MySQL)
      # the schema gets dropped or replaced to match the driver expected DSN format.
      data_source_name: 'sqlserver://数据库用户名:数据库密码@数据库地址:数据库端口'  #内网默认是1433,外网是在比格云控制台设置的转发端口
      密码如果有特殊字符需要转义

      collectors: [mssql_standard, history_work] 
      collector_files: 
      - "*.collector.yml"
     
    #重新加载服务启动项
    systemctl daemon-reload
    # 启动服务
    systemctl start sql_demo.service
    #设置开机自启
    systemctl enable  sql_demo.service

  4. 浏览器输入地址服务地址和端口 查看是否正常

    1
    10.100.14.151:端口/metrics

  5. prometheus添加数据库监控服务

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    vim /usr/local/prometheus/sqlserver/sqlserver.json
     [
     ...........................
     # 在文件后面追加即可
     {
        "targets": [
          "10.100.14.151:9254"
        ],
        "labels": {
          "server": "demo",
          "user": "code_客户名称"
        }
      },
     {
        "targets": [
          "10.100.14.151:9253"
        ],
        "labels": {
          "server": "demo",
          "user": "code_客户名称"
        }
      }
    ]

  6. 重新加载配置文件

    1
    curl -X POST http://localhost:9011/-/reload

添加网站监控

  1. 连接数据库

    1
    2
    3
    数据库地址：103.229.212.21
    数据库用户：sa
    数据库密码：qpMb7uL6jzjl4EdtYOQ7

  2. 执行sql语句

    1
    2
    3
    4
    5
    6
    7
    # 添加到网站监控清单
    insert into [CMDB].[dbo].[url_list] (name,url,status,remark) 
    values ('客户名称','https://客户域名/API/Common/GetSysInfo','是','gzd')

    # 添加到网站版本采集清单，code替换为客户代码
    insert into [IPI].[dbo].[siteinfo] (code,Weburl) 
    values ('code','https://客户域名');

比格云数据库备份

数据库服务器备份到无锡节点

  1. 下载pscp.exe程序，拷贝pscp.exe程序到C:\Windows\System32目录下面

    1
    https://3dview-1251252938.cos.ap-shanghai.myqcloud.com/dengjinjun/software/pscp.exe

  2. 下载脚本文件rsync_db.bat到d盘(DBBAK同级目录)

    1
    https://3dview-1251252938.cos.ap-shanghai.myqcloud.com/dengjinjun/scripts/rsync_db.bat

  3. 然后创建计划任务每天凌晨3点十几分复制备份文件到无锡节点

    1
    搜索计划任务程序，创建基本任务，然后按引导就行，起始于要填`D:\`，才会有输出日志

    创建计划任务测试脚本，手动测试一次任务，第一次备份需要输入yes，之后备份不在需要输入

无锡节点备份到北京节点

  1. 连接无锡和北京服务器

    1
    2
    3
    4
    5
    6
    7
    8
    9
    无锡：
    root
    163.53.170.107
    Rvinf8iRBK6f0

    北京：
    root
    114.118.22.118
    6ZCwXlf03BVK

  2. 无锡节点操作

    1
    2
    cd /data/ && mkdir Inroad-DEMO
    chown rsync:rsync Inroad-DEMO

  3. 北京节点操作

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    cd /data/ && mkdir Inroad-DEMO
    # 设置备份文件目录用户以及用户组
    chown rsync:rsync Inroad-DEMO

    # 配置rsync服务的配置文件，添加内容
    vim /etc/rsyncd.conf
    ..........
    [Inroad-DEMO]
    path = /data/Inroad-FXDDL

    # 重启rsyncd服务
    systemctl restart rsyncd
2024-05-31 该篇文章被 邓胖胖 打上标签: 操作流程 归为分类: 工作笔记