# DataParsing

**Repository Path**: timJack/DataParsing

## Basic Information

- **Project Name**: DataParsing
- **Description**: 监控数据采集工具，将监控数据写入数据库。
- **Primary Language**: C++
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 1
- **Created**: 2018-12-22
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# DataParsing

#### 介绍
监控数据采集工具，将监控数据写入数据库。

#### 软件架构
1. 软件为系统托盘程序，无运行界面，可通过右击托盘图标弹出菜单的方式退出。
2. 运行日志信息保存在Resources文件夹下的logInfo.log文件中。
3. 支持定时从OPC Server上主动获取监控数据。
4. 支持实时接收UDP数据包，并进行解析监控数据。
5. 支持将监控数据写入数据库（sql数据库，openTSDB），同时将监控数据另存一份文件记录（Resources/dataLog文件夹下，每天自动新建一个dataInfo文件）。

#### 安装教程

1. 使用log4qt 来实现日志文件的生成，log4qt的配置文件：Resources\log4qt.conf
2. 通过OPC标准COM接口从OPC Server上采集监测数据。
    1)	需要先修改runconfig.xml文件中的 runinfo信息，将其中的 get_data_type 改为 opc ,将 opc_server_name 改为 opc 服务的名称，如        
        果连接本地的OPC服务，则将use_local_opc 设置为 true，否则设置为 false。如果使用远程的OPC服务，需要将opc_remote_hostName 设
        置为远程OPC服务主机名。将time_interval设置为采集间隔时间，单位为秒。
    2)  然后需要修改数据库类型write_data_type，并根据OPC上的点名配置修改runconfig.xml文件中的点名信息 。
        (1) 如果写入openTSDB数据库，需要修改 openTSDBConfig，其中 groupName为组名信息，type为部件类型，name为部件名称，columnName
            为metricTags信息，valueType为opc数据类型，itemID为点名信息。
        (2) 写入sql数据库，需要修改sqlConfig，其中，groupName为组名信息，type为部件类型，name为部件名称，columnName为数据对应的数据
            库表列名，valueType为opc数据类型，itemID为点名信息，stationName为部件对应的站名。
    3)  在 Resources/ dbconfig.xml文件中修改数据库信息.
        (1) 如果数据库类型为sqlDB，那么修改sqlDB_sum和sqlDB_1。其中sqlDB_sum下的 max_connection_count 为数据库连接池最大连接个
            数，max_connection_time为连接空闲时最大保持时间（s）, sql_files为sql语句配置文件。sqlDB_1下的type为sqlDB类型，host为
            ip地址，port为端口，database_name为数据库名称，username为用户名，passWord为密码。
        (2) 如果数据库类型为openTSDB,那么修改openTSDB_sum和openTSDB_1。其中，openTSDB_sum下的 max_connection_count 为数据库连接
            池最大连接个数，max_connection_time为连接空闲时最大保持时间（s）,openTSDB_1下的host 为ip地址，port为端口。
3. 启动DataParsing.exe，创建数据采集线程，初始化OPC COM接口，连接到OPC服务，绑定组和点名，采集数据，通过数据库连接池将数据写入数据库，同时将数据另存一份文件记录。

#### 使用说明

1. 

#### 参与贡献

1. Fork 本仓库
2. 新建 Feat_xxx 分支
3. 提交代码
4. 新建 Pull Request


#### 码云特技

1. 使用 Readme\_XXX.md 来支持不同的语言，例如 Readme\_en.md, Readme\_zh.md
2. 码云官方博客 [blog.gitee.com](https://blog.gitee.com)
3. 你可以 [https://gitee.com/explore](https://gitee.com/explore) 这个地址来了解码云上的优秀开源项目
4. [GVP](https://gitee.com/gvp) 全称是码云最有价值开源项目，是码云综合评定出的优秀开源项目
5. 码云官方提供的使用手册 [https://gitee.com/help](https://gitee.com/help)
6. 码云封面人物是一档用来展示码云会员风采的栏目 [https://gitee.com/gitee-stars/](https://gitee.com/gitee-stars/)