数据采集是整个数据可视化大屏界面电子看板系统核心功能,没有数据源,这仅仅是个玩具UI,没啥用,当然默认做了定时器模拟数据,产生随机数据,这个可以直接配置文件修改来选择采用何种数据采集方法,总结了一下基本上会有这样几种数据源,timer-模拟数据 db-数据库采集 tcp-网络采集 http-post请求,大量的web会选择采用http作为post网络请求来获取数据,而对于本人来说,更喜欢用数据库作为数据源,这样可以避免很多扯皮的事情,比如请求出错或者得到错误的数据等,而数据库是死的,不涉及到其他任何程序的干扰,也不需要做任何对接,只要规范好数据库表和字段即可。
本系统默认采用mysql数据库,当然也支持其他数据,甚至包括了sqlite这种小众的数据库,Qt对数据库的封装也是非常完美的,反正在我使用的这些年过程中,没有发现过什么BUG或者事故,Qt提供了一个统一的数据库接口,这对于程序员来说是巨大的福音,比如查询数据库,QSqlQuery查询的结果,统一用query.value(i)或者,这个数据是通用类型,可以转换成你想要的数据类型,这样就拓展性和兼容性非常强大了。
在本系统中,各个模块的采集间隔都可以自由定义,默认5秒钟采集一次,我采用的办法是,开启一个线程,在线程中打开数据,然后提供方法插入要执行的sql语句,插入的同时记得给定标识符,以便返回结果的时候标识,这样就形成了一个万能的方法,自动排队,也不会说冲突之类的,一个类管理所有的数据库采集,文字末尾会贴出完整代码。
电子看板是目视化管理的一种表现形式,即对数据的状况一目了然地表现,主要是对于管理项目,它通过利用形象直观而又色彩适宜的各种视觉感知信息来组织现场生产活动,目视管理依据人类的生理特征,在生产现场充分利用信号灯、标识牌、符号颜色等方式来发出视觉信号,鲜明准确地刺激人的神经末梢,快速地传递信息,形象直观地将潜在的问题和浪费现象都显现出来。以便任何人都可以及时掌握管理现状和必要的情报,从而能够快速制定并实施应对措施。因此,管理看板是发现问题、解决问题的非常有效且直观的手段,是优秀的现场管理必不可少的工具之一。
#include "datadb.h"
#include "quiwidget.h"
QScopedPointer<DataDb> DataDb::self;
DataDb *DataDb::Instance()
{
if (self.isNull()) {
static QMutex mutex;
QMutexLocker locker(&mutex);
if (self.isNull()) {
self.reset(new DataDb);
}
}
return self.data();
}
DataDb::DataDb(QObject *parent) : QThread(parent)
{
stopped = false;
dbOkLocal = false;
errorCount = 0;
lastCheckTimeLocal = QDateTime::currentDateTime();
checkConn = false;
checkInterval = 30;
dbTypeLocal = DbType_MySql;
connNameLocal = "qt_sql_default_connection";
hostNameLocal = "127.0.0.1";
portLocal = 3306;
dbNameLocal = "db_mysql";
userNameLocal = "root";
userPwdLocal = "root";
connect(this, SIGNAL(error(QString)), this, SLOT(doError(QString)));
}
DataDb::~DataDb()
{
this->stop();
this->wait();
}
void DataDb::run()
{
//打开数据库
openDb();
msleep(1000);
while(!stopped) {
//定时执行一次校验数据库连接是否正常
QDateTime now = QDateTime::currentDateTime();
if (checkConn && lastCheckTimeLocal.secsTo(now) >= checkInterval) {
checkDb();
lastCheckTimeLocal = now;
continue;
}
//如果数据库连接正常则处理数据,不正常则重连数据库
if (!dbOkLocal) {
if (errorCount >= 3) {
closeDb();
msleep(3000);
openDb();
emit debug(QString("重连本地数据库%1").arg(dbOkLocal ? "成功" : "失败"));
msleep(3000);
}
} else {
//取出队列sql语句执行
if (tags.count() > 0) {
//从最前面开始取
QMutexLocker locker(&mutex);
QString tag = tags.takeFirst();
QString sql = sqls.takeFirst();
//qDebug() << TIMEMS << tag << sql;
QSqlQuery query(dbConnLocal);
if (query.exec(sql)) {
QStringList data;
while(query.next()) {
int count = query.record().count();
for (int i = 0; i < count; i++) {
data << query.value(i).toString();
}
}
emit receiveData(tag, data);
}
}
msleep(10);
}
}
stopped = false;
}
void DataDb::doError(const QString &msg)
{
QUIHelper::showMessageBoxError(msg, 3);
}
bool DataDb::openDb()
{
//可以自行增加其他数据库的支持
if (dbTypeLocal == DbType_Sqlite) {
dbConnLocal = QSqlDatabase::addDatabase("QSQLITE", connNameLocal);
dbConnLocal.setDatabaseName(dbNameLocal);
} else if (dbTypeLocal == DbType_MySql) {
dbConnLocal = QSqlDatabase::addDatabase("QMYSQL", connNameLocal);
dbConnLocal.setConnectOptions("MYSQL_OPT_RECONNECT=1;MYSQL_OPT_CONNECT_TIMEOUT=1;MYSQL_OPT_READ_TIMEOUT=1;MYSQL_OPT_WRITE_TIMEOUT=1");
dbConnLocal.setHostName(hostNameLocal);
dbConnLocal.setPort(portLocal);
dbConnLocal.setDatabaseName(dbNameLocal);
dbConnLocal.setUserName(userNameLocal);
dbConnLocal.setPassword(userPwdLocal);
}
errorCount = 0;
dbOkLocal = dbConnLocal.open();
if (!dbOkLocal) {
emit error("打开数据库失败!请检查用户名和密码是否正确!");
}
return dbOkLocal;
}
bool DataDb::checkDb()
{
QDateTime dtStart = QDateTime::currentDateTime();
QString sql = "select 1";
QSqlQuery query(dbConnLocal);
dbOkLocal = query.exec(sql);
dbOkLocal ? (errorCount = 0) : errorCount++;
QDateTime dtEnd = QDateTime::currentDateTime();
double ms = dtStart.msecsTo(dtEnd);
emit debug(QString("检查本地数据库连接(共 %1 条/用时 %2 秒)").arg(1).arg(QString::number(ms / 1000, 'f', 3)));
return dbOkLocal;
}
void DataDb::closeDb()
{
dbConnLocal.close();
QSqlDatabase::removeDatabase(connNameLocal);
dbOkLocal = false;
emit debug("关闭本地数据库");
}
void DataDb::stop()
{
stopped = true;
}
void DataDb::setConnInfo(DataDb::DbType dbType, const QString &connName,
const QString &hostName, int port, const QString &dbName,
const QString &userName, const QString &userPwd)
{
this->dbTypeLocal = dbType;
this->connNameLocal = connName;
this->hostNameLocal = hostName;
this->portLocal = port;
this->dbNameLocal = dbName;
this->userNameLocal = userName;
this->userPwdLocal = userPwd;
}
void DataDb::setCheckConn(bool checkConn)
{
this->checkConn = checkConn;
}
void DataDb::setCheckInterval(int checkInterval)
{
if (checkInterval > 5 && this->checkInterval != checkInterval) {
this->checkInterval = checkInterval;
}
}
QSqlDatabase DataDb::getDb()
{
return dbConnLocal;
}
bool DataDb::getOk()
{
return dbOkLocal;
}
void DataDb::select(const QString &tableName, const QString &columnName, bool append)
{
//超过队列中最大数量限制则无需处理
QMutexLocker locker(&mutex);
if (tags.count() < 100) {
//如果是append表示追加在队列末尾,否则插到最前面优先级最高
if (append) {
tags << tableName;
sqls << QString("select %1 from %2").arg(columnName).arg(tableName);
} else {
tags.insert(0, tableName);
sqls.insert(0, QString("select %1 from %2").arg(columnName).arg(tableName));
}
}
}