Qt數(shù)據(jù)庫應用之實現(xiàn)通用數(shù)據(jù)生成器
一、前言
有兩種應用場景需要用到數(shù)據(jù)生成器,一種是需要測試數(shù)據(jù)庫性能,比如在100萬條和1000萬條記錄的時候對比查詢或更新語句執(zhí)行耗時,一種是隨機模擬生成一堆數(shù)據(jù),用來測試程序的性能,看下程序中到了百萬千萬級別的數(shù)據(jù)量的時候,程序的代碼執(zhí)行是否受影響,影響有大等。很多人覺得sqlite數(shù)據(jù)庫性能超過幾十萬就不行,于是親自用這個數(shù)據(jù)發(fā)生器隨機模擬生成了一億條記錄,測試下來發(fā)現(xiàn)性能有損失,但是不像傳說中的垃圾,起碼還是完全可用的,只要注意索引要建好,文件體積比較大就是,文件體積膨脹到了1.2GB,估計性能損耗很大程度上在磁盤讀寫。
通過對各種數(shù)據(jù)庫(sqlite、postgres、mysql、sqlserver等)不同數(shù)據(jù)量階段(1萬條、100萬條、1000萬條等)做不同的sql語句處理(查詢、插入、刪除、更新),Qt內置了sqlite數(shù)據(jù)庫,所以對sqlite的支持是最快最友好的,其次是postgresql數(shù)據(jù)庫、然后是mysql,支持最差的性能最低的是ODBC模式連接的數(shù)據(jù)庫,比如sqlserver數(shù)據(jù)庫必須用odbc的形式連接,由于odbc是一個中間層,理論上性能也是肯定沒有直接連接處理快,不過縱觀各種用Qt寫的項目的場景,很少是需要千萬級別億級別的數(shù)據(jù)量的,真的到了這個程度可以考慮分庫分表來解決。
關于Qt數(shù)據(jù)庫相關開發(fā)的一些經(jīng)驗總結
二、功能特點
同時支持多種數(shù)據(jù)庫比如odbc、sqlite、mysql、postgresql、sqlserver、oracle、人大金倉等。
一個數(shù)據(jù)庫類即可管理本地數(shù)據(jù)庫通信,也支持遠程數(shù)據(jù)庫通信等。
數(shù)據(jù)庫線程支持執(zhí)行各種sql語句,包括單條和批量。
組件中的所有類打印信息、錯誤信息、執(zhí)行結果都信號發(fā)出去。
集成數(shù)據(jù)庫通用翻頁類(負責具體處理邏輯),搭配分頁導航控件(負責外觀),形成超級牛逼的翻頁控件。
集成數(shù)據(jù)庫自動清理類,設定最大記錄數(shù)后臺自動清理早期數(shù)據(jù)。
集成自定義委托類,支持復選框、文本框、下拉框、日期框、微調框、進度條等。
同時支持Qt4-Qt6,親測Qt4.6到Qt6.3任意版本,任意系統(tǒng)和編譯器。
本組件無故障 360天7乘24小時 運行在至少上萬個現(xiàn)場,商業(yè)級別品質保證。
每個類都對應完整詳細的使用示例,注釋詳細,非常適合閱讀學習。
可以作為獨立的程序運行,比如自動清理早期數(shù)據(jù),同步數(shù)據(jù)到云端。
全部線程處理,不卡界面,自動重連數(shù)據(jù)庫。
普通測試情況,sqlite數(shù)據(jù)庫,數(shù)據(jù)庫發(fā)生器每秒鐘插入1000條記錄約0.003秒鐘,同時自動清理數(shù)據(jù)類每秒鐘刪除1000條記錄約0.13秒,不同線程互不干擾。
三、體驗地址
體驗地址:https://pan.baidu.com/s/15ZKAlptW-rDcNq8zlzdYLg 提取碼:uyes 文件名:bin_dbtool.zip
國內站點:https://gitee.com/feiyangqingyun
國際站點:https://github.com/feiyangqingyun
四、效果圖

五、相關代碼
void frmDbCreat::on_btnOpen_clicked()
{
if (ui->btnOpen->text() == "打開數(shù)據(jù)庫") {
DbInfo dbInfo;
dbInfo.connName = this->objectName();
dbInfo.dbName = AppConfig::DbName2;
dbInfo.hostName = AppConfig::HostName2;
dbInfo.hostPort = AppConfig::HostPort2;
dbInfo.userName = AppConfig::UserName2;
dbInfo.userPwd = AppConfig::UserPwd2;
QString dbType = AppConfig::DbType2.toUpper();
if (dbType == "SQLITE") {
dbInfo.dbName = DbHelper::getDbDefaultFile();
}
dbConn->setConnInfo(DbHelper::getDbType(dbType), dbInfo);
if (dbConn->openDb()) {
dbConn->start();
ui->btnOpen->setText("關閉數(shù)據(jù)庫");
} else {
QString error = dbConn->getDatabase().lastError().text();
QUIHelper::showMessageBoxError("打開數(shù)據(jù)庫失敗!\n" + error, 3);
}
} else {
dbConn->stop();
dbConn->closeDb();
ui->btnOpen->setText("打開數(shù)據(jù)庫");
on_btnClear_clicked();
}
QTimer::singleShot(100, this, SLOT(getMaxID()));
QTimer::singleShot(1000, this, SLOT(on_btnStart_clicked()));
}
void frmDbCreat::on_btnCopy_clicked()
{
//將數(shù)據(jù)庫設置參數(shù)一鍵粘貼過來
ui->cboxDbType->setCurrentIndex(ui->cboxDbType->findText(AppConfig::LocalDbType));
ui->txtDbName->setText(AppConfig::LocalDbName);
ui->txtHostName->setText(AppConfig::LocalHostName);
ui->txtHostPort->setText(QString::number(AppConfig::LocalHostPort));
ui->txtUserName->setText(AppConfig::LocalUserName);
ui->txtUserPwd->setText(AppConfig::LocalUserPwd);
}
void frmDbCreat::getMaxID()
{
if (!dbConn->getOk()) {
return;
}
//根據(jù)插入sql語句取出對應的表名和自增字段
QString sqlColumn = AppConfig::SqlColumn2;
QString sqlValue = AppConfig::SqlValue2;
if (sqlValue.contains("AUTO_INCREMENT")) {
sqlColumn.replace("insert into ", "");
sqlValue.replace("values", "");
QString tableName = sqlColumn.split("(").first();
sqlColumn.replace(tableName, "");
sqlColumn.replace("(", "");
sqlColumn.replace(")", "");
sqlValue.replace("(", "");
sqlValue.replace(")", "");
QStringList listColumn = sqlColumn.split(",");
QStringList listValue = sqlValue.split(",");
int index = listValue.indexOf("'AUTO_INCREMENT'");
QString columnName = listColumn.at(index);
//取出最大記錄數(shù)
maxID = DbHelper::getMaxID(tableName, columnName, dbConn->getDatabase());
}
}
void frmDbCreat::on_btnDo_clicked()
{
if (!dbConn->getOk()) {
return;
}
QString sql = AppConfig::SqlColumn2 + " " + AppConfig::SqlValue2;
//qDebug() << TIMEMS << sql;
QStringList sqls;
for (int i = 0; i < AppConfig::Count2; ++i) {
QString temp = sql;
//替換自增ID
maxID++;
temp.replace("AUTO_INCREMENT", QString::number(maxID));
//替換時間
temp.replace("DATETIME", DATETIME);
sqls << temp;
}
dbConn->append(sqls);
}
void frmDbCreat::on_btnCount_clicked()
{
dbConn->selectCount("LogInfo", "LogID", "where 1=1");
}
void frmDbCreat::on_btnStart_clicked()
{
if (ui->btnStart->text() == "啟動服務") {
on_btnDo_clicked();
timer->start();
ui->btnStart->setText("停止服務");
} else {
timer->stop();
ui->btnStart->setText("啟動服務");
}
}
以上就是Qt數(shù)據(jù)庫應用之實現(xiàn)通用數(shù)據(jù)生成器的詳細內容,更多關于Qt數(shù)據(jù)生成器的資料請關注腳本之家其它相關文章!
- Qt數(shù)據(jù)庫應用之實現(xiàn)數(shù)據(jù)圖文混排
- Qt數(shù)據(jù)庫應用之實現(xiàn)數(shù)據(jù)打印到紙張
- Qt數(shù)據(jù)庫應用之數(shù)據(jù)打印到pdf
- Qt數(shù)據(jù)庫應用之實現(xiàn)數(shù)據(jù)的導入與導出
- C/C++?Qt數(shù)據(jù)庫SqlRelationalTable關聯(lián)表詳解
- C/C++?Qt數(shù)據(jù)庫與SqlTableModel組件應用教程
- C/C++?Qt?數(shù)據(jù)庫與TreeView組件綁定詳解
- C/C++?Qt?數(shù)據(jù)庫QSql增刪改查組件應用教程
相關文章
C++基于Boost.Asio實現(xiàn)端口映射器的過程詳解
Boost.Asio 是一個功能強大的 C++ 庫,用于異步編程和網(wǎng)絡編程,它提供了跨平臺的異步 I/O 操作,在這篇文章中,我們將深入分析一個使用 Boost.Asio 實現(xiàn)的簡單端口映射服務器,文中有詳細的代碼講解,需要的朋友可以參考下2023-11-11

