mysql技巧：提高插入數(shù)據(jù)(添加記錄)的速度
問(wèn)題描述：
普通臺(tái)式機(jī)，采集數(shù)據(jù)，表中已經(jīng)有>1000萬(wàn)數(shù)據(jù)量。
采集回來(lái)的數(shù)據(jù)插入表中的時(shí)候很慢，每條約100毫秒。
解決方法：
1、加大mysql配置中的bulk_insert_buffer_size，這個(gè)參數(shù)默認(rèn)為8M
bulk_insert_buffer_size=100M
2、改寫(xiě)所有insert語(yǔ)句為insert delayed
這個(gè)insert delayed不同之處在于：立即返回結(jié)果，后臺(tái)進(jìn)行處理插入。
還有一個(gè)技巧是在一跳insert中插入多條數(shù)據(jù)，類似insert into tablename values('xxx','xxx'),('yyy','yyy'),('zzz','zzz')...;但是在我采集程序中改sql比較麻煩，故未采用
腳本之家小編提醒：
說(shuō)實(shí)話一般主要用于數(shù)據(jù)的采集入庫(kù)操作，成熟的cms不建議修改，dedecms是由于本人的系統(tǒng)設(shè)計(jì)問(wèn)題，建議使用商業(yè)版或自行建立索引等，現(xiàn)在大數(shù)據(jù)首選帝國(guó)cms或phpcms。
- mysql大批量插入數(shù)據(jù)的4種方法示例
- mysql中迅速插入百萬(wàn)條測(cè)試數(shù)據(jù)的方法
- MySql中把一個(gè)表的數(shù)據(jù)插入到另一個(gè)表中的實(shí)現(xiàn)代碼
- 用一條mysql語(yǔ)句插入多條數(shù)據(jù)
- mysql如果數(shù)據(jù)不存在，則插入新數(shù)據(jù)，否則更新的實(shí)現(xiàn)方法
- mysql中插入表數(shù)據(jù)中文亂碼問(wèn)題的解決方法
- mysql數(shù)據(jù)庫(kù)插入速度和讀取速度的調(diào)整記錄
- MYSQL批量插入數(shù)據(jù)的實(shí)現(xiàn)代碼
- mysql 一次向表中插入多條數(shù)據(jù)實(shí)例講解
- Mysql快速插入千萬(wàn)條數(shù)據(jù)的實(shí)戰(zhàn)教程
相關(guān)文章
MySQL執(zhí)行SQL文件報(bào)錯(cuò):Unknown collation ‘utf8mb4_0900_ai_
這篇文章主要給大家分享了MySQL執(zhí)行SQL文件出現(xiàn)【Unknown collation ‘utf8mb4_0900_ai_ci‘】的解決方案,如果又遇到相同問(wèn)題的同學(xué),可以參考閱讀本文2023-09-09
MySQL索引查詢limit?offset及排序order?by用法
解決MySql客戶端秒退問(wèn)題（找不到my.ini）
一個(gè)單引號(hào)引發(fā)的MYSQL性能問(wèn)題分析
