sqlite3遷移mysql可能遇到的問(wèn)題集合
簡(jiǎn)述
適合閱讀對(duì)象:移動(dòng)開(kāi)發(fā)
sqlite3數(shù)據(jù)遷移到mysql會(huì)遇到許多語(yǔ)法問(wèn)題,想要一下列出所有問(wèn)題會(huì)力所不及,本文會(huì)盡量多的列出可能會(huì)遇到的問(wèn)題,因?yàn)槊總€(gè)人遇到的問(wèn)題都不一樣。讀者根據(jù)此文可以提前預(yù)知是否有自己會(huì)面臨到的問(wèn)題,做到心中有數(shù)才能避免或減少遷移數(shù)據(jù)后會(huì)發(fā)生意料之外的問(wèn)題。根據(jù)問(wèn)題列表可以了解自己需要解決哪些問(wèn)題,我這里同時(shí)會(huì)給出一個(gè)解決方案供大家參考。遷移這個(gè)問(wèn)題不會(huì)有一個(gè)萬(wàn)能的方案的,因?yàn)槊總€(gè)人遇到的問(wèn)題不同,如果一些互相沖突的問(wèn)題同時(shí)存在解決方案中反而就變成了一個(gè)問(wèn)題。
好了,開(kāi)門(mén)見(jiàn)山!
問(wèn)題列表
1、sqlite3 dump出的各種變量在mysql不識(shí)別,如(BEGIN TRANSACTION、COMMIT等等)
2、sqlite數(shù)據(jù)庫(kù)數(shù)據(jù)無(wú)法導(dǎo)出隱藏字段rowid
3、sqlite數(shù)據(jù)庫(kù)數(shù)據(jù)導(dǎo)出格式與其他數(shù)據(jù)庫(kù)不兼容,如單引號(hào)、雙引號(hào)問(wèn)題
4、導(dǎo)出的sqlite數(shù)據(jù)不帶列名,如下 INSERT INTO protocol VALUES('大類頁(yè)(新)', ' ')
。我們可能需要的是 INSERT INTO protocol('text1','text2') VALUES('大類頁(yè)(新)', '刷新頁(yè)')
5、特殊符號(hào)處理,如轉(zhuǎn)義符 "\"
6、表字段長(zhǎng)度限制不一樣
7、數(shù)據(jù)量寫(xiě)入效率問(wèn)題
問(wèn)題解決
首先不能使用sqliteStudio、Navicat等工具,這里采用shell命令的方式,直接避免一下內(nèi)容生成,
BEGIN TRANSACTION
COMMIT
CREATE UNIQUE INDEX
PRAGMA foreign_keys=OFF
同時(shí)使用shell方式可以用很少的代碼量實(shí)現(xiàn)。
1、解決字段列名沒(méi)有輸出問(wèn)題
運(yùn)行sqlite3命令“ pragma table_info(表名);
“得到以下輸出內(nèi)容
0|name|TEXT|0||0
1|description|TEXT|0||0
再通過(guò)字符串替換得到列名,如下:
假設(shè)變量為 COLS = name,description
2、解決單引號(hào)、雙引號(hào)問(wèn)題
運(yùn)行sqlite3命令“ .mode insert && .dump 表名
“得到如下輸出內(nèi)容
INSERT INTO表名VALUES('test',' test');
INSERT INTO表名VALUES('test','test');
INSERT INTO表名VALUES('test','test');
以這種方式可以解決單引號(hào)雙引號(hào)問(wèn)題,這里直接統(tǒng)一輸出單引號(hào)
3、解決sqlite3默認(rèn)字段rowid無(wú)法顯示問(wèn)題,這里直接將rowid改為id
將當(dāng)前模式設(shè)置為.dump insert 模式
運(yùn)行sqlite3命令“ select rowid as id,$COLS from 表名
“得到如下輸出
INSERT INTO表名VALUES(1,'test',' test');
INSERT INTO表名VALUES(2,'test','test');
INSERT INTO表名VALUES(3,'test','test');
4、通過(guò)shell字符串命令,將之前得到的列名添加到以下sql語(yǔ)句
修改后如下:
INSERT INTO表名('name',' description')VALUES(1,'test',' test');
INSERT INTO表名('name',' description')VALUES(2,'test','test');
INSERT INTO表名('name',' description')VALUES(3,'test','test');
5、轉(zhuǎn)義符處理
如果數(shù)據(jù)庫(kù)里的數(shù)據(jù)存在轉(zhuǎn)義符,如: {\"lastname\":\\"天津\\"}
。這種數(shù)據(jù)如果不處理,那么將數(shù)據(jù)insert到數(shù)據(jù)庫(kù)時(shí)會(huì)變成{"lastname":\"天津\"}
。所以需要對(duì)轉(zhuǎn)義符做下處理,用shell命令處理很簡(jiǎn)單,如命令:sed 's#\\#\\\\#g'
方案實(shí)現(xiàn)
此腳本主要解決了以上1~5問(wèn)題,根據(jù)需要可以對(duì)腳本進(jìn)行修改
#!/bin/sh SQLITE=sqlite3 if [ -z "$1" ] ; then echo usage: $0 sqlite3.db exit fi DB="$1" TABLES=`"$SQLITE" "$DB" .tables` for TABLE in $TABLES ; do CREATE=`"$SQLITE" "$DB" "SELECT sql FROM sqlite_master WHERE type=\"table\" AND name = \"$TABLE\";"` echo $CREATE";" | cut -d'=' -f2 | sed "s/^CREATE TABLE $TABLE (/CREATE TABLE $TABLE (id int auto_increment primary key ,/g" COLS=`"$SQLITE" "$DB" "pragma table_info($TABLE)" | cut -d'|' -f2 ` COLS_CS=`echo $COLS | sed 's/ /,/g'` echo ".mode insert \n.header on \n select rowid as id,$COLS_CS from $TABLE;\n" | "$SQLITE" "$DB" | sed "s/^INSERT INTO \"table\"/INSERT INTO $TABLE /g" | sed 's#\\#\\\\#g' done
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,謝謝大家對(duì)腳本之家的支持。
相關(guān)文章
安裝MySQl報(bào)Initializing?database?(may?take?a?long?time)錯(cuò)誤
這篇文章主要給大家介紹了關(guān)于安裝MySQl報(bào)Initializing?database?(may?take?a?long?time)錯(cuò)誤的解決辦法,文中通過(guò)圖文將解決的辦法介紹的非常詳細(xì),對(duì)大家學(xué)習(xí)或者使用mysql具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2024-03-03淺談MySQL數(shù)據(jù)庫(kù)的備份與恢復(fù)
MYSQL數(shù)據(jù)庫(kù)的備份、恢復(fù)等是每一位信息管理人員應(yīng)必備的能力,因此掌握MYSQL數(shù)據(jù)庫(kù)管理的技巧會(huì)使您的工作事半功倍,這里我們來(lái)簡(jiǎn)單總結(jié)下。2017-01-01mysql中刪除數(shù)據(jù)的四種方法小結(jié)
在MySQL數(shù)據(jù)庫(kù)中,刪除數(shù)據(jù)是一個(gè)常見(jiàn)的操作,它允許從表中移除不再需要的數(shù)據(jù),本文就來(lái)介紹一下四種方法,具有一定的參考價(jià)值,感興趣的可以了解一下2023-10-10MySQL查看數(shù)據(jù)庫(kù)表容量大小的方法示例
這篇文章主要介紹了MySQL查看數(shù)據(jù)庫(kù)表容量大小的方法示例,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-09-09快速解決mysql57服務(wù)突然不見(jiàn)了的問(wèn)題
下面小編就為大家?guī)?lái)一篇快速解決mysql57服務(wù)突然不見(jiàn)了的問(wèn)題。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2017-05-05MySQL錯(cuò)誤代碼1862 your password has expired的解決方法
這篇文章主要為大家詳細(xì)介紹了MySQL錯(cuò)誤代碼1862 your password has expired的解決方法,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2018-08-08mysql數(shù)據(jù)庫(kù)互為主從配置方法分享
共有四臺(tái)機(jī)器:A(10.1.10.28),B(10.1.10.29),C(10.1.10.30),D(10.1.10.31)。配置后結(jié)果:A-C互為主從,B為A的slave,D為C的slave2012-03-03MySQL 8.0新特性 — 檢查性約束的使用簡(jiǎn)介
這篇文章主要介紹了MySQL 8.0新特性 — 檢查性約束的簡(jiǎn)單介紹,幫助大家更好的理解和學(xué)習(xí)使用MySQL數(shù)據(jù)庫(kù),感興趣的朋友可以了解下2021-03-03