c#分頁讀取GB文本文件實(shí)例
本文實(shí)例講述了c#分頁讀取GB文本文件的方法。分享給大家供大家參考。具體如下:
一、應(yīng)用場景:
① .我在做BI開發(fā)測試的時(shí)候,有可能面對source文件數(shù)GB的情況,如果使用一般的文本編輯器,則會卡死,或要等很久才能顯示出來。
② .有時(shí)候,我們使用ascii(01)或ascii(02)作為行或列的分隔符,這樣的臨時(shí)文件用于導(dǎo)數(shù)據(jù)到DB,如果文件導(dǎo)入過程中有錯(cuò)誤,需要查看文件 的時(shí)候,普通的編輯器不支持換行,則會很恐怖。
為解決這兩個(gè)需求,我使用c#完成了一個(gè)簡單的winform的應(yīng)用程序。
功能列表:
1.根據(jù)配置的行數(shù),寫測試文件,指定行終止符,列分隔符暫時(shí)沒有使用上。
2.根據(jù)指定的行終止符,和pagesize,分頁讀取文件內(nèi)容,而且可以在text和byte間轉(zhuǎn)換。
二、實(shí)現(xiàn)代碼:
主要的代碼如下,使用了一個(gè)迭代器:
{
/*
string line;
using (TextReader reader = File.OpenText(filename))
{
while ((line = reader.ReadLine()) != null)
yield return line;
}
*/
StringBuilder sb = new StringBuilder();
using (FileStream fs = File.OpenRead(filename))
{
int b = 0;
while ((b=fs.ReadByte())!=-1)
{
//textbox3 store the row terminator
if (b.ToString() == textBox3.Text.Trim())
{
yield return sb.ToString();
sb.Clear();
}
else
sb.Append(UnicodeEncoding.ASCII.GetString(new byte[] { byte.Parse(b.ToString()) }));
}
}
}
示例截圖如下所示:
我測試了一次,生成了1個(gè)億的數(shù)據(jù)行,在系統(tǒng)中顯示占用6GB的空間,
我嘗試讀寫,無卡頓情況。
可以進(jìn)一步更新:
根據(jù)列行分隔符顯示到gridview中,這樣更清晰。
可以從后往前讀文件。
希望本文所述對大家的C#程序設(shè)計(jì)有所幫助。
相關(guān)文章
探討C#中Dispose方法與Close方法的區(qū)別詳解
本篇文章是對C#中Dispose方法與Close方法的區(qū)別進(jìn)行了詳細(xì)的分析介紹,需要的朋友參考下2013-06-06C#實(shí)現(xiàn)GridView導(dǎo)出Excel實(shí)例代碼
本篇文章主要介紹了C#實(shí)現(xiàn)GridView導(dǎo)出Excel實(shí)例代碼,這里整理了詳細(xì)的代碼,非常具有實(shí)用價(jià)值,需要的朋友可以參考下。2017-03-03C#實(shí)現(xiàn)的陰歷陽歷互相轉(zhuǎn)化類實(shí)例
這篇文章主要介紹了C#實(shí)現(xiàn)的陰歷陽歷互相轉(zhuǎn)化類,結(jié)合實(shí)例形式分析了C#針對日期的轉(zhuǎn)換與計(jì)算相關(guān)操作技巧,需要的朋友可以參考下2017-06-06c#獲取當(dāng)前年的周數(shù)及當(dāng)前月的天數(shù)示例代碼
本篇文章主要是對c#獲取當(dāng)前年的周數(shù)及當(dāng)前月的天數(shù)示例代碼進(jìn)行了介紹,需要的朋友可以過來參考下,希望對大家有所幫助2014-01-01C#控制Excel Sheet使其自適應(yīng)頁寬與列寬的方法
這篇文章主要介紹了C#控制Excel Sheet使其自適應(yīng)頁寬與列寬的方法,涉及C#操作Excel的相關(guān)技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2016-06-06windows系統(tǒng)下,如何在C#程序中自動(dòng)安裝字體
在Windows系統(tǒng)中,原有自帶的字體樣式有限,有時(shí)候我們的程序會使用到個(gè)別稀有或系統(tǒng)不自帶的字體。因此我們需要將字體打包到程序中,當(dāng)程序啟動(dòng)時(shí),檢測系統(tǒng)是否有該字體,如果沒有則安裝該字體,也可以動(dòng)態(tài)加載字體。2020-11-11C#設(shè)置WinForm中DataGrid列的方法(列寬/列標(biāo)題等)
這篇文章主要介紹了C#設(shè)置WinForm中DataGrid列的方法,包括列寬、列標(biāo)題等部分,并分析了其中相關(guān)的操作技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-07-07基于C#實(shí)現(xiàn)圖片滑動(dòng)驗(yàn)證碼的示例代碼
這篇文章主要為大家介紹了如何利用C#語言制作一個(gè)圖片滑動(dòng)驗(yàn)證碼,文中的示例代碼講解詳細(xì),感興趣的小伙伴可以了解一下2022-04-04