Pycharm打印大數(shù)據文件顯示不全的解決方法
更新時間：2024年03月28日 11:46:03 作者：沙振宇
這篇文章主要介紹了Pycharm打印大數(shù)據文件顯示不全的解決方法,昨晚寫了個小爬蟲,簡單分析下發(fā)現(xiàn)可以修改請求的url,直接獲取所有目標的數(shù)據,想先打印在控制臺看看,發(fā)現(xiàn)打印的數(shù)據不全,所以本文記錄了一下解決方法,需要的朋友可以參考下
前言
昨晚寫了個小爬蟲，簡單分析下發(fā)現(xiàn)可以修改請求的url，直接獲取所有目標的數(shù)據。想先打印在控制臺看看，發(fā)現(xiàn)打印的數(shù)據不全，一開始還以為被反爬蟲了，獲取的數(shù)據本身不全，后來將數(shù)據直接保存JSON文件（3兆多大?。肬buntu文檔編輯器打不開（直接卡死），用vim打開發(fā)現(xiàn)數(shù)據完整（說明爬蟲獲取的數(shù)據本身沒毛病），再在Pycharm用Python打開發(fā)現(xiàn)提示文件過大，打印在控制臺也還是顯示不全。
正文
原來Pycharm IDEA對能關聯(lián)的文件大小做了限制，主要是為了保護內存，默認值為2500kb，這對爬蟲用戶來說相當不友好，但時安裝軟件的時候也不提醒下?
在Pycharm菜單找到Edit Custom Properties…
追加以下字段
idea.max.intellisense.filesize = 20000 idea.max.content.load.filesize = 20000 idea.cycle.buffer.size = 20000
其中20000代表限制大小為20000kb（暫時夠用），可自行修改
重啟Pycharm
以上就是Pycharm打印大數(shù)據文件顯示不全的解決方法的詳細內容，更多關于Pycharm打印數(shù)據顯示不全的資料請關注腳本之家其它相關文章！
相關文章
這篇文章主要介紹了python做圖片搜索引擎并保存到本地詳情，文章圍繞主題展開詳細的內容介紹，具有一定的參考價值，需要的朋友可以參考一下2022-08-08
Python3.9 beta2版本發(fā)布了,看看這7個新的PEP都是什么
這篇文章主要介紹了Python3.9 beta2版本發(fā)布了,看看這7個新的PEP都是什么，小編覺得挺不錯的，現(xiàn)在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2020-06-06
python實現(xiàn)一次創(chuàng)建多級目錄的方法
這篇文章主要介紹了python實現(xiàn)一次創(chuàng)建多級目錄的方法,涉及Python中os模塊makedirs方法的使用技巧,非常簡單實用,需要的朋友可以參考下2015-05-05
Python實現(xiàn)的字典排序操作示例【按鍵名key與鍵值value排序】
這篇文章主要介紹了Python實現(xiàn)的字典排序操作,結合實例形式分析了Python針對字典分別按照鍵名key與鍵值value進行排序的相關操作技巧,需要的朋友可以參考下2018-12-12
python通過socket實現(xiàn)多個連接并實現(xiàn)ssh功能詳解
這篇文章主要介紹了python通過socket實現(xiàn)多個連接并實現(xiàn)ssh功能詳解，具有一定參考價值，需要的朋友可以了解下。2017-11-11
今天小編就為大家分享一篇關于Python實現(xiàn)網站表單提交和模板，小編覺得內容挺不錯的，現(xiàn)在分享給大家，具有很好的參考價值，需要的朋友一起跟隨小編來看看吧2019-01-01
Python利用pandas和matplotlib實現(xiàn)繪制圓環(huán)圖
在可視化的過程中,圓環(huán)圖是一種常用的方式,特別適合于展示各類別占比情況,本文將介紹如何使用 Python中的 pandas 和 matplotlib 庫,來制作一個店鋪銷量占比的圓環(huán)圖,需要的可以參考下2023-11-11
漂亮的Django Markdown富文本app插件的實現(xiàn)
這篇文章主要介紹了漂亮的Django Markdown富文本app插件的實現(xiàn)，小編覺得挺不錯的，現(xiàn)在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2019-01-01
淺析python，PyCharm，Anaconda三者之間的關系
Python是一種跨平臺的計算機程序設計語言，簡單來說，python就是類似于C，Java，C++等，一種編程語言。這篇文章主要介紹了淺析python，PyCharm，Anaconda三者之間的關系,需要的朋友可以參考下2019-11-11
socket 是網絡連接端點。2009-08-08