特色:
1.前端純HTML+JS+JSON(鏈接統(tǒng)計除外),后端python生成標(biāo)準(zhǔn)JSON
2.自帶30幾個常用網(wǎng)站采集規(guī)則
3.多線程抓取,30+網(wǎng)站5秒內(nèi)采集完畢
4.相同網(wǎng)站放在一個框架內(nèi),可局部刷新和滾動
5.更新時間顯示(按采集頁的自帶更新時間或按時間排序的第一條時間采集,沒有的為采集完成時間)
6.內(nèi)容鏈接防盜鏈,鏈接通過base64+字符逆序+大小寫反轉(zhuǎn)+base64實現(xiàn)加密(更換大小寫轉(zhuǎn)換順序或增加數(shù)字替換可實現(xiàn)不同密碼加密)
7.內(nèi)容鏈接點擊統(tǒng)計
8.部分內(nèi)容鼠標(biāo)懸停提示(如appstore排行有更新內(nèi)容、時間、版本號)
安裝:
1.python3 caiji.py采集(保持后臺運行請用screen或nohup)
2.打開首頁訪問
注:
caiji.py為后端采集程序,其余為前端需在同一目錄
相應(yīng)設(shè)置修改請查看源碼中的注釋
admin.php為第三方數(shù)據(jù)庫管理程序,用于內(nèi)容鏈接統(tǒng)計查看(默認密碼admin,請在文件中修改)
點擊統(tǒng)計數(shù)據(jù)庫log.db會在首次訪問內(nèi)容鏈接時生成,如未建立請保證主目錄可寫
為了安全,后端程序caiji.py和數(shù)據(jù)庫查看程序admin.php請改為復(fù)雜文件名,或移動到非web目錄(需同時修改文件內(nèi)的生成json保存目錄為網(wǎng)站根目錄,默認為當(dāng)前目錄)
默認使用多線程抓取,如有問題請改用單線程
今日頭條的采集請更換為自己的cookie,頭條短時間采集內(nèi)容相同的太多(目前1分鐘采一次合并10次數(shù)據(jù)),相同cookie分段采集后幾乎不會有重復(fù)的,但采集一段時間后推薦的都是雜七雜八無關(guān)的垃圾內(nèi)容(請定期更換cookie或自行加入隨機的頭條cookie生成規(guī)則)
采集站的logo大部分已修改為透明圖層png,在非白色背景下可能會很難看
頁面展示
![圖片[1]-全新整合熱搜榜內(nèi)容系統(tǒng)聚合源碼-資源網(wǎng)站](http://www.oilmaxhydraulic.com.cn/wp-content/uploads/2023/04/9feb94806f094320-1024x663.png)
![圖片[2]-全新整合熱搜榜內(nèi)容系統(tǒng)聚合源碼-資源網(wǎng)站](http://www.oilmaxhydraulic.com.cn/wp-content/uploads/2023/04/45bd99eed7094320-1024x659.png)
![圖片[3]-全新整合熱搜榜內(nèi)容系統(tǒng)聚合源碼-資源網(wǎng)站](http://www.oilmaxhydraulic.com.cn/wp-content/uploads/2023/04/64d6245ba6094330-1024x659.png)
![圖片[4]-全新整合熱搜榜內(nèi)容系統(tǒng)聚合源碼-資源網(wǎng)站](http://www.oilmaxhydraulic.com.cn/wp-content/uploads/2023/04/44b67507aa094330-1024x659.png)
![圖片[5]-全新整合熱搜榜內(nèi)容系統(tǒng)聚合源碼-資源網(wǎng)站](http://www.oilmaxhydraulic.com.cn/wp-content/uploads/2023/04/56c098f3b0094339-1024x319.png)
- 最新
- 最熱
只看作者