水淼網(wǎng)址有效性篩選助手是一款批量篩選網(wǎng)頁有效性的工具,可篩選出失效網(wǎng)頁、被搜索引擎限制的關鍵詞、未收錄網(wǎng)址。有需要的小伙伴歡迎來西西下載體驗。
使用方法:
判斷網(wǎng)址有效的條件設置:
按網(wǎng)頁狀態(tài)根據(jù)目標網(wǎng)頁返回的狀態(tài)碼來判斷。可以輸入狀態(tài)碼,如200、301等,多個狀態(tài)碼使用“|”隔開,如“200|301”。取反就是將真變?yōu)榧,假變(yōu)檎妗?/p>
按網(wǎng)頁內容根據(jù)目標網(wǎng)頁返回的源代碼來判斷?梢暂斎腙P鍵字,多個關鍵字使用“|”隔開,如百度的限制搜索提示“根據(jù)相關法律法規(guī)和政策,部分搜索結果未予顯示”。取反就是將真變?yōu)榧伲僮優(yōu)檎妗?/p>
當所有條件為真時,軟件就會標注為有效的(√),否則就是無效的(×)。
其他設置:
API訪問如果遇到個別https網(wǎng)頁篩選失敗的,可以啟用API選項。如果同時啟用了瀏覽器渲染選項,則判斷網(wǎng)頁內容時用瀏覽器,判斷網(wǎng)頁狀態(tài)時用API。
瀏覽器渲染默認只是讀取靜態(tài)代碼,但是有的網(wǎng)頁是JS動態(tài)加載的代碼,需要瀏覽器環(huán)境來渲染執(zhí)行才能得到真實代碼。啟用該功能將無法使用多線程,并且速度會相對慢些。
線程數(shù)如果篩選不同網(wǎng)址,可以設置多個線程,如10個或更多。如果是篩選百度等搜索引擎對某些關鍵詞的限制情況,則必須將線程數(shù)設置為1,且設置間隔秒3秒以上,因為搜索引擎存在過快訪問的自動屏蔽?梢允褂镁W(wǎng)址生成器來生成一組關鍵詞的百度搜索鏈。
間隔秒每篩選一個網(wǎng)址后停留的秒時間。
超時秒請求網(wǎng)頁較多等待時間,如果超出這個時間目標網(wǎng)頁還沒響應就會停止繼續(xù)請求。
保存按鈕左擊保存有效的(√),右擊保存無效的(×),下方的“關鍵詞”復選框,用于指定保存網(wǎng)址中的關鍵詞參數(shù)
更新日志:
v1.3.1.0:解決瀏覽器渲染選項個別網(wǎng)站卡住的問題。