水淼網(wǎng)址有效性篩選助手是一款批量篩選網(wǎng)頁(yè)有效性的工具,可篩選出失效網(wǎng)頁(yè)、被搜索引擎限制的關(guān)鍵詞、未收錄網(wǎng)址。有需要的小伙伴歡迎來(lái)西西下載體驗(yàn)。
使用方法:
判斷網(wǎng)址有效的條件設(shè)置:
按網(wǎng)頁(yè)狀態(tài)根據(jù)目標(biāo)網(wǎng)頁(yè)返回的狀態(tài)碼來(lái)判斷。可以輸入狀態(tài)碼,如200、301等,多個(gè)狀態(tài)碼使用“|”隔開,如“200|301”。取反就是將真變?yōu)榧,假變(yōu)檎妗?/p>
按網(wǎng)頁(yè)內(nèi)容根據(jù)目標(biāo)網(wǎng)頁(yè)返回的源代碼來(lái)判斷?梢暂斎腙P(guān)鍵字,多個(gè)關(guān)鍵字使用“|”隔開,如百度的限制搜索提示“根據(jù)相關(guān)法律法規(guī)和政策,部分搜索結(jié)果未予顯示”。取反就是將真變?yōu)榧伲僮優(yōu)檎妗?/p>
當(dāng)所有條件為真時(shí),軟件就會(huì)標(biāo)注為有效的(√),否則就是無(wú)效的(×)。
其他設(shè)置:
API訪問(wèn)如果遇到個(gè)別https網(wǎng)頁(yè)篩選失敗的,可以啟用API選項(xiàng)。如果同時(shí)啟用了瀏覽器渲染選項(xiàng),則判斷網(wǎng)頁(yè)內(nèi)容時(shí)用瀏覽器,判斷網(wǎng)頁(yè)狀態(tài)時(shí)用API。
瀏覽器渲染默認(rèn)只是讀取靜態(tài)代碼,但是有的網(wǎng)頁(yè)是JS動(dòng)態(tài)加載的代碼,需要瀏覽器環(huán)境來(lái)渲染執(zhí)行才能得到真實(shí)代碼。啟用該功能將無(wú)法使用多線程,并且速度會(huì)相對(duì)慢些。
線程數(shù)如果篩選不同網(wǎng)址,可以設(shè)置多個(gè)線程,如10個(gè)或更多。如果是篩選百度等搜索引擎對(duì)某些關(guān)鍵詞的限制情況,則必須將線程數(shù)設(shè)置為1,且設(shè)置間隔秒3秒以上,因?yàn)樗阉饕娲嬖谶^(guò)快訪問(wèn)的自動(dòng)屏蔽?梢允褂镁W(wǎng)址生成器來(lái)生成一組關(guān)鍵詞的百度搜索鏈。
間隔秒每篩選一個(gè)網(wǎng)址后停留的秒時(shí)間。
超時(shí)秒請(qǐng)求網(wǎng)頁(yè)較多等待時(shí)間,如果超出這個(gè)時(shí)間目標(biāo)網(wǎng)頁(yè)還沒響應(yīng)就會(huì)停止繼續(xù)請(qǐng)求。
保存按鈕左擊保存有效的(√),右擊保存無(wú)效的(×),下方的“關(guān)鍵詞”復(fù)選框,用于指定保存網(wǎng)址中的關(guān)鍵詞參數(shù)
更新日志:
v1.3.1.0:解決瀏覽器渲染選項(xiàng)個(gè)別網(wǎng)站卡住的問(wèn)題。