水淼软件出品的批量筛选网页有效性的工具,可筛选出失效网页或被搜索引擎限制的关键词。
【判断网址有效的条件设置】
按网页状态:根据目标网页返回的状态码来判断。可以输入状态码,如200、301等,多个状态码使用“|”隔开,如“200|301”。取反就是将真变为假,假变为真。
按网页内容:根据目标网页返回的源代码来判断。可以输入关键字,多个关键字使用“|”隔开,如百度的限制搜索提示“根据相关法律法规和政策,部分搜索结果未予显示”。取反就是将真变为假,假变为真。
当所有条件为真时,软件就会标注为有效的(√),否则就是无效的(×)。
【其他设置】
线程数:如果筛选不同网址,可以设置多个线程,如10个或更多。如果是筛选百度等搜索引擎对某些关键词的限制情况,则必须将线程数设置为1,且设置间隔秒3秒以上,因为搜索引擎存在过快访问的自动屏蔽。可以使用网址生成器来生成一组关键词的百度搜索链。
间隔秒:每筛选一个网址后停留的秒时间。
超时秒:请求网页最多等待时间,如果超出这个时间目标网页还没响应就会停止继续请求。
保存按钮:左击保存有效的(√),右击保存无效的(×),下方的“关键词”复选框,用于指定保存网址中的关键词参数。