可不可以通过蜘蛛的访问来触发更新缓存,避免由浏览者访问而更新,该怎么解决
程序员文章站
2022-04-08 17:04:01
...
可不可以通过蜘蛛的访问来触发更新缓存,避免由浏览者访问而更新
如果可以的话,
会有什么缺点
同时请教蜘蛛的工作原理,谢谢
------解决方案--------------------
可以的吧,通过进入的IP来判断就可以了
蜘蛛也就是一个通过链接一层层的进入来抓取页面的程序吧
抓取到的页面存起来就可以提供搜索了
如果可以的话,
会有什么缺点
同时请教蜘蛛的工作原理,谢谢
------解决方案--------------------
可以的吧,通过进入的IP来判断就可以了
蜘蛛也就是一个通过链接一层层的进入来抓取页面的程序吧
抓取到的页面存起来就可以提供搜索了
相关文章
相关视频