2008-08-02 21:59:33 W3SVC277 203.171.230.13 GET /js/topindex.js - 80 - 60.223.160.89 Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+SV1;+baiduds) 200 0 0 2088
我认为这个蜘蛛和Baiduspider+具有同样的功能,只是分工不同而已。一个抓取图片和js等代码,一个抓取网页。哥们,你们认为呢?有什么想法,大家一起来探讨探讨。
2008-08-02 21:59:33 W3SVC277 203.171.230.13 GET /js/topindex.js - 80 - 60.223.160.89 Mozilla/4.0+(compatible;+MSIE+6.0;+Windows+NT+5.1;+SV1;+baiduds) 200 0 0 2088
我认为这个蜘蛛和Baiduspider+具有同样的功能,只是分工不同而已。一个抓取图片和js等代码,一个抓取网页。哥们,你们认为呢?有什么想法,大家一起来探讨探讨。
◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。