Baidu, tu fais chier avec ton spider
jeudi 23 juillet 2015 à 11:59Baidu ne suis pas les consignes du robots.txt !
Bon comme il ne suit pas les directives, il se prend des bans ^_^
Sa plage d'IP : 180.76.15.* (baiduspider-180-76-15-*.crawl.baidu.com)
(Permalink)
Bon comme il ne suit pas les directives, il se prend des bans ^_^
Sa plage d'IP : 180.76.15.* (baiduspider-180-76-15-*.crawl.baidu.com)
(Permalink)