|
|
13.06.2018 16:45 o'clock |
Test Web Crawler/Nutch-1.14 | Robot
http://www.aibobar.de/ | 18324 | 34 ms
http://www.aibobar.de/robots.txt | 491 | 4 ms
http://www.aibobar.de/ | 18324 | 32 ms
http://www.aibobar.de/robots.txt | 491 | 5 ms
http://www.aibobar.de/ | 18324 | 33 ms
http://www.aibobar.de/robots.txt | 491 | 4 ms | |