| 55 различные роботы | Хиты | Объем | Последний визит |
|---|
| SemrushBot | 121,838+2820 | 1.87 ГБ | 31 Авг 2018 - 23:59 |
| DotBot, Open Site Explorer | 12,166+3668 | 2.13 ГБ | 31 Авг 2018 - 23:59 |
| Bingbot | 49,732+750 | 2.70 ГБ | 31 Авг 2018 - 23:58 |
| Yandex Bot | 174,168+1416 | 17.83 ГБ | 31 Авг 2018 - 23:58 |
| Googlebot | 68,738+290 | 5.12 ГБ | 31 Авг 2018 - 23:58 |
| Mail.ru bot | 125,584+1126 | 788.98 МБ | 31 Авг 2018 - 23:53 |
| Googlebot-Image | 3,892 | 930.76 МБ | 31 Авг 2018 - 23:49 |
| Unknown robot (identified by 'bot' followed by a space or one of the following characters _+:,.;/\-) | 4,728+368 | 116.12 МБ | 31 Авг 2018 - 23:17 |
| Unknown robot (identified by hit on 'robots.txt') | 0+96 | 86.62 КБ | 31 Авг 2018 - 23:05 |
| Bing Preview bot | 6,238 | 537.52 МБ | 31 Авг 2018 - 23:00 |
| AhrefsBot | 89,026+286 | 2.43 ГБ | 31 Авг 2018 - 22:48 |
| MJ12bot | 11,864+1778 | 422.19 МБ | 31 Авг 2018 - 22:42 |
| Common *nix tool for automating web document retireval. Most likely a bot. | 26 | 6.74 МБ | 31 Авг 2018 - 22:06 |
| Unknown robot (identified by empty user agent string) | 874+8 | 54.27 МБ | 31 Авг 2018 - 21:35 |
| BLEXBot, seems to belong to the WebMeUp backlink tool | 81,736+4160 | 1.02 ГБ | 31 Авг 2018 - 21:12 |
| WGet tools | 770 | 0 | 31 Авг 2018 - 17:57 |
| Python-urllib | 102+6 | 15.28 МБ | 31 Авг 2018 - 14:52 |
| FavIconizer | 164 | 7.62 МБ | 31 Авг 2018 - 12:52 |
| Suspected bot masqurading as Mozilla | 114 | 14.00 МБ | 31 Авг 2018 - 12:50 |
| 360spider | 64 | 3.07 МБ | 31 Авг 2018 - 12:08 |
| Google Web Preview | 950 | 76.23 МБ | 31 Авг 2018 - 12:04 |
| Unknown robot (identified by 'crawl') | 22,664+10 | 318.61 МБ | 31 Авг 2018 - 05:05 |
| BaiDuSpider | 34+4 | 8.81 МБ | 30 Авг 2018 - 19:21 |
| SeznamBot | 42+30 | 1.34 МБ | 30 Авг 2018 - 18:01 |
| SEOkicks Webcrawler | 92+16 | 8.38 МБ | 30 Авг 2018 - 11:45 |
| Unknown robot (identified by a space or one of the characters _+:,.;/\- followed by 'bot') | 1,044+18 | 320.70 МБ | 30 Авг 2018 - 00:02 |
| Unknown robot (identified by 'checker') | 14 | 694.29 КБ | 29 Авг 2018 - 21:56 |
| oBot | 0+6 | 5.41 КБ | 29 Авг 2018 - 18:13 |
| Perl tool | 12 | 3.11 МБ | 29 Авг 2018 - 12:04 |
| Site Explorer | 206+12 | 4.41 МБ | 29 Авг 2018 - 06:57 |
| Java (Often spam bot) | 296 | 39.94 МБ | 29 Авг 2018 - 03:59 |
| ltx71 | 118+106 | 3.30 МБ | 28 Авг 2018 - 19:10 |
| yeti | 198+12 | 3.98 МБ | 28 Авг 2018 - 12:54 |
| Alexa (IA Archiver) | 22 | 2.18 МБ | 28 Авг 2018 - 11:01 |
| StackRambler | 6 | 606.58 КБ | 27 Авг 2018 - 01:45 |
| FaceBook bot | 18 | 209.72 КБ | 26 Авг 2018 - 15:38 |
| Suspected bot masqurading as Mozilla | 98 | 11.05 МБ | 26 Авг 2018 - 11:02 |
| Unknown robot (identified by 'robot') | 4 | 281.83 КБ | 25 Авг 2018 - 01:21 |
| archive.org bot | 0+14 | 12.63 КБ | 24 Авг 2018 - 21:21 |
| Microsoft Office Protocol Discovery/Microsoft Office Existence Discovery | 14 | 111.33 КБ | 23 Авг 2018 - 13:53 |
| Nutch | 0+8 | 7.22 КБ | 22 Авг 2018 - 12:00 |
| Common Crawl | 1,384+28 | 26.33 МБ | 22 Авг 2018 - 06:53 |
| Yahoo Slurp | 6 | 211.71 КБ | 21 Авг 2018 - 19:25 |
| Sogou Spider | 2 | 98.41 КБ | 21 Авг 2018 - 12:47 |
| Linkdex | 194+6 | 4.23 МБ | 21 Авг 2018 - 08:18 |
| GigaBot | 116+4 | 2.56 МБ | 20 Авг 2018 - 11:06 |
| Web Core / Roots | 2 | 98.62 КБ | 17 Авг 2018 - 11:54 |
| twitterbot | 8+8 | 398.21 КБ | 16 Авг 2018 - 14:44 |
| IstellaBot | 2+2 | 100.58 КБ | 15 Авг 2018 - 16:31 |
| Google AdSense | 2 | 40.62 КБ | 15 Авг 2018 - 14:48 |
| ips-agent Verisign(?) - no reliable information found. | 6+2 | 1.22 МБ | 14 Авг 2018 - 18:01 |
| SpiderBot | 6+6 | 300.03 КБ | 14 Авг 2018 - 12:36 |
| InternetArchive | 2 | 0 | 13 Авг 2018 - 13:24 |
| Xenu's Link Sleuth (TM), see Wikipedia | 2 | 0 | 09 Авг 2018 - 17:30 |
| yie8 | 2 | 210.20 КБ | 08 Авг 2018 - 22:08 |
|