| 49 различные роботы | Хиты | Объем | Последний визит |
|---|
| SemrushBot | 272,618+7476 | 4.16 ГБ | 31 Дек 2019 - 23:59 |
| Yandex Bot | 190,921+2085 | 16.64 ГБ | 31 Дек 2019 - 23:59 |
| AhrefsBot | 120,638+192 | 2.60 ГБ | 31 Дек 2019 - 23:59 |
| Bingbot | 34,383+634 | 1.91 ГБ | 31 Дек 2019 - 23:57 |
| Googlebot | 17,841+186 | 2.25 ГБ | 31 Дек 2019 - 23:58 |
| MJ12bot | 11,548+957 | 334.84 МБ | 31 Дек 2019 - 23:56 |
| Unknown robot (identified by 'bot' followed by a space or one of the following characters _+:,.;/\-) | 10,048+58 | 243.32 МБ | 31 Дек 2019 - 23:56 |
| DotBot, Open Site Explorer | 9,184+56 | 1.04 ГБ | 31 Дек 2019 - 23:39 |
| Mail.ru bot | 5,391+35 | 98.95 МБ | 31 Дек 2019 - 23:59 |
| Googlebot-Image | 2,127 | 267.40 МБ | 31 Дек 2019 - 23:04 |
| Unknown robot (identified by empty user agent string) | 1,403+3 | 54.50 МБ | 31 Дек 2019 - 22:39 |
| MSNBot | 1,256+77 | 175.38 МБ | 31 Дек 2019 - 23:06 |
| Bing Preview bot | 922 | 73.45 МБ | 31 Дек 2019 - 23:50 |
| Unknown robot (identified by hit on 'robots.txt') | 0+769 | 693.90 КБ | 31 Дек 2019 - 23:07 |
| Common Crawl | 697+21 | 11.57 МБ | 15 Дек 2019 - 09:26 |
| Unknown robot (identified by a space or one of the characters _+:,.;/\- followed by 'bot') | 435+5 | 29.74 МБ | 30 Дек 2019 - 09:46 |
| Unknown robot (identified by 'robot') | 316+1 | 27.37 МБ | 28 Дек 2019 - 00:29 |
| SeznamBot | 151+144 | 2.66 МБ | 31 Дек 2019 - 23:49 |
| Dataprovider Site Explorer | 172+1 | 14.63 МБ | 30 Дек 2019 - 00:31 |
| Unknown robot (identified by 'crawl') | 148+8 | 6.78 МБ | 31 Дек 2019 - 16:03 |
| FavIconizer | 104 | 6.00 МБ | 31 Дек 2019 - 06:22 |
| SMTBot | 52+1 | 1.95 МБ | 26 Дек 2019 - 05:44 |
| Python-urllib | 32+21 | 1.88 МБ | 28 Дек 2019 - 14:14 |
| Alexa (IA Archiver) | 43 | 4.68 МБ | 29 Дек 2019 - 04:14 |
| 360spider | 25 | 1.49 МБ | 30 Дек 2019 - 21:58 |
| Phantom | 14 | 1.54 МБ | 19 Дек 2019 - 14:04 |
| FaceBook bot | 14 | 404.83 КБ | 17 Дек 2019 - 10:25 |
| Perl tool | 13 | 4.15 МБ | 28 Дек 2019 - 10:50 |
| Unknown robot (identified by 'checker') | 12 | 732.08 КБ | 15 Дек 2019 - 01:20 |
| ltx71 | 1+10 | 70.08 КБ | 31 Дек 2019 - 00:35 |
| BaiDuSpider | 11 | 284.19 КБ | 30 Дек 2019 - 23:55 |
| MSIECrawler | 11 | 598.14 КБ | 27 Дек 2019 - 21:59 |
| Unknown robot (identified by 'spider') | 6+2 | 812.60 КБ | 09 Дек 2019 - 17:01 |
| Microsoft Office Protocol Discovery/Microsoft Office Existence Discovery | 7 | 221.53 КБ | 31 Дек 2019 - 09:53 |
| Common *nix tool for automating web document retireval. Most likely a bot. | 5 | 1.08 МБ | 19 Дек 2019 - 23:06 |
| Netcraft | 5 | 1.40 МБ | 05 Дек 2019 - 12:26 |
| ips-agent Verisign(?) - no reliable information found. | 3+1 | 99.50 КБ | 13 Дек 2019 - 20:39 |
| Sogou Spider | 2+2 | 123.77 КБ | 17 Дек 2019 - 00:31 |
| twitterbot | 1+2 | 62.88 КБ | 20 Дек 2019 - 14:40 |
| Suspected bot masqurading as Mozilla | 3 | 181.68 КБ | 13 Дек 2019 - 16:44 |
| Suspected bot masqurading as Mozilla | 3 | 0 | 06 Дек 2019 - 14:03 |
| CFNetwork | 2 | 123.04 КБ | 23 Дек 2019 - 19:25 |
| Xenu's Link Sleuth (TM), see Wikipedia | 2 | 0 | 30 Дек 2019 - 09:12 |
| BBot | 2 | 651.62 КБ | 06 Дек 2019 - 19:42 |
| Java (Often spam bot) | 1 | 0 | 20 Дек 2019 - 01:16 |
| WGet tools | 1 | 330.07 КБ | 16 Дек 2019 - 12:18 |
| yie8 | 1 | 19.07 КБ | 20 Дек 2019 - 00:11 |
| Cliqzbot | 1 | 5.12 КБ | 05 Дек 2019 - 19:03 |
| InternetArchive | 1 | 0 | 01 Дек 2019 - 11:06 |