| 196 различные роботы | Хиты | Объем | Последний визит |
|---|
| MJ12bot | 1,407,025+13220 | 66.21 ГБ | 31 Дек 2023 - 18:59 |
| AhrefsBot | 1,000,512+3495 | 20.96 ГБ | 31 Дек 2023 - 21:01 |
| Googlebot | 546,811+4995 | 338.29 ГБ | 31 Дек 2023 - 23:59 |
| empty user agent string | 420,586+202 | 7.64 ГБ | 31 Дек 2023 - 21:24 |
| YandexBot | 204,785+30314 | 479.54 ГБ | 31 Дек 2023 - 23:57 |
| bingbot | 140,380+4044 | 138.15 ГБ | 31 Дек 2023 - 23:54 |
| Unknown robot identified by bot\* | 123,285+3191 | 78.69 ГБ | 31 Дек 2023 - 22:58 |
| YandexMetrika | 112,356 | 2.11 ГБ | 31 Дек 2023 - 23:55 |
| DotBot | 77,290+18502 | 95.23 ГБ | 31 Дек 2023 - 17:54 |
| SemrushBot | 84,970+9861 | 5.19 ГБ | 31 Дек 2023 - 23:45 |
| Googlebot-Image | 69,048 | 1.32 ГБ | 31 Дек 2023 - 23:52 |
| Bytespider | 61,712+1725 | 15.31 ГБ | 31 Дек 2023 - 22:24 |
| core | 51,876+255 | 7.03 ГБ | 30 Дек 2023 - 21:49 |
| YandexImages | 48,686 | 1.05 ГБ | 31 Дек 2023 - 23:45 |
| sift | 45,792+350 | 1.15 ГБ | 28 Дек 2023 - 09:01 |
| Unknown robot identified by \*bot | 32,311+189 | 16.04 ГБ | 26 Дек 2023 - 06:42 |
| Yandex ( catchall ) | 29,781+67 | 34.09 ГБ | 31 Дек 2023 - 23:39 |
| link | 29,283+56 | 95.39 ГБ | 23 Дек 2023 - 07:55 |
| MegaIndex.ru | 29,071+57 | 1.76 ГБ | 27 Дек 2023 - 02:45 |
| PetalBot | 23,439+3028 | 29.27 ГБ | 31 Дек 2023 - 13:54 |
| python | 23,753+329 | 14.73 ГБ | 31 Дек 2023 - 04:34 |
| YandexMobileBot | 22,645 | 1.93 ГБ | 30 Дек 2023 - 05:40 |
| Apache-HttpClient | 22,239+292 | 27.93 ГБ | 28 Дек 2023 - 19:34 |
| seek | 21,830+38 | 3.18 ГБ | 28 Дек 2023 - 16:42 |
| BLEXBot | 15,608+430 | 2.90 ГБ | 28 Дек 2023 - 10:17 |
| nbot | 14,765+214 | 2.67 ГБ | 26 Дек 2023 - 17:22 |
| Applebot | 11,070+712 | 6.27 ГБ | 30 Дек 2023 - 23:03 |
| Unknown robot (identified by hit on robots.txt) | 0+10286 | 2.35 МБ | 31 Дек 2023 - 17:12 |
| Firefox version 10 and lower - various robots | 7,991+425 | 3.11 ГБ | 31 Дек 2023 - 21:56 |
| seokicks.de | 7,364+27 | 123.18 ГБ | 29 Ноя 2023 - 09:53 |
| facebookexternalhit | 5,700+238 | 27.46 ГБ | 30 Дек 2023 - 22:47 |
| Baiduspider | 5,381 | 2.22 ГБ | 31 Дек 2023 - 23:31 |
| Baiduspider ( catchall ) | 5,380 | 20.36 МБ | 26 Дек 2023 - 18:04 |
| sucker | 5,330+2 | 64.81 ГБ | 07 Янв 2023 - 19:54 |
| coccoc | 2,736+2549 | 1.76 ГБ | 31 Дек 2023 - 18:33 |
| netEstate NE Crawler | 3,831+75 | 493.31 МБ | 29 Сен 2023 - 18:46 |
| qwantify | 2,473+1055 | 502.50 МБ | 31 Дек 2023 - 01:08 |
| Python-urllib | 3,402+11 | 4.24 ГБ | 31 Дек 2023 - 17:39 |
| wordpress | 3,345 | 1.52 ГБ | 31 Дек 2023 - 12:48 |
| MSIE 6 - ( Rogue Robot ) | 3,240+21 | 4.57 ГБ | 31 Дек 2023 - 14:51 |
| Barkrowler | 3,147+86 | 264.93 МБ | 29 Дек 2023 - 07:16 |
| uni-leipzig.de | 3,153+2 | 8.65 ГБ | 17 Авг 2023 - 03:02 |
| SeznamBot | 2,194+882 | 117.30 МБ | 31 Дек 2023 - 08:58 |
| archive.org_bot | 2,689+273 | 860.53 МБ | 26 Дек 2023 - 03:19 |
| Sogou web spider | 2,782+50 | 187.82 МБ | 31 Дек 2023 - 22:18 |
| crawl | 1,341+1427 | 145.69 МБ | 31 Дек 2023 - 05:09 |
| CCBot | 2,576+156 | 2.35 ГБ | 11 Дек 2023 - 08:22 |
| Dalvik | 2,685 | 4.28 ГБ | 31 Дек 2023 - 22:01 |
| zoominfobot | 1,842+466 | 58.09 МБ | 28 Дек 2023 - 11:09 |
| Curl | 2,124+5 | 2.27 ГБ | 31 Дек 2023 - 10:24 |
| nutch ( catchall ) | 1,874+227 | 1.29 ГБ | 31 Дек 2023 - 05:01 |
| DuckDuckBot-Https | 1,934+10 | 55.85 МБ | 15 Дек 2023 - 06:07 |
| TelegramBot | 1,769 | 3.40 ГБ | 28 Дек 2023 - 18:42 |
| yeti | 973+719 | 458.93 МБ | 31 Дек 2023 - 00:50 |
| Microsoft Office Protocol Discovery | 1,595 | 0 | 30 Дек 2023 - 18:28 |
| riddler | 1,163+79 | 78.39 МБ | 20 Дек 2023 - 19:17 |
| custo | 1,209+1 | 32.05 МБ | 31 Дек 2023 - 10:37 |
| Go-http-client | 914+196 | 45.02 МБ | 31 Дек 2023 - 14:49 |
| LinkedInBot | 881+39 | 1.12 ГБ | 30 Дек 2023 - 23:16 |
| Konqueror | 813+97 | 987.37 МБ | 22 Дек 2023 - 02:44 |
| spider | 527+321 | 254.39 МБ | 29 Дек 2023 - 06:37 |
| Velen | 754+83 | 1.02 ГБ | 30 Дек 2023 - 10:20 |
| DuckDuckGo-Favicons-Bot | 808 | 19.69 МБ | 30 Дек 2023 - 16:31 |
| urllib | 807 | 697.75 МБ | 24 Дек 2023 - 15:22 |
| scrapy | 752+6 | 154.53 МБ | 24 Дек 2023 - 11:57 |
| y!j | 518+205 | 239.51 МБ | 31 Дек 2023 - 08:27 |
| internetarchive | 719 | 0 | 31 Дек 2023 - 15:17 |
| Mail.RU Bot | 41+670 | 7.29 МБ | 31 Дек 2023 - 22:39 |
| CFNetwork | 674 | 181.42 МБ | 27 Дек 2023 - 16:36 |
| Googlebot-Video | 653 | 147.33 ГБ | 31 Дек 2023 - 12:45 |
| MSIE 5 - ( Rogue Robot ) | 598+15 | 234.92 МБ | 30 Дек 2023 - 09:02 |
| motor | 605 | 23.25 МБ | 10 Ноя 2023 - 08:08 |
| heritrix | 574+26 | 57.18 МБ | 13 Дек 2023 - 10:09 |
| dataprovider.com | 575+15 | 6.58 МБ | 21 Дек 2023 - 03:12 |
| linkdexbot | 467+84 | 18.48 МБ | 27 Дек 2023 - 23:13 |
| 360Spider | 503+31 | 13.68 МБ | 31 Дек 2023 - 23:18 |
| mozilla/5.0 - ( Rogue Robot ) | 517 | 353.44 МБ | 30 Дек 2023 - 17:27 |
| Java ( catchall ) | 463+4 | 483.98 МБ | 25 Дек 2023 - 07:12 |
| Neevabot | 359+88 | 519.17 МБ | 25 Май 2023 - 18:09 |
| XML Sitemaps Generator | 441+1 | 15.47 МБ | 09 Ноя 2023 - 15:45 |
| baidu | 422 | 6.31 МБ | 09 Фев 2023 - 11:56 |
| testbot | 381+19 | 37.21 МБ | 07 Окт 2023 - 14:00 |
| YandexImageResizer | 356 | 88.55 МБ | 31 Дек 2023 - 00:59 |
| BingPreview | 352 | 501.53 МБ | 31 Дек 2023 - 13:55 |
| Screaming Frog SEO Spider | 181+163 | 240.24 МБ | 31 Дек 2023 - 01:58 |
| linkchecker | 336+7 | 1.77 ГБ | 07 Сен 2023 - 00:27 |
| Pinterestbot | 45+253 | 1.80 МБ | 31 Дек 2023 - 17:43 |
| Wget | 289+4 | 175.58 МБ | 27 Дек 2023 - 11:39 |
| BW | 143+141 | 3.51 МБ | 30 Дек 2023 - 11:08 |
| YisouSpider | 218+52 | 22.01 МБ | 29 Дек 2023 - 22:42 |
| robot | 205+33 | 160.26 МБ | 28 Дек 2023 - 19:09 |
| SurdotlyBot | 215+6 | 27.68 МБ | 28 Дек 2023 - 10:51 |
| Nautic Expo using Firefox/1.5 | 189+19 | 130.67 МБ | 26 Дек 2023 - 19:10 |
| ning | 197 | 8.86 МБ | 29 Дек 2023 - 20:02 |
| netcraft | 177 | 3.66 МБ | 08 Дек 2023 - 08:58 |
| jbot | 156+13 | 292.33 МБ | 17 Июн 2023 - 14:20 |
| DuckDuckBot | 138 | 14.88 МБ | 31 Дек 2023 - 12:17 |
| checker | 70+48 | 14.41 МБ | 26 Дек 2023 - 19:29 |
| Google Web Preview | 118 | 37.70 МБ | 20 Дек 2023 - 20:55 |
| Discordbot | 98 | 170.42 МБ | 27 Дек 2023 - 21:19 |
| feed | 97 | 389.82 МБ | 24 Дек 2023 - 03:02 |
| Lightspeed | 84+1 | 2.62 МБ | 30 Дек 2023 - 18:56 |
| twitterbot | 39+41 | 7.02 МБ | 27 Дек 2023 - 15:09 |
| MSIE 4 - ( Rogue Robot ) | 74+6 | 50.53 МБ | 25 Дек 2023 - 16:51 |
| yacybot | 36+40 | 20.80 МБ | 02 Дек 2023 - 01:02 |
| A PHP script | 73 | 4.31 МБ | 26 Дек 2023 - 09:33 |
| PhantomJS | 62 | 1.94 МБ | 06 Дек 2023 - 04:28 |
| drupal | 59 | 13.01 МБ | 30 Дек 2023 - 23:08 |
| Curl/PHP | 55 | 63.85 МБ | 28 Дек 2023 - 23:30 |
| ips-agent | 26+26 | 505.78 КБ | 13 Дек 2023 - 15:14 |
| libwww-perl | 49 | 1.19 МБ | 23 Дек 2023 - 22:10 |
| Windows 99 - ( Rogue Robot ) | 47+1 | 39.90 МБ | 22 Дек 2023 - 02:40 |
| webcopy | 39 | 13.04 МБ | 21 Дек 2023 - 19:26 |
| mindupbot | 35+3 | 598.37 КБ | 27 Ноя 2023 - 13:11 |
| favicon | 37 | 926.00 КБ | 31 Дек 2023 - 03:36 |
| FirePHP | 32 | 367.10 МБ | 23 Дек 2023 - 10:11 |
| Xenu Link Sleuth | 29 | 24.85 КБ | 24 Дек 2023 - 03:43 |
| Links ( | 24+3 | 42.99 МБ | 04 Авг 2023 - 19:41 |
| ELinks | 24+3 | 25.09 МБ | 29 Июн 2023 - 11:16 |
| Yahoo! Slurp | 22+4 | 18.27 МБ | 13 Дек 2023 - 11:03 |
| AdsBot-Google | 23 | 343.61 КБ | 20 Дек 2023 - 19:34 |
| Mozilla ( Rogue Robot ) | 23 | 0 | 25 Дек 2023 - 10:33 |
| MSIE 3 - ( Rogue Robot ) | 22+1 | 19.54 МБ | 06 Окт 2023 - 13:52 |
| 2345Explorer | 20 | 89.27 МБ | 12 Дек 2023 - 03:36 |
| yak-linkfluence | 3+16 | 98.48 КБ | 09 Дек 2023 - 17:39 |
| trendiction | 17+2 | 934.12 КБ | 23 Фев 2023 - 06:00 |
| LinkCheck | 19 | 3.34 МБ | 09 Дек 2023 - 01:06 |
| Mediapartners-Google | 18 | 122.65 КБ | 21 Дек 2023 - 15:28 |
| facebook | 16 | 3.32 МБ | 29 Ноя 2023 - 19:52 |
| gigablastopensource | 8+8 | 206.60 КБ | 26 Ноя 2023 - 13:25 |
| filterdb.iss.net | 14 | 257.11 КБ | 13 Окт 2023 - 06:18 |
| microsoft-webdav-miniredir | 13 | 0 | 20 Ноя 2023 - 12:59 |
| bubing | 1+10 | 27.20 КБ | 11 Мар 2023 - 01:38 |
| MSIE 2 - ( Rogue Robot ) | 10 | 7.38 МБ | 30 Окт 2023 - 17:03 |
| i-bot | 9 | 51.72 КБ | 06 Ноя 2023 - 21:26 |
| ODP link checker | 8 | 160.21 КБ | 07 Дек 2023 - 15:42 |
| ELinks ( | 8 | 8.03 МБ | 09 Мар 2023 - 11:06 |
| feedburner | 7 | 0 | 05 Окт 2023 - 06:21 |
| Slackbot-LinkExpanding | 7 | 224.01 КБ | 14 Ноя 2023 - 11:55 |
| ia_archiver | 7 | 194.93 КБ | 06 Дек 2023 - 22:39 |
| rambler | 6 | 622.04 КБ | 27 Окт 2023 - 10:23 |
| ng/1. | 6 | 4.41 МБ | 16 Янв 2023 - 10:17 |
| AdIdxBot Microsoft Ad Quality control | 6 | 172.63 КБ | 23 Апр 2023 - 18:28 |
| StructScraper | 6 | 538.70 КБ | 23 Янв 2023 - 14:57 |
| scanner | 6 | 136.76 КБ | 16 Дек 2023 - 15:51 |
| MSIECrawler | 6 | 3.57 МБ | 09 Июл 2023 - 12:21 |
| Deepnet Explorer | 5+1 | 2.80 МБ | 03 Мар 2023 - 08:44 |
| Mojolicious | 5 | 226.44 КБ | 25 Окт 2023 - 09:16 |
| netnewswire | 4+1 | 1.90 МБ | 20 Янв 2023 - 11:05 |
| msie8 - ( Rogue Robot ) | 5 | 124.31 КБ | 11 Дек 2023 - 16:52 |
| sunrise | 1+3 | 287.54 КБ | 20 Май 2023 - 07:00 |
| Yahoo Link Preview | 4 | 7.26 МБ | 03 Дек 2023 - 14:37 |
| mozilla/4.0 (compatible;) - ( Rogue Robot ) | 4 | 100.72 КБ | 18 Апр 2023 - 16:36 |
| MojeekBot | 2+2 | 87.45 КБ | 21 Авг 2023 - 21:10 |
| ICC-Crawler | 1+3 | 5.35 КБ | 08 Фев 2023 - 16:24 |
| MixrankBot | 4 | 56.42 КБ | 16 Апр 2023 - 08:57 |
| titan | 4 | 1.16 МБ | 31 Май 2023 - 04:11 |
| Validator.nu | 4 | 99.84 КБ | 30 Окт 2023 - 03:53 |
| Adsbot | 2+1 | 33.43 КБ | 29 Авг 2023 - 05:34 |
| harvest | 3 | 1.00 МБ | 11 Сен 2023 - 01:21 |
| W3C-checklink | 1+2 | 482 Байты | 15 Май 2023 - 17:58 |
| ubermetrics-technologies.com | 2+1 | 202.12 КБ | 17 Фев 2023 - 11:25 |
| gulperbot | 3 | 74.41 КБ | 18 Май 2023 - 21:10 |
| Feedfetcher-Google | 3 | 50.69 КБ | 23 Дек 2023 - 15:10 |
| Mediatoolkitbot | 1+2 | 25.18 КБ | 22 Ноя 2023 - 12:48 |
| Windows 95 - ( Rogue Robot ) | 3 | 44.20 КБ | 28 Июн 2023 - 19:58 |
| msnbot | 2 | 49.90 КБ | 17 Окт 2023 - 15:55 |
| fetcher | 2 | 0 | 15 Дек 2023 - 21:16 |
| sitemap | 1+1 | 8.72 КБ | 30 Июн 2023 - 22:34 |
| serendeputy | 2 | 49.42 КБ | 21 Июл 2023 - 13:27 |
| Seobility | 1+1 | 7.58 КБ | 13 Дек 2023 - 18:46 |
| proximic | 2 | 77.96 КБ | 24 Ноя 2023 - 12:23 |
| Googlebot-News | 2 | 49.42 КБ | 31 Май 2023 - 12:48 |
| voyager | 2 | 2.49 МБ | 11 Янв 2023 - 20:37 |
| bloglines | 2 | 50.21 КБ | 05 Дек 2023 - 00:17 |
| yie8 | 2 | 49.44 КБ | 30 Авг 2023 - 23:00 |
| Exabot | 1 | 25.48 КБ | 15 Дек 2023 - 19:00 |
| jeeves | 1 | 24.71 КБ | 16 Июн 2023 - 20:49 |
| raven | 1 | 2.34 МБ | 18 Дек 2023 - 16:59 |
| Yahoo! Slurp China | 1 | 25.46 КБ | 27 Ноя 2023 - 08:29 |
| htmlparser | 1 | 12.62 КБ | 28 Дек 2023 - 22:40 |
| discover | 1 | 13.09 КБ | 10 Сен 2023 - 12:40 |
| TurnitinBot | 1 | 25.16 КБ | 08 Ноя 2023 - 08:28 |
| mozilla/4.0 - ( Rogue Robot ) | 1 | 744.06 КБ | 18 Фев 2023 - 04:20 |
| microsoft url control | 1 | 24.71 КБ | 20 Июл 2023 - 03:42 |
| Google-Adwords-Instant | 1 | 25.62 КБ | 15 Янв 2023 - 23:13 |
| FAST-WebCrawler | 1 | 25.81 КБ | 06 Май 2023 - 18:04 |
| Mechanize | 1 | 24.71 КБ | 23 Июн 2023 - 19:07 |
| webcollage | 1 | 137.07 КБ | 09 Ноя 2023 - 08:13 |
| DoCoMo | 1 | 10.33 КБ | 22 Июл 2023 - 01:56 |
| Jigsaw | 1 | 34.55 КБ | 31 Мар 2023 - 23:33 |
| httrack | 1 | 998.97 КБ | 05 Авг 2023 - 08:59 |
| Baiduspider-image | 1 | 56.36 КБ | 06 Мар 2023 - 11:26 |
| TestCrawler | 0+1 | 241 Байты | 18 Янв 2023 - 20:42 |
| validator | 1 | 162.22 КБ | 28 Мар 2023 - 19:27 |
| hometown | 1 | 2.34 МБ | 18 Дек 2023 - 16:59 |
|
