196 различные роботы | Хиты | Объем | Последний визит |
Googlebot | 546,811+4995 | 338.29 ГБ | 31 Дек 2023 - 23:59 |
YandexBot | 204,785+30314 | 479.54 ГБ | 31 Дек 2023 - 23:57 |
YandexMetrika | 112,356 | 2.11 ГБ | 31 Дек 2023 - 23:55 |
bingbot | 140,380+4044 | 138.15 ГБ | 31 Дек 2023 - 23:54 |
Googlebot-Image | 69,048 | 1.32 ГБ | 31 Дек 2023 - 23:52 |
SemrushBot | 84,970+9861 | 5.19 ГБ | 31 Дек 2023 - 23:45 |
YandexImages | 48,686 | 1.05 ГБ | 31 Дек 2023 - 23:45 |
Yandex ( catchall ) | 29,781+67 | 34.09 ГБ | 31 Дек 2023 - 23:39 |
Baiduspider | 5,381 | 2.22 ГБ | 31 Дек 2023 - 23:31 |
360Spider | 503+31 | 13.68 МБ | 31 Дек 2023 - 23:18 |
Unknown robot identified by bot\* | 123,285+3191 | 78.69 ГБ | 31 Дек 2023 - 22:58 |
Mail.RU Bot | 41+670 | 7.29 МБ | 31 Дек 2023 - 22:39 |
Bytespider | 61,712+1725 | 15.31 ГБ | 31 Дек 2023 - 22:24 |
Sogou web spider | 2,782+50 | 187.82 МБ | 31 Дек 2023 - 22:18 |
Dalvik | 2,685 | 4.28 ГБ | 31 Дек 2023 - 22:01 |
Firefox version 10 and lower - various robots | 7,991+425 | 3.11 ГБ | 31 Дек 2023 - 21:56 |
empty user agent string | 420,586+202 | 7.64 ГБ | 31 Дек 2023 - 21:24 |
AhrefsBot | 1,000,512+3495 | 20.96 ГБ | 31 Дек 2023 - 21:01 |
MJ12bot | 1,407,025+13220 | 66.21 ГБ | 31 Дек 2023 - 18:59 |
coccoc | 2,736+2549 | 1.76 ГБ | 31 Дек 2023 - 18:33 |
DotBot | 77,290+18502 | 95.23 ГБ | 31 Дек 2023 - 17:54 |
Pinterestbot | 45+253 | 1.80 МБ | 31 Дек 2023 - 17:43 |
Python-urllib | 3,402+11 | 4.24 ГБ | 31 Дек 2023 - 17:39 |
Unknown robot (identified by hit on robots.txt) | 0+10286 | 2.35 МБ | 31 Дек 2023 - 17:12 |
internetarchive | 719 | 0 | 31 Дек 2023 - 15:17 |
MSIE 6 - ( Rogue Robot ) | 3,240+21 | 4.57 ГБ | 31 Дек 2023 - 14:51 |
Go-http-client | 914+196 | 45.02 МБ | 31 Дек 2023 - 14:49 |
BingPreview | 352 | 501.53 МБ | 31 Дек 2023 - 13:55 |
PetalBot | 23,439+3028 | 29.27 ГБ | 31 Дек 2023 - 13:54 |
wordpress | 3,345 | 1.52 ГБ | 31 Дек 2023 - 12:48 |
Googlebot-Video | 653 | 147.33 ГБ | 31 Дек 2023 - 12:45 |
DuckDuckBot | 138 | 14.88 МБ | 31 Дек 2023 - 12:17 |
custo | 1,209+1 | 32.05 МБ | 31 Дек 2023 - 10:37 |
Curl | 2,124+5 | 2.27 ГБ | 31 Дек 2023 - 10:24 |
SeznamBot | 2,194+882 | 117.30 МБ | 31 Дек 2023 - 08:58 |
y!j | 518+205 | 239.51 МБ | 31 Дек 2023 - 08:27 |
crawl | 1,341+1427 | 145.69 МБ | 31 Дек 2023 - 05:09 |
nutch ( catchall ) | 1,874+227 | 1.29 ГБ | 31 Дек 2023 - 05:01 |
python | 23,753+329 | 14.73 ГБ | 31 Дек 2023 - 04:34 |
favicon | 37 | 926.00 КБ | 31 Дек 2023 - 03:36 |
Screaming Frog SEO Spider | 181+163 | 240.24 МБ | 31 Дек 2023 - 01:58 |
qwantify | 2,473+1055 | 502.50 МБ | 31 Дек 2023 - 01:08 |
YandexImageResizer | 356 | 88.55 МБ | 31 Дек 2023 - 00:59 |
yeti | 973+719 | 458.93 МБ | 31 Дек 2023 - 00:50 |
LinkedInBot | 881+39 | 1.12 ГБ | 30 Дек 2023 - 23:16 |
drupal | 59 | 13.01 МБ | 30 Дек 2023 - 23:08 |
Applebot | 11,070+712 | 6.27 ГБ | 30 Дек 2023 - 23:03 |
facebookexternalhit | 5,700+238 | 27.46 ГБ | 30 Дек 2023 - 22:47 |
core | 51,876+255 | 7.03 ГБ | 30 Дек 2023 - 21:49 |
Lightspeed | 84+1 | 2.62 МБ | 30 Дек 2023 - 18:56 |
Microsoft Office Protocol Discovery | 1,595 | 0 | 30 Дек 2023 - 18:28 |
mozilla/5.0 - ( Rogue Robot ) | 517 | 353.44 МБ | 30 Дек 2023 - 17:27 |
DuckDuckGo-Favicons-Bot | 808 | 19.69 МБ | 30 Дек 2023 - 16:31 |
BW | 143+141 | 3.51 МБ | 30 Дек 2023 - 11:08 |
Velen | 754+83 | 1.02 ГБ | 30 Дек 2023 - 10:20 |
MSIE 5 - ( Rogue Robot ) | 598+15 | 234.92 МБ | 30 Дек 2023 - 09:02 |
YandexMobileBot | 22,645 | 1.93 ГБ | 30 Дек 2023 - 05:40 |
YisouSpider | 218+52 | 22.01 МБ | 29 Дек 2023 - 22:42 |
ning | 197 | 8.86 МБ | 29 Дек 2023 - 20:02 |
Barkrowler | 3,147+86 | 264.93 МБ | 29 Дек 2023 - 07:16 |
spider | 527+321 | 254.39 МБ | 29 Дек 2023 - 06:37 |
Curl/PHP | 55 | 63.85 МБ | 28 Дек 2023 - 23:30 |
htmlparser | 1 | 12.62 КБ | 28 Дек 2023 - 22:40 |
Apache-HttpClient | 22,239+292 | 27.93 ГБ | 28 Дек 2023 - 19:34 |
robot | 205+33 | 160.26 МБ | 28 Дек 2023 - 19:09 |
TelegramBot | 1,769 | 3.40 ГБ | 28 Дек 2023 - 18:42 |
seek | 21,830+38 | 3.18 ГБ | 28 Дек 2023 - 16:42 |
zoominfobot | 1,842+466 | 58.09 МБ | 28 Дек 2023 - 11:09 |
SurdotlyBot | 215+6 | 27.68 МБ | 28 Дек 2023 - 10:51 |
BLEXBot | 15,608+430 | 2.90 ГБ | 28 Дек 2023 - 10:17 |
sift | 45,792+350 | 1.15 ГБ | 28 Дек 2023 - 09:01 |
linkdexbot | 467+84 | 18.48 МБ | 27 Дек 2023 - 23:13 |
Discordbot | 98 | 170.42 МБ | 27 Дек 2023 - 21:19 |
CFNetwork | 674 | 181.42 МБ | 27 Дек 2023 - 16:36 |
twitterbot | 39+41 | 7.02 МБ | 27 Дек 2023 - 15:09 |
Wget | 289+4 | 175.58 МБ | 27 Дек 2023 - 11:39 |
MegaIndex.ru | 29,071+57 | 1.76 ГБ | 27 Дек 2023 - 02:45 |
checker | 70+48 | 14.41 МБ | 26 Дек 2023 - 19:29 |
Nautic Expo using Firefox/1.5 | 189+19 | 130.67 МБ | 26 Дек 2023 - 19:10 |
Baiduspider ( catchall ) | 5,380 | 20.36 МБ | 26 Дек 2023 - 18:04 |
nbot | 14,765+214 | 2.67 ГБ | 26 Дек 2023 - 17:22 |
A PHP script | 73 | 4.31 МБ | 26 Дек 2023 - 09:33 |
Unknown robot identified by \*bot | 32,311+189 | 16.04 ГБ | 26 Дек 2023 - 06:42 |
archive.org_bot | 2,689+273 | 860.53 МБ | 26 Дек 2023 - 03:19 |
MSIE 4 - ( Rogue Robot ) | 74+6 | 50.53 МБ | 25 Дек 2023 - 16:51 |
Mozilla ( Rogue Robot ) | 23 | 0 | 25 Дек 2023 - 10:33 |
Java ( catchall ) | 463+4 | 483.98 МБ | 25 Дек 2023 - 07:12 |
urllib | 807 | 697.75 МБ | 24 Дек 2023 - 15:22 |
scrapy | 752+6 | 154.53 МБ | 24 Дек 2023 - 11:57 |
Xenu Link Sleuth | 29 | 24.85 КБ | 24 Дек 2023 - 03:43 |
feed | 97 | 389.82 МБ | 24 Дек 2023 - 03:02 |
libwww-perl | 49 | 1.19 МБ | 23 Дек 2023 - 22:10 |
Feedfetcher-Google | 3 | 50.69 КБ | 23 Дек 2023 - 15:10 |
FirePHP | 32 | 367.10 МБ | 23 Дек 2023 - 10:11 |
link | 29,283+56 | 95.39 ГБ | 23 Дек 2023 - 07:55 |
Konqueror | 813+97 | 987.37 МБ | 22 Дек 2023 - 02:44 |
Windows 99 - ( Rogue Robot ) | 47+1 | 39.90 МБ | 22 Дек 2023 - 02:40 |
webcopy | 39 | 13.04 МБ | 21 Дек 2023 - 19:26 |
Mediapartners-Google | 18 | 122.65 КБ | 21 Дек 2023 - 15:28 |
dataprovider.com | 575+15 | 6.58 МБ | 21 Дек 2023 - 03:12 |
Google Web Preview | 118 | 37.70 МБ | 20 Дек 2023 - 20:55 |
AdsBot-Google | 23 | 343.61 КБ | 20 Дек 2023 - 19:34 |
riddler | 1,163+79 | 78.39 МБ | 20 Дек 2023 - 19:17 |
hometown | 1 | 2.34 МБ | 18 Дек 2023 - 16:59 |
raven | 1 | 2.34 МБ | 18 Дек 2023 - 16:59 |
scanner | 6 | 136.76 КБ | 16 Дек 2023 - 15:51 |
fetcher | 2 | 0 | 15 Дек 2023 - 21:16 |
Exabot | 1 | 25.48 КБ | 15 Дек 2023 - 19:00 |
DuckDuckBot-Https | 1,934+10 | 55.85 МБ | 15 Дек 2023 - 06:07 |
Seobility | 1+1 | 7.58 КБ | 13 Дек 2023 - 18:46 |
ips-agent | 26+26 | 505.78 КБ | 13 Дек 2023 - 15:14 |
Yahoo! Slurp | 22+4 | 18.27 МБ | 13 Дек 2023 - 11:03 |
heritrix | 574+26 | 57.18 МБ | 13 Дек 2023 - 10:09 |
2345Explorer | 20 | 89.27 МБ | 12 Дек 2023 - 03:36 |
msie8 - ( Rogue Robot ) | 5 | 124.31 КБ | 11 Дек 2023 - 16:52 |
CCBot | 2,576+156 | 2.35 ГБ | 11 Дек 2023 - 08:22 |
yak-linkfluence | 3+16 | 98.48 КБ | 09 Дек 2023 - 17:39 |
LinkCheck | 19 | 3.34 МБ | 09 Дек 2023 - 01:06 |
netcraft | 177 | 3.66 МБ | 08 Дек 2023 - 08:58 |
ODP link checker | 8 | 160.21 КБ | 07 Дек 2023 - 15:42 |
ia_archiver | 7 | 194.93 КБ | 06 Дек 2023 - 22:39 |
PhantomJS | 62 | 1.94 МБ | 06 Дек 2023 - 04:28 |
bloglines | 2 | 50.21 КБ | 05 Дек 2023 - 00:17 |
Yahoo Link Preview | 4 | 7.26 МБ | 03 Дек 2023 - 14:37 |
yacybot | 36+40 | 20.80 МБ | 02 Дек 2023 - 01:02 |
facebook | 16 | 3.32 МБ | 29 Ноя 2023 - 19:52 |
seokicks.de | 7,364+27 | 123.18 ГБ | 29 Ноя 2023 - 09:53 |
mindupbot | 35+3 | 598.37 КБ | 27 Ноя 2023 - 13:11 |
Yahoo! Slurp China | 1 | 25.46 КБ | 27 Ноя 2023 - 08:29 |
gigablastopensource | 8+8 | 206.60 КБ | 26 Ноя 2023 - 13:25 |
proximic | 2 | 77.96 КБ | 24 Ноя 2023 - 12:23 |
Mediatoolkitbot | 1+2 | 25.18 КБ | 22 Ноя 2023 - 12:48 |
microsoft-webdav-miniredir | 13 | 0 | 20 Ноя 2023 - 12:59 |
Slackbot-LinkExpanding | 7 | 224.01 КБ | 14 Ноя 2023 - 11:55 |
motor | 605 | 23.25 МБ | 10 Ноя 2023 - 08:08 |
XML Sitemaps Generator | 441+1 | 15.47 МБ | 09 Ноя 2023 - 15:45 |
webcollage | 1 | 137.07 КБ | 09 Ноя 2023 - 08:13 |
TurnitinBot | 1 | 25.16 КБ | 08 Ноя 2023 - 08:28 |
i-bot | 9 | 51.72 КБ | 06 Ноя 2023 - 21:26 |
MSIE 2 - ( Rogue Robot ) | 10 | 7.38 МБ | 30 Окт 2023 - 17:03 |
Validator.nu | 4 | 99.84 КБ | 30 Окт 2023 - 03:53 |
rambler | 6 | 622.04 КБ | 27 Окт 2023 - 10:23 |
Mojolicious | 5 | 226.44 КБ | 25 Окт 2023 - 09:16 |
msnbot | 2 | 49.90 КБ | 17 Окт 2023 - 15:55 |
filterdb.iss.net | 14 | 257.11 КБ | 13 Окт 2023 - 06:18 |
testbot | 381+19 | 37.21 МБ | 07 Окт 2023 - 14:00 |
MSIE 3 - ( Rogue Robot ) | 22+1 | 19.54 МБ | 06 Окт 2023 - 13:52 |
feedburner | 7 | 0 | 05 Окт 2023 - 06:21 |
netEstate NE Crawler | 3,831+75 | 493.31 МБ | 29 Сен 2023 - 18:46 |
harvest | 3 | 1.00 МБ | 11 Сен 2023 - 01:21 |
discover | 1 | 13.09 КБ | 10 Сен 2023 - 12:40 |
linkchecker | 336+7 | 1.77 ГБ | 07 Сен 2023 - 00:27 |
yie8 | 2 | 49.44 КБ | 30 Авг 2023 - 23:00 |
Adsbot | 2+1 | 33.43 КБ | 29 Авг 2023 - 05:34 |
MojeekBot | 2+2 | 87.45 КБ | 21 Авг 2023 - 21:10 |
uni-leipzig.de | 3,153+2 | 8.65 ГБ | 17 Авг 2023 - 03:02 |
httrack | 1 | 998.97 КБ | 05 Авг 2023 - 08:59 |
Links ( | 24+3 | 42.99 МБ | 04 Авг 2023 - 19:41 |
DoCoMo | 1 | 10.33 КБ | 22 Июл 2023 - 01:56 |
serendeputy | 2 | 49.42 КБ | 21 Июл 2023 - 13:27 |
microsoft url control | 1 | 24.71 КБ | 20 Июл 2023 - 03:42 |
MSIECrawler | 6 | 3.57 МБ | 09 Июл 2023 - 12:21 |
sitemap | 1+1 | 8.72 КБ | 30 Июн 2023 - 22:34 |
ELinks | 24+3 | 25.09 МБ | 29 Июн 2023 - 11:16 |
Windows 95 - ( Rogue Robot ) | 3 | 44.20 КБ | 28 Июн 2023 - 19:58 |
Mechanize | 1 | 24.71 КБ | 23 Июн 2023 - 19:07 |
jbot | 156+13 | 292.33 МБ | 17 Июн 2023 - 14:20 |
jeeves | 1 | 24.71 КБ | 16 Июн 2023 - 20:49 |
Googlebot-News | 2 | 49.42 КБ | 31 Май 2023 - 12:48 |
titan | 4 | 1.16 МБ | 31 Май 2023 - 04:11 |
Neevabot | 359+88 | 519.17 МБ | 25 Май 2023 - 18:09 |
sunrise | 1+3 | 287.54 КБ | 20 Май 2023 - 07:00 |
gulperbot | 3 | 74.41 КБ | 18 Май 2023 - 21:10 |
W3C-checklink | 1+2 | 482 Байты | 15 Май 2023 - 17:58 |
FAST-WebCrawler | 1 | 25.81 КБ | 06 Май 2023 - 18:04 |
AdIdxBot Microsoft Ad Quality control | 6 | 172.63 КБ | 23 Апр 2023 - 18:28 |
mozilla/4.0 (compatible;) - ( Rogue Robot ) | 4 | 100.72 КБ | 18 Апр 2023 - 16:36 |
MixrankBot | 4 | 56.42 КБ | 16 Апр 2023 - 08:57 |
Jigsaw | 1 | 34.55 КБ | 31 Мар 2023 - 23:33 |
validator | 1 | 162.22 КБ | 28 Мар 2023 - 19:27 |
bubing | 1+10 | 27.20 КБ | 11 Мар 2023 - 01:38 |
ELinks ( | 8 | 8.03 МБ | 09 Мар 2023 - 11:06 |
Baiduspider-image | 1 | 56.36 КБ | 06 Мар 2023 - 11:26 |
Deepnet Explorer | 5+1 | 2.80 МБ | 03 Мар 2023 - 08:44 |
trendiction | 17+2 | 934.12 КБ | 23 Фев 2023 - 06:00 |
mozilla/4.0 - ( Rogue Robot ) | 1 | 744.06 КБ | 18 Фев 2023 - 04:20 |
ubermetrics-technologies.com | 2+1 | 202.12 КБ | 17 Фев 2023 - 11:25 |
baidu | 422 | 6.31 МБ | 09 Фев 2023 - 11:56 |
ICC-Crawler | 1+3 | 5.35 КБ | 08 Фев 2023 - 16:24 |
StructScraper | 6 | 538.70 КБ | 23 Янв 2023 - 14:57 |
netnewswire | 4+1 | 1.90 МБ | 20 Янв 2023 - 11:05 |
TestCrawler | 0+1 | 241 Байты | 18 Янв 2023 - 20:42 |
ng/1. | 6 | 4.41 МБ | 16 Янв 2023 - 10:17 |
Google-Adwords-Instant | 1 | 25.62 КБ | 15 Янв 2023 - 23:13 |
voyager | 2 | 2.49 МБ | 11 Янв 2023 - 20:37 |
sucker | 5,330+2 | 64.81 ГБ | 07 Янв 2023 - 19:54 |
|