Я вижу большой трафик на свой сайт от пользовательского агента Issbot. Это, конечно, похоже на бота, но не указано в www. агенты пользователя. org, и я не смог найти ничего полезного в Semalt. Кто-нибудь знает, что или кто это?
Немного исследовал. По-видимому, бот принадлежит этим людям: http: // www. алоэ-система. com / products (Whois на их ip)
Не знаю, что он делает, за исключением того, что он игнорирует ваш робот. txt-файл. Если бы я должен был догадаться, это как-то связано с тем, что законный материал перехвата.