Все эти блэк листы - ерунда и никак не спасут от ручной проверки, которая точно будет если кто-то кинет жалобу в РКН. Самая нормальная защита, на мой взгляд, это использование нескольких доменов. Одни домен, который всегда будет в поисковых системах(набери в яндексе "дарквебс", для примера), один основной на котором будет сайт. Нужно сделать так что бы твоя система определяла кто заходит на домен, который в поисковиках, поисковой бот или обычный пользователь, если бот - пропускать, если пользователь - редиректить на основной домен сайта. На основной домен нужно запретить доступ поисковым ботам. Основной домен твоего проекта неизбежно будут банить со временем, но такая система позволит тебе сохранить поисковые позиции и не терять поисковой трафик при смене основного домена. Так же тут все еще зависит от тематики твоего сайта, возможна такая схема не подойдет.
Схема не прокатит поскольку траф черпается не из ПОИСКОВЫХ запросов а из ТГ, соотв отслежка ботов в этом что-то есть, но неужели за столько лет никто не собрал список ботов для лока? Хотя наверно это невозможно из-за постоянно появляющихся новых ботов под новым ip, было бы интересно если бы кто-то реализовал базу с постоянно обновляющимся списком новых ботов
+ в данный момент я вижу что жалоба идет не от юзеров, а будто автоматика, так как тут речь не о авторских правах, не правообладатель кидает жалобу
Все равно создай 2 домена, один основной, а один для редиректа на основной домен. В тг размещай ссылку домен для редиректа, это позволит тебе не потерять трафик с уже размещённых постов в тг, в случае блокировки основного домена. Потому что забанять основной домен, ты его поменяешь и редирект на него поставишь.
Можно попробовать поставить капчу или крутилку("проверка браузера подождите 5 секунд") от cloudflare, но все это ненадолго, как правило
То есть по факту если ркн и припрет, то редирект будет спасать будущих юзеров? Что-то подобное мы пытались реализовать, надо видимо попробовать еще раз, по факту то звучит логично, но вот что будет с теми кто ранее переходил по этому редиректу? их же постоянно будет вести на склейку старого домена, т.к. их браузер запомнил переход под редирект именно того домена на который они ранее переходили с этого редиректа
А смысл:? Клауд хреначит не РКн ботов, а тех кто пишет фигачит чрезмерные запросы в секунду/минуту
Да, именно так. Например, домен 1.com - основной. 2.com - редирект на 1.com. В случае смена 1.com, нужно будет поправить редирект на новый домен для 2.com. Что бы браузер не запоминал редирект нужно ставить код редиректа 302
нет, блокировка по запросы/минуту это рейт лимит, а нам нужно что бы cloudflare отсеивал ботов, для этого можно поставить капчу при первом посещении сайта или поставить режим "я под атакой"(точно не помню как он называется), но как правило, это не сильно помогает, лишь чуть чуть продляет жизнь основному домену.
вот про 302 я не подумал, если он решит трабл с запоминанием домена, тогда ты подал мне отличную идею, попробуем так, спасибо за новодку :)