seoadm Posted August 5, 2016 Добрый день, Есть компания, которая занимается продвижением сайтов. Одна из услуг - предоставление пользователям позиций в Яндекс, Гугл по различным запросам. IPv4 адреса, анонсируемые на AS ЦОД периодически попадают в черный список Яндекс, Гугл, при котором количество запросов, которые можно сделать из одной подсети /24, значительно уменьшается. После N-го числа запросов Яндекс, Гугл выдает капчу. Оно и ппонятно: когда с адресов идут только автоматические запросы без "живого" трафика с компьютера, телефона, смартфона, то вычислить такие подсети и поместить их в черный список не составляет особых проблем. Есть предположение, что адреса можно вывести из черного списка одим из способов: 1) Создается новый ASSIGNMENT на домашенго провадейра + анонс с использованием AS домашенего провайдера. Далее эти адреса назначаются пользователям, которые делают с этих адресов живые запросы, заходят в почту и т.п. Предполагаем, что через некоторое время адерса должны быть убраны из черных списков поисковых систем; 2) Анонсирование блоков с использованием AS домашенего провайдера и роутинг их на выделенный сервер, на котором крутятся все эти адреса, с которых делаются запросы в Яндекс, Гугл 3) Если провайдер использует NAT, то огранизация socks прокси для того, чтобы с одних и тех же адресов провайдра шел как естественный трафик пользователя, так и запросы по позициям Яндекс, Гугл. У кого какие мысли и кто что может предложить, просьба писать в личку. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
iptester Posted August 5, 2016 (edited) Вы понимаете, что вы должны платить деньги, которые компенсируют домашнему провайдеру потерю пользователей + головняк для тех. поддержки из-за попадания его адресов в черные списки? Пользователи нынче продаються примерно по цене за год. Средняя цена инета сейчас 300 рублей, т.е. 3600 рублей за пользователя. Возьмём мелкого провайдера с 10000 юзеров. Из-за Вас он потеряет 5% пользователей. Т.е. 10000*5%*3600=1800000 рублей будет себестоимость услуг для вас. Еще надо что-то заработать. Вы готовы платить такие деньги? Edited August 5, 2016 by iptester Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
seoadm Posted August 5, 2016 Вы понимаете, что вы должны платить деньги, которые компенсируют домашнему провайдеру потерю пользователей + головняк для тех. поддержки из-за попадания его адресов в черные списки? Пользователи нынче продаються примерно по цене за год. Средняя цена инета сейчас 300 рублей, т.е. 3600 рублей за пользователя. Возьмём мелкого провайдера с 10000 юзеров. Из-за Вас он потеряет 5% пользователей. Т.е. 10000*5%*3600=1800000 рублей будет себестоимость услуг для вас. Еще надо что-то заработать. Вы готовы платить такие деньги? 1-ое: я сам использую в работе IP адреса из так называемых "черных списков" в работе через socks прокси. У меня капч нету, так как я не делаю автоматизированные запросы каждые 10-20 секунд; 2-ое: всем LIR-ам (и свой в том числе), чьи IP адреса используются, не было ни одного запроса от Яндекс, Гугл за более чем 4 года; Итак, "компенсируют домашнему провайдеру потерю пользователей" - ошибочное утверждение; "головняк для тех. поддержки" - ошибочное утверждение; P.S. Ни один из адресов в спаме и чем-то подобным за все это время не засветился, так как деятельность направлена исключительно на поисковые системы. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
satboy Posted August 5, 2016 Хотите получать данные - договаривайтесь с поисковиками и платите.. Они с удовольствием продадут вам шлюз для запросов... Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
seoadm Posted August 5, 2016 Хотите получать данные - договаривайтесь с поисковиками и платите.. Они с удовольствием продадут вам шлюз для запросов... Были бы контакты, уже бы договорились. Если есть, пишите в личку. У Яндекс есть сервис Яндекс.XML. Вот только данные там отличаются от того, что получает обычный пользователь. Вариант со шлюзом рассматривается, необходимо только, чтобы результат выполнения поискового запроса совпадал с результатами запросов большинства пользователей, и чтобы СБ не докопалась, так как потеря доступа к шлюзу даже на день критична. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...