seoadm Posted August 5, 2016 · Report post Добрый день, Есть компания, которая занимается продвижением сайтов. Одна из услуг - предоставление пользователям позиций в Яндекс, Гугл по различным запросам. IPv4 адреса, анонсируемые на AS ЦОД периодически попадают в черный список Яндекс, Гугл, при котором количество запросов, которые можно сделать из одной подсети /24, значительно уменьшается. После N-го числа запросов Яндекс, Гугл выдает капчу. Оно и ппонятно: когда с адресов идут только автоматические запросы без "живого" трафика с компьютера, телефона, смартфона, то вычислить такие подсети и поместить их в черный список не составляет особых проблем. Есть предположение, что адреса можно вывести из черного списка одим из способов: 1) Создается новый ASSIGNMENT на домашенго провадейра + анонс с использованием AS домашенего провайдера. Далее эти адреса назначаются пользователям, которые делают с этих адресов живые запросы, заходят в почту и т.п. Предполагаем, что через некоторое время адерса должны быть убраны из черных списков поисковых систем; 2) Анонсирование блоков с использованием AS домашенего провайдера и роутинг их на выделенный сервер, на котором крутятся все эти адреса, с которых делаются запросы в Яндекс, Гугл 3) Если провайдер использует NAT, то огранизация socks прокси для того, чтобы с одних и тех же адресов провайдра шел как естественный трафик пользователя, так и запросы по позициям Яндекс, Гугл. У кого какие мысли и кто что может предложить, просьба писать в личку. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
iptester Posted August 5, 2016 (edited) · Report post Вы понимаете, что вы должны платить деньги, которые компенсируют домашнему провайдеру потерю пользователей + головняк для тех. поддержки из-за попадания его адресов в черные списки? Пользователи нынче продаються примерно по цене за год. Средняя цена инета сейчас 300 рублей, т.е. 3600 рублей за пользователя. Возьмём мелкого провайдера с 10000 юзеров. Из-за Вас он потеряет 5% пользователей. Т.е. 10000*5%*3600=1800000 рублей будет себестоимость услуг для вас. Еще надо что-то заработать. Вы готовы платить такие деньги? Edited August 5, 2016 by iptester Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
seoadm Posted August 5, 2016 · Report post Вы понимаете, что вы должны платить деньги, которые компенсируют домашнему провайдеру потерю пользователей + головняк для тех. поддержки из-за попадания его адресов в черные списки? Пользователи нынче продаються примерно по цене за год. Средняя цена инета сейчас 300 рублей, т.е. 3600 рублей за пользователя. Возьмём мелкого провайдера с 10000 юзеров. Из-за Вас он потеряет 5% пользователей. Т.е. 10000*5%*3600=1800000 рублей будет себестоимость услуг для вас. Еще надо что-то заработать. Вы готовы платить такие деньги? 1-ое: я сам использую в работе IP адреса из так называемых "черных списков" в работе через socks прокси. У меня капч нету, так как я не делаю автоматизированные запросы каждые 10-20 секунд; 2-ое: всем LIR-ам (и свой в том числе), чьи IP адреса используются, не было ни одного запроса от Яндекс, Гугл за более чем 4 года; Итак, "компенсируют домашнему провайдеру потерю пользователей" - ошибочное утверждение; "головняк для тех. поддержки" - ошибочное утверждение; P.S. Ни один из адресов в спаме и чем-то подобным за все это время не засветился, так как деятельность направлена исключительно на поисковые системы. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
satboy Posted August 5, 2016 · Report post Хотите получать данные - договаривайтесь с поисковиками и платите.. Они с удовольствием продадут вам шлюз для запросов... Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...
seoadm Posted August 5, 2016 · Report post Хотите получать данные - договаривайтесь с поисковиками и платите.. Они с удовольствием продадут вам шлюз для запросов... Были бы контакты, уже бы договорились. Если есть, пишите в личку. У Яндекс есть сервис Яндекс.XML. Вот только данные там отличаются от того, что получает обычный пользователь. Вариант со шлюзом рассматривается, необходимо только, чтобы результат выполнения поискового запроса совпадал с результатами запросов большинства пользователей, и чтобы СБ не докопалась, так как потеря доступа к шлюзу даже на день критична. Вставить ник Quote Ответить с цитированием Share this post Link to post Share on other sites More sharing options...