a6j
Активный участник-
Публикации
23 -
Зарегистрирован
-
Посещение
Все публикации пользователя a6j
-
Работа с реестром запрещенных сайтов
тему ответил в alibek пользователя a6j в Программное обеспечение, биллинг и *unix системы
ОС ubuntu server 16.04, bash 4.3 Вывод: Содержимое list-whois.txt Пока тыкал скрипт, пару раз без ошибок отработал. -
Работа с реестром запрещенных сайтов
тему ответил в alibek пользователя a6j в Программное обеспечение, биллинг и *unix системы
bash конечно же. Весь вывод показать? Остальные скрипты без ошибок. -
Работа с реестром запрещенных сайтов
тему ответил в alibek пользователя a6j в Программное обеспечение, биллинг и *unix системы
dump_stat.sh выдаёт ошибку: ./dump_stat.sh: строка 124: let: ASCNT[63949]+=: синтаксическая ошибка: ожидается операнд (неверный маркер «+=») ./dump_stat.sh: строка 125: let: ASIPS[63949]+=: синтаксическая ошибка: ожидается операнд (неверный маркер «+=») Не критично конечно. -
Самовывоз из г. Санкт-Петербурга либо отправка почтой в р. Карелия.
-
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
С 8-го числа в дампе ошибка: "ttp://bandafilm.ru/policecky-s-rublevki-2016/74-policeyskiy-s" У всех нормально парсится с такой опечаткой? -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Засчитано в ручном режиме. Результат работы скриптов выводится на заббикс, если какой косяк я произвожу выгрузку в ручном режиме. Так было раньше, но за последние полгода все работает в автономном режиме и я только мониторю (поглядываю) раз в сутки. У меня тоже если дата совпадает, то запрос не отправляется. Надо переделать чтобы выгрузка происходила в любом случае. Иначе потом не доказать. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Спасибо но это и я могу. Нужен полноценный скрипт который парсит файл дампа на urls, domains и ips. То что я пытался написать работает, но не корректно. В результате обрабатывает только первые 80 записей или очень много повторений одних и тех же значений. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Аналогично, последняя автоматическая выгрузка была 9 марта в 23 ч 42 мин. Далее выгрузка не происходит из-за отсутствия изменений. В ручном режиме проверил, последнее изменение дампа 09.03.2016 21:03. "Получение выгрузки засчитано оператору связи" поэтому не стоит переживать. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Тут обсуждение... -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Ололошиньки ололо! При проверке засчитывается если часть контента блокируется вышестоящим провайдером? -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Вопрос с парсером актуален.У кого есть рабочий скрипт парсера на питоне с перекодировкой кириллических доменов? Простейший пример выдает в результате список только по 80 записей ip, domain, url from xml.dom import minidom xmldoc = minidom.parse('dump.xml') itemlist = xmldoc.getElementsByTagName('content') fileDomains = open('domain', "w") fileUrls = open('url', "w") fileIps = open('ip', "w") for c in itemlist : fileDomains.write(c.getElementsByTagName('domain')[0].childNodes[0].data.encode('utf-8') + '\n') fileUrls.write(c.getElementsByTagName('url')[0].childNodes[0].data.encode('utf-8') + '\n') fileIps.write(c.getElementsByTagName('ip')[0].childNodes[0].data.encode('utf-8') + '\n') -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Сейчас парсер реализован на перле, функция обработки урл: sub saveURL { my $url = shift; if ($url =~ /^[a-z]+:\/\//) { my $uri = URI->new($url); my $host = $uri->host; return 0 if exists $exclude_domains{$host}; my $path = $uri->path_query; if ($path eq '' || $path eq '/') { $domains{$host} = 1; } else { $urls{$host . $path} = 1; } saveDomainIP($host) if $zapretcfg::resolve_domains; } else { warn "ERROR: saveURL: wrong url syntax: $url\n"; } return 1; } где: zapretcfg::resolve_domains = 1 (1 включение резолва, 0 отключение) exclude_domains - файл со списком доменов которые не фильтруются Как при помощи модуля URI::UTF8::Punycode реализовать поддержку кириллических доменов? -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
С появлением кириллических доменов, отключил в своем скрипте резолв, т.к. в ответ получаю: nslookup футболобзор.рф ** server can't find \209\132\209\131\209\130\208\177\208\190\208\187\208\190\208\177\208\183\208\190\209\128.\209\128\209\132: NXDOMAIN если перевести в punycode, то все работает: nslookup xn--90aasoobcqkjk.xn--p1ai Address: 91.201.202.148 На питоне кто-нибудь реализовывал конвертирование? -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
так вроде по реестру: "По Вашему запросу ничего не найдено" -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Аналогичная ситуация, но еще замечаний по таким ресурсам не было, пока что. Бред полнейший, чем дальше тем хуже. Еще немного и проще будет пересмотреть политику фильтрации, запретить все что не разрешено. Действительно придется еще и со своим днс мутить. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Если не сложно можно ссылки на неблокируемые ресурсы? -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Так первое и второе сообщения на этой странице! И кормить надо не xml, а xls (второе сообщение). Откуда недоверие? Проверяли вручную? Я проверял выборочно много раз, все работает. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Дело в том что в действительности как раз < 1% не блокируется моим фильтром. Оставшийся процент блокирует вышестоящий провайдер. Кстати у которого результат далеко хуже, причем значительно. Но то что не блочится у меня у него блокируется. Совпадение?... -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Сделал проверку версией 1.9 результат: Всего доступно IP: 0 (0,00%). Реестровых записей: 0 (0,00%) Не докопаться прям. Обязательное условие при проверке нужно брать последний дамп той выгрузки который был применен в фильтре. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
По результату проверки редирктило на заглушку 16414 страниц. Плюс частично блокирует вышестоящий провайдер 1152. Итого 17566 блокировано из 20730, 108 не блокировано. Остальные домены не существуют или иные причины. Такой результат 0.5% устроит проверяющего? А то что-то уже полгода писулек не было. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Спасибо. С этим конвертером все заработало. -
Опубликована Процедура блокировки некошерной инфо
тему ответил в Галушко Дмитрий пользователя a6j в У нага
Существует ли на данный момент рабочий инструмент проверки блокировки ресурсов? То что было ранее выложено: МОНИТОРИНГ_САЙТОВ_v3.exe КОНВЕРТЕР_ВЫГРУЗКИ_-_URL_v3.exe не работает, точнее не работает конвертер. На выходе пустой файл Адреса_v3.txt получается. -
[ОПРОС] Выбор видеорегистратора в 3-х категориях
тему ответил в Hank пользователя a6j в Видеонаблюдение и системы безопасности
Налетели "опытные специалисты", смотрю для Вас главный критерий при выборе регистратора количество штырьков на задней панели и буковки типа HD. Ежу понятно что бюджетным будет за 7 т. р. на 4 камеры. Если сказать нечего, то и не флудили бы, способность болтать не признак интеллекта. Вроде вопрос относительно понятен. Интересно дальше Вас послушать, как разбираетесь по теме. -
Продам б/у базовый блок PBI DMM-1300MF с одним блоком питания, 5 приемников PBI DMM-1300P-6IP (два из них с тюнером DVB-S, три DVB-S2). Все оборудование в исправном состоянии. За весь комплект 35000 рублей, возможен торг. Безналичный расчет. Доставка за ваш счет. р. Карелия Обращаться к Максиму тел. 8(921)456-92-64 e-mail maximka@netonline.ru, office@netonline.ru
-
Продам б/у базовый блок PBI DMM-1300MF с одним блоком питания, 5 приемников PBI DMM-1300P-6IP (два из них с тюнером DVB-S, три DVB-S2). Все оборудование в исправном состоянии. За весь комплект 35000 рублей, возможен торг. Безналичный расчет. Доставка за ваш счет. р. Карелия Обращаться к Максиму тел. 8(921)456-92-64 e-mail maximka@netonline.ru, office@netonline.ru