Регистрация...

Eserv Forum / E4 / Proxy / Работа рубрикатора. Сброс кеша рубрикатора.

wikipost // (v1)
Продукты и услуги Скачать Документация Купить Поддержка Форумы Партнёрам Статьи О компании
Проблемка, включил использовать рубрикатор, но многие сайты не ловятся, хотя в "search.dmoz.org" они есть.
Например, не срабатывает рубрикатор для vkontakte.ru но срабатывает для www.vkontakte.ru. Рубрика "социальные сети". Есть подозрение, что на стадии испытаний (пока работаем через каскад прокси) эти сайты попали в рубрику "no". Т.к. если заблокировать "no", то все блокируется.
Подскажите, как сбросить кеш рубрикатора? (лучше бы только рубрику "no")
Как попадает сайт в эту рубрику, нет ли случайно ошибочных попаданий в нее, в связи со сбоями сети, например?
Какой алгоритм работы кеша рубрикатора, сколько стоит тайм аут ответа серверов рубрикаторов? (канал может быть загружен, ответы могут запаздывать)
 
Комментарии к этой версии (06.12.2010 16:56) [~krym] 47e5f118
АвторДатаТекстtags
ac06.12.2010 19:06
ред: 06.12.2010 19:07
При сетевых ошибках, включая таймауты, рубрика считается не "no", а (пусто) и не кэшируется. Срок кэширования — неделя. Вся работа с рубрикатором идёт в рамках встроенного DNS-сервера, даже если он отключен от 53го порта, и в его базе и кэшируется. Хорошо, сделаю утилиту для тестирования/сброса. Заодно разберусь, как по существующим в рубрикаторе сайтам могло получиться "no". При работе через каскад рубрикатор тоже был включен?
wikipost
krym06.12.2010 19:50
Да, каскад включен всегда. На прямую еще не работали ни разу. Каскад через Eserv/2 с черным списком URL, выдавал (пока не отключил специально для перехода на рубрикатор) на "*vkontakte.ru*" — "Disabled". В т.ч. на URL: search.dmoz.org...vkontakte.ru
wikipost
krym16.12.2010 14:13
Не получилось еще посмотреть работу рубрикатора?
Утилитка тестирования/сброса?
wikipost
ac17.12.2010 16:41
Посмотрел в тот же день. Ошибку, приводящую к "no" для известных сайтов, не нашел пока, все стабильно работает. Но не бросаю этот вопрос, потестирую плотнее.

Страничка администратора для тестирования и сброса (в разделе "Рубрикатор") поедет в ближайшем обновлении — ПН-ВТ.
wikipost
ac18.12.2010 05:11
Разобрался с этой проблемой. Сетевые ошибки при работе с рубрикаторами обрабатываются верно, включая таймауты (как я и написал 6 декабря выше). А вот таймаут при работе с локальным кэшем рубрикатора (который реализован на внутреннем DNS-сервере и работает асинхронно) не считался ошибкой, в результате обрабатывался как "no". А таймаут этот локальный мог возникать по причине таймаута внешнего — недоступности рубрикатора при отсутствии связи с интернетом. В общем, теперь должно работать — можно уже сейчас потестировать, чтобы убедиться, что в обновление поедет правильная версия:
http://www.eserv.ru/download/acWEB4_2010-12-18_1.rar
wikipost
krym20.12.2010 13:11
Спасибо! Установил, но пока сказать не могу, т.к. те сайты уже определяются правильно, т.к. похоже переобновились по сроку давности (7 дней).
wikipost
Работает на Eserv/5.05555 (05.06.2016)