- - - - - - - - - - - - - - - - - - - - - - - - - - - -
Name: Ivan Sokolov
Subject: Не работает Disallow и неправильно определяет язык сервера

Пробовал предыдущий снапшот, сейчас поставил dpsearch-4.51-08122008-mysql
Тоже-самое.
В конфиге прописаны Disallow на любые спецсимволы в урл, типа &?;$=, но 
индексирует.

Вот к примеру сайты, которые неправильно индекирует, определяет язык как PL или 
BG , но не как не RU.

http://vrtp.ru/index.php
http://www.lenta.ru/
http://verlihub.aliki.ru/

Хотя последний сайт в диру forum определяет нормально 
http://verlihub.aliki.ru/forum/   --это он индексирует.

Использую для индексирования не indexer.conf ,а internet.conf, запускаю к 
примеру так:
./indexer -ami -u http://vrtp.ru/index.php /usr/local/dpsearch/etc/internet.conf
./indexer -a -u http://vrtp.ru/index.php /usr/local/dpsearch/etc/internet.conf

вот, что выдает по запросу vrtp 

----------------

1. http://vrtp.ru/ [0,001% Популярность: 0,25000] 
3597 ő...  
http://vrtp.ru/ - 13732 bytes [text/html] - 06 дек 2008 21:14:40 MSK 
[Сохранённая копия] 
[Все результаты с этого сайта ]  

-----------------

а вот сохр. копия

----------------
Документ ID: 294752213  Последнее изменение: 06 дек 2008 21:14:40 MSK  Язык: pl 
 Кодировка: cp852  Размер: 13732  

3494 ő 

Спасибо :)

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

Read the full topic here:
http://www.dataparksearch.org/cgi-bin/simpleforum.cgi?fid=05;post=

Reply via email to