Welcome! Log In Create A New Profile

Advanced

Re: Помогите разобраться откуда берутся левые get-запросы

November 24, 2011 01:55PM
>>>Как вы установили, что их нигде нет?
Ну а где они могут быть? Если бы это совсем левые страницы, я бы еще может и подумал, что если не внутри сайта есть ссылки на них, то конкуренты постарались, а то же нет - на нескольких сайтах появляются get-запросы конкретных страниц другого сайта.
То есть например имеем на сервере 3 сайта: site1.ru, site2.ru, site3.ru
На первых двух идут get-запросы урл-ов 3-го сайта.

То есть например на сайте site3.ru имеются страницы:
site3.ru/1-stranica.html
site3.ru/2-stranica.html
...
site3.ru/n-stranica.html
вот именно эти страницы регулярно запрашиваются на сайтах site2.ru и site1.ru.
То есть в логах этих хостов нахожу запросы этих страницы, например в логе site1.ru.access.log каждый день с завидной регулярностью и частотностью появляются записи типа:
... "GET /1-stranica.html..."
...
... "GET /5-stranica.html..."
...
... "GET /n-stranica.html..."
...
Ну то есть все как обычно, только вот страницы не этого сайта. Масла в огонь добавляет тот факт, что движок (это DLE) генерит такие страницы с кодом 200 (естественно не для всех страниц, иногда получается 404), просто они получаются пустыми (только боковые менюшки), соответственно они благополучно индексируются.
Я четко знаю структуру урл-ов всех размещенных сайтов на сервере, так как все мои собственные. И я четко вижу эту картину, которую могу только объяснить ошибкой в конфигах.

Речь не идет о двух-трех страницах, речь идет о целой пачке страниц, о регулярном процессе (это происходит уже более двух месяцев каждый день), о всех ботах, начиная от GoogleBot, Yandexbot и заканчивая bing.
Subject Author Posted

Помогите разобраться откуда берутся левые get-запросы

valet November 23, 2011 11:58PM

Re: Помогите разобраться откуда берутся левые get-запросы

mva November 24, 2011 01:34AM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 24, 2011 01:54AM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 24, 2011 11:38AM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 24, 2011 01:55PM

Re: Помогите разобраться откуда берутся левые get-запросы

Eduard Kutuev November 24, 2011 04:50AM

Re: Помогите разобраться откуда берутся левые get-запросы

Валентин Бартенев November 24, 2011 01:00PM

Re: Помогите разобраться откуда берутся левые get-запросы

Gena Makhomed November 24, 2011 01:48PM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 24, 2011 03:56PM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 24, 2011 07:26PM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 25, 2011 03:53PM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 26, 2011 09:34PM

Re: Помогите разобраться откуда берутся левые get-запросы

valet November 27, 2011 08:08PM

Re[2]: get-

Andrey Repin November 24, 2011 06:36PM

Re: Помогите разобраться откуда берутся левые get-запросы

Богун Дмитрий November 24, 2011 08:06PM

Re: Помогите разобраться откуда берутся левые get-запросы

Gena Makhomed November 25, 2011 05:16AM

Re[2]: get-

Andrey Repin November 25, 2011 06:06PM

Re[2]: get-

Andrey Repin November 27, 2011 09:06AM

Re[2]: get-

Andrey Repin November 28, 2011 12:22PM

Re: Помогите разобраться откуда берутся левые get-запросы

Богун Дмитрий November 28, 2011 03:04PM

Re: Помогите разобраться откуда берутся левые get-запросы

Alex Smorodin November 24, 2011 02:14PM



Sorry, only registered users may post in this forum.

Click here to login

Online Users

Guests: 135
Record Number of Users: 8 on April 13, 2023
Record Number of Guests: 421 on December 02, 2018
Powered by nginx      Powered by FreeBSD      PHP Powered      Powered by MariaDB      ipv6 ready