Страница 1 из 1

Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 15:34
De3mond
Комрады, приветствую!
Вводные. Специальная программам загрузки прайсов конкурентов. Как точно она работает сказать не могу, если коротко, бродит по каталогу на сайте конкурента и качает цены в ЕХЕЛь. С двумя сайтами конкурентов беда. Тут же бан, как только запускается программа — доступа к каталогу нет. Пробовал прогу от Hideme.ru. IP меняет, все хорошо, по каталогу сайта передвигаюсь. Как только запускается программа, прилетает бан. Сайт становится недоступен.
Какие есть пути решения, подскажите)
Сам мало разбираюсь в сетях, IP, VPN и т.п.

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 15:47
chaplin
видимо она(програмка) со слишком большой скоростью начинает отправлять запросы на тот сервак. и , как вариант, срабатывает защита от ДДоС атак.
вариант решения: снизить частоту запросов.

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 16:00
AndreS
De3mond,
анонимные прокси тебе в помощь
и полюбому снижай частоту запросов

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 16:07
De3mond
AndreS, пробовал, банятся. менять прокси в процессе загрузки неполучается
chaplin, буду пробовать

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 16:09
Bang
De3mond, к разработчикам в техподдержку обратись с претензией. :z)

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 16:14
De3mond
Bang, прога самописная кем то из компании :D

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 16:24
AndreS
De3mond,
http://www.pricemarkt.ru/?menu=10016

не реклама
за тебя все сделали ;)
а вообще подскажи своему кулибину, что все уже давно перешли на xml формат прайсов, пусть поищет у конкурентов что-то типа
www. …. .ru/yandex.xml
его и парсить удобней, чем 1000 страниц

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 16:31
De3mond
AndreS, не все так просто)
Слишком большая сеть и на интернетчиков не ориентируемся… Все, за что там просят денег делают 2 самописных проги по всей стране. Одна качает, другая сопоставляет два прайса. По сотням конкурентов. Проблема возникла только с двумя.

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 25 окт 2012, 16:38
AndreS
De3mond,
ну тогда или уменьшай количество запросов с минуту или ищи xml и обрабатывай его.

СообщениеДобавлено: 25 окт 2012, 20:39
chaplin
Посади прогу на диалап )))

Re: Вопрос к сис. админам и подобной нечести)

СообщениеДобавлено: 27 окт 2012, 16:54
ST
De3mond писал(а):Проблема возникла только с двумя.

А если НЕ ИСКАТЬ по сайту, а забирать по прямой ссылке?
Хотя, это если есть именно прайс…