>forums.wood.ru
хороший сайт
Он на любой запрос отдает пустую страницу.
Может мой диапазон айпи там забанен, я не знаю.
>кококо
А теперь иди на хуй, школьник
нахуй пойдешь ты. хули ты мне кидаешь сурс одной страницы то? думаешь без тебя - дятла не додумались, что так можно? если пруфанешь тем, что ресурс тебя не заблочил, когда ты +10500 страниц форума забирал, тогда возьму свои слова обратно
Какую проблему я увидел изначально в треде:
>палит парсинг и блокирует доступ к сайту, напрочь
>Он на любой запрос отдает пустую страницу.
Эту проблему я решил.
То что тебя после 100500 запросов с одного айпишника 99% сайтов забанит и так очевидно. И решение этой проблемы очевиднейшее.
Так бы и писал в оп посте:
"Сап двач, я даун. Как спарсить сайт в 100500 страниц и не словить бан?".
А знаешь кто из нас сходил на хуй? Ты! Потому что хуй ты теперь выпросишь у меня код делающий запросы без получения бана. Парсь дальше свою пустую страницу и делай бочку.
Где написано было, что парсил с одного айпишника, довен? Прочёл жопой оп пост и жидко обосрался. По существу есть что сказать, или так и будешь, как баран, отрицать очевидное?
Лол, так что ты хуем своим трясешь то? Мы ведь тут не письками меряемся как ты школодаун. То что единоразовый доступ у тебя есть, так это давно всем известно. Рабочего решения у тебя нет, хули ты завелся то, если пруфануть не можешь?
Тогда значит сайт грузит скрипт, который кидает ответ серверу. Видно, если ответ не придет, то хуй страницу вытянешь.
там база мыл и имен людей занимающихся лесом. Как ни странно бы это не звучало, но закономерность в этой мысли прослеживается: на этой площадке сидят люди из 90-х, которые сколотили большой капитал, контактов их нигде больше нет, собственно никак кроме этой площадки с ними не связаться. Поэтому администрация форума тщательно скрывает данные и меня интересует во первых как и во вторых как ее все же можно обойти?
забыл добавить: после прочтения может показаться, что я гонюсь за диким бабло и поэтому прошу Анона сделать работу за меня. Нет. в перспективе имея такую базу и клиентов можно было бы конечно продавать, но меня в первую очередь интересует механизм блокировки. До этого имея дело с множеством различных ресурсов я никогда не сталкивался с таким агрессивным баном, прокси, смена ЮА как правило решали, но тут абсолютно ничто не помогает. Как то анон запилил годный скрипт на js, но после тестирования он тоже провалился либо они пропалили и все исправили. Поэтому если аноны которые посчитают меня далбаебом и ебанутым фанатиком - прошу Вас не беспокоить, это мои личные проблемы, а те кому из спортивного интереса есть дело до такого энтузиазма и нужны детали и подробности - прошу в тред, господа!
Скриптов там нет почти. При беглом осмотре я заметил скрипт только на странице темы и то он там, вроде, ничего не отправляет
Двачую. Может стоит глянуть в сторону движка форума? vBulletin вроде, может слышал кто?
Кто-то кроме >>44692 смог написать парсер?
У меня как у >>44148 и >>44152
Пробовал крутить requests, libcurl, selenium. Один хуй пустая страница
Бля вот пруфани, что сможешь сделать парсер. Ты же видишь, что все пишут, как сложно получить доступ, по твоему все дауны что ли?
>по твоему все дауны что ли?
У меня сайт не открывается. Он умер? Хотел попробовать. Что именно спарсить там надо?
Так ты конструктивно можешь предложить как его спарсить или подкинуть идеи?
селениумом точно можно спарить любой сайт, прост в дефолтном режиме он палиться. Какой браузер для него юзал?
Не в те дебри ты полез, сынок, ой не в те.
Я вам выше уже кидал скрин своего успеха, но меня на хуй послали.
Ну так как у вас успехи?
Увидел на фрилансе заказ по парсингу оного сайта и вспомнил про вас
Ан нет, это не мой скрин, походу я вам так и не скинул свой
Вот так я обосрался