Сообщения без ответов | Активные темы Текущее время: 08 сен 2026, 15:03



Ответить на тему  [ Сообщений: 12 ]  Страница 1, 2  »
Не работает парсер 
Автор Сообщение

Зарегистрирован: 12 окт 2016, 13:19
Сообщения: 21

Здравствуйте. Попробовал ради теста загрузить 5 объявлений на сайт через парсер авито.
Скачал программу, запустил от имени администратора, до этого добавил ссылку на сайте.

В самой программе в логах (которые я вам отправлял через обратную связь) видно было что страницы парсятся.
Но при этом прогресс бар как был на 0% так и остался, на сайте статус "Ожидание", объявлений в очереди 0.

Работает ли парсер или я что-то не так делаю?


15 янв 2021, 18:21
Профиль
Администратор
Аватара пользователя

Зарегистрирован: 20 сен 2010, 21:15
Сообщения: 2966
Аватара пользователя

Вы добавили эту стартовую ссылку?
Цитата:
www.avito.ru/moskva/gotoviy_biznes/internet-magazin-ASgBAgICAUToDJ62AQ


17 янв 2021, 01:37
Профиль

Зарегистрирован: 12 окт 2016, 13:19
Сообщения: 21

Geo писал(а):
Вы добавили эту стартовую ссылку?
Цитата:
www.avito.ru/moskva/gotoviy_biznes/internet-magazin-ASgBAgICAUToDJ62AQ


Да, ее


18 янв 2021, 16:26
Профиль
Администратор
Аватара пользователя

Зарегистрирован: 20 сен 2010, 21:15
Сообщения: 2966
Аватара пользователя

У меня работает. Попробуйте зайти по этой ссылке из браузера, может быть Авито требует ввод каптчи


19 янв 2021, 00:26
Профиль

Зарегистрирован: 12 окт 2016, 13:19
Сообщения: 21

Geo писал(а):
У меня работает. Попробуйте зайти по этой ссылке из браузера, может быть Авито требует ввод каптчи

Попробовал на другом ПК - заработало, только вот что еще...

Сегодня загрузил целую пачку, в парсере 100% пишет, везде статус завершен, но объявления на сайте не появились, только одно из всех.
Почему так может быть?

Начиная с ссылки источника www.avito.ru/moskva/gotoviy_biznes/inte ... AUToDJ62AQ
заканчивая www.avito.ru/moskva/gotoviy_biznes?q=%D ... 0%B8%D1%8F


26 янв 2021, 01:10
Профиль
Администратор
Аватара пользователя

Зарегистрирован: 20 сен 2010, 21:15
Сообщения: 2966
Аватара пользователя

Добавьте в файл config.txt после Вашего email ::debug. Вот так
Код:
Для просмотра Вы должны быть в группе пользователей Elite-Board.

Повторите парсинг, до тех пор пока проблема не повторится и сообщите мне.

Сколько примерно объявлений потерялось?


27 янв 2021, 02:36
Профиль

Зарегистрирован: 12 окт 2016, 13:19
Сообщения: 21

Geo писал(а):
Добавьте в файл config.txt после Вашего email ::debug. Вот так
Код:
Для просмотра Вы должны быть в группе пользователей Elite-Board.

Повторите парсинг, до тех пор пока проблема не повторится и сообщите мне.

Сколько примерно объявлений потерялось?

297 объявлений.
Сегодня попробую.


27 янв 2021, 13:04
Профиль

Зарегистрирован: 12 окт 2016, 13:19
Сообщения: 21

Geo писал(а):
Добавьте в файл config.txt после Вашего email ::debug. Вот так
Код:
Для просмотра Вы должны быть в группе пользователей Elite-Board.

Повторите парсинг, до тех пор пока проблема не повторится и сообщите мне.


Повторил, добавил ::debug после email, на почту ничего не пришло.
15 объявлений пропарсилось и не загрузилось на сайт.

UPD:
Попробовал только что еще раз, 3 объявления для категории общепит - пицерии
По данной ссылке: https://www.avito.ru/moskva/gotoviy_biz ... 0%B8%D1%8F
Ничего не получилось, 3 объявления пропарсило, но так и не добавились на сайт.

Скрытая информация


27 янв 2021, 13:23
Профиль

Зарегистрирован: 12 окт 2016, 13:19
Сообщения: 21

Только что еще раз попробовал спарсить 10 объявлений по данной ссылке:
"www.avito.ru/moskva/gotoviy_biznes/internet-magazin-ASgBAgICAUToDJ62AQ"
ничего не загрузилось на сайт.

Вот логги:
Скрытая информация


27 янв 2021, 13:42
Профиль

Зарегистрирован: 12 окт 2016, 13:19
Сообщения: 21

Только что попробовал следующие вещи, все начало работать:

1. В брандмауэр добавил парсер (Хотя до этого работало все без брендмауера)
2. Ссылку на сайт нужно указывать вместе с протоколом, в моем случае https://названиесайта (скорее всего причина в этом)

Все заработало, объявления парсит и загружает.
Проверьте у себя, действительно влияет указание протокола или нет. До этого я указывал сайт в формате example.ru, а не https://example.ru

Если можно, верните мне потерянные объявления: 322 штуки.


27 янв 2021, 14:04
Профиль
Показать сообщения за:  Поле сортировки  
Ответить на тему   [ Сообщений: 12 ] 

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 0


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения
Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
cron