Elite-Board tech support
https://forum.illusionweb.ru/

Не работает парсер
https://forum.illusionweb.ru/viewtopic.php?f=38&t=4342		 Страница 1 из 2
Автор:  Алексей [ 15 янв 2021, 18:21 ]
Заголовок сообщения:  Не работает парсер
Здравствуйте. Попробовал ради теста загрузить 5 объявлений на сайт через парсер авито.
Скачал программу, запустил от имени администратора, до этого добавил ссылку на сайте.

В самой программе в логах (которые я вам отправлял через обратную связь) видно было что страницы парсятся.
Но при этом прогресс бар как был на 0% так и остался, на сайте статус "Ожидание", объявлений в очереди 0.

Работает ли парсер или я что-то не так делаю?
Автор:  Geo [ 17 янв 2021, 01:37 ]
Заголовок сообщения:  Re: Не работает парсер
Вы добавили эту стартовую ссылку?
Цитата:
www.avito.ru/moskva/gotoviy_biznes/internet-magazin-ASgBAgICAUToDJ62AQ
Автор:  Алексей [ 18 янв 2021, 16:26 ]
Заголовок сообщения:  Re: Не работает парсер
Geo писал(а):
Вы добавили эту стартовую ссылку?
Цитата:
www.avito.ru/moskva/gotoviy_biznes/internet-magazin-ASgBAgICAUToDJ62AQ


Да, ее
Автор:  Geo [ 19 янв 2021, 00:26 ]
Заголовок сообщения:  Re: Не работает парсер
У меня работает. Попробуйте зайти по этой ссылке из браузера, может быть Авито требует ввод каптчи
Автор:  Алексей [ 26 янв 2021, 01:10 ]
Заголовок сообщения:  Re: Не работает парсер
Geo писал(а):
У меня работает. Попробуйте зайти по этой ссылке из браузера, может быть Авито требует ввод каптчи

Попробовал на другом ПК - заработало, только вот что еще...

Сегодня загрузил целую пачку, в парсере 100% пишет, везде статус завершен, но объявления на сайте не появились, только одно из всех.
Почему так может быть?

Начиная с ссылки источника www.avito.ru/moskva/gotoviy_biznes/inte ... AUToDJ62AQ
заканчивая www.avito.ru/moskva/gotoviy_biznes?q=%D ... 0%B8%D1%8F
Автор:  Geo [ 27 янв 2021, 02:36 ]
Заголовок сообщения:  Re: Не работает парсер
Добавьте в файл config.txt после Вашего email ::debug. Вот так
Код:
Для просмотра Вы должны быть в группе пользователей Elite-Board.

Повторите парсинг, до тех пор пока проблема не повторится и сообщите мне.

Сколько примерно объявлений потерялось?
Автор:  Алексей [ 27 янв 2021, 13:04 ]
Заголовок сообщения:  Re: Не работает парсер
Geo писал(а):
Добавьте в файл config.txt после Вашего email ::debug. Вот так
Код:
Для просмотра Вы должны быть в группе пользователей Elite-Board.

Повторите парсинг, до тех пор пока проблема не повторится и сообщите мне.

Сколько примерно объявлений потерялось?

297 объявлений.
Сегодня попробую.
Автор:  Алексей [ 27 янв 2021, 13:23 ]
Заголовок сообщения:  Re: Не работает парсер
Geo писал(а):
Добавьте в файл config.txt после Вашего email ::debug. Вот так
Код:
Для просмотра Вы должны быть в группе пользователей Elite-Board.

Повторите парсинг, до тех пор пока проблема не повторится и сообщите мне.


Повторил, добавил ::debug после email, на почту ничего не пришло.
15 объявлений пропарсилось и не загрузилось на сайт.

UPD:
Попробовал только что еще раз, 3 объявления для категории общепит - пицерии
По данной ссылке: https://www.avito.ru/moskva/gotoviy_biz ... 0%B8%D1%8F
Ничего не получилось, 3 объявления пропарсило, но так и не добавились на сайт.

Скрытая информация
Автор:  Алексей [ 27 янв 2021, 13:42 ]
Заголовок сообщения:  Re: Не работает парсер
Только что еще раз попробовал спарсить 10 объявлений по данной ссылке:
"www.avito.ru/moskva/gotoviy_biznes/internet-magazin-ASgBAgICAUToDJ62AQ"
ничего не загрузилось на сайт.

Вот логги:
Скрытая информация
Автор:  Алексей [ 27 янв 2021, 14:04 ]
Заголовок сообщения:  Re: Не работает парсер
Только что попробовал следующие вещи, все начало работать:

1. В брандмауэр добавил парсер (Хотя до этого работало все без брендмауера)
2. Ссылку на сайт нужно указывать вместе с протоколом, в моем случае https://названиесайта (скорее всего причина в этом)

Все заработало, объявления парсит и загружает.
Проверьте у себя, действительно влияет указание протокола или нет. До этого я указывал сайт в формате example.ru, а не https://example.ru

Если можно, верните мне потерянные объявления: 322 штуки.
Страница 1 из 2 Часовой пояс: UTC + 3 часа
Powered by phpBB® Forum Software © phpBB Group
https://www.phpbb.com/