89 / 60 / 2
Регистрация: 08.03.2011
Сообщений: 546
|
|
1 | |
Парсинг описания товаров с Aliexpress25.06.2017, 23:41. Показов 4166. Ответов 4
Метки нет (Все метки)
Всем привет!
По url через request requests.get(url) получаю отдачу по товару например, https://ru.aliexpress.com/whol... t=delonghi и вытаскиваю нужную информацию через xpath. Но через несколько запросов парсер перестает работать, запросы без авторизации на али не проходят, кто сталкивался с подобным как можно решить проблему? Спасибо!
0
|
25.06.2017, 23:41 | |
Ответы с готовыми решениями:
4
Парсинг aliexpress Парсинг подгружаемых картинок с aliexpress Парсинг aliexpress Написать парсер товаров с aliexpress |
2740 / 2339 / 620
Регистрация: 19.03.2012
Сообщений: 8,830
|
|
26.06.2017, 08:03 | 2 |
fiphiker, скорее всего капчу просить начинает, дебаж этот момент. Скорее всего тебе нужно смотреть в сторону проксей.
1
|
89 / 60 / 2
Регистрация: 08.03.2011
Сообщений: 546
|
|
26.06.2017, 22:51 [ТС] | 3 |
Нет, капчу не просит ввести, видимо блокировка по ip
Т.е стоит использовать прокси лист, брать каждую проксю и если через нее перестает парситься инфа, брать другую?
0
|
2740 / 2339 / 620
Регистрация: 19.03.2012
Сообщений: 8,830
|
|
27.06.2017, 09:10 | 4 |
fiphiker, да
0
|
89 / 60 / 2
Регистрация: 08.03.2011
Сообщений: 546
|
||||||
05.07.2017, 22:25 [ТС] | 5 | |||||
подгружаю список проксей с сайта и делаю реквест к url такого вида https://ru.aliexpress.com/whol... xt=android
0
|
05.07.2017, 22:25 | |
05.07.2017, 22:25 | |
Помогаю со студенческими работами здесь
5
рерайтинг описания товаров в и-магазине В jomshopping пропали все описания товаров как лучше писать описания товаров Изменение описания инфоблока после обновления товаров из 1С JoomShopping: как изменить величину блоков описания товаров?! Заполнить тхт файл товарами, не менее 10 000 описания товаров HtmlAgilityPack парсинг таблицы для получения текста, даты и описания статуса Искать еще темы с ответами Или воспользуйтесь поиском по форуму: |