Bonjour,
J'ai voulu tester le package pylbc et j'ai l'erreur suivante :
HTTPError Traceback (most recent call last)
Input In [2], in <cell line: 11>()
8 query.set_departments(['38'])
10 #query.show_filters()
---> 11 infos = query.request_infos()
12 print(infos)
13 print("A total of %d results is announced by the server." % infos['total'])
File ~\anaconda3\envs\web_scraping\lib\site-packages\pylbc\pylbc.py:261, in Search.request_infos(self, verify)
259 self.__enable_results()
260 if not req.status_code == requests.codes.ok:
--> 261 req.raise_for_status()
262 return json.loads(req.text)
File ~\anaconda3\envs\web_scraping\lib\site-packages\requests\models.py:1021, in Response.raise_for_status(self)
1016 http_error_msg = (
1017 f"{self.status_code} Server Error: {reason} for url: {self.url}"
1018 )
1020 if http_error_msg:
-> 1021 raise HTTPError(http_error_msg, response=self)
HTTPError: 403 Client Error: Forbidden for url: https://api.leboncoin.fr/api/adfinder/v1/search
Il semblerait que le bon coin détecte la tentative de scrapping et renvoie une réponse en 403 (erreur que j'ai déjà eu en essayant de scapper le bon coin avec un script perso).
Est-ce que vous aurez une idée de solution de pour contourner le problème ?
Merci d'avance et super boulot pour le code :)
Bonjour,
J'ai voulu tester le package pylbc et j'ai l'erreur suivante :
HTTPError Traceback (most recent call last)
Input In [2], in <cell line: 11>()
8 query.set_departments(['38'])
10 #query.show_filters()
---> 11 infos = query.request_infos()
12 print(infos)
13 print("A total of %d results is announced by the server." % infos['total'])
File ~\anaconda3\envs\web_scraping\lib\site-packages\pylbc\pylbc.py:261, in Search.request_infos(self, verify)
259 self.__enable_results()
260 if not req.status_code == requests.codes.ok:
--> 261 req.raise_for_status()
262 return json.loads(req.text)
File ~\anaconda3\envs\web_scraping\lib\site-packages\requests\models.py:1021, in Response.raise_for_status(self)
1016 http_error_msg = (
1017 f"{self.status_code} Server Error: {reason} for url: {self.url}"
1018 )
1020 if http_error_msg:
-> 1021 raise HTTPError(http_error_msg, response=self)
HTTPError: 403 Client Error: Forbidden for url: https://api.leboncoin.fr/api/adfinder/v1/search
Il semblerait que le bon coin détecte la tentative de scrapping et renvoie une réponse en 403 (erreur que j'ai déjà eu en essayant de scapper le bon coin avec un script perso).
Est-ce que vous aurez une idée de solution de pour contourner le problème ?
Merci d'avance et super boulot pour le code :)