Commit 87f6f5b5 authored by Okhin's avatar Okhin

Going into the past

parent ff3b9a7b
Pipeline #1185 passed with stage
in 4 seconds
...@@ -23,7 +23,10 @@ class DossierSpider(BaseSpider): ...@@ -23,7 +23,10 @@ class DossierSpider(BaseSpider):
] ]
start_urls = [ start_urls = [
'http://www.assemblee-nationale.fr/12/documents/index-dossier.asp',
'http://www.assemblee-nationale.fr/13/documents/index-dossier.asp',
'http://www.assemblee-nationale.fr/14/documents/index-dossier.asp', 'http://www.assemblee-nationale.fr/14/documents/index-dossier.asp',
'http://www.assemblee-nationale.fr/15/documents/index-dossier.asp',
'http://www.senat.fr/dossiers-legislatifs/index-general-projets-propositions-de-lois.html' # noqa 'http://www.senat.fr/dossiers-legislatifs/index-general-projets-propositions-de-lois.html' # noqa
] ]
......
...@@ -14,6 +14,9 @@ class ParlSpider(CrawlSpider): ...@@ -14,6 +14,9 @@ class ParlSpider(CrawlSpider):
ns_photo_url = 'http://www.nossenateurs.fr/senateur/photo/%s' ns_photo_url = 'http://www.nossenateurs.fr/senateur/photo/%s'
allowed_domains = [ allowed_domains = [
"2002-2007.nosdeputes.fr",
"2007-2012.nosdeputes.fr",
"2012-2017.nosdeputes.fr",
"www.nosdeputes.fr", "www.nosdeputes.fr",
"www.nossenateurs.fr", "www.nossenateurs.fr",
"api-adresse.data.gouv.fr" "api-adresse.data.gouv.fr"
......
Markdown is supported
0% or .
You are about to add 0 people to the discussion. Proceed with caution.
Finish editing this message first!
Please register or to comment