[SCRAPY/PYTHON] scrapy 로 wiki 크롤링하다가 마주친 오류
scrapy 튜토리얼을 끝냈으니 wiki 크롤러를 한 번 제작해보려했다. 마드리드 거리를 구역 카테고리로 나눈 위키 페이지를 목표로 했다. 각 구역의 모든 거리의 이름과 내용을 모두 긁어오려 한다. class WikicrawlerSpider(scrapy.Spider): name = 'wikicrawler' def start_requests(self): yield scrapy.Request(url='https://es.wikipedia.org/wiki/Categor%C3%ADa:Calles_del_distrito_Centro', callback=self.parse_barrio) def parse_barrio(self, response): barrio_links1 = response.css('div.mw-c..
코드
2019. 10. 30. 13:05
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- 마드리드
- 오류
- DATABASE
- 블로그
- nltk
- 분석
- 유럽
- 일기
- 코로나
- 리뷰
- 파이썬
- Selenium
- python
- 유튜버
- 이슈
- Crawling
- error
- 유튜브
- HTML
- css
- 스페인
- scrapy
- 글쓰기
- 항공
- coding
- 런업
- BeautifulSoup
- 저널
- NLP
- flask
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
글 보관함