[SCRAPY/PYTHON] scrapy 로 wiki 크롤링하다가 마주친 오류
scrapy 튜토리얼을 끝냈으니 wiki 크롤러를 한 번 제작해보려했다. 마드리드 거리를 구역 카테고리로 나눈 위키 페이지를 목표로 했다. 각 구역의 모든 거리의 이름과 내용을 모두 긁어오려 한다. class WikicrawlerSpider(scrapy.Spider): name = 'wikicrawler' def start_requests(self): yield scrapy.Request(url='https://es.wikipedia.org/wiki/Categor%C3%ADa:Calles_del_distrito_Centro', callback=self.parse_barrio) def parse_barrio(self, response): barrio_links1 = response.css('div.mw-c..
코드
2019. 10. 30. 13:05
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- 분석
- NLP
- flask
- 유튜브
- 오류
- HTML
- python
- 이슈
- 마드리드
- 저널
- 스페인
- BeautifulSoup
- nltk
- 리뷰
- 일기
- coding
- 유튜버
- 글쓰기
- 코로나
- 파이썬
- 블로그
- Selenium
- scrapy
- 유럽
- css
- 항공
- error
- 런업
- Crawling
- DATABASE
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | ||||
| 4 | 5 | 6 | 7 | 8 | 9 | 10 |
| 11 | 12 | 13 | 14 | 15 | 16 | 17 |
| 18 | 19 | 20 | 21 | 22 | 23 | 24 |
| 25 | 26 | 27 | 28 | 29 | 30 | 31 |
글 보관함