웹데이터 수집기 머신만들기

오늘 MS-AZURE VM 환경 구축 했음.

현재 무료 서비스중

https://azure.microsoft.com/en-us/free/

아마존 aws 보다 더 간단히 VM 생성 할 수 있었던것 같음

나는 scrapy-python 크롤링으로 나만의 데이터를 수집해보자

(불법적인 크롤링 기사: http://www.ddaily.co.kr/news/article.html?no=151940)

과제?

1. 프로젝트 정보

2. 환율정보

3. 뉴스기사

해야할일

1. 웹 크롤링 (scrapy-python)

2. JSON 데이터 생성

3. 메일발송? or 봇메시지 연동 or 챗봇연동(AI)