links
- Lv1 단순 HTML 크롤링 풀이 : http://rednooby.tistory.com/102
- Lv2 Ajax 렌더링 크롤링 풀이 : http://rednooby.tistory.com/103
- Lv3 자바스크립트 렌더링 크롤링 풀이 : http://rednooby.tistory.com/104
수집유틸
- kafka : 수집한것을 대용량 전송을 위해
- redis : 수집롤정의및 간단한 수집 모니터링데이터
- actor ( kafka/redis없이 remote actor방식으로 모두 구현)
크롤 패턴 정의
- 작성하기
크롤 정책/롤
- 작성하기
데이터 전송/보관 정책
- 작성하기