IntelliJ를 이용한 크롤링...??

솔직하게 고백하자면 너무 팀원들이랑 수준차이가 나서 도저히 따라갈 수가 없다. UI/UX를 맡으신 분은 이미 거의 완성형이신 분이시라 이미 거의 끝을 바라보고 계시고 프론트엔드를 맡으신 분들은 분명 아무것도 할 줄 모르는 초보라고들 하셨는데... 다들 결과물을 매주 회의때마다 턱턱내신다... ㅠㅠㅠㅠㅠㅠㅠㅠ 나말고 다른 백엔드 팀원분도 자기 역할 잘하고 계시고 나만...

 

내가 너무 욕심이 많았나 싶긴하다.. 자바도 해야하고 자바 spring도 찔끔 배워보고 이와중에 학교 공부랑 코딩테스트도 야금야금 준비... ㅎ 어쨌든 드디어 뭔가 궤도에 오른 것 같아 프로젝트 시작한지 몇 주차인지도 기억안나지만 만에 시작한다.

 

지금까지 한 것.

-자바 spring이란 무엇인가? -> 정말 무엇인지만 알게됨. start.spring.io에서 만들고 음 이게 이거구나... 정도??

-크롤링이 뭔지 익힘 -> 엄청나게 간단한 네이버 주식 긁어오기 이런 것 정도 이클립스로 유튜브보면서 그대로 따라해봄.

-데이터베이스 CS 공부함 -> 그래도 어느 정도 용어는 알아들음... 추가적으로 프론트엔드에도 필요할 것 같아서 디자인 패턴도 다시한번 공부해봄...

 

어쨌든 결과물을 내기 위해서 내가 해야할 일은

1. 특정 사이트에서 크롤링 해오기(허락 맡음)

2. 크롤링한 정보를 api를 통해 프론트엔드로 넘겨주기

3. 크롤링이 실시간으로 정보가 갱신될 수 있게 조정하기

 

이다! 근데 사실 1번부터 막혔다. 특정 사이트가 로그인을 해야만 볼 수 있는 사이트인데... 크롤링 허가는 받았는데 어떻게 로그인을 해야하는지 모르겠다!