💿 음원차트 파싱 프로젝트

🌏 github

• 💿 음원차트 파싱 프로젝트
  • 📷 ScreenShot
  • ✒️ 개요
  • 📁 프로젝트 설계
  • 📆 Weekend Commit Preview
  • 💭 아쉬웠던점
  • 📚 사용해본것들
  • 🔗 Links

📷 Preview

✒️ 개요

기존의 음원 플랫폼은 지니를 사용하다가

유튜브 레드의 오프라인 저장 기능을 사용해보고 싶어서

3개월 체험권을 받아 이번달 부터 이용해보다가 불편한점이 생겼다.

기존의 음원 플랫폼들에서는 음원 차트가 있어서

신곡이 나오면 들어보고 추가하는게 쉬웠는데

유튜브 레드의 차트는 변동이 심하지 않고 기존곡들 위주로 나오기 때문에

음원 사이트에서 차트를 보고 노래를 추가하는게 너무 번거로웠다.

그래서 지난 프로젝트에서 맛보기로 사용해봤던 JSOUP를 이용해

대표적인 음원사이트들의 차트 정보를 파싱해와서

유튜브 링크를 달아주는 사이트를 개발해보고자 주말동안 프로젝트를 진행해봤다.

📁 프로젝트 설계

과거에 진행했었던 프로젝트에서 배운것들과

교육기간동안 배운것들을 합쳐 프로젝트를 진행해봤는데

음원사이트 파싱은 Jsoup를 이용해 차트에 존재하는 필요한 DOM을 가져와서

ArrayList<음악 정보>의 형태로 리스트 객체로 만들어서 View에 전달해주는 방식으로 설계했다.

처음에는 익숙한 HashMap으로 HashMap<제목, 가수이름>의 형태로 테스트 코드를 만들었었는데

Thymeleaf에서 HashMap 사용법이 잘 기억 안나기도 했고 ( 주말동안 성과를 내고 싶었다. )

제목:가수이름 (key:value) 의 형태로 만들기에는 HashMap 구조를 사용하는 목적과 맞지 않는다는 점과

제목, 가수 이름 외에도 나중에 추가될 Field들에 대한

리팩토링이 어려워 질것이라고 생각해서 ArrayList로 만들었다.

📆 Weekend Commit Preview

19.05.19 첫째 주

생각난 아이디어를 해커톤처럼 빠르게 프로젝트로 진행해본게 이번이 두번째다.

첫번째는 작년 8월 일주일간 진행했었는데

확실히 실력적으로 많이 성장했던것이 느껴졌었다.

과거에 해왔었던 프로젝트에서 쓴 코드가 많은 것도 있지만

교육기간 동안 배운 내용이 중간중간 생각나서 코드를 고치기도 했었고
( generic을 사용한게 익숙해진 느낌? )

지난번 프로젝트들보다 설계에 대한 생각이 빠르게 이루어져서 수월하게 했다.

이번에는 기초 설계를 해보며 테스트 코드를 작성해봤는데

"이래서 테스트 코드를 쓰는거구나" 하는 생각도 조금은? 느낄 수 있었다 😃

19.05.26 둘째 주

두번째 주는 유튜브 검색 모듈을 서비스단에 따로 만들어 보았다.

강의내용에서 강조했던 3-Layer의 분리를 진행해 봤는데

View단에서 요청을 통해 유튜브 모듈을 이용할지 아니면

컨트롤러단에서 부터 파싱할때 해당 정보를 한번에 검색해서 넣어줄지가 고민이다.

금요일에 Jenkin를 통한 CI를 배웠는데 tomcat을 실습 예제로 사용해서

Nginx 예제를 보며 따라해볼 생각이었으나 시간이 너무 없어 이번주에는 진행하질 못했다.

ul list 태그로 테이블을 만드는게 처음이어서 그런가 정렬에 생각보다 시간이 많이걸렸다.

19.06.02 셋째 주

이번주도 역시 평가 과제와 팀별 스터디 떄문에 시간이 너무 없어서

Modal Ajax 구현 외에는 별다른곳에 손댄곳이 없었다.

차트 데이트를 받아 유튜브에 검색하는 버튼을 modal과 연결시켜 사용했으나

검색 결과 데이터를 불러오는 Ajax보다 먼저 실행되어서 데이터 호출 Ajax와

Modal 표시 스크립트에 관한 조정이 필요할것 같다.

원래는 Modal 내부에 플레이리스트 추가 버튼을 만들 계획이었는데

차트에서 바로 추가가 가능하도록 해야겠다.

19.06.09 넷째 주

 팀별 스터디 자료 준비 때문에 시간이 없어서 진행하지 못했다.

19.06.16 다섯번째 주

스프링부트 시큐리티 + OAuth2 구현을 위해 [처음 배우는 스프링부트2](http://www.hanbit.co.kr/store/books/look.php?p_code=B4458049183) 를 참고해

스프링 부트의 1.5버전에서 OAuth2를 구현한 후 2.0버전 으로 리팩토링하는 실습을 진행해봤다. [Repository](https://github.com/jihunhong/Google_OAuth2.0_Example)

Spring Secuity에 관한 내용과 Filter에 관한 내용정리가 필요해보이고

OAuth2 로그인을 통해 플레이리스트 추가 기능을 구현하려고 했다.

19.06.23 여섯번째 주 구글 OAuth2.0을 이용한 사용자의 계정에 존재하는 유튜브 플레이리스트를 받아오는 기능을 작성해봤다

처음에는 지난주에 구현한 스프링부트 시큐리티 + OAuth2 를 이용한 부분에서 받아올 수 있을거라고 생각해서

많이 해맸는데 GoogleAuthorizationCodeFlow 객체를 통해 구현 할 수 있었다.

현재 로컬에서는 작동 되지만 redirect되는 도메인 설정시 아이피가 아닌 도메인을 입력해야되서

플레이리스트를 조작하는 기능은 후순위로 매겼다.

19.06.30 일곱번째 주 강의에서 프론트에 대한 부분을 많이 배우기도 했고

몰랐던 부분을 많이 알게되면서 다른 사이트에서 보고 적용해보고 싶었던 

패턴들을 많이 적용해보면서 프론트적인 부분을 많이 고쳤다.

bootstrap에 grid를 완전히 이해한것같아 반응형 디자인에 관한 부분도 구현했는데

하고나니 다시 욕심이 생겨 사이트 디자인을 한번 갈아 엎었다.

💭 아쉬웠던점

19.05.19 첫째 주 처음 프로젝트를 설계했을때 생각했던 기능을 못넣은게 많아서 아쉬운점도 있다.

대표적으로는 각각의 차트 항목의 정보를 받아 해당하는 유튜브 영상을

링크해서 추가할 수 있게 하려고 했었는데

금요일 퇴근후 부터 현재까지 너무 달려서 지쳐버렸다. 💦

네이버 클라우드 플랫폼 (NCP)를 뉴스 기사에서 보고

도메인 구입과 NCP에 업로드까지 하려고 했는데 다음주나 시간되면 진행해야 겠다.

또한 일정이 촉박하다는 생각이 자꾸 들어서

View단의 리소스를 구하는데 시간을 많이 들이지 못해

프로젝트 View단의 퀄리티가 만족할만큼 나오지 않아서 조금 아쉬웠다.

19.05.26 둘째 주

이번주는 본격적인 스프링 진도에 나가면서 `TIL` 포스팅도 조금씩 미뤄지고

프로젝트도 만족할 만큼 진도를 못나갔다.

호기롭게 시작한 토이 프로젝트였었는데 배운 내용을 토대로 설계 해보자니

생각이 많아져서 시간이 오래걸린 것 같다.

다음주 부터는 이슈탭을 적극적으로 이용해 봐야겠다.

19.06.02 셋째 주

이틀동안 할당된 API 할당량을 전부 사용해버려서 할당량 추가 신청 폼을 작성했다.

API 요청 할당량에 관한 생각은 못하고 테스트 코드를 작성해버려서

너무 많은 데이터를 호출하는 것으로 코딩하다 보니

한번 테스트 코드를 실행할때마다 약 150번의 호출이 이루어져버렸다.

스터디를 진행하면서 이번에 단위테스트와 Mock에 관한 내용을 읽었는데 이부분을 중점적으로

테스트코드를 리팩토링 해봐야겠다.

19.06.09 넷째 주

 팀별 스터디 자료 준비 때문에 시간이 없어서 진행하지 못했다.

19.06.16 다섯번째 주

 OAuth2를 구현해보며 Security에 관한 상세 내용이나

 OAuth2 dependency에 관한 내용, OAuth2를 테스트하기 위한 테스트 작성에 대해

 TIL에 정리해보며 업로드할 생각이다.

19.06.23 여섯번째 주

OAuth2.0 API 호출시 리다이렉션 되는 URL을 도메인 네임으로 정해야되서

본격적인 구현이 밀려 버렸다.

AWS 에서는 같은 플랫폼안에 도메인 등록부터 관리 까지 붙어있어서 연동하기가 쉬웠는데

NCP 에서는 도메인 등록은 지원하질 않아서 쪼오금 아쉬웠다.

19.06.30 일곱번째 주

배운 내용을 가지고 HTML CSS 코드를 많이 건드렸는데

바뀐 뷰에 따라 보여줄 데이터가 좀 추가되서 관련 메서드를 작성하는데

시간이 없어 너무 대충 작성했다.

컨트롤러 단에서 급하게 붙인 코드나 정렬 알고리즘 구현에 사용된 메서드가

테스트 과정을 거치지 않아서 조금 불안정한게 고쳐야할 점이었다.

📚 사용해본것들

• Spring Boot
• Thymeleaf
• YouTube Data API
• JSOUP
• Mp3agic
• MDB

🔗 Links

• YouTube Data API v3
• Jsoup.org
• Mp3agic
• MDB
• 블로그