처음이자 마지막 빵빵데이터 일기

화나는거 1 : 수강신청은 1,2학기로만 조회 가능한데 하기계절 목록 튀어나옴

화나는거 2 : 강의계획서에 없는 과목 튀어나옴

 

 

화나기 전에 나온 오류

 

API로 가져온 데이터 수정 후 저장

 

로그 보면 알겠지만 7시간 걸림, 년도당 데이터 20만개 * 3= 60만개

중복값 처리 했는데도 60만개..?

 

 

필요없는 컬럼 삭제

서비스 만들 때 딱히 필요없던 부분

 

반정규화된 테이블들에 대해 공통으로 가져올 수 있는 방법이 없을까?

 

없었다.

 

경험이라면 경험이지만, 나중에 도움이 될 진 모르겠다.

 

그래도 고민했던 과정은 도움이 된다.

 

이슈 더 있었던 것 같은데 백엔드 개밟자에 써야겠다