[pickmeup] 핫한 태그 구현하기

 

1월부터 꾸준히 진행해왔던 픽미업 프로젝트에서 spring boot로 서버 단을 슬기 님과 같이 개발했다.

핫한 태그를 구현해야 했는데 시기 적절하게 업데이트 되어야 하는 정보라 어떻게 로직을 짜야할지 고민이 많았었다.

그 간의 아이디어 회의부터 구현 과정까지 기록해보았다.

repository: github.com/produce1886/pick-me-up-server

---

✨ 아이디어 회의

#1 나

맨 처음에는 아래와 같이 이미 생성되어 있는 테이블을 수정하지 않는 방향으로 생각해보았다.

(projects와 portfolios의 컬럼들은 많이 생략되어 있습니다.)

내가 제안했던 내용이다. 구현하기 어렵다고 느껴지는 부분은 이 색으로 표현해봤다.

- GET /tags : 태그 스코어 순으로 핫한 태그를 불러온다.
- 게시물(포트폴리오, 프로젝트) 조회 시 [tag] 테이블의 스코어가 올라간다.
- created_date를 기준으로 한 달이 지나면 해당 글의 태그 누적 스코어(==게시물의 viewcnt 값)을 뺀다.
   1. 태그의 변화를 포착해서 잘 수정해주는 게 이슈
   - 게시물 업데이트 중 태그가 새로 추가될 때 view_cnt 만큼 태그 스코어에 더함
   - 게시물 업데이트 중 태그가 삭제될 때 view_cnt 만큼 태그 스코어에서 뺌
   - 게시물 삭제 시 view cnt 만큼 태그 스코어에서 뺌
   2. 자정에 한번씩 createdDate가 현재 - 30일(임의로 정한 기간)보다 지난 날이면 태그의 스코어를 리프레쉬하기 (구현 방법 모름)

 

슬기 님의 리뷰이다.

일단 2번의 경우 스케줄링 기능을 활용할 수 있다고 알려주셨다.

하지만 게시물이 많은데 그 시각을 기억해서 일정 시각이 지나면 스코어에서 빼는 걸 어떻게 해야하는 것은 어떻게 구현할지 고민이라고 하셨다.

 

나도 전적으로 동의했다.

---

#2 슬기님

이후 슬기님이 제안하신 내용이다.

 

- GET /tags : 태그 스코어 순으로 핫한 태그를 불러온다.

- 스케줄링으로 지금 게시물을 쭉 조회해서 각각의 게시물의 태그 스코어에 각각 게시물 조회수와 댓글을 반영을 반영한다.

- 데이터는 게시물마다 특정 시각에 조회수, 댓글수를 같이 저장한다.

      ex) 2/7일 2시에 1번 게시물의 조회 수는 3이고, 댓글 수는 4였음을 캡쳐하듯이 저장
- 임의의 주기를 두어 조회수, 댓글 수 차이에 대한 값으로 태그 스코어 값을 변형한다.
      ex) 주기가 1일인 경우, 2/8 조회수가 2이면 2/7일의 조회수와 -1 차이가 나므로 이 값을 그대로 더함

             2/8에 게시물이 삭제되었다면 -3(조회수), -4(댓글수) 각각의 가중치 값을 뺌.

 

리뷰: 나는 계산 식을 적절하게 구현해내는게 복잡하게 느껴졌다. 더 깊은 고민에 빠졌다.

---

#3 나

나는 또 다시 아래와 같은 아이디어를 다시 제안했다.

먼저 [tag_history] 테이블을 새로 만들었다.

- 게시물을 1번 조회하면 1번에 대해서 태그 히스토리에 데이터가 추가가 된다.

- 게시물이 생성되거나 댓글이 달릴 때에도 스코어에 가중치를 두어 저장하는 것도 할 수 있다.

-

저장된 스코어를 중 원하는 날짜 사이의 정보만 불러와 스코어를 합해 정렬하고 top 5 정도의 태그를 응답해준다.

이 사진은 그때 당시에 작성해보았던 sql 문이다.

프로젝트는 JPA로 진행되고 있지만 아직 JPA를 잘 다루지 못하고 있다. 그래서 더 정확한 전달을 위해, 내가 아는 범위 내에서 위해 쿼리문을 작성해 결과를 확인해보았다.

 

리뷰: 직관적인 방법이지만 db에 너무 많은 데이터가 쌓이고 또 다시 많은 데이터가 지워진다. 또한 성능이 떨어지는 것도 걱정되서 보완하는 것이 좋겠다고 하셨다.

 

이러한 관점에서는 전혀 생각해보지 않아서 흥미로웠다!

---

#4 슬기님

슬기님이 내 방법을 적절히 섞어서 다시 제안해주셨다.

- tags에 current_score을 남겨두고 이벤트(검색 키워드, 게시물 생성, 댓글 생성, 게시물 조회 등)가 생성될 때마다 current_score에 이벤트마다의 적절한 가중치로 스코어 값을 더한다.

- 주기적으로(15분 정도의 텀) tag_history의 score에 값을 옮긴 후  tags의 current_score는 0으로 초기화한다.

- tag_history의 데이터로 핫한 태그를 불러오게 된다.
- tag_history의 데이터는 주기적으로 (1일 이상의 텀) 삭제한다.

 

여기까지 논의 후 어느 정도의 개발 흐름을 잡게 되었다.

더 구체적인 사항은 구현하면서 바꿨다.

---

✨  구현

2월 3주차 (02.15~02.21)에 구현했다.

슬기님의 #PR 52, 54, 55

1. 주기적으로 [tag] 테이블의 current_score 값을 [tag_history] 테이블의 score로 옮기고 current_score은 0으로 리셋했다. 현재 정한 주기는 3시간 마다 이다.

@Scheduled(cron = "0 0 0/3 * * ?")

2. 주기적으로 [tag_history] 테이블의 created_date 값을 참조하여 현재 timestamp보다 일정시간 이전의 정보는 삭제했다. 매일 새벽 6시마다 리셋되도록 구현되어 있다.

@Scheduled(cron = "0 0 6 * * ?")
public void removeOldHistory() {

}

3. GET /tags할 때마다 tag_history를 tag_id로 묶어서 score sum을 가져온 후에 높은 순서대로 보여줬다.

이 부분의 코드는 좀 더 공부해봐야 이해할 수 있을 것 같아 코드는 공란으로 두겠다

나의 #PR 53

1. 게시물 1번조회 시 태그의 스코어 +1

게시물을 조회하면 태그의 점수를 1점 올린다.

    ex) spring과 summer를 태그로 가지고 있는 게시물을 1번 조회하면 아래와 같이 +1씩 증가하는 것을 볼 수 있다.

 

2-1. 게시물 수정할 때 tag 삭제 로직
게시물을 수정할 때 u 태그를 삭제하는 경우, 다른 게시물에서도 u 태그를 사용하고 있지 않다면 [tag] 테이블에서 삭제했다.

 

2-2. 게시물 삭제할 때 tag 삭제 로직

u,v 태그를 가지고 있는 A 게시물을 삭제할 때 u 태그는 B 게시물에서 쓰고 있지만 v 태그는 그 어떤 게시물에서도 사용하고 있지 않을 때 [tag] 테이블에서 완전히 삭제하는 로직도 위와 동일하게 구현했다.

 

3. 태그 점수가 올라가는 이벤트가 다양해짐에 따라 다른 가중치 부여

태그 점수가 올라가는 이벤트를 늘렸고, 각각 적절한 가중치를 부여하여 더했다.

기본적으로 [tag] 테이블에 이미 존재하는 태그이면 누적해서 더했고

아직 존재하지 않는 태그이면 태그를 생성한 후 값을 더하는 로직은 가져간다.

• 게시물 조회 시 태그 스코어 +1 (앞서 1번에서 구현되었음)

• 게시물 생성 시 태그 스코어 +5

• 게시물 수정 시 새로운 태그가 생성되면 +5

• 댓글 생성 시 태그 스코어 +2

아직 구현하진 않았지만, 검색 이벤트에 대해서도 태그 스코어가 올라갔으면 좋겠다