CHAPTER 6 특수 인덱스와 컬렉션 유형(선택) ~ CHAPTER 7 집계 프레임워크

[cheese10yun]

CHAPTER 6 특수 인덱스와 컬렉션 유형(선택) ~ CHAPTER 7 집계 프레임워크

[hyenny]

내용정리

7장 집계 프레임워크

느낀점

• 집계 프레임워크의 파이프라인을 보면서 java의 스트림이 떠올랐다.
• RDB만 하다 NoSQL을 데이터를 보자니 임베드된 필드를 어떻게 내가 원하는 형태로 추출할 수 있을까, 고민을 많이 했다. 이번 챕터의 aggregate는 그동안 했던 고민의 해결책이 들어있었다. 중첩 필드를 승격시키고, 배열은 전개(unwind)시켜 원하는 형태의 도큐먼트로 방법이 가장 흥미로웠다.
  • 전개와 일치 단계를 파이프라인에 넣을 경우 같은 일치 조건을 두 번 (일치 - 전개 - 일치) 쓰는게 신기했다.
• 배열 표현식은 알아두면 꽤 요긴하게 사용할 수 있을 듯 하다.
• 누산기와 그룹화는 시간이 부족해 자세하게 보지 못했지만, 활용도가 높은 부분이라 실습해봐야겠다.

궁금한점

처리 작업 끝에서 생성한 출력은 애플리케이션에서 작업하는 데 사용하거나, 컬렉션에 보내 나중에 사용한다.

집계 파이프라인 결과를 컬렉션에 쓸 수 있다는 $out, $merge를 실제로 어떻게 활용할지 궁금하다. 구조가 아예 달라도 동일한 컬렉션에 넣어서 쓰나? 넣을 순 있겠지만 그렇게 써서 얻는 이점이 무엇일까?

[shbada]

개인적으로 생각하는 집계프레임워크 장점

• 익숙한 Java 코드(스트림 등)을 짜듯 쿼리를 짜듯 작업 순서가 중요했고, 직관적으로 쿼리를 보고 어떤 데이터를 원하는지 알 수 있다.
  -(p.253) :또한 배열용 누산기로 도큐먼트가 파이프라인 단계를 통과할때 배열에 값을 푸시할 수 있다 부분이 무슨 의미인지 이해하기 어려웠으나, p.262의 예제로 이해를 했는데 실무에서 편하고 유용한 기능같다. ($push, $addToSet 등 중복 포함 유무도 체크할 수 있는것도 또한 편리)
• 집합 표현식, 비교 표현식 등 제공되는 표현식을 제대로 이해하면 쉽게 원하는 데이터 추출을 할 수 있을것 같다

느낀점

• 책을 보면서 해당 쿼리들은 하나하나 단계를 넘어갈때마다 결과를 확인하면서 짜는게 좀더 최종 쿼리로 가는데 확실할것 같은데 관련 데이터가 제공되면 좋을것 같아서 대체할 수 있는 샘플 찾게되면 공유해보겠습니다..!
• 이 몽고 DB의 집계프레임워크를 사용하면 이전 챕터에서 공부했던 인덱스에 대한 고민이 더 커질것 같다
  • 이부분은 장점에서 집계프레임워크 사용이 유용하고, 편리하다고 생각했었지만 그만큼 파이프라인의 흐름이라던지 인덱스라던지 등 좀더 유의깊게 고민해봐야할 부분인것 같다

[cheese10yun]

링크

• 6장, 7장

6 특수 인덱스와 컬렉션 유형

전문 검색을 위한 인덱스

books 인덱스의 도큐먼트 중 title이 The Prince and the Pauper인 도큐먼트가 색인될 때 필드 값인 the Prince and the Pauper는 일반적으로 당므과 같은 토큰으로 나눠서 저장하는 형식으로 형태소 분석기가 동작

the Prince and the Pauper -> the, prince, and, pauper

모든 대문자는 소문자로 변경되고, 중복되는 단어들, 위의 예제에서는 the와 같은 단어는 중복을 삭제한다. 인덱스 할 때 이와 같은 분석 과정을 거치고 the, prince, and, pauper와 같은 토큰 방식으로 저장

일반적으로 전문 검색을 위한 방식과 거의 비슷한 동작 방식을 택함, 깊게 공부한건 아니라서 조심 스럽지만 한글과 같은 형태소 분석 도구가 적당한게 없어 보임, 전문 검색에 대한 메인 기능으로 몽고 디비를 선택하기에는 기능적인 부분이 부족해 보이고 전문검색이 메인이면 elasticsearch가 더 적절한 도구가 될거 같음

TTL 인덱스

회사 환경에서 매우 유용한 옵션, 연산을 위한 임시 데이터 및 일정 가긴이 지나면 필요 없어지는 데이터에 대해서 사용하면 좋을거 같음,

ex) access token, refresh token, 임시 인증 번호 등등

활동 중인 세션이 삭제되는 것을 방지하려면 활동이 있을 때마다 lastUpdated 필드를 현재 시간으로 갱신하는 방식으로 해결 가능

7 집계 프레임워크

SQL to Aggregation Mapping Chart

SQL Terms, Functions, and Concepts	MongoDB Aggregation Operators
WHERE	$match
GROUP	BY $group
HAVING	$match
SELECT	$project
ORDER	BY $sort
LIMIT	$limit
SUM()	$sum
COUNT()	$sum $sortByCount
join	$lookup
SELECT INTO NEW_TABLE	$out
MERGE INTO TABLE	$merge (Available starting in MongoDB 4.2)
UNION ALL	$unionWith (Available starting in MongoDB 4.4)

SQL to Aggregation Mapping Chart

$project

• select 에대한 diff를 보기 편함