TechPlanet 2015 Review - Redis Session From LINE

1. Tech Planet 리뷰
Redis Session
From Line
charsyam@naver.com

2. 시작하기 전에…
• 테크플래닛 2015에서 본 세션에 대한 리뷰입니다.
– 즉 제가 발표한 내용이 아닙니다.
• 해당 내용은 LINE 에서 발표해 주신 내용입니다.
• 강의자료는 여기서 보실 수 있습니다.
– http://readme.skplanet.com/wp-content/uploads/1-6-
%EC%84%9C%EC%9B%90%ED%95%84_LINE_LINE-Redis-
Clusters.pdf

3. 목차
1. MaxMemory와 Dict Expand 이슈
2. CPU affinity

4. MaxMemory와 Dict Expand 이슈

5. Redis Dict 다시 살펴보기

6. Redis Dict – Redis 기본 자료 구조.

7. Redis Dict – Hash Table의 확장 #2

8. Redis Dict – Hash Table의 확장 #3

9. Redis Dict – Hash Table의 확장 #3

10. 2배씩 늘어납니다.

11. zmalloc

12. zmalloc
• 그냥 일반적인 malloc(jemalloc, malloc, tcmalloc) 에 현재
메모리를 얼마나 할당하고 있는지 사용량만 저장함
• used_memory 변수가 증가됨.

13. freeMemoryIfNeeded

14. freeMemoryIfNeeded
• Redis 커맨드를 처리하는 processCommand 안에서
maxmemory 설정이 있으면 항상 해당 작업을 호출한다.
• used_memory + Need_memory < maxmemory 가 되도록
메모리 해제 정책에 따라서 메모리 해제를 진행함.
– 언제까지?
– 위의 공식이 성립할때까지…

15. 다시 돌아가서…

16. 아이템이 10억 개.

17. 10억 * 4bytes * 2배
= 8,000,000,000
= 8G

18. 메모리 8G가 갑자기 추가됩니다.

19. Maxmemory 가 12G 이고,
usedmemory 가 8G이면?

20. 4G 정도를 free 해야한다.

21. 시간이 얼마나 걸릴까?

22. 실제로 저도 이런 이슈를
겪어보지는 못했습니다.

23. 다만 원인은 이해가 갑니다.
앞의 내용 때문이죠.

24. 해결책은?

25. LINE은 미리 시작 hash table 크기를
엄청 키워놓고 시작…

26. 최상 위의 db[i].dict 을 dictExpand
를 통해서 미리 키워둔다.

27. CPU Affinity

28. NIC Interrupt CPU 와
Redis Process 가 명시적으로
할당되는 CPU를 따로 설정

29. High Load 상황에서 CPU Usage가
20~30% 까지도 차이가 남.

30. 라인 규모로 Heavy 하게 쓸때
도움이 될듯.

31. Q & A