로그인 해주세요.

미니기기 / 음향 게시판 *스마트폰과 PC, 카메라, 스피커 등 IT 미니기기와 음향기기에 관해 교류하는 게시판입니다.

미니 근데 카카오가 왜 안일한 설계인가요?

  • 요크
  • 조회 수 892
  • 2022.10.17. 15:22

HA 구성 다 되어있을거고, DR 전환도 자동으로 되었을텐데

 

주축을 담당했던 대부분의 서버가 내려갔을테니 백업 서버의 메세지 브로커 클러스터로 데이터 전송해주던 서버도 다 내려갔을거고, 순차적으로 내려간게 아닌 한번에 내려간거고 

 

그냥 서버 뿐만이 아니고 메인 라우터, 하드웨어적으로 데이터 카피해주는 장비도 전원 내려갔을거고

 

DR 전환이 되어도 분산해서 담당하던 서버에 트래픽이 몰리니 계속 터질 수 밖에 없는 구조고

 

그렇다고 카카오 서버의 트래픽만큼의 1:1 대응이 가능한 백업 서버 구성하기엔 엄청난 비용이 들거고

 

사실상 방법이 없었다고 생각합니다.

 

네이버도 주축이었던 IDC 전원 통째로 내려갔으면 마찬가지 상황 아니었을까 싶습니다.

 

AZ 분산도 가산으로 넘어갔는데 트래픽 커버가 안됐다고도 하니까요.

 

그냥 인프라 담당자, 백엔드 코어 개발자, DBA 분들이 고생하겠구나 싶네요.

댓글
7
nal
best 1등 nal
2022.10.17. 15:29

1. DR전환이 안되었고, 

2. 로그인을 그렇게 다양한곳에서 쓸꺼면 로그인 서버라도 이중화 또는 실시간 절체등이 되게 설계를 하는게 맞는거죠.  

3. 그래서 네이버는 데이터센터 여러곳 쓰는것 아닌가요? 

[nal]님의 댓글을 신고합니다. 취소 신고
Chrop
Chrop nal 님께
2022.10.17. 15:35

카카오 옹호하는건 아니지만 네이버는 메인인 춘천이 멀쩡해서 일부장애로 수습이 가능했다고 봅니다

메인인 춘천이 날라가면 네이버가 잘 돌아갈지는 솔직히...아무도 모른다고 봅니다

 

금융권만 해도 메인이 죽어버려서 전산이 모두 내려간 경우가 몇번 있었습니다(시티은행/삼성금융그룹)

[Chrop]님의 댓글을 신고합니다. 취소 신고
포인트봇
포인트봇 Chrop 님께
2022.10.17. 15:32
회원님 4포인트 채굴 성공!
[포인트봇]님의 댓글을 신고합니다. 취소 신고
Futuristics
2등 Futuristics
2022.10.17. 15:30

뭐 누구과실인지는 몇일 지나면 바로 나올것 같습니다.
(과징금의 문제도 엮어있어서)

데이터센터에서 화재가나고 전체 전원 내려간다는 저 상황자체가 로또1등 연속 당첨될 확률과 비슷하다고 봅니다. 

[Futuristics]님의 댓글을 신고합니다. 취소 신고
best 3등 Minny
2022.10.17. 15:37

DR전환이 제대로 됬는지 안됬는지는 지금 알려진게 없지만... 제가 알고 있기로는 DR전환 완료된게 대략 사건 터지고 한 3시간 뒤였던걸로 알고 있습니다.

 

이쯤이면 자등으로 DR 안됬다고 보는게 맞죠...

 

DR 후 가산 IDC쪽에서 트래픽 터져나간다고 얘기도 나왔는데, 사실상 트래픽별, 중요도별로 분산된 구조가 아니였다는것도 대충 어림잡아볼 수 있지요. 트래픽 터져나갈만한 서비스는 일단 중지해놓고 순차 복구를 해도 될건데,, 그게 안되니 결국 새벽 1시쯤 겨우 트래픽 내려가면서 대응가능한 것 같고...

 

거대 서비스 치고는 그 구성이 너무 주먹구구식이었다고 추측 되서 많은 얘기가 오가는것 같은데, 일단 기다려보면 더 많은 정보가 나올거고 결국 어떤게 문제였는지 등이 나오겠쥬...

[Minny]님의 댓글을 신고합니다. 취소 신고
프로입털러
프로입털러
2022.10.17. 16:03

익명을 요구한 한 보안전문가는 “카카오 정도의 규모라면 데이터 이원화, 핫사이트(비상시 서버와 데이터 등에 미리 설치해둔 백업 사이트)는 물론, 아예 사고지점을 차단하고 메인 서버에 있는 정보를 그대로 복제한 새로운 데이터센터와 연결하는 재해복구(DR) 시스템을 갖췄을 것이다”며 “다만, 카카오톡을 비롯해 여러 계열사를 거느린 카카오의 서비스 영역이 워낙 방대하고 복잡한 만큼 데이터 복구에 무리가 있었을 것 같다”고 했다.

 

IT업계의 한 관계자는 "데이터센터 한곳이 화재가 났다고 카카오톡과 카카오T(카카오택시, 대리), 카카오페이 등 수천만명이 사용하는 대국민 서비스가 7시간 가까이 멈춰 있고, 전원이 들어와야만 서비스가 정상화된다는 게 이해될 해명이냐"며 "서비스 실시간 백업 시스템이 없다는 얘기나 다름없다"고 꼬집었다.

 
 
 
결국에는 이중화와 실시간 서버 백업이 제대로 작동했는지가 관건일 것 같습니다.
[프로입털러]님의 댓글을 신고합니다. 취소 신고
Butzed
Butzed
2022.10.17. 16:15

카카오도 판교말고 가산도 있고 분산되어 있긴한데, 판교에 거의 모든 서비스가 몰려있었다는게 문제겠죠. 

[Butzed]님의 댓글을 신고합니다. 취소 신고
취소
번호 분류 제목 글쓴이 날짜 조회 수
공지 공지 사이트 이용 수칙 240809 수정 file admin 18.08.04 117807 13
핫글 미니 얘네들이야말로 발전이 없네요ㅋㅋ [11] updatefile Alternative 10:59 675 17
핫글 미니 서피스프로11 후기 [20] updatefile 알휙 07:51 602 12
핫글 미니 확실히 중국계열 안드폰 아이콘이 이쁘긴 합니다 [9] file 포도맛사과쥬스 07:04 778 11
175859 미니 금융권만 해도 모든전산 내려가면 복구하는데 반나절은 걸리긴 합니다 [1] Chrop 22.10.17 487 1
175858 미니 카카오가 이악물고 회피성 발언하는 이유 [2] file 펄럭펄럭 22.10.17 935 0
175857 미니 데이터센터 저 문제는 현재로써는 다 추정일뿐입니다. [6] Futuristics 22.10.17 516 2
미니 근데 카카오가 왜 안일한 설계인가요? [7] 요크 22.10.17 892 2
175855 미니 궁민은행 앱 ㄱㅈ 같네요 [12] file 외로운외뿔고래 22.10.17 678 2
175854 미니 노를젓고싶은 라인의 이모티콘 배포 [2] file 라테린 22.10.17 719 8
175853 미니 레이저에서 안드로이드 게이밍 머신을 공개했네요 [4] file 겅래민 22.10.17 624 3
175852 미니 플립 배터리가 제정신을 차렸네요 아재건달_보노뭘보노 22.10.17 495 8
175851 미니 별 게 다 재난 문자로 오는군요..;; [9] file 연월마호 22.10.17 814 3
175850 미니 픽셀7 프로 수령했습니다. [11] file 인절미도둑 22.10.17 991 22
175849 미니 이제 Intel Unison 앱 초읽기네요 [10] file Futuristics 22.10.17 775 3
175848 미니 만약 카톡 보상으로 이거 지급하면 [10] file 카밀리아 22.10.17 1138 7
175847 미니 MSN메신저, 네이트온, 싸이월드 기억해보면 영원할거 같아도 훅가는건 한순간입니다. [4] Imfinzi 22.10.17 500 3
175846 미니 어...라인은 안드로이드 태블릿 동시 접속이 안되나요? [6] 삼계탕라면 22.10.17 2756 0
175845 미니 삼성은 3D ToF보다 Night vision IR센서나 넣어주었음하네요. [5] file 흡혈귀왕 22.10.17 743 2
175844 미니 IDC쪽에서도 이해가 안가는것. [9] Minny 22.10.17 813 2
175843 미니 카카오 서버 화재로 전 평소보다 편하게 지냈네요 [2] CaffeineJuice 22.10.17 677 2
175842 미니 시나리오에 화재 재난상황은 기본적으로 들어가지않나요? [5] Qkooqq 22.10.17 606 10
175841 미니 소심한(?) 노젓기 [7] file [성공]함께크는성장 22.10.17 694 4
175840 미니 이런 회사에 누가 자신의 비즈니스 사업을 연계하려고 하겠습니까? [11] Minny 22.10.17 874 2
175839 미니 불꽃 사진은 찍기 너무 어렵네용.. [6] file swing546 22.10.17 553 7
175838 미니 갤럭시 폴드4 사용중입니다. [6] 파랑새 22.10.17 758 0
175837 미니 문자 무제한이 500건이라면. [5] 아재건달_보노뭘보노 22.10.17 553 0
175836 미니 (주)카카오 경영공시 떴습니다. [9] file Futuristics 22.10.17 1111 1
175835 미니 갑자기 텔레그램 친구가 늘었네여 아재건달_보노뭘보노 22.10.17 233 2

추천 IT 소식 [1/]

스킨 기본정보

colorize02 board
2017-03-02
colorize02 게시판

사용자 정의

1. 게시판 기본 설정

게시판 타이틀 하단에 출력 됩니다.

일반 게시판, 리스트 게시판, 갤러리 게시판에만 해당

2. 글 목록

기본 게시판, 일반 게시판, 썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

썸네일 게시판만 해당

3. 갤러리 설정

4. 글 읽기 화면

기본 10명 (11명 일 경우, XXXXX 외 1명으로 표시)

5. 댓글 설정

일정 수 이상의 추천을 받은 댓글에 표시를 합니다.

6. 글 쓰기 화면 설정

글 쓰기 폼에 미리 입력해 놓을 문구를 설정합니다.

서버에 요청 중입니다. 잠시만 기다려 주십시오...