전체기사 최신뉴스 GAM
KYD 라이브
KYD 디데이
산업 ICT

속보

더보기

"3배 이상 규모로 투자 확대"...카카오, 데이터센터 장애 재발방지 대책 발표

기사입력 : 2022년12월07일 12:43

최종수정 : 2022년12월07일 13:20

'과거 원인 분석, 재발 방지 대책, 미래 투자' 관점에서 실천 과제 마련
'전체 시스템 다중화, 비상대응체계 강화, 인프라투자 확대' 등 IT 엔지니어링 혁신 계획도 공유

[서울=뉴스핌] 양태훈 기자 = "카카오 대표이사직을 내려놓고 재발 방지위원회를 맡아 역량을 쏟아부어왔다. 이중화를 비롯해 부족했던 모든 부분을 개선하기 위해 원인을 분석하고, 재발 방지 대책을 세우며 미래에 대한 투자를 하도록 하겠다. 전담 조직을 만들어 안정적인 서비스 환경을 조성하는 데 집중하겠다" - 남궁훈 비상대책위원회 재발방지대책 공동 소위원장

"이중화와 위기 대응 과정에 미흡함이 있었다. 하나의 데이터센터에서 장애가 발생하면 다른 데이터센터로 자동 전환해주는 시스템이 작동해야 하는데 이 시스템마저 판교 데이터센터에만 설치돼 있었다. 가용 자원도 부족했다. 회사 차원에서 체계적인 이중화를 준비했어야 했다" - 이확영 원인조사 소위원장

"데이터센터 전체의 장애가 발생하더라도 모니터링과 장애 탐지가 잘 동작할 수 있도록 모니터링 시스템을 다중화해 가겠다. 인프라 하드웨어 설비에서 서비스 애플리케이션에 이르는 전체 시스템 레이어에 다중화를 설계하고 구축해 가겠다" - 이채영 재발방지대책소위원회 부위원장

"모든 것이 무력화되더라도 꼭 단기간 내에 살려야 할 서비스는 데이터센터를 별도로 구축하는 방안도 검토하겠다. 카카오는 개선 사항들을 추가하기 위해 향후 5년 간은 지난 5년 간 투자 금액의 약 3배 이상 규모로 투자를 확대하겠다" - 고우찬 재발방지대책 공동 소위원장

카카오가 7일 열린 개발자 컨퍼런스 '이프 카카오 데브 2022(if kakao dev 2022)'에서 지난 10월 15일 판교 SK C&C 데이터센터 화재로 인해 발생한 서비스 장애 원인과 재발방지대책을 이 같이 밝혔다.

남궁훈 비상대책위원회 재발방지대책 공동 소위원장. [사진=카카오]

남궁훈 재발방지대책 공동 소위원장은 카카오 ESG 최우선 과제를 '서비스를 안정적으로 제공하는 것'으로 설정하고, 인프라 개선을 위해 과거 원인 분석, 현재 재발방지책, 미래 투자 크게 3가지 관점에서 실천과제를 세우겠다고 밝혔다. 또 고우찬 재발방지 공동 소위원장을 필두로 인프라 조직을 대폭 강화하고 안정적인 서비스 환경을 조성하겠다고 약속했다.

남궁훈 공동 소위원장은 키노트를 통해 "지난달 카카오 대표이사직을 내려놓고 재발 방지위원회를 맡아 전력을 다해 역량을 쏟아부어왔다. 카카오는 여기서 멈추지 않고 계속해서 서비스의 안정성에 대해서 지속적인 고민을 할 예정"이라며 "소위원회 활동을 통해 카카오 ESG의 최우선 과제가 카카오의 서비스를 안정적으로 제공하는 것 그 자체였다는 것을 깨달았다"고 말했다.

이어 "카카오는 크게 세 가지 관점에서 실천 과제를 세웠다. 이중화를 비롯해 카카오가 인프라적으로 부족했던 모든 부분을 개선하기 위해 과거의 원인을 분석하고, 현재에 대한 재발 방지 대책을 세우며 미래에 대한 투자를 하도록 하겠다"며 "카카오는 인프라 부분을 소홀히 하지 않고 서비스 안정성을 보장하기 위해 카카오 엔터프라이즈의 고우찬 부사장을 영입했다. 고우찬 부사장은 카카오 내에서 IT 엔지니어링 전문가들로 전담 조직을 만들어 안정적인 서비스 환경을 조성하고 투자하는 데 집중할 것"이라고 강조했다.

이확영 원인조사 소위원장(그렙 CEO)은 이날 키노트에서 '1015 장애원인'으로 '데이터센터와 운영 관리 도구들의 이중화 미흡', '가용 자원 부족' 등을 꼽았다.

이확영 원인조사 소위원장. [사진=카카오]

이확영 소위원장은 "원인 분석 결과 이중화와 위기 대응 과정에 미흡함이 있었던 것으로 드러났다. 서비스를 운영하는 많은 시스템에서 사용되는 캐시 서버와 오브젝트 스토리지가 완벽하게 이중화되지 않고, 판교 데이터 센터에만 설치되어 있어 이를 사용하는 서비스들의 복구가 늦어졌다"며 "서로 다른 데이터센터의 이중화가 되어 있는 경우에도 하나의 데이터센터에서 장애가 발생하면 다른 데이터센터로 자동 전환해주는 시스템이 작동해야 하는데 이 시스템마저 판교 데이터센터에만 설치되어 있었다. 이에 수동으로 전환 작업을 진행했기 때문에 복구가 지연됐다"고 설명했다.

또 "사용자 서비스에 직접적으로 필요한 시스템 외에 서비스의 개발과 관리를 위한 운영 관리 도구가 필요한데 이러한 도구들의 이중화가 미흡했다. 상대적으로 이러한 도구들의 안전성 확보에 소홀했다"며 "컨테이너 이미지를 저장하고 관리하는 시스템이나 일부 모니터링 도구 등은 화재 여파로 사용할 수 없게 되어 복구에 상당한 어려움을 겪었다"고 덧붙였다.

아울러 "가용 자원도 부족했다. 판교 데이터센터 전체를 대신할 만큼의 가용 자원이 확보되어 있지 않았기 때문에 판교 데이터센터의 전원이 들어와서 모든 시스템이 정상화되기 전까지 복구를 완료할 수 없었다"며 "전체 시스템의 이중화 수준은 가장 약한 시스템의 이중화 수준을 따라가기 때문에 개별 시스템의 미흡한 이중화가 전체적인 장애를 유발한다. 개별 부서가 시스템마다 다른 이중화 수준 및 체계 등으로 문제가 생기지 않도록 회사 차원에서 체계적인 이중화를 준비했어야 했다"고 전했다.

카카오가 건설 중인 '안산 데이터센터'. [사진=카카오]

이채영 재발방지대책소위원회 부위원장은 재발방지를 위한 방안으로 '데이터센터 이중화', '데이터와 서비스 이중화', '플랫폼과 운영 도구 이중화' 등을 약속했다.

이채영 부위원장은 "앞으로는 데이터센터 전체의 장애가 발생하더라도 모니터링과 장애 탐지가 잘 동작할 수 있도록 모니터링 시스템을 다중화해 가겠다"며 "메인 데이터센터를 현재 두 곳에세 곳으로 확대하고, 데이터센터 간에 늘어날 트래픽에 대응할 수 있도록 확장성을 고려한 설비 투자를 진행할 것이다. 대용량 트래픽 전송이 필요한 서비스의 데이터센터 간 삼중화를 위해 별도의 전용망도 구성하겠다"고 강조했다.

또 "모든 형태의 데이터를 일대일 복제를 넘어 데이터센터 간 이중화 이상의 다중 복제 구조로 구성하고, 장애 발생 시 장애 복구 조치를 즉각 실행할 수 있는 환경을 구축하겠다"며 "앞으로는 모든 클러스터를 데이터센터 단위에서 삼중화해 데이터센터의 전면적인 장애에도 서비스 수준을 유지할 수 있는 구조로 운영할 계획이다. 또한 각 도구의 사용 목적, 서비스 역량과 클러스터별 중요도를 정기적으로 파악하는 프로세스를 도입하고 특정 시스템 장애 시 영향을 받는 대상에 대한 공지를 자동화 하겠다"고 전했다.

아울러 "트래픽 쏠림에 따른 연쇄 장애 발생 가능성과 기존 장애 대응 시나리오의 미비점을 이번 장애를 통해 알게 됐다. 현재는 서비스 간의 의존성과 타이트한 연동을 최대한 줄여 입력 서비스 기능을 단독 실행 가능한 구조로 변경하는 작업과 발견한 문제점을 개선하는 작업을 진행하고 있다"며 "사용자 데이터뿐 아니라 서버 구성 정보나 배포 설정에 대해서도 철저하게 이중화하는 작업을 진행하고 있다. 카카오는 인프라 하드웨어 설비에서 서비스 애플리케이션에 이르는 전체 시스템 레이어에 다중화를 설계하고 구축해 가겠다. 서버 각각의 구성 정보 역시 다중화해서 문제가 생겼을 때 빠른 복구가 가능한 구조를 만들겠다"고 덧붙였다.

고우찬 재발방지대책 공동 소위원장. [사진=카카오]

고우찬 재발방지대책 공동 소위원장은 카카오의 미래 투자와 혁신 계획으로 자체 데이터센터 방재 대책 강화와 IT 엔지니어링 채용 확대를 제시했다.

고우찬 공동 소위원장은 "안산 데이터센터는 2024년 사용하는 것을 목표로 총 4600억 원의 예산이 투입되어 현재 시공 중에 있다. 24시간 무중단 운영을 위한 이중화 인프라 구축은 3개 영역 즉 전력, 냉방, 통신 각각에 모두 적용된다"며 "이번 판교 데이터센터 화재 사고에서 이슈가 된 UPS실과 배터리 실은 방화격벽으로 각각 분리 시공되어 배터리 실에 화재가 발생하더라도 나머지 시설 작동에 영향을 주지 않게 설계됐다. 이번과 같은 배터리 실 화재 상황이 발생할 경우 삼중의 진화 방식이 작동하게 된다"고 강조했다.

이어 "또 이번 화재 사고에서와 같이 밀폐된 공간에 소화가스가 들어가지 못해 진화에 문제가 발생하지 않도록 밀폐된 전기 패널별로 개별 소화 장치를 설치하여 작동되도록 했다. 만약에 소화가스 부족 상황에 대응하기 위해 필요한 경우 다른 층에 소화가스를 끌어다 쓸 수 있도록 예비 시스템도 구축했다"며 "만약 소화가스를 활용한 진화가 실패할 경우, 화재 발생 구간을 차단하고 냉각수를 채워 방염 방열이 가능하게 했다. 이상 삼중의 진화 방식이 단계적으로 작동되어 화재 조기 진압을 위하여 골든타임 안에 적극 대처하게 될 것"이라고 전했다.

또 "현재 카카오의 IT 엔지니어링 조직은 개발 조직 산하에 있지만, 앞으로는 카카오 CEO 직하의 부문 규모로 IT 엔지니어링 전담 조직을 확대 편성하는 방안을 검토 중이다. 국내 최고의 IT 엔지니어링 전문가들도 추가로 적극 영입하도록 하겠다"며 "대규모 장애에 대비한 재해복구위원회를 신설, 책임 있는 인력으로 구성된 위원회에서 즉각적인 대규모 장애에 대한 대응을 할 수 있도록 하겠다. 서비스의 연속성 확보를 최우선 임무로 하는 조직도 필요해 연속성 확보에 필수적인 항목을 도출하고, 실제로 지속적으로 운영 발전할 수 있도록 하는 전담 조직을 준비하겠다"고 약속했다.

카카오 남궁훈·홍은택 각자대표가 지난 10월 19일 경기 성남시 판교 카카오아지트에서 열린 데이터센터 화재로 인한 장애 관련 기자회견에서 고개 숙여 사과를 하고 있다. [사진=정일구 기자]

나아가 "서비스 안정성을 담보하기 위한 기술적 접근들 특히 카오스 엔지니어링 서비스, 스테이터스 페이지 등 국내에는 아직 보편화되지 않았지만, 주요 글로벌 기업들이 도입해 효과를 보고 있는 영역에서 R&D를 진행할 생각이다. 관련해 개발된 툴들을 오픈소스로 공개해 업계에 기여할 수 있도록 노력하겠다"며 "DR(Disaster Recovery) 아키텍처는 기본적으로는 삼중화 플러스 알파의 구조로 개선하려 한다. 모든 것이 무력화되더라도 꼭 단기간 내에 살려야 할 서비스는 데이터센터를 별도로 구축하는 방안도 검토하겠다. 아울러 카카오는 개선 사항들을 추가하기 위해 향후 5년 간은 지난 5년 간 투자 금액의 약 3배 이상 규모로 투자를 확대하겠다"고 덧붙였다.

한편, 카카오는 이날 키노트 연설을 시작으로 이달 9일까지 카카오 공동체 소속 개발자 120여 명이 연사로 나서 ▲ 1015 데이터센터 화재 회고 ▲ 인공지능 ▲ 백엔드 ▲ 클라우드 ▲ 데브옵스 ▲ 블록체인 ▲ 데이터 ▲ 프론트엔드 ▲ 모바일 ▲ ESG ▲ 문화 등으로 이루어진 12개 트랙에서 총 106개 발표 세션을 진행한다.

dconnect@newspim.com

[뉴스핌 베스트 기사]

사진
뉴스핌, AI 기반 맞춤형 MY뉴스 출시 [세종=뉴스핌] 이경태 기자 = 매일 쏟아지는 수만 개의 뉴스 중에서 정작 나에게 필요한 뉴스를 찾기는 쉽지 않다. 이런 고민을 해결하기 위해 종합뉴스통신사 뉴스핌이 국내 최초로 AI(인공지능)로 독자에게 뉴스를 추천해주는 'AI MY뉴스'를 11일 본격 출시했다. AI MY뉴스의 핵심은 지능형 구조에 있다. 그동안 미디어는 독자가 선택한 관심 분야에 의존해 단순히 뉴스를 선별해 제공했다. 그러나 AI MY뉴스는 독자를 이해하고 학습해가며 개인에게 꼭 필요한 뉴스를 골라 제공한다. ◆ AI 추천뉴스·글로벌투자·AI 어시스턴트 출시 'AI 추천뉴스'는 독자가 첫 번째 기사를 클릭하는 순간부터 작동한다. 관심 카테고리를 선택하고 기사를 읽을 때마다 AI 시스템이 독자의 취향을 기억하고 분석한다. 경제 뉴스를 자주 읽는 독자라면 점차 반도체, 주식, 부동산 등 세부 관심사까지 파악해 더욱 정확한 뉴스를 추천한다. '모닝 브리핑'과 '런치 브리핑'은 바쁜 현대인을 위한 맞춤 서비스다. 모닝 브리핑은 AI가 밤새 분석한 전날과 당일 새벽까지의 주요 뉴스를 5~7개 헤드라인으로 정리해 제공한다. 런치 브리핑은 오전 7시부터 정오까지의 뉴스를 공공·정치, 산업시장, 글로벌, 전국 이슈 등 4개 분야로 나눠 각각 5개씩 핵심 내용을 전달한다. '글로벌 투자' 서비스는 AI MY뉴스의 핵심 콘텐츠다. 뉴스핌 마켓 전문기자들의 고품질 투자분석 'GAM(Global Asset Management)'을 독자에게 제공한다. '글로벌 브리핑'은 미국 증권시장 상황을 한눈에 파악할 수 있도록 날마다 시장 개요부터 투자자 관점까지 4개 섹션으로 체계화된 분석을 제공한다. 애플, 마이크로소프트, 엔비디아 등 주요 기술주를 별도 추적해 대형 기술주의 시장 영향력을 정밀 분석한다. '파워 특징주 포트폴리오'는 일일 수익률, 변동성, 이동평균 편차 등 핵심 지표를 종합해 수익률 상위 종목을 분석하고, '이 시각 증시 시그널'은 글로벌 이슈를 실시간으로 찾아 미국 증시에 영향을 줄 수 있는 신호로 정리해 제공한다. '주간 연준 인사이트'는 연방준비위원회 공식 브리핑을 투자자 관점에서 재해석하며, '뉴욕증시 전문가 팁'은 매일 뉴욕 현지 증시 전문가들의 생생한 조언을 5개의 구체적인 팁으로 가공해 전달한다. 이 가운데 '뉴스 종목 추적기'는 전 세계 글로벌 뉴스에서 미국 시장에 영향을 줄 수 있는 요인을 실시간으로 포착한다. S&P500 전체 기업을 대상으로 긍정적·부정적 영향을 받을 종목을 각각 5개씩 찾아 구체적인 이유도 내놓는다. 뉴스핌이 새롭게 내놓는 AI MY뉴스 서비스 모습 [자료=뉴스핌DB] 2025.08.08 biggerthanseoul@newspim.com 뉴스핌은 글로벌 AI 검색 기업 퍼플렉시티와 협력해 생활 밀착형 AI 어시스턴트도 제공한다. '뉴스 전략 24시'는 그동안 축적된 뉴스 데이터를 바탕으로 독자의 질문 의도를 파악해 맞춤형 답변과 생활 전략을 제시한다. 미국 증시 투자 전략도 함께 제공해준다. '정책 배달 119'는 정부 정책브리핑의 모든 데이터를 기반으로 개인 상황에 맞는 정책을 찾아 신청 방법까지 안내하는 개인 맞춤형 정책 컨설턴트 역할을 한다. 단순 검색에서 그치지 않고 독자의 행동을 이끌 수 있는 현실적인 답변을 제시한다. 뉴스핌의 모든 기사는 50개 국어로 번역돼 국내 거주 외국인과 해외 독자들도 모국어로 한국 뉴스를 접할 수 있다.  ◆ "독자와 함께 성장하는 새로운 미디어 경험의 시작" 민병복 뉴스핌 회장은 "AI MY뉴스는 정보 홍수 시대에 진정으로 필요한 뉴스를 선별해 전달하는 새로운 미디어 패러다임을 제시한다"며 "경제적 어려움 속에서도 국민 모두의 삶에 힘이 되는 뉴스를 제공하겠다"고 강조했다. 민 회장은 "AI MY뉴스는 독자와 함께 성장하며 개인의 삶에 진정한 가치를 더하는 새로운 미디어 경험의 시작"이라며 "AI를 활용해 새로운 결과를 도출하는 것은 쉬운 일이 아니기 때문에 직접 AI로 콘텐츠를 만들어 국민 모두가 제한 없이 무료 서비스를 바로 활용할 수 있게 했다"고 말했다. 이번 AI MY뉴스 서비스는 첫 버전(V 1.0)이다. 우선 모바일 웹페이지에서 서비스가 제공된다. 뉴스핌은 국민을 대상으로 맞춤형 콘텐츠 수요를 직접 파악해 국민이 원하는 서비스를 지속 개발해나갈 예정이다.  분야별 독자들의 성향을 파악해 다양한 콘텐츠 설계 아이디어를 받아 매월 지속적인 콘텐츠 업데이트에 나설 예정이다.  이어 이미 서비스에 나선 AI 아나운서 글로벌 투자 콘텐츠는 물론, 다양한 영상 콘텐츠도 선보일 계획이다.  이를 토대로 뉴스핌은 국내를 뛰어넘어 세계 시장에서 AI를 잘 활용하는 글로벌 뉴스통신사로 도약하는 데 속도를 낼 예정이다.  biggerthanseoul@newspim.com 2025-08-11 12:54
사진
다음달 10일 2차 소비쿠폰 기준 나온다 [세종=뉴스핌] 양가희 기자 = 행정안전부가 2차 민생회복 소비쿠폰 지급기준을 이르면 내달 초 발표할 예정이다. 상위 10% 구분 기준은 부동산 및 금융소득 등을 살펴 이달 중 기준 수립 준비에 나선다. 한순기 행안부 지방재정경제실장은 8일 정부세종청사 행정안전부에서 열린 민생회복 소비쿠폰 간담회에서 "9월 10일 정도에 2차 (소비쿠폰) 기준을 발표할 것"이라고 밝혔다.  한 실장에 따르면 2차 지급 기준 준비는 이달 중 시작된다. 그는 "보건복지부와 건강보험공단을 만나 기준을 짜야 한다"며 "2021년 사례를 보면 1인가구는 특례를 가산했고, 맞벌이가구는 뺐다"고 설명했다. [서울=뉴스핌] 류기찬 인턴기자 = 한국신용데이터(KCD)가 4일 민생회복 소비쿠폰 카드 매출 분석 결과를 공개했다. 민생회복 소비쿠폰 지급이 시작된 지난 21일부터 27일까지 자영업자 매출 증감률은 전주 대비 평균 2.2% 증가한 것으로 나타났다. 이날 오후 서울 시내의 한 매장에 민생회복 소비쿠폰 사용가능 안내문이 붙어있다. 2025.08.04 ryuchan0925@newspim.com 한 실장은 "고액 자산가인데 건보료만 적게 내는 경우도 있다"며 "(행안부의) 부동산 데이터나 국세청 금융소득 데이터를 활용해 직장 가입자 중 고액 자산가를 선별할 것"이라고 덧붙였다. 지난달 21일부터 이달 7일까지 소비쿠폰 지급 현황에 따르면 전체 신청자는 4818만명으로, 전체 지급대상자의 95.2%가 신청을 마쳤다. 지급액은 8조7232억원으로 집계됐다.  사용 현황은 신용·체크카드 지급액 5조8608억원 가운데 절반가량인 3조404억원(51.9%)이 소비됐다. 이날 처음 공개된 지역별 신용·체크카드 소비율을 보면 서울보다 지역이 높은 편이었다. 제주가 57.2%로 가장 높았고 이어 인천 54.7%, 울산 54.6%, 광주 54.5%, 충북 54.1%, 대전 54.0%, 부산 53.7% 등이었다. 한 실장은 "비수도권에 3만원·5만원 더 준 부분도 있지만, 지역 영세소상공인 매출로 이어져 의미 있는 숫자"라며 "10%포인트(p) 차이는 아니지만 2~3%p라도 높은 것은 그만큼 비수도권이 어려웠다는 방증이자 (소비쿠폰이) 사용되고 있다는 신호"라고 말했다. 행안부는 2차 소비쿠폰 지급을 위한 예산에는 문제가 없다는 입장이다. 한 실장은 "사업 전체 13조9000억원 가운데 1조8000억원만 지방(예산)이고 나머지 12조1000억원가량이 국비다"라며 "(국비에서) 8조1000억원을 먼저 내렸고, 기획재정부 협조를 구해 이달 중순 정도에 4조1000억원을 조속하게 받기로 했다"고 말했다. [자료=행정안전부] 2025.08.08 sheep@newspim.com 한 실장은 "(소비쿠폰 2차 지급에 앞서) 지방채 발행이 필요 충분 조건은 아니고 충분조건 정도 될 것"이라며 "(지방재정법 통과는) 9월 본회의까지 하도록 목표를 잡고 있다"고 덧붙였다. 이번 추가경정예산안(추경)에는 민생쿠폰 관련 연구용역 예산 2억원도 담겼다. 소비쿠폰 등 현금성 지원에 대한 효과를 철저하게 분석한다는 취지다. 한 실장은 "민생쿠폰 추경에 연구용역비 2억원이 담겼다"며 "과거 2020~2021년 효과가 있냐 없냐 등 많은 비판이 있었다. 연구 용역을 제대로 하려는 것"이라고 설명했다. 조세정책연구원이나 KDI 등과 연구한다는 것이 행안부 현재 계획이다. 행안부는 하나로마트에서 사용할 수 있는 지역을 확대한다는 계획도 이날 밝혔다. 그간 도서산간지역 소비쿠폰 사용처가 제한적이라는 비판이 꾸준히 제기된데 따른 것이다.  한 실장은 "면 단위에서 동네에 마트 등이 전혀 없는 경우가 있어 하나로마트 121곳에서 현재 사용 가능하다"면서도 "현장을 가 보니 마트가 있어도 너무 영세해 고기나 채소 등 신선식품을 사기 어려운 경우가 있었다. 현재 시장·군수 대상으로 수요조사를 하고 있고, 빠른 시일 내로 하나로마트 사용처를 추가 지정할 것"이라고 말했다. 한 실장은 또 "추가 소비 진작 대책을 관계부처와 많이 만들고 있다"며 "행안부는 수도권 기업, 공기업, 관공서 등과 비수도권 간 자매결연을 맺는 소비진작 대책을 만들고 있다"고 밝혔다. sheep@newspim.com 2025-08-08 16:11
안다쇼핑
Top으로 이동