카오스 엔지니어링

3. 역사

카오스 엔지니어링의 개념은 시스템의 안정성을 선제적으로 검증하고 강화하려는 시도에서 비롯되었다. 초기에는 여러 기업에서 각기 다른 형태로 시스템에 의도적인 혼란을 주어 그 반응을 살피는 실험들이 진행되었다.

1983년 애플에서는 스티브 캡스가 초기 매킨토시 개발 과정에서 '몽키'라는 도구를 사용해 무작위 사용자 인터페이스 이벤트를 발생시켜 시스템 오류를 찾는 데 활용했다.^[4] 이는 시스템의 예기치 않은 동작을 시험하는 초기 사례로 볼 수 있다. 1992년 PROLOGUE 운영 체제 개발 중에는 이안 제임스 마샬이 'La Matraque'라는 도구를 만들어 그래픽 인터페이스의 복원력을 테스트했다.

2003년 아마존에서는 제시 로빈스가 웹사이트 안정성 향상을 목표로 '게임 데이'라는 프로그램을 도입하여 의도적으로 주요 장애 상황을 연출하고 이에 대비하는 훈련을 했다.^[5][6] 2006년 구글 역시 이와 유사한 개념의 'DiRT' 프로그램을 만들어 시스템의 안정성을 시험했다.^[6][7][8]

현대적인 카오스 엔지니어링 개념은 2011년 넷플릭스에서 클라우드 환경으로 이전하는 과정에서 크게 발전했다. 노라 존스, 케이시 로젠탈, 그렉 오젤 등은 카오스 몽키와 같은 도구를 개발하여 실제 운영 환경인 프로덕션 환경에서 의도적으로 서버를 중단시키는 실험을 감행했다.^[12][16][13] 이는 장애가 발생할 수 있다는 전제하에 시스템의 복원력을 설계 단계부터 필수적으로 고려하도록 개발 문화를 변화시키는 데 중요한 역할을 했다.^[14] 이러한 접근 방식은 소프트웨어 서비스의 인스턴스를 무작위로 종료시켜 봄으로써, 실제 장애 발생 시 고객에게 미치는 영향을 최소화할 수 있는지 중복 아키텍처를 검증하는 효과적인 방법이 되었다.

이러한 카오스 엔지니어링의 개념은 2012년 마틴 파울러가 소개한 피닉스 서버 개념과도 유사한 맥락을 가진다.^[15]

3. 1. 1983년 - 애플

3. 2. 1992년 - Prologue

3. 3. 2003년 - 아마존

3. 4. 2006년 - 구글

3. 5. 2011년 - 넷플릭스

4. 주요 도구

카오스 엔지니어링을 수행하기 위해 다양한 도구들이 개발되어 활용되고 있다. 대표적인 예로는 넷플릭스가 개발한 카오스 몽키와 이를 포함하는 더 큰 도구 모음인 시미안 아미가 있다. 이 외에도 Gremlin, 페이스북의 Project Storm, Voyages-sncf.com의 자체 도구, Steadybit, Proofdock 등 다양한 상용 및 오픈소스 도구들이 존재하며, 특정 환경이나 목적에 맞게 사용된다.^{[16][18][20][29][30][23][28]}

4. 1. 카오스 몽키 (Chaos Monkey)

온라인 활동의 모든 중요한 기능을 호스팅하는 '데이터 센터', 즉 이러한 서버 '팜'에 원숭이가 들어간다고 상상해 보십시오. 원숭이는 무작위로 케이블을 찢고, 장치를 파괴하고, 손에 닿는 모든 것을 되돌려 놓습니다 [즉, 배설물을 던집니다]. IT 관리자의 과제는 이러한 원숭이에도 불구하고 작동할 수 있도록 책임 있는 정보 시스템을 설계하는 것입니다. 이러한 원숭이는 언제 도착하여 무엇을 파괴할지 아무도 알 수 없습니다.

4. 2. 시미안 아미 (Simian Army)

• 카오스 콩 (Chaos Kong): 시미안 아미 계층 구조의 최상위에 위치하며, 전체 AWS "리전"을 중단시킨다.^[21] 드물지만 전체 리전의 손실이 발생하며, 카오스 콩은 이러한 유형의 이벤트에 대한 시스템 응답 및 복구를 시뮬레이션한다.
• 카오스 고릴라 (Chaos Gorilla): 전체 아마존 "가용 영역"(지리적 지역을 서비스하는 하나 이상의 전체 데이터 센터)을 중단시킨다.^[22]

4. 3. 기타 도구

• Gremlin은 "서비스형 실패" 플랫폼이다.^[29]
• 페이스북의 Project Storm은 자연 재해에 대한 저항력을 시험하기 위해 데이터 센터 규모의 실패를 시뮬레이션한다.^[30]
• Voyages-sncf.com은 2017년 "카오스의 날" 행사를 통해 게이미피케이션 기법을 활용하여 프로덕션 환경 이전 단계에서 시스템 실패 상황을 시뮬레이션했으며, 이 사례는 2017년 DevOps REX 컨퍼런스에서 발표되었다.^[23][24][25]
• 2019년에 설립된 Steadybit은 프로덕션 환경 적용 전 단계에서의 카오스 엔지니어링과 신뢰성 엔지니어링을 대중화하는 데 기여했다.^[28] Steadybit은 오픈 소스 신뢰성 허브를 통해 기능을 확장할 수 있다.^[26][27]
• Proofdock은 마이크로소프트 Azure DevOps 환경 내에서 인프라, 플랫폼, 애플리케이션 수준의 다양한 실패 시나리오를 주입하는 기능을 제공한다.^[28]

참조

_[1] 웹사이트 Principles of Chaos Engineering https://principlesof[...] 2017-10-21
_[2] 간행물 Evaluating operational readiness using chaos engineering simulations on Kubernetes architecture in Big Data https://ieeexplore.i[...] 2022-11-29
_[3] 뉴스 Machine Learning Podcast Host and Technology Influencer: Gautam Siwach https://www.laweekly[...] LA Weekly 2022-10-07
_[4] 웹사이트 Monkey Lives https://www.folklore[...] 2023-09-11
_[5] 웹사이트 Game day https://wa.aws.amazo[...] Amazon 2020-12-31
_[6] 학술지 Resilience Engineering: Learning to Embrace Failure https://queue.acm.or[...] 2012-09-13
_[7] 학술지 Weathering the Unexpected https://queue.acm.or[...] 2012-09-16
_[8] 간행물 10 Years of Crashing Google https://www.usenix.o[...] 2015-11-08
_[9] 서적 Site Reliability Engineering https://www.worldcat[...] O'Reilly Media
_[10] 웹사이트 Chapter 5. Google DiRT: Disaster Recovery Testing https://learning.ore[...] O'Reilly Media 2020-04-30
_[11] 웹사이트 WATCH: The DiRT on Chaos Engineering at Google https://youtube.com/[...] GOTO Conferences 2021-06-02
_[12] 서적 Chaos Engineering https://www.worldcat[...] O'Reilly Media
_[13] 특허 Validating the resiliency of networked applications
_[14] 웹사이트 Netflix Chaos Monkey Upgraded https://medium.com/n[...] Medium 2016-10-19
_[15] 웹사이트 PhoenixServer https://martinfowler[...] Martin Fowler (software engineer) 2012-07-10
_[16] 웹사이트 The Netflix Simian Army https://medium.com/n[...] Medium 2011-07-19
_[17] 뉴스 Netflix libère Chaos Monkey dans la jungle Open Source https://www.lemondei[...] Le Monde Informatique 2017-11-07
_[18] 웹사이트 SimianArmy: Tools for your cloud operating in top form. Chaos Monkey is a resiliency tool that helps applications tolerate random instance failures https://github.com/N[...] Netflix, Inc. 2017-10-20
_[19] 웹사이트 Mais qui sont ces singes du chaos ? https://15marches.fr[...] 2017-07-25
_[20] 뉴스 Infrastructure : quelles méthodes pour s'adapter aux nouvelles architectures Cloud ? - D2SI Blog http://blog.d2-si.fr[...] D2SI Blog 2015-12-08
_[21] 웹사이트 Chaos Engineering Upgraded https://netflixtechb[...] 2017-04-19
_[22] 웹사이트 The Netflix Simian Army https://medium.com/n[...]
_[23] 웹사이트 Days of Chaos http://days-of-chaos[...] 2022-02-18
_[24] 웹사이트 DevOps: feedback from Voyages-sncf.com https://www.blogdumo[...] 2017-03-17
_[25] 웹사이트 "[devops REX 2017] Days of Chaos : le développement de la culture devops chez Voyages-Sncf.com à l'aide de la gamification" https://fr.slideshar[...] 2017-10-03
_[26] 웹사이트 steadybit/reliability-hub-db https://github.com/s[...] Steadybit 2024-08-26
_[27] 웹사이트 Home https://hub.steadybi[...] 2024-08-26
_[28] 웹사이트 Steadybit wants developers involved in chaos engineering before production https://techcrunch.c[...] 2022-09-22
_[29] 웹사이트 Gremlin raises $18 million to expand 'failure-as-a-service' testing platform https://venturebeat.[...] 2018-09-28
_[30] 웹사이트 Interview: How Facebook's Project Storm Heads Off Data Center Disasters https://www.forbes.c[...] 2016-09-11
_[31] 웹인용 Principles of Chaos Engineering http://principlesofc[...] 2017-10-21