16.배움은 계속된다

대규모 시스템 설계 기초 16장을 요약한 내용입니다.

좋은 시스템을 설계하려면 다년간 많은 지식을 쌓아야 한다.

• 실세계에서 쓰이는 시스템의 구조를 공부하는 것은 지식을 쌓는 지름길이다.

• 각 기술을 공부하고 그 기술이 어떤 문제를 푸는지 이해하는 것은, 지식의 토대로 견고하게 하고 설계 프로세스를 다듬는 아주 좋은 방법이다.

실세계 시스템들

여러 회사에서 실제로 사용되는 시스템이 어떻게 설계되었는지 감을 잡는 데 도움이 될 수 있는 자료들

Facebook

• 페이스북 타임라인: 비정규화의 힘

  • Facebook Timeline: Brought to You by the Power of Denormalization

• 페이스북에서의 규모 확장성

  • Scale at Facebook

• 타임라인: 한 사람의 인생을 담기에 충분한 규모 확장성

  • Building Timeline: Scaling up to hold your life story

• 페이스북에서 Erlang을 사용하는 방법

  • Erlang at Facebook

• 페이스북 채팅

  • Facebook Chat

• 건초더미에서 바늘 찾기: 페이스북의 사진 저장소

  • Finding a needle in Haystack: Facebook’s photo storage

• 페이스북 멀티피드

  • Serving Facebook Multifeed: Efficiency, performance gains through redesign

• 페이스북 멤캐시 시스템의 규모 확장성

  • Scaling Memcache at Facebook

• TAO: 페이스북의 소셜 그래프 분산 저장소

  • TAO: Facebook’s Distributed Data Store for the Social Graph

• 페이스북이 $19B에 사들인 왓츠앱의 아키텍처

  • The WhatsApp Architecture Facebook Bought For $19 Billion

Amazon

• 아마존 아키텍처

  • Amazon Architecture
• 다이나모: 아마존의 고가용성 키-값 저장소

  • Dynamo: Amazon’s Highly Available Key-value Store

Netflix

• 넷플릭스 기술 스택을 모든 각도에서 살펴보기

  • A 360 Degree View of the Entire Netflix Stack
• 결국 A/B 테스팅 문제: 넷플릭스의 실험 지원 플랫폼

  • It’s All A/Bout Testing: The Netflix Experimentation Platform
• 넷플릭스 추천 시스템 (1부)

  • Netflix Recommendations: Beyond the 5 stars (Part 1)
• 넷플릭스 추천 시스템 (2부)

  • Netflix Recommendations: Beyond the 5 stars (Part 2)

Google

• 구글 아키텍처

  • Google Architecture
• 구글 파일 시스템

  • The Google File System
• 차이 기반 동기화(델타 동기화)

  • Differential Synchronization
• 유튜브 아키텍처

  • YouTube Architecture
• 유튜브의 규모 확장성

  • Seattle Conference on Scalability: YouTube Scalability
• 빅테이블: 구조화된 데이터를 위한 분산 저장소 시스템

  • Bigtable: A Distributed Storage System for Structured Data

Instagram

• 인스타그램 아키텍처

  • Instagram Architecture: 14 Million users, Terabytes of Photos, 100s of Instances, Dozens of Technologies

Twitter

• 트위터는 어떻게 150M 활성 사용자를 감당할 시스템을 만들었나

  • The Architecture Twitter Uses to Deal with 150M Active Users, 300K QPS, a 22 MB/S Firehose, and Send Tweets in Under 5 Seconds
• 트위터 규모 확장하기: 트위터를 10000배 빠르게 만든 비결

  • Scaling Twitter: Making Twitter 10000 Percent Faster
• 스노플레이크

  • Announcing Snowflake
• 타임라인과 규모 확장성 문제

  • Timelines at Scale

Uber

• 우버는 실시간 마켓 플랫폼의 규모를 어떻게 늘렸나

  • How Uber Scales Their Real-time Market Platform

Pinterest

• 핀터 페스트의 규모확장성

  • Scaling Pinterest - From 0 to 10s of Billions of Page Views a Month in Two Years
• 핀터레스트아키텍처 업데이트

  • Pinterest Architecture Update - 18 Million Visitors, 10x Growth,12 Employees, 410 TB of Data

LinkedIn

• 링크드인이 규모 확장성을 어떻게 성취해 왔는지에 대한 간략한 보고서

  • A Brief History of Scaling LinkedIn

Flickr

• 플리커 아키텍처

  • Flickr Architecture

Dropbox

• 우리는 드롭박스의 규모를 어떻게 확장했나

  • How We've Scaled Dropbox

회사별 엔지니어링 블로그

정기적으로 살펴보는 습관을 들여 놓으면 더 나은 엔지니어가 되는 데 많은 도움을 얻을 수 있을 것이다.

• Google
• Groupon
• Github
• Nextdoor
• Netflix
• Docker
• Dropbox
• Reddit
• Kinkedin
• Mixpanel
• Bittorrent
• Soundcloud
• Thumbtack
• Salesforce
• Shopify
• Slack
• Stripe
• Spotify
• Amazon
• Asana
• Atlassian
• Yahoo
• Airbnb
• Uber
• Yelp
• eBay
• Instagram
• Instacart
• Zoom
• Quora
• Cloudera
• Twitter
• Facebook
• PayPal
• Pinterest
• Highscalability

시스템 설계 문제에 관한 링크 모음

system-design-primer