Facebook - Um olhar por trás das cenas e no complexo sistema

"Um Dia na Vida de Operações Facebook" chamado Tom Cook, System Engineer da palestra sobre o Facebook "2010 Velocity" Ele dá uma visão interessante sobre a estrutura dos servidores e serviços na base de código aberto.

Desde Facebook tornou-se mais 10 mil servidores por trás de um gigantesco sistema balanceador de carga em uso, ele é um grande desafio para gerenciar tudo isso e sobre o estado actual (patches, correções de segurança, manter ...). Tom Cook explicou em sua apresentação 40 minutos do projeto básico do Facebook. Aqui estão alguns fatos importantes e componentes a partir da perspectiva de um sistema.

Sistema Operacional:

Facebook baseia-se exclusivamente no Linux. Utilizado é um CentOS 5 com uma versão modificada 2,6 kernel

Base de dados:

Como o banco de dados MySQL usado.

Caching:

HipHop para Php
O código-fonte é um transformador, que se transformou em um PHP desempenho otimizado e compilado o código C + +. Desenvolve o sistema de três engenheiros Facebook para abrir base de origem. A introdução do hip hop o WebServer última Facebook para 50% foi reduzido.

Memcached
É um servidor de cache de código aberto a consultas freqüentemente usadas (SELECT em particular) a partir do servidor de banco de dados armazena na memória e, assim, reduz o acesso ao disco e Datenkbankzugriffe forte. Memcached no Facebook detém actualmente cerca de 300 TB de dados em tempo real na RAM.

Gerenciamento de Configuração:

Cfengine 2.xx
Configurações é um software de gestão central para múltiplas (até 10.000) sistemas na mesma versão do software e trazer até à data. Este processo é executado a cada 15 minutos para TODOS os servidores. Assim, a central mais de 100 políticas que incluem cerca de 1000 regras são colocadas dentro de 30 segundos em todos os servidores em dia.

Acompanhamento:

Este é também baseado no sistema conhecido como Ganglia , Nagios e ODS (Operational Data Store),

WebPush:

A distribuição de novos conteúdos, recursos e correções para Facebook.com é realizado através de um servidor interno BitTorrent. É preciso apenas um minuto sobre um antes do novo código para saber mais sobre Facebook.com 10.000 servidores está disponível. Os ciclos que se seguem são usados em

1x por semana para novas funcionalidades
1x por dia para alterações no código para a página principal
várias vezes ao dia para correções de bugs e patches

apresentação completa por Tom Cook:

Tags: CentOS , Cfengine , facebook , gânglios , hiphop , kernel , memcached , mysql , Nagios , ODS , Video