Como Facebook compartilha dois bilhões de fotos com instalações de frio

Uma bandeja de discos rígidos em um rack de armazenamento a frio. (Foto: Facebook); Facebook é compartilhar mais detalhes sobre a menos glamourosa, mas ainda essencial trabalho por trás das cenas que vai para armazenar quantidades arrogantes de dados do usuário.

Desta vez, a maior rede social do mundo está oferecendo um mergulho profundo específica em um recurso do grampo que todos nós amor e ódio, dependendo do ponto de vista: fotos.

Muito parecido com ele tem no reforço do feed de notícias e outras características populares, Facebook continuou ao longo de sua jornada na construção de novas soluções de armazenamento e de centro de dados in-house a partir do zero.

homegrown tecnologias de data center do Facebook estão bem estabelecidos até agora, com pegadas de Oregon para a Suécia.

A empresa Menlo Park, na Califórnia, com sede reforçou recentemente seu centro de dados em Altoona, Iowa em novembro passado com um tecido de centro de dados descrito como uma arquitetura de próxima geração desenvolvido para acelerar o tráfego de máquina-para-máquina em grande escala.

Essencialmente, a solução para o quebra-cabeça tornou-se instalações de armazenamento a frio.

engenheiros do Facebook Krish Bandaru e Kestutis Patiejunas explicou ainda em seu blog na quinta-feira como o processo de desenvolvimento começou com os servidores de construção que ligar, conforme necessário, em seguida, geridos por software inteligente constantemente a verificação e balanceamento de dados para otimizar a durabilidade.

De acordo com a equipe de engenharia, esta abordagem full-stack para estabelecer a eficiência, reduzindo potência de funcionamento baseia-se em prateleiras de construção com dupla petabyte (ou dois milhões de gigabytes) sistemas de armazenamento que operam em um quarto da potência normalmente usado por servidores de armazenamento convencional.

Os melhores líderes de negócios usam tecnologia como uma de suas alavancas mais importantes para impulsionar a inovação e mudança. Aqui está a sabedoria para fazer isso acontecer.

O objetivo era garantir que as suas fotos #tbt de anos anteriores foram tão acessíveis como o mais recente meme do gato popular, mas teve menos espaço de armazenamento e usado menos energia “, brincou Patiejunas e Bandaru.” Quanto mais velho, e, portanto, menos popular, fotos pode ser armazenado com um fator de menor replicação, mas apenas se conseguimos manter, uma cópia adicional altamente durável em outro lugar.

A equipe de engenharia reconheceram que são “sorte” de ter tanto o apoio financeiro e tecnológico (para não mencionar o incentivo) para construir tal hardware e software a partir do zero e fazer experiências com eles.

Muitas vezes, temos todos os sistemas visto começar a se atolar à medida que crescem e se tornam mais utilizados, “Patiejunas e Bandaru escreveu.” Assim, desde o início, que prometeu fazer um sistema que não só não degradam com tamanho, mas iria ficar melhor à medida que crescia.

Facebook já estabeleceu duas instalações de frio no ano passado em seus centros de dados em Prineville, Oregon e Forest City, Carolina do Norte, em conjunto hospedagem “centenas de petabytes” de dados – uma quantidade Patiejunas e Bandaru admitiu é ballooning diária.

Imagem via Facebook

NetApp lança sistema mid-tier para lagos de dados, parceiros com Zaloni

Mais sobre a infraestrutura do Facebook

Facebook detalhes dois anos de trabalho para ligar padrão HTTPS; Facebook explica como ‘TAO’ serve cargas de trabalho social, solicitações de dados; Facebook devs explicar como ele mapeia conexões de usuários para outras entidades “; Facebook traduz interface de linguagem natural sob Graph Pesquisa; engenheiros do Facebook revelam como Parse se encaixa em Plataforma, as estratégias B2B; Facebook liberando nova referência de banco de dados social Graph: LinkBench; Facebook revela os ingredientes atrás App Center mecanismo de recomendação; Compreender Unicorn: Um mergulho profundo do Facebook Graph Pesquisa

Armazenamento; NetApp lança sistema mid-tier para lagos de dados, parceiros com Zaloni; Nuvem; Michael Dell em fechar negócio EMC: “Podemos pensar em décadas; Data Centers; Dell Technologies decola: Aqui está o que vê como Dell, EMC, uma bando de negócios empresariais combinam; armazenamento; Facebook Open fontes ZStandard algoritmo de compressão de dados, tem o objetivo de substituir a tecnologia por trás Zip

Michael Dell em fechar negócio EMC: “Podemos pensar em décadas ‘

Dell Technologies decola: Aqui está o que vê como Dell, EMC, um bando de negócios empresariais combinam

Facebook Open fontes ZStandard algoritmo de compressão de dados, tem o objetivo de substituir a tecnologia por trás Zip