Как Google хранит информацию?

Ежедневно на сервисы Google попадают петабайты информации, будь то видеоролики в YouTube, пользовательские данные или игры в Play Market.

Для хранения информации в таких огромных объёмах требуется соответствующее оборудование и далеко не все знают, как это хранится.

Вся информация хранится в большой вычислительной системе – сервере. Простыми словами, это огромное множество вычислительных машин, объединённых между собой. Все компьютеры в такой сети имеют равные права, но управление происходит с одного главного компьютера – главный процессор всей этой сети.

На чём хранится информация?

Информация хранится на знакомых нам жёстких дисках. Объём одного жёсткого диска может достигать около 20 терабайт. Кажется, что это очень немного, но в такой вычислительной сети таких жёстких дисков огромное множество, сотни тысяч (если не миллионы). Весь сервер Google занимает площадь размером в 10.000 квадратных метров, это как самое большое футбольное поле.

Ежеминутно на YouTube заливается 300 часов видео.

Примерный вес YouTube – 5 петабайт (5 тысяч терабайт).

Вес Netflix – 1 петабайт (1 тысяча терабайт).

Если рассматривать на примере YouTube, то каждый день платформа обрабатывает терабайты видео-роликов.

Если допустить, что в среднем люди загружают видео по 15 минут в разрешении FullHD (1920×1080) в 60 fps/frames, то вес одного такого видео-ролика будет примерно 10 гигабайт. Из данных выше можно сделать вывод, что каждую минуту в YouTube загружают свыше 100 гигабайт информации.

Поясним:

Мы специально взяли время в 15 минут FullHD, так как это является некой серединой между десятками роликов по 20 минут в 4k и сотнями тысячами роликов по 3 минуты в HD.

В Google работают так же и облегчающие работу платформы механизмы. Все ролики, загружаемые в YouTube проходят дополнительную конвертацию, чтобы максимально ужать объём ролика с минимальной потерей в качестве (рядовому пользователю эта потеря чаще всего не заметна).

Жёсткие диски, выходя из строя, автоматически извлекаются специальными роботами и уничтожаются, а на их место сразу ставят новые. Данные не теряются благодаря BackUp’ам (резервное копирование).

 

Источник

Читайте также