О-похмел?

Ну просто как грибы после дождя, так и вылезают технологии и инструменты горизонтального масштабирования и распараллеливания. Вот еще новость о двух весьма занятных проектах:

Новая реализация POHMELFS базируется на распределённом хранилище Elliptics, представляющем собой распределённую хэш таблицу. Изначально Elliptics развивался как часть POHMELFS, но два года назад был выделен в отдельный проект, который успешно используется в промышленной эксплуатации. Например, Elliptics используется для организации хранения около петабайта контента в сервисах компании Yandex (карты, фотографии, музыка)

...

Среди возможностей Elliptics: отсутствие единой точки отказа (отсутствует сервер мета-данных), поддержка репликации, автоматическое восстановление после сбоев, поддержка поколоночного хранения, проверка целостности, хранение данных в сжатом виде (используется метод Snappy), атомарные транзакции, выборка группы ключей, поддержка привязки генерации уведомлений к операциям над заданными объектами и модульная архитектура, допускающая подключение различных бэкендов для хранения данных

...

Целью развития Elliptics является поддержка развёртывания хранилищ, работающих на базе нескольких территориально разделённых дата-центров

...

Если раньше дизайн POHMELFS напоминал параллельный NFS, то теперь POHMELFS выступает в роли фронтэнда с реализацией POSIX ФС, работающего поверх независимого хранилища Elliptics

...

Структура проекта стала заметно проще, что положительно сказалось на надёжности. Кроме того, удалось избавиться от ранее наблюдаемых узких мест, связанных с масштабированием и быстродействием (например, реализована возможность параллельного чтения/записи данных одновременно на несколько узлов). В настоящее время POHMELFS обеспечивает производительность, достаточную для полной утилизации пропускной способности сетевых устройств

...

opennet.ru/opennews/art 32667

lkml.org/lkml/2011/12/23/161

ioremap.net/projects/pohmelfs

ioremap.net/taxonomy/term/4

ioremap.net/projects/elliptics

elliptics.ru

Интересно, скоро ли проявится следующая эволюционная ступень битторрента? Типа такой — ты отдаешь часть своего дискового пространства и часть своего сетевого канала под «облако хранения» а в ответ получаешь каталог всех хранимых в «облаке...» данных/файлов и возможность слить себе копию любого файла. Конечно, у тебя есть возможность залить в «облако...» любой файл. А данные/файлы разбросаны по кусочкам по всему миру, среди подобных тебе узлов.