Попалась интересная мне статья "Опыт построения и эксплуатации большого файлового хранилища". Просто все описанные проблемы когда-то приходилось решать. Да и вообще, в целом - интересный взгляд на "большие данные". Ну, как на большие данные - автор чётко делит доносит признаки файлового хранилища, и рассказывает. Фактически, это - история граблей и побед над ними. Достаточно подробно (на уровне концепта архитектуры) рассказано, как были побеждены грабли. Что было сделано. Понятно, что know how не раскрывается...

Ссылка: https://habrahabr.ru/company/oleg-bunin/blog/313364/