Константин Селезнёв, наш системный архитектор, поделился советами обработки файлов, превышающих объем доступной оперативной памяти. В таких случаях кэш операционной системы и известные технологии BigData оказываются крайне неэффективным. Нашли решения!
Обсудили базовые и возможные принципы работы с объёмными файлами на реальных кейсах. Разобрали разные фазы сортировки и решили задачи по уменьшению файла — вызвали этим бурные обсуждения с гостями.
Ждём продолжения нашего уже традиционного формата встреч — новых митапов!
А пока почитайте наши кейсы о работе с данными и ознакомьтесь с нашими собственными СУБД:
Кроссплатформенное приложение для управления пользовательскими данными