[Перевод] DataFusion — не только для аналитики: как ускорить точечные запросы почти в 8 раз

Habr ·

[Перевод] DataFusion — не только для аналитики: как ускорить точечные запросы почти в 8 раз

DataFusion умеет обрабатывать большие объёмы данных, но насколько хорошо он справляется с поиском одной строки среди миллионов? При точечных запросах даже небольшие накладные расходы могут заметно снижать пропускную способность. Разберём, как настройки Parquet и оптимизация выполнения запросов помогли ускорить точечное чтение почти в 8 раз и сократить время отклика до 0,2 мс. Разобрать оптимизации

Источник: Habr