[Перевод] DataFusion — не только для аналитики: как ускорить точечные запросы почти в 8 раз
Habr ·
![[Перевод] DataFusion — не только для аналитики: как ускорить точечные запросы почти в 8 раз](https://habrastorage.org/extt/c3/70/89/c370898d2bc77bb43b2fdd46f2c5711b.jpg)
DataFusion умеет обрабатывать большие объёмы данных, но насколько хорошо он справляется с поиском одной строки среди миллионов? При точечных запросах даже небольшие накладные расходы могут заметно снижать пропускную способность. Разберём, как настройки Parquet и оптимизация выполнения запросов помогли ускорить точечное чтение почти в 8 раз и сократить время отклика до 0,2 мс. Разобрать оптимизации