Чем отличается pandas от PySpark и Polars?

pandas — библиотека табличного анализа в одном процессе, PySpark — Python-интерфейс распределённого Spark, а Polars использует колоночный движок с параллельным выполнением и ленивыми запросами.

Для умеренных данных pandas удобен экосистемой; Polars помогает эффективно обрабатывать табличные преобразования на одной машине; PySpark полезен, когда нужны кластер и распределённые источники. Размер данных, тип операций и стоимость запуска важнее лозунга «эта библиотека всегда быстрее». Семантика индексов, типов и null у них различается.