Spark skew: как заметить перекос в выполнении

Большая часть задач стадии Spark уже завершилась, но обработка всё ещё идёт. Выберите признак, который помогает отличить перекос данных от равномерной нагрузки.

Продолжить практику с Kafka, Airflow и Spark можно в платном курсе Data Engineering Fast-Track.