Какой порядок или тип сжатия используется в Parquet?
Parquet сначала кодирует значения внутри колонок, затем может сжимать страницы выбранным кодеком. Единственного обязательного алгоритма сжатия нет.
Читать ответПодготовка к интервью
577 вопросов с собеседований в Лига цифровой экономики
Что проверяют на интервью
Подборка объединяет вопросы, отмеченные на этапах интервью в Лига цифровой экономики. Здесь можно понять структуру технической проверки и заранее повторить связанные темы. В подборке чаще встречаются темы: backend, frontend, api.
Каталог
Parquet сначала кодирует значения внутри колонок, затем может сжимать страницы выбранным кодеком. Единственного обязательного алгоритма сжатия нет.
Читать ответТеги S3 — пары ключ–значение для управления ресурсами, например владельцем, средой и жизненным циклом. Теги bucket и object задаются отдельно.
Читать ответНазовите комфортную компенсацию с учётом полного набора условий и уточните валюту, период, налоги и бонусы. Офис и гибрид обсуждайте как часть предложения.
Читать ответОпишите реальный способ интеграции с 1С: поддерживаемый API, обмен через шину, выгрузки или согласованное чтение БД. У каждого варианта разные гарантии и риски.
Читать ответРеакция зависит от критичности: предупреждение, карантин строк или остановка публикации. Автоматический retry нужен при временном сбое, а не для любой ошибки качества.
Читать ответРасскажите, как получали файлы, проверяли завершённость передачи и обеспечивали повторяемую обработку. FTP, FTPS и SFTP — разные протоколы.
Читать ответРазделите назначение компонентов: Hadoop — экосистема, HDFS — распределённое файловое хранилище, Hive — SQL-слой и метаданные таблиц.
Читать ответРасскажите путь данных от TMS/WMS до витрин, разделив извлечение, хранение, преобразования и контроль качества. Внутреннюю архитектуру компании нельзя вывести из её названия.
Читать ответДайте конкретную и спокойную обратную связь: что заинтересовало, что осталось непонятным и насколько формат помог оценить взаимное соответствие.
Читать ответJinja — шаблонизатор: он подставляет значения и выполняет конструкции шаблона, формируя текст, например HTML или SQL.
Читать ответParquet — колоночный формат. Данные организованы в row groups, внутри которых значения каждой колонки хранятся отдельными column chunks.
Читать ответПроверяют бизнес-ключи и уникальность hubs, корректность links, историю satellites, полноту загрузок и соответствие источникам.
Читать ответ