apache-iceberg
Вопросы и ответы
Вопрос или проблема Я пытаюсь применить объединение для двух таблиц iceberg, которые извлекаются через временное путешествие в pyspark. Вот код, который я пробовал: union_query = f""" SELECT * FROM {table_name} FOR SYSTEM_TIME AS OF TIMESTAMP '{initialdate}'
Вопросы и ответы
Вопрос или проблема Я использую Iceberg с PostgreSQL в качестве каталога, MinIO в качестве хранилища данных и Spark для взаимодействия с Iceberg. Мое приложение может принимать нескольких пользователей, работающих с одной и той же таблицей одновременно, используя Spark SQL.
Вопросы и ответы
Вопрос или проблема Я хотел бы узнать больше о нюансах чтения айсберговых таблиц с использованием AWS Glue в кросс-аккаунтном режиме и буду признателен за ваш отзыв. AWS аккаунт#продюсер: Производство айсберговых таблиц с использованием каталогов AWS
Вопросы и ответы
Вопрос или проблема версия iceberg: 1.1.0 версия spark: 3.3.0 Я создал новую таблицу, похожую на приведенную ниже. CREATE TABLE prod.db.sample ( ... ) USING iceberg PARTITIONED BY (day) LOCATION '...' TBLPROPERTIES ( 'write.format.
Вопросы и ответы
Вопрос или проблема Создание разделяемой таблицы Iceberg в dbt с использованием соединителя Athena Надеюсь, у вас все хорошо. Я использую dbt с AWS Athena, чтобы начать создавать свои модели, вот пример моей конфигурации из dbt.