Tablo özellikleri kaynağı

Delta Lake ve Apache Iceberg tabloları veri düzeni, dosya boyutu, veri atlama, yalıtım düzeyi ve veri akışını değiştirme gibi davranış ve özellikleri yapılandırmak için tablo özelliklerini kullanır.

Tablo özelliklerini değiştirme

Varolan tabloların tablo özelliklerini değiştirmek için SET TBLPROPERTIESkullanın.

Delta ve Iceberg özellik ön ekleri

Delta Lake ve Apache Iceberg tabloları aynı tablo özellik adlarını paylaşır, ancak farklı ön ekler gerektirir:

• Delta Lake tabloları: Ön ekini delta. kullanın
• Iceberg tabloları: Ön ekini iceberg. kullanın

Örneğin, bir tabloda silme vektörlerini etkinleştirmek için:

Delta Gölü

ALTER TABLE <table-name> SET TBLPROPERTIES ('delta.enableDeletionVectors' = true);

Buzdağı tablosu

ALTER TABLE <table-name> SET TBLPROPERTIES ('iceberg.enableDeletionVectors' = true);

Tablo özellikleri ve SparkSession özellikleri

Her tablonun davranışını denetleyebilen kendi tablo özellikleri vardır. Bazı SparkSession yapılandırmalar her zaman tablo özelliklerini geçersiz kılar. Örneğin, autoCompact.enabledoptimizeWrite.enabled otomatik sıkıştırmayı ve iyileştirilmiş yazmaları SparkSession düzeyinde etkinleştirin. Databricks, çoğu iş yükü için tablo kapsamlı yapılandırmaların kullanılmasını önerir.

Yapılandırmaları kullanarak SparkSession yeni tablolar için varsayılan değerleri ayarlayabilirsiniz. Bu varsayılanlar yalnızca yeni tablolar için geçerlidir ve mevcut tablo özelliklerini etkilemez. SparkSession yapılandırmaları, aşağıdaki tabloda gösterildiği gibi tablo özelliklerinden farklı bir ön ek kullanır:

Örneğin, bir oturumda oluşturulan tüm yeni tabloların appendOnly = true özelliğini ayarlamak için aşağıdakileri ayarlayın:

Delta Gölü

SET spark.databricks.delta.properties.defaults.appendOnly = true

Buzdağı tablosu

SET spark.databricks.iceberg.properties.defaults.appendOnly = true

Tablo özellikleri

Aşağıdaki tablo özelliklerinin çoğu, belirtilen durumlar dışında hem Delta Lake hem de Apache Iceberg tablolarında kullanılabilir. delta. Delta Lake tabloları için ön eki ve iceberg. Iceberg tabloları için ön eki kullanın.