Databricks Runtime bakım güncelleştirmeleri

Bu sayfada desteklenen Databricks Runtime sürümleri için bakım güncelleştirmeleri listelenmektedir. Mevcut bir kümeye bakım güncelleştirmesi eklemek için kümeyi yeniden başlatın. Desteklenmeyen Databricks Runtime sürümlerindeki bakım güncelleştirmeleri için bkz . Databricks Runtime için bakım güncelleştirmeleri (arşivlenmiş)...

Sürümler kademeli olarak dağıtılır. Azure Databricks hesabınız ilk sürüm tarihinden sonra birkaç gün boyunca güncelleştirilmeyebilir.

Databricks Runtime sürümleri

Yayına göre bakım güncelleştirmeleri:

• Databricks Runtime 18
• Databricks Runtime 18.2
• Databricks Runtime 18.1
• Databricks Runtime 17.3 LTS
• Databricks Runtime 16.4 LTS
• Databricks Runtime 15.4 LTS
• Databricks Runtime 14.3 LTS
• Databricks Runtime 13.3 LTS
• Databricks Runtime 9.1 LTS

Databricks Runtime 18

Bkz. Databricks Runtime 18.

• 10 Temmuz 2026
  • [SPARK-57195][SQL] CSV şeması çıkarımı sırasında ArrayIndexOutOfBoundsException yerine MALFORMED_CSV_RECORD gösterilsin
  • [SPARK-57593][SQL][PYTHON] pickle Python UDF giriş grubunu baytla sınırlama ve izleme
  • [SPARK-57243][18.3.2][SQL] V2 SQL oluşturucusunda IsNull ve IsNotNull ifadelerini köşeli parantez içine alın
  • Çeşitli hata düzeltmeleri.

• 29 Haziran 2026
  • (Davranış değişikliği) Ölçüm görünümleri artık diğer pencere ölçülerine başvuran pencere ölçülerini reddeder. Daha önce, bu desen CREATE zamanında başarılı oluyordu, ancak sorgu zamanında sessizce başarısız oluyor veya yanlış sonuçlar üretiyordu. Şimdi Azure Databricks, CREATE veya ALTER sırasında net bir hata döndürüyor (METRIC_VIEW_WINDOW_MEASURE_REFERENCES_WINDOW_MEASURE). Bu doğrulamayı devre dışı bırakmak için spark.databricks.sql.metricView.rejectWindowOnWindowMeasure.enabled değerini false olarak ayarlayın.
  • [SPARK-57088][SQL] EXACT NEAREST BY için belirlenimci olmayan derecelendirme ifadesine izin ver
  • [SPARK-56652][SQL] DESCRIBE EXTENDED kısıtlama çıktısında her zaman RELY/NORELY gösterir
  • [SPARK-57355][PYTHON] Udf profil oluşturucusunda modül denetimi düzeltildi
  • [SPARK-56720][SS] Eşzamansız ilerleme takibindeki önceki bir hatadan sonra sonraki eşzamansız günlük yazma işlemlerini başarısız kılın
  • [SPARK-56977][SQL] RewriteNearestByJoin, sentetik birleşimde joinType'a uygun olmalıdır
  • [SPARK-57371][Connect] ArrowDeserializers'da veri yarışlarını düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.

Databricks Runtime 18.2

Bkz. Databricks Runtime 18.2.

• 10 Temmuz 2026
  • [SPARK-57593][SQL][PYTHON] pickle Python UDF giriş grubunu baytla sınırlama ve izleme
  • [SPARK-57243][SQL] V2 SQL oluşturucusu için IsNull ve IsNotNull'ı köşeli ayraç içinde sarmalama
  • Çeşitli hata düzeltmeleri.

• 29 Haziran 2026
  • (Davranış değişikliği) Ölçüm görünümleri artık diğer pencere ölçülerine başvuran pencere ölçülerini reddeder. Daha önce, bu desen CREATE zamanında başarılı oluyordu, ancak sorgu zamanında sessizce başarısız oluyor veya yanlış sonuçlar üretiyordu. Şimdi Azure Databricks, CREATE veya ALTER sırasında net bir hata döndürüyor (METRIC_VIEW_WINDOW_MEASURE_REFERENCES_WINDOW_MEASURE). Bu doğrulamayı devre dışı bırakmak için spark.databricks.sql.metricView.rejectWindowOnWindowMeasure.enabled değerini false olarak ayarlayın.
  • [SPARK-57355][PYTHON] Udf profil oluşturucusunda modül denetimi düzeltildi
  • [SPARK-57371][Connect] ArrowDeserializers'da veri yarışlarını düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 18 Haziran 2026

  • (Davranış değişikliği) Spark kullanıcı arabirimindeki SQL / Veri Çerçevesi Özellikleri bölümü DBSQL Sunucusuz için kaldırılmıştır.

• 9 Haziran 2026

  • [SPARK-56410][SQL][CORE] OOM riskini azaltmak için UnsafeExternalSorter'a sınırlanmış k-way birleştirme desteği eklendi
  • (Davranış değişikliği) Microsoft Fabric (OneLake) yabancı kataloğu oluşturmak için artık SQL item_type veya REST API kullanılırken (LAKEHOUSE veya WAREHOUSE) seçeneği gerekirCREATE FOREIGN CATALOG. Databricks kullanıcı arabirimi bu seçeneği otomatik olarak ayarlar. Varolan yabancı kataloglar etkilenmez.
  • (Davranış değişikliği) SET TAG artık idempotent. Zaten etiketi olan bir kaynakta bir işlemin yinelenmesi SET TAG artık hataya neden olmaz.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Mayıs 2026
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.11'den 1.4.0'a kadar io.delta.delta-sharing-client_2.13
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 13 Mayıs 2026
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.10 ile 1.3.11 arasındaki io.delta.delta-sharing-client_2.13
  • [SPARK-56511][CORE] Başarısız bir reset işleminden sonra ShuffleInMemorySorter.getMemoryUsage içinde oluşan NPE giderildi
  • [SPARK-56554][SQL] XML değişken olarak alırken inferSchema seçeneğine saygı gösterin
  • [SPARK-56302][CORE] Yürütücüde serileştirme sırasında görev sonucu belleğini hemen serbest bırakın
  • Geri al "[SPARK-55356][SQL] PIVOT ifadesi için takma ad desteği"
  • [SPARK-56502][CORE] DirectByteBufferOutputStream kapasite denetiminde tamsayı taşması düzeltildi
  • [SPARK-56043][SQL] Avro 1.12.x ParseContext.resolve() içindeki NullPointerException'ı SchemaParseException içinde sarmala
  • [SPARK-56652][SQL] DESCRIBE EXTENDED kısıtlama çıktısında her zaman RELY/NORELY gösterir
  • [SPARK-56328][SQL] ve DEFAULT COLLATION için INSERTVALUES satır içi tablo harmanlama işlemesi düzeltildi
  • Çeşitli hata düzeltmeleri.

Databricks Runtime 18.1

Bkz. Databricks Runtime 18.1.

• 10 Temmuz 2026
  • Çeşitli hata düzeltmeleri.

• 29 Haziran 2026
  • (Davranış değişikliği) Ölçüm görünümleri artık diğer pencere ölçülerine başvuran pencere ölçülerini reddeder. Daha önce, bu desen CREATE zamanında başarılı oluyordu, ancak sorgu zamanında sessizce başarısız oluyor veya yanlış sonuçlar üretiyordu. Şimdi Azure Databricks, CREATE veya ALTER sırasında net bir hata döndürüyor (METRIC_VIEW_WINDOW_MEASURE_REFERENCES_WINDOW_MEASURE). Bu doğrulamayı devre dışı bırakmak için spark.databricks.sql.metricView.rejectWindowOnWindowMeasure.enabled değerini false olarak ayarlayın.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Haziran 2026
  • (Davranış değişikliği) Microsoft Fabric (OneLake) yabancı kataloğu oluşturmak için artık SQL item_type veya REST API kullanılırken (LAKEHOUSE veya WAREHOUSE) seçeneği gerekirCREATE FOREIGN CATALOG. Databricks kullanıcı arabirimi bu seçeneği otomatik olarak ayarlar. Varolan yabancı kataloglar etkilenmez.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Mayıs 2026
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.11'den 1.4.0'a kadar io.delta.delta-sharing-client_2.13
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 13 Mayıs 2026
  • (Behavior change) Şema deseni kullanarak tabloları listelemek artık yabancı tablolar (örneğin, SQL Server, PostgreSQL veya AWS Glue) için Unity Kataloğu meta verilerini yenilemez. Bu değişiklik, bir şema deseni iletildiğinde JDBC sürücüsündeki SHOW TABLES IN SCHEMA LIKE ... ve getMetaData.getTables çağrılarını ve Thrift SparkGetTablesOperation API’sini etkiler. İş yükünüz bir şema düzeniyle meta veri yenilemeye bağımlıysa Databricks Desteği'ne başvurun.
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.10 ile 1.3.11 arasındaki io.delta.delta-sharing-client_2.13
  • [SPARK-56361][SS] Akış-akış birleştirmesinde NPE durumunda günlüğe kaydetme sırasında daha iyi hata iletisi sağlayın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 20 Nisan 2026
  • GEOMETRY(102100) türü için CRS yetkilisi düzeltildi. Şimdi yetkili ESRI:102100 olarak EPSG:102100 yerine bildirilir.
  • [SPARK-55646][SQL] İş parçacığı yerel yakalamasını yürütmeden ayrı tutmak için SQLExecution.withThreadLocalCaptured yeniden düzenlendi
  • "[SPARK-55252][CORE] Content-Security-Policy üst bilgisi eklemek için HttpSecurityFilter'ı geliştirin"
  • "[SPARK-54285][PYTHON] Pahalı zaman damgası dönüştürmesini önlemek için saat dilimi bilgilerini önbelleğe alma"
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 2 Nisan 2026, İstanbul
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.9 ile 1.3.10 arasındaki io.delta.delta-sharing-client_2.13
  • Kullanıcı Tanımlı Tür (UDT) içinde bir VOID (NullType) sütun içeren Delta tablolarına veri yazan sorgular için geliştirilmiş hata işleme.
  • Yanıt vermeyen veritabanlarında süresiz kilitlenmeleri önlemek için JDBC akış havuzu bağlantılarına varsayılan 30 saniyelik yuva zaman aşımı eklendi
  • Hem bağlantı oluşturma hem de toplu yürütmede geçici JDBC hataları (bağlantı hataları, kilitlenmeler, hız sınırlama) için üstel geri alma ile yeniden deneme mantığı eklendi
  • Bozuk bağlantılarda geri alma hatalarını düzgün bir şekilde işlemek için safeRollback eklendi
  • Başlık: Otomatik Yükleyici, kullanılabilir olduğunda varsayılan olarak dosya olaylarını kullanır. DBR 18.1'den başlayarak, Otomatik Yükleyici dosya olayları etkin bir dış konumdan yüklenirken dosya olaylarını kullanır. Dosya olayları, dizin listesi üzerinde gelişmiş performans ve maliyet sağlar. Bkz. Dosya olaylarıyla Otomatik Yükleyici'ye genel bakış. Mevcut akış kodunuz ayarlarsa dosya olayları kullanılmaz: useIncrementalListing veya .useNotifications Dizin listesinin önceki varsayılanını korumak için Auto Loader akış kodunuzda useManagedFileEvents değerini false olarak ayarlayın.
  • [SPARK-55701]ES-1694761[SS] CompactibleFileStreamLog.allFiles dosyasında yarış durumu düzeltildi
  • [SPARK-55505][SQL] Eşzamanlı senaryolarda EXECUTION_ROOT_ID_KEY okumada NPE düzeltme
  • [SPARK-55372][SQL] Varsayılan harmanlama ile tablolar / görünümler için düzeltme SHOW CREATE TABLE
  • [SPARK-55510][SS] Rocksdb durumu deposunun deleteRange fonksiyonunu changelogWriter çağıracak şekilde düzeltin.
  • [Backports][OSS Cherrypick] [SPARK-55945][SDP] SDP eager analysis protos içindeki akışlar için yapılandırılmış tanımlayıcıları destekler
  • [SPARK-55111][SS] Sorgu yeniden başlatıldığında tamamlanmamış yeniden bölümleme algılamasını yeniden denetle
  • [SPARK-55892][SS] Yeniden kullanılan SST dosyasının bakım tarafından silinmesi nedeniyle durum deposunun yüklenememesi sorunu düzeltildi.
  • [SPARK-55811] [SQL] NonFatal çağırırken UnresolvedException yerine nodeWithOutputColumnsString yakala
  • [SPARK-55991] Parametrelerle unicode ile ilgili SQL metin bozulmalarını düzeltme
  • [SPARK-55493] [SS] StateDataSource'ta akış denetim noktası durum dizininde mkdirs kullanmayın
  • [SPARK-55584] EXEC IMMEDIATE için skaler alt sorguda daha iyi hata üretin
  • İşletim sistemi güvenlik güncelleştirmeleri.

Databricks Runtime 17.3 LTS

Bkz. Databricks Runtime 17.3 LTS.

• 10 Temmuz 2026
  • [SPARK-57547][SQL] InMemoryRelation eşzamanlı somutlaştırma düzeltmesini 17.3’e geri taşıma (devre dışı bırakma anahtarıyla)
  • Çeşitli hata düzeltmeleri.

• 29 Haziran 2026
  • (Davranış değişikliği) Ölçüm görünümleri artık diğer pencere ölçülerine başvuran pencere ölçülerini reddeder. Daha önce, bu desen CREATE zamanında başarılı oluyordu, ancak sorgu zamanında sessizce başarısız oluyor veya yanlış sonuçlar üretiyordu. Şimdi Azure Databricks, CREATE veya ALTER sırasında net bir hata döndürüyor (METRIC_VIEW_WINDOW_MEASURE_REFERENCES_WINDOW_MEASURE). Bu doğrulamayı devre dışı bırakmak için spark.databricks.sql.metricView.rejectWindowOnWindowMeasure.enabled değerini false olarak ayarlayın.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Haziran 2026
  • (Davranış değişikliği) SET TAG artık idempotent. Zaten etiketi olan bir kaynakta bir işlemin yinelenmesi SET TAG artık hataya neden olmaz.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Mayıs 2026
  • [SPARK-34591][ML] Karar ağacı budama parametresi ekleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 13 Mayıs 2026
  • (Behavior change) Şema deseni kullanarak tabloları listelemek artık yabancı tablolar (örneğin, SQL Server, PostgreSQL veya AWS Glue) için Unity Kataloğu meta verilerini yenilemez. Bu değişiklik, bir şema deseni iletildiğinde JDBC sürücüsündeki SHOW TABLES IN SCHEMA LIKE ... ve getMetaData.getTables çağrılarını ve Thrift SparkGetTablesOperation API’sini etkiler. İş yükünüz bir şema düzeniyle meta veri yenilemeye bağımlıysa Databricks Desteği'ne başvurun.
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.10 ile 1.3.11 arasındaki io.delta.delta-sharing-client_2.13
  • [SPARK-56361][SS] Akış-akış birleştirmesinde NPE durumunda günlüğe kaydetme sırasında daha iyi hata iletisi sağlayın
  • Çeşitli hata düzeltmeleri.

• 20 Nisan 2026

  • GEOMETRY(102100) türü için CRS yetkilisi düzeltildi. Şimdi yetkili ESRI:102100 olarak EPSG:102100 yerine bildirilir.
  • kaynaktaki NULL yapılarının hedefte NULL alanları olan NULL olmayan yapılara genişletildiği MERGE, UPDATE ve akış yazma sorgularındaki veri doğruluğu sorunu düzeltildi. Kaynaktaki NULL yapıları artık hedefte NULL olarak korunuyor. Düzeltme aşağıdaki işlemler için geçerlidir:
    • MERGE yapı türü atamalarını kullanan eylemlerle birlikte UPDATE SET t.structCol = s.structCol .
    • MERGE ile UPDATE SET * şema evrimi etkinleştirildiğinde ve hedef yapıda fazladan alan yoksa veya başlangıçta NULL olduğunda.
    • MERGE ile birlikte UPDATE SET * EXCEPT , yapıda EXCEPT listede hiç alan olmadığında.
    • MERGE yapı türü atamalarını kullanan eylemlerle birlikte INSERT (structCol) VALUES (s.structCol) .
    • MERGE yapı türü atamalarını kullanan eylemlerle birlikte INSERT * [EXCEPT] .
    • UPDATE yapı türü atamaları olan sorgular.
    • Yapı türü atamaları ile akış yazma işlemleri.

• 2 Nisan 2026, İstanbul

  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.9 ile 1.3.10 arasındaki io.delta.delta-sharing-client_2.13
  • [SPARK-55811] [SQL] nodeWithOutputColumnsString çağrılırken UnresolvedException yerine NonFatal'ı yakalayın
  • [SPARK-55892][SS] Yeniden kullanılan SST dosyasının bakım tarafından silinmesi nedeniyle durum deposunun yüklenememesi sorunu düzeltildi.
  • [Backports][OSS Cherrypick] [SPARK-55945][SDP] SDP eager analysis protos içindeki akışlar için yapılandırılmış tanımlayıcıları destekler
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Mart 2026

  • [SPARK-55493] [SS] StateDataSource'ta akış denetim noktası durum dizininde mkdirs kullanmayın
  • [SPARK-55111][SS] Sorgu yeniden başlatıldığında tamamlanmamış yeniden bölümleme algılamasını yeniden denetle
  • [SPARK-55701]ES-1694761[SS] CompactibleFileStreamLog.allFiles dosyasında yarış durumu düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Şubat 2026

  • güncelleştirilmiş Java kitaplıkları:
    • org.mlflow.mlflow-spark_2.13 2.9.1 ile 2.20.4 arası
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 19 Şubat 2026

  • Excel dosyalarının şeması çıkarılırken, dize hücreleri artık Spark StringType olarak çıkarılır. Bu, Excel'de ayarlanan hücre türüne dikkat eder. Daha önce, sayısal değerlere sahip dizeler Long veya Decimal gibi daha dar türlere otomatik olarak dönüştürüldü.
  • [SPARK-54887][CONNECT] Spark Connect istemcisinde her zaman sql durumu ayarlama
  • [SPARK-54887][CONNECT] Sparkthrowables'a isteğe bağlı sqlstate ekleme
  • [SPARK-55097][SQL] Önbelleğe alınan kaynakların yeniden eklenmesi sonucu blokların sessizce düşmesi sorunu düzeltildi
  • [SPARK-55282][PYTHON][CONNECT] Sürücü tarafında worker_util kullanmaktan kaçının
  • [SPARK-49110][SQL] Meta veri sütunlarını her zaman yaymak için SubqueryAlias.metadataOutput'ı basitleştirme
  • [SPARK-55243][CONNECT] Scala Connect istemcisindeki -bin soneki aracılığıyla ikili üst bilgileri ayarlamaya izin ver
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 27 Ocak 2026

  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.8 ile 1.3.9 arasındaki io.delta.delta-sharing-client_2.13
  • Yukarıya bakın
  • [SPARK-54768][SS]Python Akış Veri Kaynağı döndürülen veriler yapılandırılmış şemayla eşleşmiyorsa hatayı sınıflandırmalıdır
  • [SPARK-54803] ... İSME GÖRE desteği DESTEKLE INSERT
  • [SPARK-53564][CORE] DAGSchedulerEventProcessLoop'ta blockManager RPC zaman aşımı nedeniyle DAGScheduler'ın durmasından kaçının
  • [SPARK-55015][SS][SQL] PrefixKeyScanStateEncoder'da decodeRemainingKey numFields hesaplamasını düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Ocak 2026
  • güncelleştirilmiş Python kitaplıkları:
    • pmdarima 2.0.4 ile 2.1.1 arasında
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.6 ile 1.3.8 arasındaki io.delta.delta-sharing-client_2.13
  • Artık SQL pencere işlevlerini ölçüm görünümü boyutlarında ve ölçü ifadelerinde skaler işlev olarak kullanabilirsiniz.
  • [SPARK-54562][SDP][17.3 backport] Sunucu tarafında akış fonksiyonu içinde erken analiz / yürütmenin engellenmesi
  • [SPARK-54679][SQL] spark.sql yeniden adlandırın. (xml.legacyXMLParser.enabled -> legacy.useLegacyXMLParser)
  • [SPARK-54711][PYTHON] Daemon tarafından oluşturulan çalışan bağlantısı için zaman aşımı ekleme
  • [SPARK-53127][SQL] Sınırsız özyineleme için ALL'i CTE normalleştirmesiyle düzelt LIMIT
  • [SPARK-54708] Yavaş dizin oluşturma ile ML önbelleği temizlemeyi iyileştirme
  • [SPARK-54581][SQL] Postgres bağlayıcısı için getirme boyutu seçeneğini büyük/küçük harfe duyarsız hale getirme
  • [SPARK-41916] [ML] Torç dağıtımcısı: task.gpu.amount > 1 ise görev başına birden çok torchrun işlemini destekler
  • [SPARK-54564] [SQL] QueryPlanningTracker'ı KarmaAnalyzer alanı yapma
  • [SPARK-54620][SQL] Gözlem engellemeyi önlemek için ObservationManager'da güvenlik denetimi ekleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Aralık 2025, Cumartesi
  • güncelleştirilmiş Java kitaplıkları:
    • 1.3.5 ile 1.3.6 arasındaki io.delta.delta-sharing-client_2.13
  • [SPARK-50906][SQL] Yeniden sıralanmış yapı alanları için Avro nullability denetimini düzeltme
  • [SPARK-54180][SQL] BinaryFileFormat toString'ini geçersiz kılma
  • [SPARK-54427][SQL] ColumnarRow'un değişken türleriyle çağırmasına copy izin ver
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 18 Kasım 2025
  • [SPARK-54047][PYTHON] Boşta kalma zaman aşımında sonlandığında farklı bir hata türü kullanın
  • [SPARK-52762][SDP] Spark Connect sorgu yürütmesi sırasında işlem hattı analizini desteklemek için PipelineAnalysisContext iletisi ekleme
  • [SPARK-54156][PROTOBUF] ProtobufOptions dönüştürme hatası için hataları sınıflandırma
  • [SPARK-54078][SS] StateStoreSuite SPARK-40492: maintenance before unload için yeni test ve eski testten altyapıyı kaldırma
  • [SPARK-54015][PYTHON] Py4J gereksinimini gevşetmek için py4j>=0.10.9.7,<0.10.9.10
  • [SPARK-54099][SQL] XML değişken ayrıştırıcısı ondalık ayrıştırma hatalarında dizeye geri dönmelidir
  • [SPARK-54191][17.3 Backport][SDP] Defineflow Proto'ya bir kez ekle
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 4 Kasım 2025
  • [SPARK-53729][PYTHON][CONNECT] pyspark.sql.connect.window.WindowSpec serileştirmesi düzeltildi
  • [SPARK-46679][SQL] Parametreli sınıf kullanılırken SparkUnsupportedOperationException T türünde bir kodlayıcı bulunamadı düzeltmesi
  • [SPARK-53973][Avro] AvroOptions boolean dönüştürme hatası için hataları sınıflandırma
  • [SPARK-53794][SS] Rocksdb durum sağlayıcısıyla ilişkili bakım işlemi başına silmeleri sınırlama seçeneği eklendi
  • [SPARK-53908][CONNECT] Plan önbelleği ile Spark Connect'te gözlemleri düzeltme
  • [SPARK-53972][SS] Klasik pyspark'taki akış sorgusu recentProgress regresyonu düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.

Databricks Runtime 16.4 LTS

Bkz. Databricks Runtime 16.4 LTS.

• 10 Temmuz 2026
  • Çeşitli hata düzeltmeleri.

• 29 Haziran 2026

  • (Davranış değişikliği) Ölçüm görünümleri artık diğer pencere ölçülerine başvuran pencere ölçülerini reddeder. Daha önce, bu desen CREATE zamanında başarılı oluyordu, ancak sorgu zamanında sessizce başarısız oluyor veya yanlış sonuçlar üretiyordu. Şimdi Azure Databricks, CREATE veya ALTER sırasında net bir hata döndürüyor (METRIC_VIEW_WINDOW_MEASURE_REFERENCES_WINDOW_MEASURE). Bu doğrulamayı devre dışı bırakmak için spark.databricks.sql.metricView.rejectWindowOnWindowMeasure.enabled değerini false olarak ayarlayın.

  • MERGE, UPDATE ve akış yazma sorgularında, kaynaktaki NULL struct değerlerinin hedefte NULL alanlara sahip NULL olmayan struct’lara yanlış şekilde genişletildiği bir veri doğruluğu sorunu düzeltildi. Değişiklik sonrasında, kaynaktaki NULL yapılar hedefte NULL olarak doğru şekilde korunur.

    Etkilenen işlemler:

    • MERGE yapı türü atamalarına sahip eylemler içeren UPDATE SET t.structCol = s.structCol sorgular
    • MERGE UPDATE SET * şema evriminin etkinleştirildiği sorgular (Kaynak yapı NULL olduğunda, hedef yapıda fazladan alan olmadığında veya başlangıçta NULL olduğunda hedefin üzerine NULL yazın)
    • MERGE içeren UPDATE SET * EXCEPT sorguları (Kaynak yapısı NULL olduğunda, EXCEPT listesinde hiçbir alan yoksa hedefi NULL ile üzerine yazın)
    • MERGE yapı türü atamalarına sahip eylemler içeren INSERT (structCol) VALUES (s.structCol) sorgular
    • MERGE yapı türü atamalarına sahip eylemler içeren INSERT * [EXCEPT] sorgular
    • UPDATE yapı türü atamaları olan sorgular
    • Yapı türü atamaları ile akış yazma işlemleri

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Haziran 2026

  • (Davranış değişikliği) SET TAG artık idempotent. Zaten etiketi olan bir kaynakta bir işlemin yinelenmesi SET TAG artık hataya neden olmaz.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Mayıs 2026
  • [SPARK-34591][ML] Karar ağacı budama parametresi ekleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 13 Mayıs 2026
  • (Behavior change) Şema deseni kullanarak tabloları listelemek artık yabancı tablolar (örneğin, SQL Server, PostgreSQL veya AWS Glue) için Unity Kataloğu meta verilerini yenilemez. Bu değişiklik, bir şema deseni iletildiğinde JDBC sürücüsündeki SHOW TABLES IN SCHEMA LIKE ... ve getMetaData.getTables çağrılarını ve Thrift SparkGetTablesOperation API’sini etkiler. İş yükünüz bir şema düzeniyle meta veri yenilemeye bağımlıysa Databricks Desteği'ne başvurun.
  • güncelleştirilmiş Java kitaplıkları:
    • (Yalnızca Scala 2.12) io.delta.delta-sharing-client_2.12, 1.2.11 ile 1.2.12 arası
    • (Yalnızca Scala 2.13) io.delta.delta-sharing-client_2.13 1.2.11 ile 1.2.12 arası
  • [SPARK-56361][SS] Akış-akış birleştirmesinde NPE durumunda günlüğe kaydetme sırasında daha iyi hata iletisi sağlayın
  • Çeşitli hata düzeltmeleri.

• 29 Nisan 2026
  • Çeşitli hata düzeltmeleri.

• 20 Nisan 2026
  • Çeşitli hata düzeltmeleri.

• 2 Nisan 2026, İstanbul

  • güncelleştirilmiş Java kitaplıkları:
    • (Yalnızca Scala 2.12) io.delta.delta-sharing-client_2.12, 1.2.10 ile 1.2.11 arası
    • (Yalnızca Scala 2.13) io.delta.delta-sharing-client_2.13 sürümü 1.2.10'dan 1.2.11'e güncellendi
  • [SPARK-55701]ES-1694761[SS] CompactibleFileStreamLog.allFiles dosyasında yarış durumu düzeltildi
  • [Backports][OSS Cherrypick] [SPARK-55945][SDP] SDP eager analysis protos içindeki akışlar için yapılandırılmış tanımlayıcıları destekler
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Mart 2026

  • [SPARK-55111][SS] Sorgu yeniden başlatıldığında tamamlanmamış yeniden bölümleme algılamasını yeniden denetle
  • [SPARK-55493] [SS] StateDataSource'ta akış denetim noktası durum dizininde mkdirs kullanmayın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Şubat 2026

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 19 Şubat 2026

  • [SPARK-55282][PYTHON][CONNECT] Sürücü tarafında worker_util kullanmaktan kaçının
  • [SPARK-55243][CONNECT] Scala Connect istemcisindeki -bin soneki aracılığıyla ikili üst bilgileri ayarlamaya izin ver
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 27 Ocak 2026
  • güncelleştirilmiş Java kitaplıkları:
    • (Yalnızca Scala 2.12) io.delta.delta-sharing-client_2.12, 1.2.9 ile 1.2.10 arası
    • (Yalnızca Scala 2.12) org.mlflow.mlflow-spark_2.12, 2.9.1 ile 2.19.0 arası
    • (Yalnızca Scala 2.13) io.delta.delta-sharing-client_2.13 1.2.9'dan 1.2.10'a
    • (Yalnızca Scala 2.13) org.mlflow.mlflow-spark_2.13 2.9.1 ile 2.19.0 arası
  • [SPARK-55015][SS][SQL] PrefixKeyScanStateEncoder'da decodeRemainingKey numFields hesaplamasını düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Ocak 2026
  • güncelleştirilmiş Java kitaplıkları:
    • (Yalnızca Scala 2.12) io.delta.delta-sharing-client_2.12 sürümü 1.2.8'den 1.2.9'a güncellendi.
    • (Yalnızca Scala 2.13) io.delta.delta-sharing-client_2.13 sürümü 1.2.8'den 1.2.9'a güncellenmiştir.
  • [SPARK-54620][SQL] Gözlem engellemeyi önlemek için ObservationManager'da güvenlik denetimi ekleme
  • [SPARK-54711][PYTHON] Daemon tarafından oluşturulan çalışan bağlantısı için zaman aşımı ekleme
  • [SPARK-41916] [ML] Torç dağıtımcısı: task.gpu.amount > 1 ise görev başına birden çok torchrun işlemini destekler
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Aralık 2025, Cumartesi
  • Bölümlenmiş Delta tablolarında, ileride veri parke dosyalarında yer alan bölüm sütunları olacaktır. Bu, Iceberg ve UniForm tablolarının işlenme şekliyle daha iyi bir sinerji sağlar ve Delta dışı harici okuyucularla uyumluluğu artırır.
  • Hem Snowflake bağlayıcısı hem de Snowflake Lakehouse Federasyonu için TIMESTAMP_NTZ (saat dilimi olmadan zaman damgası) sabit değerleri artık Snowflake'e aktarılmamaktadır. Bu değişiklik, uyumsuz zaman damgası işlemeden kaynaklanan sorgu hatalarını önler ve etkilenen sorgular için güvenilirliği artırır.
  • [SPARK-54427][SQL] ColumnarRow'un değişken türleriyle çağırmasına copy izin ver
  • [SPARK-54180][SQL] BinaryFileFormat toString'ini geçersiz kılma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 18 Kasım 2025
  • [SPARK-54099][SQL] XML değişken ayrıştırıcısı ondalık ayrıştırma hatalarında dizeye geri dönmelidir
  • [SPARK-54015][PYTHON] Py4J gereksinimini gevşetmek için py4j>=0.10.9.7,<0.10.9.10
  • [SPARK-54078][SS] StateStoreSuite SPARK-40492: maintenance before unload için yeni test ve eski testten altyapıyı kaldırma
  • [SPARK-54156][PROTOBUF] ProtobufOptions dönüştürme hatası için hataları sınıflandırma
  • [SPARK-54047][PYTHON] Boşta kalma zaman aşımında sonlandığında farklı bir hata türü kullanın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 4 Kasım 2025
  • Güncelleştirilmiş R kitaplıkları:
    • 16.1.0 sürümünden 21.0.0 sürümüne geçiş
  • [SPARK-53973][Avro] AvroOptions boolean dönüştürme hatası için hataları sınıflandırma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 21 Ekim 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 7 Ekim 2025, Cumartesi
  • [SPARK-53568][CONNECT][PYTHON] Spark Connect'teki birkaç küçük hatayı düzeltme Python istemci hata işleme mantığı
  • [SPARK-53574] AnalysisContext'in iç içe plan çözümlemesi sırasında silinmesi sorunu düzeltildi.
  • [SPARK-53623][SQL] büyük tabloların okunmasını geliştirme...
  • [SPARK-53598][SQL] Büyük tablo özelliğini okumadan önce numParts varlığını denetleyin
  • [SPARK-53549][SS] Liste durumu isteği işlemi tamamlandığında her zaman ok ayırıcısını kapatın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 16 Eylül 2025, Cumartesi
  • Snowflake bağlayıcısı artık şemaları listelemek için komutu yerine INFORMATION_SCHEMA tabloyu kullanıyorSHOW SCHEMAS. Bu değişiklik, önceki yaklaşımın 10.000 şema sınırını kaldırır ve çok sayıda şemaya sahip veritabanları için desteği geliştirir.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Eylül 2025, Cumartesi
  • Otomatik Yükleyici'nin süresiz olarak kilitlenmesine neden olabilen bir sorun düzeltildi.
  • Otomatik Yükleyici'de işlerin başarısız olmasına neden olabilecek geçici bir hatayı düzeltir
  • [SPARK-49872][CORE] jackson JSON dize uzunluğu sınırlamasını kaldırma
  • [SPARK-51821][CORE] Olası bir kilitlenmeyi önlemek için uninterruptibleLock elde tutmaksızın interrupt() çağrısı yapın.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Ağustos 2025
  • güncelleştirilmiş Java kitaplıkları:
    • (Yalnızca Scala 2.12) 1.2.7 ile 1.2.8 arasındaki io.delta.delta-sharing-client_2.12
    • (Yalnızca Scala 2.13) 1.2.7 ile 1.2.8 arasındaki io.delta.delta-sharing-client_2.13
  • [SPARK-52482][SQL][CORE] Bazı bozuk zstd dosyalarını okumak için özel durum işlemeyi geliştirme
  • [SPARK-53192][CONNECT] Her zaman Spark Connect Plan Önbelleği'nde bir DataSource'u önbelleğe al
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 14 Ağustos 2025
  • [SPARK-51011][CORE] Bir görev sonlandırıldığında kesilip kesilmeyeceğini öğrenmek için günlük kaydı ekleme
  • [SPARK-52833][SQL] Düzeltme VariantBuilder.appendFloat
  • [SPARK-51505][SQL] AQEShuffleReadExec'te her zaman boş bölüm numarası ölçümlerini göster
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Temmuz 2025
  • [SPARK-52753][SQL] parseDataType ikili dosyasını önceki sürümlerle uyumlu hale getirme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 15 Temmuz 2025
  • Pulsar'dan veri akışı yapmak için Spark Yapılandırılmış Akış kullanılırken oluşan belirlenemeyen veri kaybı sorunu düzeltildi.
  • [SPARK-52579][PYTHON] Python çalışanları için düzenli olarak geri izleme dökümü ayarlama
  • [SPARK-52553][SS] v1 değişiklik günlüğü okunurken oluşan NumberFormatException hatasını düzelt
  • [SPARK-52450] Şema derin kopyalama performansını geliştirme
  • [SPARK-52503][SQL][CONNECT] Giriş sütunu mevcut olmadığında düzeltme drop
  • [SPARK-52599][PYTHON] Sürücü tarafı çalışanlarında düzenli olarak geri izleme dökümü desteği
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 1 Temmuz 2025
  • Dosya veri kaynağı okuyucuları için ZStandard dekompresyon desteği (json, csv, xml ve metin.)
  • [15.4-16.4][spark-52521]](https://issues.apache.org/jira/browse/SPARK-52521)[SQL] Right#replacement SQLConf'a dinamik olarak erişmemelidir
  • [SPARK-52482][SQL][CORE] Dosya veri kaynağı okuyucusu için ZStandard desteği
  • [SPARK-52312][SQL] DataFrame önbelleğe alınırken V2WriteCommand yoksayılsın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 17 Haziran 2025
  • Tablo değerli işlevin cloud_files_state (TVF) işlem hatları arasında akış tablolarının dosya düzeyinde durumunu okumak için kullanılamayacağı sınırlaması düzeltildi.
  • Geçici görünümlerde sorgular için Unity Kataloğu yetkilendirme sorunları düzeltildi.
  • [SPARK-52040][PYTHON][SQL][CONNECT] ResolveLateralColumnAliasReference plan kimliğini korumalı
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 3 Haziran 2025
  • [SPARK-52195][PYTHON][SS] Python TWS için ilk durum sütununu bırakma sorunu düzeltildi
  • [SPARK-52159][SQL] Jdbc diyalektleri için tablo varlığı denetimini düzgün şekilde işleme
  • Çeşitli hata düzeltmeleri.

• 7 Mayıs 2025
  • güncelleştirilmiş Java kitaplıkları:
    • 1.2.3 ile 1.2.7 arasındaki io.delta.delta-sharing-client_2.13
    • org.apache.avro.avro 1.11.3 ile 1.11.4
    • org.apache.avro.avro-ipc 1.11.3 ile 1.11.4 arası
    • org.apache.avro.avro-mapred 1.11.3'ten 1.11.4'e
  • Kopyalanan akış oturumu, Paylaşılan Kümeler/Sunucusuz'daki foreachBatch kullanıcı işlevinin içinde kullanılır. Bu, klasik (Atanan Kümeler) davranışıyla uyumlu hale gelir.
  • Kopyalanan akış oturumu, Paylaşılan Kümeler/Sunucusuz'daki foreachBatch kullanıcı işlevinin içinde kullanılır. Bu, klasik (Atanan Kümeler) davranışıyla uyumlu hale gelir.
  • Bu değişiklik öncesinde, variant_get ifadesi içinde, yollardaki baştaki boşluklar ve sekmeler, Photon devre dışı bırakıldığında yoksayılıyordu. Örneğin, select variant_get(parse_json('{"key": "value"}'), '$['key']')"key" değerini ayıklamada etkili olmaz. Ancak kullanıcılar artık bu tür anahtarları çıkartabilir.
  • [SPARK-51935][SQL] Yorumlanan df.collect() dosyasında yineleyicilerin yavaş davranışını düzeltme
  • [SPARK-51921][SS][PYTHON] transformWithState içinde milisaniye cinsinden TTL süresi için uzun tür kullan
  • [SPARK-51940][SS] Akış denetim noktası meta verilerini yönetmek için arabirim ekleme
  • [SPARK-52049] XML özniteliklerinin Değişken olarak ayrıştırılamama hatasını düzeltin
  • [SPARK-51904][SS] StateSchemaV3 için asenkron meta verileri temizlemeyi kaldırma ve OperatorMetadata dosyalarını listelerken batch dışı dosyaları yoksayma
  • [SPARK-51869][SS] Scala TransformWithState UDF'leri içinde kullanıcı hataları için sınıflandırma oluşturma
  • [SPARK-51889][PYTHON][SS] Python TWS'de MapState clear() hatası düzeltildi
  • [SPARK-51922] [SS] v1 için StateStoreChangelogReaderFactory'den atılan UTFDataFormatException düzeltildi
  • [SPARK-51848][SQL] Tanımlı varyant dizisi/yapısı/haritası şemasıyla XML kayıtları ayrıştırma hatası düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.

Databricks Runtime 15.4 LTS

Bkz . Databricks Runtime 15.4 LTS.

• 10 Temmuz 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Haziran 2026

  • (Davranış değişikliği) Ölçüm görünümleri artık diğer pencere ölçülerine başvuran pencere ölçülerini reddeder. Daha önce, bu desen CREATE zamanında başarılı oluyordu, ancak sorgu zamanında sessizce başarısız oluyor veya yanlış sonuçlar üretiyordu. Şimdi Azure Databricks, CREATE veya ALTER sırasında net bir hata döndürüyor (METRIC_VIEW_WINDOW_MEASURE_REFERENCES_WINDOW_MEASURE). Bu doğrulamayı devre dışı bırakmak için spark.databricks.sql.metricView.rejectWindowOnWindowMeasure.enabled değerini false olarak ayarlayın.

  • MERGE, UPDATE ve akış yazma sorgularında, kaynaktaki NULL struct değerlerinin hedefte NULL alanlara sahip NULL olmayan struct’lara yanlış şekilde genişletildiği bir veri doğruluğu sorunu düzeltildi. Değişiklik sonrasında, kaynaktaki NULL yapılar hedefte NULL olarak doğru şekilde korunur.

    Etkilenen işlemler:

    • MERGE yapı türü atamalarına sahip eylemler içeren UPDATE SET t.structCol = s.structCol sorgular
    • MERGE UPDATE SET * şema evriminin etkinleştirildiği sorgular (Kaynak yapı NULL olduğunda, hedef yapıda fazladan alan olmadığında veya başlangıçta NULL olduğunda hedefin üzerine NULL yazın)
    • MERGE içeren UPDATE SET * EXCEPT sorguları (Kaynak yapısı NULL olduğunda, EXCEPT listesinde hiçbir alan yoksa hedefi NULL ile üzerine yazın)
    • MERGE yapı türü atamalarına sahip eylemler içeren INSERT (structCol) VALUES (s.structCol) sorgular
    • MERGE yapı türü atamalarına sahip eylemler içeren INSERT * [EXCEPT] sorgular
    • UPDATE yapı türü atamaları olan sorgular
    • Yapı türü atamaları ile akış yazma işlemleri

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Haziran 2026

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Mayıs 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 13 Mayıs 2026
  • (Behavior change) Şema deseni kullanarak tabloları listelemek artık yabancı tablolar (örneğin, SQL Server, PostgreSQL veya AWS Glue) için Unity Kataloğu meta verilerini yenilemez. Bu değişiklik, bir şema deseni iletildiğinde JDBC sürücüsündeki SHOW TABLES IN SCHEMA LIKE ... ve getMetaData.getTables çağrılarını ve Thrift SparkGetTablesOperation API’sini etkiler. İş yükünüz bir şema düzeniyle meta veri yenilemeye bağımlıysa Databricks Desteği'ne başvurun.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Nisan 2026
  • Çeşitli hata düzeltmeleri.

• 20 Nisan 2026
  • Çeşitli hata düzeltmeleri.

• 2 Nisan 2026, İstanbul

  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.10 ile 1.1.11 arasındaki io.delta.delta-sharing-client_2.12
  • Otomatik Yükleyici, DBR 16.3'te kaynak konum yönetimi ve görünürlük ile ilgili iki yeni özellik içerir: 1. Olay değişikliklerini kaydetme: Bu değişiklikle, müşteriler TVF'yi kullanarak cloud_files_state bir dosyanın ilk keşfedilme zamanı, işlenme zamanı, arşivlenme gibi dosya bulma ve işleme ayrıntılarını görüntüleyebilir. Bu TVF'nin geçerli genel belgelerine buradan bakın. 2. Temiz kaynak: Bu özellik sayesinde, müşteriler Otomatik Yükleyici'ye işlenen dosyaları otomatik olarak silmesi için talimat verebilir. Müşteriler Otomatik Yükleyici seçeneğini kullanarak cloudFiles.cleanSource bu özelliği kabul edebilir. Otomatik Yükleyici seçenekleri belgelerindeki diğer ayrıntılara buradan göz atın.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Mart 2026

  • [SPARK-55701]ES-1694761[SS] CompactibleFileStreamLog.allFiles dosyasında yarış durumu düzeltildi
  • [SPARK-55111][SS] Sorgu yeniden başlatıldığında tamamlanmamış yeniden bölümleme algılamasını yeniden denetle
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Şubat 2026

  • güncelleştirilmiş Java kitaplıkları:
    • org.mlflow.mlflow-spark_2.12, 2.9.1 ile 2.11.3 arası
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 19 Şubat 2026

  • [SPARK-55243][CONNECT] Scala Connect istemcisindeki -bin soneki aracılığıyla ikili üst bilgileri ayarlamaya izin ver
  • [SPARK-55282][PYTHON][CONNECT] Sürücü tarafında worker_util kullanmaktan kaçının
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 27 Ocak 2026
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.9 ile 1.1.10 arasındaki io.delta.delta-sharing-client_2.12
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Ocak 2026
  • Bölümlenmiş Delta tablolarında, ileride veri parke dosyalarında yer alan bölüm sütunları olacaktır. Bu, Iceberg ve UniForm tablolarının işlenme şekliyle daha iyi bir sinerji sağlar ve Delta dışı harici okuyucularla uyumluluğu artırır.
  • [SPARK-54620][SQL] Gözlem engellemeyi önlemek için ObservationManager'da güvenlik denetimi ekleme
  • [SPARK-54711][PYTHON] Daemon tarafından oluşturulan çalışan bağlantısı için zaman aşımı ekleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Aralık 2025, Cumartesi
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.7 ile 1.1.9 arasındaki io.delta.delta-sharing-client_2.12
  • [SPARK-54427][SQL] ColumnarRow'un değişken türleriyle çağırmasına copy izin ver
  • [SPARK-52579][PYTHON] Python çalışanları için düzenli olarak geri izleme dökümü ayarlama
  • [SPARK-54180][SQL] BinaryFileFormat toString'ini geçersiz kılma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 18 Kasım 2025
  • [SPARK-54078][SS] StateStoreSuite SPARK-40492: maintenance before unload için yeni test ve eski testten altyapıyı kaldırma
  • [SPARK-54047][PYTHON] Boşta kalma zaman aşımında sonlandığında farklı bir hata türü kullanın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 4 Kasım 2025
  • Güncelleştirilmiş R kitaplıkları:
    • 14.0.0.2'den 21.0.0'a ok işareti
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 21 Ekim 2025
  • Tarama fotonizasyon ölçütleri, doğrulama gerekliliği varsa tarama fotonizasyonuna izin verecek şekilde güncellenir.
    Sağlama toplamı doğrulamasının gerekli olup olmadığını belirlemek artık SQLConf yerine hadoop konfasyonundan geliyor.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 7 Ekim 2025, Cumartesi
  • [SPARK-53568][CONNECT][PYTHON] Spark Connect'teki birkaç küçük hatayı düzeltme Python istemci hata işleme mantığı
  • [SPARK-53574] AnalysisContext'in iç içe plan çözümlemesi sırasında silinmesi sorunu düzeltildi.
  • Çeşitli hata düzeltmeleri.

• 16 Eylül 2025, Cumartesi
  • Snowflake bağlayıcısı artık şemaları listelemek için komutu yerine INFORMATION_SCHEMA tabloyu kullanıyorSHOW SCHEMAS. Bu değişiklik, önceki yaklaşımın 10.000 şema sınırını kaldırır ve çok sayıda şemaya sahip veritabanları için desteği geliştirir.
  • [SPARK-50870][SQL] V2ScanRelationPushDown'da zaman damgasına dönüştürme sırasında saat dilimini ekleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Eylül 2025, Cumartesi
  • Otomatik Yükleyici'nin süresiz olarak kilitlenmesine neden olabilen bir sorun düzeltildi.
  • Otomatik Yükleyici'de işlerin başarısız olmasına neden olabilecek geçici bir hatayı düzeltir
  • [SPARK-51821][CORE] Olası bir kilitlenmeyi önlemek için uninterruptibleLock elde tutmaksızın interrupt() çağrısı yapın.
  • [SPARK-49872][CORE] jackson JSON dize uzunluğu sınırlamasını kaldırma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Ağustos 2025
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.6 ile 1.1.7 arasındaki io.delta.delta-sharing-client_2.12
  • [SPARK-52482][SQL][CORE] Bazı bozuk zstd dosyalarını okumak için özel durum işlemeyi geliştirme
  • [SPARK-53192][CONNECT] Her zaman Spark Connect Plan Önbelleği'nde bir DataSource'u önbelleğe al
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 14 Ağustos 2025
  • [SPARK-51011][CORE] Bir görev sonlandırıldığında kesilip kesilmeyeceğini öğrenmek için günlük kaydı ekleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Temmuz 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 21 Temmuz 2025

  • Photon için etkinleştirilen veya Arm64 tabanlı CPU mlflow-skinny kullanan işlem için 2.19.0'a yükseltilir, ray 2.37.0'a yükseltilir ve databricks-feature-engineering 0.8.0'a yükseltilir.

• 15 Temmuz 2025

  • Pulsar'dan veri akışı yapmak için Spark Yapılandırılmış Akış kullanılırken oluşan belirlenemeyen veri kaybı sorunu düzeltildi.
  • [SPARK-52503][SQL][CONNECT] Giriş sütunu mevcut olmadığında düzeltme drop

• 1 Temmuz 2025
  • güncelleştirilmiş Java kitaplıkları:
    • org.mlflow.mlflow-spark_2.12, 2.9.1 ile 2.11.3 arası
    • com.fasterxml.jackson.dataformat.jackson-dataformat-yaml 2.15.2 kaldırıldı
    • Org.slf4j.slf4j-simple 1.7.25 kaldırıldı
  • Dosya veri kaynağı okuyucuları için ZStandard dekompresyon desteği (json, csv, xml ve metin.)
  • Dosya veri kaynağı okuyucuları için ZStandard dekompresyon desteği (json, csv, xml ve metin.)
  • [15.4-16.4][spark-52521]](https://issues.apache.org/jira/browse/SPARK-52521)[SQL] Right#replacement SQLConf'a dinamik olarak erişmemelidir
  • [SPARK-52482][SQL][CORE] Dosya veri kaynağı okuyucusu için ZStandard desteği
  • [SPARK-52312][SQL] DataFrame önbelleğe alınırken V2WriteCommand yoksayılsın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 17 Haziran 2025
  • Tablo değerli işlevin cloud_files_state (TVF) işlem hatları arasında akış tablolarının dosya düzeyinde durumunu okumak için kullanılamayacağı sınırlaması düzeltildi.
  • [SPARK-49646][SQL] parentOuterReferences içinde collectChildOuterReferences kapsamında olmayan başvurular olduğunda birleşim/küme işlemleri için alt sorgu dekorrelasyonu düzeltildi
  • [SPARK-52040][PYTHON][SQL][CONNECT] ResolveLateralColumnAliasReference plan kimliğini korumalı

• 3 Haziran 2025
  • güncelleştirilmiş Python kitaplıkları:
    • 3.4.8, 41.0.3 ile 41.0.3 arasında şifreleme
    • 3.13.4, 3.15.4 ile 3.13.4 arasında dosya kilidi
    • 4.6.4, 6.0.0 ile 6.0.0 arası importlib-metadata
    • platformdirs 3.10.0, 3.11.0 sürümünden 3.10.0 sürümüne
    • pyparsing 2.4.7 ve 3.0.9'dan 3.0.9'a
    • zipp 1.0.0, 3.11.0'dan 3.11.0'a
    • Pip 23.2.1 eklendi
    • Kurulum araçları 68.0.0 eklendi
    • wcwidth 0.2.5 eklendi
    • Tekerlek 0.38.4 eklendi
    • Dağıtım sürümü 1.7.0 kaldırıldı
    • Distro-info 1.1+ubuntu0.2 kaldırıldı
    • python-apt 2.4.0+ubuntu4 kaldırıldı
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1, 1.1-natives ile 1.1, 1.1 arası com.github.fommil.netlib.native_ref-java
    • 1.1, 1.1-natives ile 1.1, 1.1 arası com.github.fommil.netlib.native_system java
    • 1.1-natives'inden 1.1'e com.github.fommil.netlib.netlib-native_ref-linux-x86_64
    • com.github.fommil.netlib.netlib-native_system-linux-x86_64 sürümü 1.1-natives'ten 1.1'e güncelleniyor.
    • io.netty.netty-tcnative-boringssl-static, 2.0.61.Final-db-r16-linux-aarch_64, 2.0.61.Final-db-r16-linux-x86_64, 2.0.61.Final-db-r16-osx-aarch_64, 2.0.61.Final-db-r16-osx-x86_64, 2.0.61.Final-db-r16-windows-x86_64 sürümünden 2.0.61.Final-db-r16, 2.0.61.Final-db-r16, 2.0.61.Final-db-r16, 2.0.61.Final-db-r16, 2.0.61.Final-db-r16 sürümüne.
    • io.netty.netty-transport-native-epoll from 4.1.96.Final, 4.1.96.Final-linux-aarch_64, 4.1.linux-x86_64 to 4.1.96.Final, 4.1.96.Final, 4.1.96.Final, 4.1.96.Final
    • io.netty.netty-transport-native-kqueue olarak 4.1.96.Final-osx-aarch_64, 4.1.96.Final-osx-x86_64'dan başlayarak 4.1.96.Final, 4.1.96.Final'a kadar
    • org.apache.orc.orc-core 1.9.2-shaded-protobuf'tan 1.9.2'ye
    • org.apache.orc.orc-mapreduce 1.9.2-shaded-protobuf'tan 1.9.2'ye
    • software.amazon.cryptools.AmazonCorrettoCryptoProvider 1.6.2-linux-x86_64 sürümünden 1.6.2 sürümüne
  • [SPARK-52159][SQL] Jdbc diyalektleri için tablo varlığı denetimini düzgün şekilde işleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 20 Mayıs 2025
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.5 ile 1.1.6 arasındaki io.delta.delta-sharing-client_2.12
  • Kopyalanan akış oturumu, Paylaşılan Kümeler/Sunucusuz'daki foreachBatch kullanıcı işlevinin içinde kullanılır. Bu, klasik (Atanan Kümeler) davranışıyla uyumlu hale gelir.
  • Bu değişiklik öncesinde, variant_get ifadesi içinde, yollardaki baştaki boşluklar ve sekmeler, Photon devre dışı bırakıldığında yoksayılıyordu. Örneğin, select variant_get(parse_json('{"key": "value"}'), '$['key']')"key" değerini ayıklamada etkili olmaz. Ancak kullanıcılar artık bu tür anahtarları çıkartabilir.
  • [SPARK-51935][SQL] Yorumlanan df.collect() dosyasında yineleyicilerin yavaş davranışını düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 22 Nisan 2025
  • güncelleştirilmiş Java kitaplıkları:
    • org.apache.avro.avro 1.11.3 ile 1.11.4
    • org.apache.avro.avro-ipc 1.11.3 ile 1.11.4 arası
    • org.apache.avro.avro-mapred 1.11.3'ten 1.11.4'e
  • 15.4, 16.0, 16.1, 16.2 ve 16.3'te "[SPARK-47895][SQL] diğer adına göre grup aynı anda etkili olmalıdır" ifadesini geri döndürün
  • [SPARK-50682][SQL] İç Alias standart hale getirilmelidir
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Nisan 2025
  • (Hata değişikliği) Kritik güvenlik düzeltme eklerini uygulamak için, varsayılan Python sürümü Python 3.11.0rc1'den Python 3.11.11'e güncelleştirilir. Bu güncelleştirme, Python serileştirme kullanarak yürütmeler arasında durumu depolayan ve geri yükleyen iş yükleri veya Python 3.11.0 sürümüne sabitlenmiş iş yükleri gibi Databricks Runtime 15.4 LTS üzerinde çalışan bazı iş yüklerini etkileyebilir.
  • güncelleştirilmiş Java kitaplıkları:
    • io.starburst.openjson.openjson 1.8-e.12 kaldırıldı
    • io.starburst.openx.data.json-serde 1.3.9-e.12 kaldırıldı
    • io.starburst.openx.data.json-serde-generic-shim 1.3.9-e.12 kaldırıldı
  • [SPARK-47895][SQL] diğer adlarla gruplandırma özdeş işlemli olmalıdır
  • [SPARK-51624][SQL] CreateNamedStruct.dataType içinde GetStructField meta verilerini yayma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 31 Mart 2025
  • Photon databricks-feature-engineering için etkinleştirilmemiş işlem için 0.8.0 sürümüne yükseltilir. Foton özellikli hesaplamalar için databricks-feature-engineering sürüm 0.6.0'da kalır.

• 11 Mart 2025

  • Databricks Runtime 14.3 LTS ve üstü, bir sınıfın örneğini oluşturan ve Apache Spark'a karşı derlenen kodda ikili uyumsuzluklara neden olan bir soruna yönelik bir SparkListenerApplicationEnd düzeltme içerir. Bu uyumsuzluk SPARK-46399'un Apache Spark ile birleştirilmesinden kaynaklandı. Bu birleştirme, SparkListenerApplicationEnd oluşturucusuna varsayılan bir bağımsız değişken ekleyen bir değişikliği içeriyordu. İkili uyumluluğu geri yüklemek için bu düzeltme, SparkListenerApplicationEnd sınıfına tek bir bağımsız değişken oluşturucu ekler.
  • [SPARK-50985][SS] Kafka Zaman Damgası Ofsetleri uyumsuzluk hatasını assert yerine sınıflandır ve KafkaTokenProvider'da eksik sunucu için hata at.
  • [SPARK-50791][SQL] State Store'da NPE hata işlemesini düzeltme
  • [SPARK-50310][PYTHON] DQC devre dışı bırakıldığında Sütun performansını iyileştir
  • [SPARK-51222][SQL] ReplaceCurrentLike İyileştir
  • [SPARK-49525][SS][CONNECT] Sunucu Tarafı Akış Sorgu DinleyicisiBus Dinleyicisi'ne küçük günlük iyileştirmesi
  • [SPARK-51084][SQL] NegativeScaleNotAllowedError için uygun hata sınıfını atayın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 11 Şubat 2025

  • Bu sürüm, kurtarılan XML veri sütunlarını seri hale getirme sırasında belirli veri türlerinin dönüştürülme sorununun düzeltmesini içerir. Etkilenen veri türleri, prefersDecimal etkinleştirildiğinde tarihler, NTZ olmayan zaman damgaları ve ondalık değerlerdir. Kurtarılan veri sütunu hakkında daha fazla bilgi edinmek için bkz. Kurtarılan veri sütunu nedir?.
  • [SPARK-50492][SS] dropDuplicatesWithinWatermark'tan sonra olay zamanı sütunu bırakıldığında oluşan java.util.NoSuchElementException hatası düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.
  • Photon için etkinleştirilmemiş hesaplama için mlflow-skinny, 2.19.0 sürümüne güncellenecektir. Foton özellikli işlem için mlflow-skinny 2.13.1'de kalır.

• 10 Aralık 2024, Cumartesi
  • USE CATALOG deyimi artık IDENTIFIER yan tümcesini destekliyor. Bu destekle, geçerli kataloğu bir dize değişkenine veya parametre işaretçisine göre parametreleştirebilirsiniz.
  • Bu sürüm, bir Delta tablosundaki birincil anahtarın arka planda çalışan otomatik sıkıştırma ile ilgili belirli uç durumlarda silinmesine neden olabilecek bir soruna yönelik bir düzeltme içerir.
  • Bu sürümle birlikte, Databricks işlem düğümündeki bir SSD tarafından kullanılan önbellek boyutu, SSD'nin ilk boyutuna dinamik olarak genişler ve gerektiğinde sınıra spark.databricks.io.cache.maxDiskUsage kadar küçülür. Daha fazla bilgi için Azure Databricks'te önbelleğe almayla performansı optimize etme.
  • pyodbc paketi 4.0.38 sürümünden 4.0.39 sürümüne güncelleştirilir. Bu değişiklik gereklidir çünkü 4.0.38 sürümünde bir hata bulundu ve bu sürüm PyPI'dan kaldırıldı.
  • [SPARK-50329][SQL] InSet$toString hatasının düzeltilmesi
  • [SPARK-47435][SQL] MySQL UNSIGNED TINYINT'in taşma sorununu düzeltme
  • [SPARK-49757][SQL] IDENTIFIERSET deyiminde CATALOG ifade desteği
  • [SPARK-50426][PYTHON] Yerleşik veya Java veri kaynaklarını kullanırken statik Python veri kaynağı aramasından kaçının
  • [SPARK-48863][SQL] "spark.sql.json.enablePartialResults" etkinleştirildiğinde JSON ayrıştırılırken oluşan ClassCastException hatasını düzeltin
  • [SPARK-50310][PYTHON] PySpark için DataFrameQueryContext'i devre dışı bırakmak için bayrak ekleme
  • [15.3-15.4] [SPARK-50034][CORE] SparkUncaughtExceptionHandler'de Kritik Hataların Yakalanmamış İstisnalar Olarak Yanlış Bildirilmesi Düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 26 Kasım 2024
  • Bu sürümle, artık metin girişi için vector_search kullanarak query_text işlevini veya girişi eklemek için query_vector sorgulayabilirsiniz.
  • Artık spark.databricks.execution.timeoutSpark yapılandırma özelliğini kullanarak Spark Connect sorguları için zaman aşımı ayarlayabilirsiniz. Sunucusuz işlem üzerinde çalışan not defterleri için varsayılan değer 9000 (saniye) değeridir. Sunucusuz işlem ve işlem üzerinde standart erişim moduyla çalışan işler, bu yapılandırma özelliği ayarlanmadığı sürece zaman aşımına neden olmaz. Belirtilen zaman aşımından daha uzun süren bir yürütme QUERY_EXECUTION_TIMEOUT_EXCEEDED hatasıyla sonuçlanır.
  • [SPARK-50322][SQL] Alt sorgudaki parametreli tanımlayıcıyı düzeltme
  • [SPARK-49615] [ML] Tüm ML özellik transformatörleri veri kümesi şeması doğrulamasını "spark.sql.caseSensitive" yapılandırmasına uygun hale getirin.
  • [SPARK-50124][SQL] LIMIT/OFFSET veri sıralamasını korumalıdır
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 5 Kasım 2024
  • (Kritik değişiklik) Databricks Runtime 15.4 LTS ve üzerinde, Photon'daki normal ifade işleme, Apache Spark'ın normal ifade işleme davranışıyla eşleşecek şekilde güncellenmiştir. Daha önce, split() ve regexp_extract()gibi Photon tarafından çalıştırılan normal ifade işlevleri Spark ayrıştırıcısı tarafından reddedilen bazı normal ifadeleri kabul etti. Apache Spark ile tutarlılığı korumak için Artık Spark'ın geçerli olmadığını düşündüğü normal ifadelerde Foton sorguları başarısız olur. Bu değişiklik nedeniyle Spark kodunuz geçersiz normal ifadeler içeriyorsa hatalar görebilirsiniz. Örneğin, eşleşmeyen bir ayraç içeren ve daha önce Photon tarafından kabul edilen split(str_col, '{') ifadesi artık çalışmıyor. Bu ifadeyi düzeltmek için küme ayracı karakterini es geçebilirsiniz: split(str_col, '\\{'). Photon ve Spark davranışı, ASCII olmayan karakterlerin bazı normal ifade eşleştirmeleri için de farklılık gösterir. Bu, Photon'un Apache Spark davranışıyla eşleşmesi için de güncelleştirilir.
  • [SPARK-49782][SQL] ResolveDataFrameDropColumns kuralı, UnresolvedAttribute'u çocuk çıktısıyla çözüyor.
  • [SPARK-49867][SQL] GetColumnByOrdinal çağrılırken dizin sınırların dışında olduğunda hata iletisini geliştirin
  • [SPARK-49863][SQL] İç içe yapıların null özelliğini korumak için NormalizeFloatingNumbers fonksiyonunu düzeltmek
  • [SPARK-49829] Akış-akış birleşiminde durum deposuna veri eklemesi iyileştirmesini gözden geçirin (doğruluk düzeltmesi)
  • [SPARK-49905] Karıştırmanın AQE tarafından değiştirilmesini önlemek için durum bilgisi olan operatörler için özel bir ShuffleOrigin kullanın.
  • [SPARK-46632][SQL] Eşdeğer üçüncül ifadelerin farklı alt öğelere sahip olduğu durumlarda alt ifade yok edilmesi işlemi düzeltildi
  • [SPARK-49443][SQL][PYTHON] to_variant_object ifadesini uygulama ve schema_of_variant ifadelerinin Değişken Nesneler için OBJECT yazdırmasını sağlama.
  • [SPARK-49615] Hata Düzeltme: ML sütun şeması doğrulamasının spark yapılandırmasıyla uyumlu hale getirilmesi. spark.sql.caseSensitive

• 22 Ekim 2024, Cumartesi
  • [SPARK-49782][SQL] ResolveDataFrameDropColumns kuralı, UnresolvedAttribute'u çocuk çıktısıyla çözüyor.
  • [SPARK-49867][SQL] GetColumnByOrdinal çağrılırken dizin sınırların dışında olduğunda hata iletisini geliştirin
  • [SPARK-49863][SQL] İç içe yapıların null özelliğini korumak için NormalizeFloatingNumbers fonksiyonunu düzeltmek
  • [SPARK-49829] Akış-akış birleşiminde durum deposuna veri eklemesi iyileştirmesini gözden geçirin (doğruluk düzeltmesi)
  • [SPARK-49905] Karıştırmanın AQE tarafından değiştirilmesini önlemek için durum bilgisi olan operatörler için özel bir ShuffleOrigin kullanın.
  • [SPARK-46632][SQL] Eşdeğer üçüncül ifadelerin farklı alt öğelere sahip olduğu durumlarda alt ifade yok edilmesi işlemi düzeltildi
  • [SPARK-49443][SQL][PYTHON] to_variant_object ifadesini uygulama ve schema_of_variant ifadelerinin Değişken Nesneler için OBJECT yazdırmasını sağlama.
  • [SPARK-49615] Hata Düzeltme: ML sütun şeması doğrulamasının spark yapılandırmasıyla uyumlu hale getirilmesi. spark.sql.caseSensitive
• 10 Ekim 2024, Cumartesi
  • [SPARK-49743][SQL] GetArrayStructFields ayıklama sırasında OptimizeCsvJsonExpr şema alanlarını değiştirmemelidir
  • [SPARK-49688][BAĞLANTI] Kesme ve yürütme planı arasındaki veri yarışını düzelt
  • [BACKPORT] [SPARK-49474][SS] FlatMapGroupsWithState kullanıcı işlevi hatası için Hata sınıfını sınıflandırma
  • [SPARK-49460][SQL] İzleme: Olası NPE riskini düzeltme
• 25 Eylül 2024, Cumartesi
  • [SPARK-49628][SQL] ConstantFolding değerlendirmeden önce durum bilgisi olan ifadeyi kopyalamalıdır
  • [SPARK-49000][SQL] RewriteDistinctAggregates'i genişleterek t tablosunun boş olduğu "select count(distinct 1) from t" düzeltildi
  • [SPARK-49492][BAĞLAN] Etkin olmayan ExecutionHolder'da tekrar bağlanma girişimi
  • [SPARK-49458][BAĞLAN][PYTHON] ReattachExecute aracılığıyla sunucu tarafı oturum kimliği sağlama
  • [SPARK-49017][SQL] Insert deyimi birden çok parametre kullanıldığında başarısız oluyor
  • [SPARK-49451] parse_json'da yinelenen anahtarlara izin veriliyor.
  • Çeşitli hata düzeltmeleri.
• 17 Eylül 2024, Cumartesi
  • [SPARK-48463][ML] Binarizer, Bucketizer, Vector Assembler, FeatureHasher, QuantizeDiscretizer, OnehotEncoder, StopWordsRemover, Imputer ve Interactor'u iç içe giriş sütunlarını destekler hale getirme
  • [SPARK-49409][BAĞLAN] CONNECT_SESSION_PLAN_CACHE_SIZE varsayılan değerini ayarlama
  • [SPARK-49526][CONNECT][HOTFIX-15.4.2] ArtifactManager'da Windows stili yolları destekleme
  • Geri Al "[SPARK-48482][PYTHON] dropDuplicates ve dropDuplicatesWithinWatermark, değişken uzunlukta argümanları kabul etmelidir"
  • [SPARK-43242][CORE] Shuffle bozulması tanılamasında 'Beklenmeyen BlockId türü' hatasını düzeltme
  • [SPARK-49366][CONNECT] Birleşim düğümünü DataFrame sütun çözümlemesinde yaprak olarak değerlendir
  • [SPARK-49018][SQL] Harmanlama ile approx_count_distinct düzgün çalışmaması düzeltilir
  • [SPARK-49460][SQL] cleanupResource() EmptyRelationExec'ten kaldırma
  • [SPARK-49056][SQL] ErrorClassesJsonReader null değerini düzgün işleyemiyor
  • [SPARK-49336][BAĞLAN] Protobuf mesajını kısaltırken iç içe yerleşim seviyesini sınırlamak
• 29 Ağustos 2024
  • SHOW CREATE TABLE deyiminden elde edilen çıktı artık materyalize edilmiş bir görünümde veya akış tablosunda tanımlanan satır filtreleri veya sütun maskelerine dair her şeyi içerir. Bkz. SHOW CREATE TABLE. Satır filtreleri ve sütun maskeleri hakkında bilgi edinmek için bkz. Satır filtreleri ve sütun maskeleri.
  • Paylaşılan erişim moduyla yapılandırılan işlemde Kafka toplu okuma ve yazma işlemleri artık Yapılandırılmış Akış için belgelenenlerle aynı sınırlamalara sahiptir. Bkz . Akış sınırlamaları.
  • [SPARK-48941][SPARK-48970] Backport ML yazıcı / okuyucu düzeltmeleri
  • [SPARK-49074][SQL] Varyantı düzeltme df.cache()
  • [SPARK-49263][BAĞLAN] Spark Connect python istemcisi: Boole Dataframe okuyucu seçeneklerini tutarlı bir şekilde işleme
  • [SPARK-48955][SQL] 15.4'te ArrayCompact değişikliklerini dahil et
  • [SPARK-48937][SQL] StringToMap dize ifadeleri için harmanlama desteği ekleme
  • [SPARK-48929] Görünümün iç hatasının düzeltilmesi ve ayrıştırıcı istisna bağlamının temizlenmesi
  • [SPARK-49125][SQL] CSV yazmada yinelenen sütun adlara izin ver
  • [SPARK-48934][SS] Python datetime türleri applyInPandasWithState'te zaman aşımını ayarlamak için yanlış dönüştürüldü
  • [SPARK-48843] BindParameters ile sonsuz döngü önleme
  • [SPARK-48981] Harmanlamalar için pyspark'ta stringType'ın simpleString yöntemini düzeltme
  • [SPARK-49065][SQL] Eski biçimlendiriciler ve ayrıştırıcılarda yeniden yapılandırma, JVM olmayan varsayılan saat dilimlerini desteklemelidir
  • [SPARK-48896][SPARK-48909][SPARK-48883] Backport spark ML yazıcı düzeltmeleri
  • [SPARK-48725][SQL] CollationAwareUTF8String.lowerCaseCodePoints'i dize ifadeleriyle tümleştirme
  • [SPARK-48978][SQL] UTF8_LCASE için harmanlama desteğinde ASCII hızlı yolunu uygulama
  • [SPARK-49047][PYTHON][BAĞLAN] Kayıt için mesajı kes
  • [SPARK-49146][SS] Ekleme modu akış sorgularında filigran eksikliği ile ilgili doğrulama hatalarını hata çerçevesine taşıma.
  • [SPARK-48977][SQL] UTF8_LCASE karşılaştırması altında dize aramayı iyileştirme
  • [SPARK-48889][SS] bitirmeden önce durum depolarını boşaltmak için testStream'i kullanma
  • [SPARK-48463] İç içe giriş sütunlarını destekleyen StringIndexer yap
  • [SPARK-48954] try_mod() try_remainder() öğesinin yerini alır
  • İşletim sistemi güvenlik güncelleştirmeleri.

Databricks Runtime 14.3 LTS sürümü

Bkz. Databricks Runtime 14.3 LTS.

• 10 Temmuz 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Haziran 2026
  • (Davranış değişikliği) Ölçüm görünümleri artık diğer pencere ölçülerine başvuran pencere ölçülerini reddeder. Daha önce, bu desen CREATE zamanında başarılı oluyordu, ancak sorgu zamanında sessizce başarısız oluyor veya yanlış sonuçlar üretiyordu. Şimdi Azure Databricks, CREATE veya ALTER sırasında net bir hata döndürüyor (METRIC_VIEW_WINDOW_MEASURE_REFERENCES_WINDOW_MEASURE). Bu doğrulamayı devre dışı bırakmak için spark.databricks.sql.metricView.rejectWindowOnWindowMeasure.enabled değerini false olarak ayarlayın.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Haziran 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Mayıs 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 13 Mayıs 2026
  • (Behavior change) Şema deseni kullanarak tabloları listelemek artık yabancı tablolar (örneğin, SQL Server, PostgreSQL veya AWS Glue) için Unity Kataloğu meta verilerini yenilemez. Bu değişiklik, bir şema deseni iletildiğinde JDBC sürücüsündeki SHOW TABLES IN SCHEMA LIKE ... ve getMetaData.getTables çağrılarını ve Thrift SparkGetTablesOperation API’sini etkiler. İş yükünüz bir şema düzeniyle meta veri yenilemeye bağımlıysa Databricks Desteği'ne başvurun.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Nisan 2026
  • Çeşitli hata düzeltmeleri.

• 20 Nisan 2026
  • Çeşitli hata düzeltmeleri.

• 2 Nisan 2026, İstanbul

  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.7 ile 1.1.11 arasındaki io.delta.delta-sharing-client_2.12
  • Otomatik Yükleyici, DBR 16.3'te kaynak konum yönetimi ve görünürlük ile ilgili iki yeni özellik içerir: 1. Olay değişikliklerini kaydetme: Bu değişiklikle, müşteriler TVF'yi kullanarak cloud_files_state bir dosyanın ilk keşfedilme zamanı, işlenme zamanı, arşivlenme gibi dosya bulma ve işleme ayrıntılarını görüntüleyebilir. Bu TVF'nin geçerli genel belgelerine buradan bakın. 2. Temiz kaynak: Bu özellik sayesinde, müşteriler Otomatik Yükleyici'ye işlenen dosyaları otomatik olarak silmesi için talimat verebilir. Müşteriler Otomatik Yükleyici seçeneğini kullanarak cloudFiles.cleanSource bu özelliği kabul edebilir. Otomatik Yükleyici seçenekleri belgelerindeki diğer ayrıntılara buradan göz atın.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Mart 2026

  • [SPARK-55111][SS] Sorgu yeniden başlatıldığında tamamlanmamış yeniden bölümleme algılamasını yeniden denetle
  • [SPARK-55701]ES-1694761[SS] CompactibleFileStreamLog.allFiles dosyasında yarış durumu düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Şubat 2026

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 19 Şubat 2026

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 27 Ocak 2026

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Ocak 2026

  • Bölümlenmiş Delta tablolarında, ileride veri parke dosyalarında yer alan bölüm sütunları olacaktır. Bu, Iceberg ve UniForm tablolarının işlenme şekliyle daha iyi bir sinerji sağlar ve Delta dışı harici okuyucularla uyumluluğu artırır.
  • [SPARK-54711][PYTHON] Daemon tarafından oluşturulan çalışan bağlantısı için zaman aşımı ekleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Aralık 2025, Cumartesi

  • [SPARK-52579][PYTHON] Python çalışanları için düzenli olarak geri izleme dökümü ayarlama
  • [SPARK-54180][SQL] BinaryFileFormat toString'ini geçersiz kılma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 18 Kasım 2025
  • [SPARK-54078][SS] StateStoreSuite SPARK-40492: maintenance before unload için yeni test ve eski testten altyapıyı kaldırma
  • [SPARK-54047][PYTHON] Boşta kalma zaman aşımında sonlandığında farklı bir hata türü kullanın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 4 Kasım 2025
  • Güncelleştirilmiş R kitaplıkları:
    • 12.0.1 sürümünden 21.0.0 sürümüne ok
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 21 Ekim 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 7 Ekim 2025, Cumartesi
  • [SPARK-53568][CONNECT][PYTHON] Spark Connect'teki birkaç küçük hatayı düzeltme Python istemci hata işleme mantığı
  • [SPARK-53574] AnalysisContext'in iç içe plan çözümlemesi sırasında silinmesi sorunu düzeltildi.
  • Çeşitli hata düzeltmeleri.

• 16 Eylül 2025, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Eylül 2025, Cumartesi
  • Otomatik Yükleyici'nin süresiz olarak kilitlenmesine neden olabilen bir sorun düzeltildi.
  • [SPARK-49872][CORE] jackson JSON dize uzunluğu sınırlamasını kaldırma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Ağustos 2025
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.6 ile 1.1.7 arasındaki io.delta.delta-sharing-client_2.12
  • [SPARK-52482][SQL][CORE] Bazı bozuk zstd dosyalarını okumak için özel durum işlemeyi geliştirme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 14 Ağustos 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Temmuz 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 15 Temmuz 2025
  • [SPARK-52503][SQL][CONNECT] Giriş sütunu mevcut olmadığında düzeltme drop
  • Çeşitli hata düzeltmeleri.

• 1 Temmuz 2025
  • Dosya veri kaynağı okuyucuları için ZStandard dekompresyon desteği (json, csv, xml ve metin.)
  • Dosya veri kaynağı okuyucuları için ZStandard dekompresyon desteği (json, csv, xml ve metin.)
  • [SPARK-52521][SQL] Right#replacement SQLConf'a dinamik olarak erişmemelidir
  • [SPARK-52482][SQL][CORE] Dosya veri kaynağı okuyucusu için ZStandard desteği
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 17 Haziran 2025
  • Tablo değerli işlevin cloud_files_state (TVF) işlem hatları arasında akış tablolarının dosya düzeyinde durumunu okumak için kullanılamayacağı sınırlaması düzeltildi.
  • [SPARK-49646][SQL] parentOuterReferences içinde collectChildOuterReferences kapsamında olmayan başvurular olduğunda birleşim/küme işlemleri için alt sorgu dekorrelasyonu düzeltildi

• 3 Haziran 2025
  • güncelleştirilmiş Python kitaplıkları:
    • 3.4.8, 39.0.1 ile 39.0.1 arasında şifreleme
    • platformdirs sürüm 2.5.2, 2.6.2'den 2.5.2'ye
    • pyparsing 2.4.7 ve 3.0.9'dan 3.0.9'a
    • Pip 22.3.1 eklendi
    • Kurulum araçları 65.6.3 eklendi
    • tomli 2.0.1 eklendi
    • wcwidth 0.2.5 eklendi
    • Tekerlek 0.38.4 eklendi
    • Dağıtım sürümü 1.7.0 kaldırıldı
    • Distro-info 1.1+ubuntu0.2 kaldırıldı
    • python-apt 2.4.0+ubuntu4 kaldırıldı
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1, 1.1-natives ile 1.1, 1.1 arası com.github.fommil.netlib.native_ref-java
    • 1.1, 1.1-natives ile 1.1, 1.1 arası com.github.fommil.netlib.native_system java
    • 1.1-natives'inden 1.1'e com.github.fommil.netlib.netlib-native_ref-linux-x86_64
    • com.github.fommil.netlib.netlib-native_system-linux-x86_64 sürümü 1.1-natives'ten 1.1'e güncelleniyor.
    • io.netty.netty-tcnative-boringssl-static, 2.0.61.Final-db-r16-linux-aarch_64, 2.0.61.Final-db-r16-linux-x86_64, 2.0.61.Final-db-r16-osx-aarch_64, 2.0.61.Final-db-r16-osx-x86_64, 2.0.61.Final-db-r16-windows-x86_64 sürümünden 2.0.61.Final-db-r16, 2.0.61.Final-db-r16, 2.0.61.Final-db-r16, 2.0.61.Final-db-r16, 2.0.61.Final-db-r16 sürümüne.
    • io.netty.netty-transport-native-epoll from 4.1.96.Final, 4.1.96.Final-linux-aarch_64, 4.1.linux-x86_64 to 4.1.96.Final, 4.1.96.Final, 4.1.96.Final, 4.1.96.Final
    • io.netty.netty-transport-native-kqueue olarak 4.1.96.Final-osx-aarch_64, 4.1.96.Final-osx-x86_64'dan başlayarak 4.1.96.Final, 4.1.96.Final'a kadar
    • org.apache.orc.orc-core 1.9.2-shaded-protobuf'tan 1.9.2'ye
    • org.apache.orc.orc-mapreduce 1.9.2-shaded-protobuf'tan 1.9.2'ye
    • yazılım.amazon.cryptools.AmazonCorrettoCryptoProvider sürüm 1.6.1-linux-x86_64'dan sürüm 1.6.1'e
  • [SPARK-52040][PYTHON][SQL][CONNECT] ResolveLateralColumnAliasReference plan kimliğini korumalı
  • [SPARK-52159][SQL] Jdbc diyalektleri için tablo varlığı denetimini düzgün şekilde işleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 20 Mayıs 2025
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1.5 ile 1.1.6 arasındaki io.delta.delta-sharing-client_2.12
  • [SPARK-51935][SQL] Yorumlanan df.collect() dosyasında yineleyicilerin yavaş davranışını düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 22 Nisan 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 09 Nisan 2025

  • [Davranış Değişikliği] Vakum işlemleri artık diğer işlemlere benzer Yazıcı protokolü denetimleri gerçekleştirerek uyumsuz eski Databricks Runtime sürümlerinden çalıştırıldığında daha yeni özelliklere sahip tablolarda beklenmeyen temizlemeleri önlüyor.
  • [SPARK-51624][SQL] CreateNamedStruct.dataType içinde GetStructField meta verilerini yayma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 11 Mart 2025

  • Databricks Runtime 14.3 LTS ve üstü, bir sınıfın örneğini oluşturan ve Apache Spark'a karşı derlenen kodda ikili uyumsuzluklara neden olan bir soruna yönelik bir SparkListenerApplicationEnd düzeltme içerir. Bu uyumsuzluk SPARK-46399'un Apache Spark ile birleştirilmesinden kaynaklandı. Bu birleştirme, SparkListenerApplicationEnd oluşturucusuna varsayılan bir bağımsız değişken ekleyen bir değişikliği içeriyordu. İkili uyumluluğu geri yüklemek için bu düzeltme, SparkListenerApplicationEnd sınıfına tek bir bağımsız değişken oluşturucu ekler.
  • [SPARK-50791][SQL] State Store'da NPE hata işlemesini düzeltme
  • [SPARK-50705][SQL] QueryPlan kilitsiz hale getirme
  • [SPARK-49525][SS][CONNECT] Sunucu Tarafı Akış Sorgu DinleyicisiBus Dinleyicisi'ne küçük günlük iyileştirmesi
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 11 Şubat 2025

  • Bu sürüm, kurtarılan XML veri sütunlarını seri hale getirme sırasında belirli veri türlerinin dönüştürülme sorununun düzeltmesini içerir. Etkilenen veri türleri, prefersDecimal etkinleştirildiğinde tarihler, NTZ olmayan zaman damgaları ve ondalık değerlerdir. Kurtarılan veri sütunu hakkında daha fazla bilgi edinmek için bkz. Kurtarılan veri sütunu nedir?.
  • [SPARK-50492][SS] dropDuplicatesWithinWatermark'tan sonra olay zamanı sütunu bırakıldığında oluşan java.util.NoSuchElementException hatası düzeltildi
  • [SPARK-51084][SQL] NegativeScaleNotAllowedError için uygun hata sınıfını atayın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Aralık 2024, Cumartesi
  • Bu sürüm, bir Delta tablosundaki birincil anahtarın arka planda çalışan otomatik sıkıştırma ile ilgili belirli uç durumlarda silinmesine neden olabilecek bir soruna yönelik bir düzeltme içerir.
  • [SPARK-50329][SQL] InSet$toString hatasının düzeltilmesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 26 Kasım 2024
  • [SPARK-49615] [ML] Tüm ML özellik transformatörleri veri kümesi şeması doğrulamasını "spark.sql.caseSensitive" yapılandırmasına uygun hale getirin.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 5 Kasım 2024
  • [SPARK-48843] BindParameters ile sonsuz döngü önleme
  • [SPARK-49829] Akış-akış birleşiminde durum deposuna veri eklemesi iyileştirmesini gözden geçirin (doğruluk düzeltmesi)
  • [SPARK-49863][SQL] İç içe yapıların null özelliğini korumak için NormalizeFloatingNumbers fonksiyonunu düzeltmek
  • [BACKPORT] [SPARK-49326][SS] Foreach havuzu kullanıcı işlevi hatası için Hata sınıfını sınıflandırma
  • [SPARK-49782][SQL] ResolveDataFrameDropColumns kuralı, UnresolvedAttribute'u çocuk çıktısıyla çözüyor.
  • [SPARK-46632][SQL] Eşdeğer üçüncül ifadelerin farklı alt öğelere sahip olduğu durumlarda alt ifade yok edilmesi işlemi düzeltildi
  • [SPARK-49905] Karıştırmanın AQE tarafından değiştirilmesini önlemek için durum bilgisi olan operatörler için özel bir ShuffleOrigin kullanın.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 22 Ekim 2024, Cumartesi
  • [SPARK-48843] BindParameters ile sonsuz döngü önleme
  • [SPARK-49863][SQL] İç içe yapıların null özelliğini korumak için NormalizeFloatingNumbers fonksiyonunu düzeltmek
  • [SPARK-49905] Karıştırmanın AQE tarafından değiştirilmesini önlemek için durum bilgisi olan operatörler için özel bir ShuffleOrigin kullanın.
  • [SPARK-46632][SQL] Eşdeğer üçüncül ifadelerin farklı alt öğelere sahip olduğu durumlarda alt ifade yok edilmesi işlemi düzeltildi
  • [SPARK-49782][SQL] ResolveDataFrameDropColumns kuralı, UnresolvedAttribute'u çocuk çıktısıyla çözüyor.
  • [BACKPORT] [SPARK-49326][SS] Foreach havuzu kullanıcı işlevi hatası için Hata sınıfını sınıflandırma
  • [SPARK-49829] Akış-akış birleşiminde durum deposuna veri eklemesi iyileştirmesini gözden geçirin (doğruluk düzeltmesi)
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 10 Ekim 2024, Cumartesi
  • [BACKPORT] [SPARK-49474][SS] FlatMapGroupsWithState kullanıcı işlevi hatası için Hata sınıfını sınıflandırma
  • [SPARK-49743][SQL] GetArrayStructFields ayıklama sırasında OptimizeCsvJsonExpr şema alanlarını değiştirmemelidir
  • [SPARK-49688][BAĞLANTI] Kesme ve yürütme planı arasındaki veri yarışını düzelt
• 25 Eylül 2024, Cumartesi
  • [SPARK-48810][BAĞLAN] Oturum durdurma() API'si, oturum sunucu tarafından zaten kapatıldıysa başarısız olmamalıdır ve idempotent olmalıdır.
  • [SPARK-48719][SQL] 'RegrS'nin hesaplama hatasını düzeltin.
  • [SPARK-49000][SQL] RewriteDistinctAggregates'i genişleterek t tablosunun boş olduğu "select count(distinct 1) from t" düzeltildi
  • [SPARK-49628][SQL] ConstantFolding değerlendirmeden önce durum bilgisi olan ifadeyi kopyalamalıdır
  • [SPARK-49492][BAĞLAN] Etkin olmayan ExecutionHolder'da tekrar bağlanma girişimi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 17 Eylül 2024, Cumartesi
  • [SPARK-49336][BAĞLAN] Protobuf mesajını kısaltırken iç içe yerleşim seviyesini sınırlamak
  • [SPARK-43242][CORE] Shuffle bozulması tanılamasında 'Beklenmeyen BlockId türü' hatasını düzeltme
  • [SPARK-48463][ML] Binarizer, Bucketizer, Vector Assembler, FeatureHasher, QuantizeDiscretizer, OnehotEncoder, StopWordsRemover, Imputer ve Interactor'u iç içe giriş sütunlarını destekler hale getirme
  • [SPARK-49526][CONNECT] ArtifactManager'da Windows stili yolları destekleme
  • [SPARK-49409][BAĞLAN] CONNECT_SESSION_PLAN_CACHE_SIZE varsayılan değerini ayarlama
  • [SPARK-49366][CONNECT] Birleşim düğümünü DataFrame sütun çözümlemesinde yaprak olarak değerlendir
• 29 Ağustos 2024
  • [SPARK-49146][SS] Ekleme modu akış sorgularında filigran eksikliği ile ilgili doğrulama hatalarını hata çerçevesine taşıma.
  • [SPARK-48862][PYTHON][BAĞLAN] BİLGİ düzeyi etkin değilken _proto_to_string çağırmaktan kaçının
  • [SPARK-49263][BAĞLAN] Spark Connect python istemcisi: Boole Dataframe okuyucu seçeneklerini tutarlı bir şekilde işleme
• 14 Ağustos 2024
  • [SPARK-48941][SPARK-48970] Backport ML yazıcı / okuyucu düzeltmeleri
  • [SPARK-48706][PYTHON] Python UDF yüksek dereceli fonksiyonlarda iç hata oluşturmamalıdır
  • [SPARK-49056][SQL] ErrorClassesJsonReader null değerini düzgün işleyemiyor
  • [SPARK-48597][SQL] Mantıksal planın metin gösteriminde isStreaming özelliği için bir işaretçi ekleme
  • [SPARK-49065][SQL] Eski biçimlendiriciler ve ayrıştırıcılarda yeniden yapılandırma, JVM olmayan varsayılan saat dilimlerini desteklemelidir
  • [SPARK-48934][SS] Python datetime türleri applyInPandasWithState'te zaman aşımını ayarlamak için yanlış dönüştürüldü
• 1 Ağustos 2024
  • Bu sürüm, Spark Java arabirimindeki ColumnVector ve ColumnarArray sınıfları için bir hata düzeltmesi içerir. Bu düzeltmeden önce, eğer bu sınıflardan birinin örneği ArrayIndexOutOfBoundsException değerler içeriyorsa, bir null oluşturulabilir veya yanlış veriler döndürülebilirdi.
  • Not defterleri ve işler için sunucusuz işlemde ANSI SQL modu varsayılan olarak etkindir. bkz. Desteklenen Spark yapılandırma parametreleri.
  • Paylaşılan erişim moduyla yapılandırılan işlemde Kafka toplu okuma ve yazma işlemleri artık Yapılandırılmış Akış için belgelenenlerle aynı sınırlamalara sahiptir. Bkz . Akış sınırlamaları.
  • SHOW CREATE TABLE deyiminden elde edilen çıktı artık materyalize edilmiş bir görünümde veya akış tablosunda tanımlanan satır filtreleri veya sütun maskelerine dair her şeyi içerir. Bkz. SHOW CREATE TABLE. Satır filtreleri ve sütun maskeleri hakkında bilgi edinmek için bkz. Satır filtreleri ve sütun maskeleri.
  • Paylaşılan erişim moduyla yapılandırılan işlemde Kafka toplu okuma ve yazma işlemleri artık Yapılandırılmış Akış için belgelenenlerle aynı sınırlamalara sahiptir. Bkz . Akış sınırlamaları.
  • SHOW CREATE TABLE deyiminden elde edilen çıktı artık materyalize edilmiş bir görünümde veya akış tablosunda tanımlanan satır filtreleri veya sütun maskelerine dair her şeyi içerir. Bkz. SHOW CREATE TABLE. Satır filtreleri ve sütun maskeleri hakkında bilgi edinmek için bkz. Satır filtreleri ve sütun maskeleri.
  • [SPARK-48896][SPARK-48909][SPARK-48883] Backport spark ML yazıcı düzeltmeleri
  • [SPARK-48889][SS] bitirmeden önce durum depolarını boşaltmak için testStream'i kullanma
  • [SPARK-48705][PYTHON] pyspark ile başladığında açıkça worker_main kullanın
  • [SPARK-48047][SQL] Boş TreeNode etiketlerinin bellek baskısını azaltma
  • [SPARK-48544][SQL] Boş TreeNode BitSet'lerinin bellek baskısını azaltma
  • [SPARK-46957][CORE] Taşınan karıştırma dosyalarının yürütücüden temizlenmesi mümkün olmalıdır.
  • [SPARK-48463] İç içe giriş sütunlarını destekleyen StringIndexer yap
  • [SPARK-47202][PYTHON] tzinfo ile tarih saatlerdeki yazım hatası düzeltildi
  • [SPARK-47713][SQL][CONNECT] Kendi kendine birleştirme hatasını düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 11 Temmuz 2024
  • (Davranış değişikliği) Delta tablo kaynaklarına karşı önbelleğe alınan DataFrame'ler artık kaynak tablonun üzerine yazılırsa geçersiz kılınır. Bu değişiklik, Delta tablolarındaki tüm durum değişikliklerinin önbelleğe alınmış sonuçları geçersiz kıldığı anlamına gelir. DataFrame'in kullanım ömrü boyunca tablo durumunu kalıcı hale getirmek için .checkpoint() kullanın.
  • Snowflake JDBC Sürücüsü 3.16.1 sürümüne güncelleştirildi.
  • Bu sürüm, Databricks Container Services'da çalışırken Spark UI Ortamı sekmesinin doğru görüntülenmesini engelleyen bir soruna yönelik bir düzeltme içerir.
  • Not defterleri ve işler için sunucusuz işlemde ANSI SQL modu varsayılan olarak etkindir. bkz. Desteklenen Spark yapılandırma parametreleri.
  • Verileri okurken geçersiz bölümleri yoksaymak için Parquet, ORC, CSV veya JSON gibi dosya tabanlı veri kaynakları ignoreInvalidPartitionPaths veri kaynağı seçeneğini true olarak ayarlayabilir. Örneğin: spark.read.format("parquet").option("ignoreInvalidPartitionPaths", "true").load(...). SQL yapılandırması spark.sql.files.ignoreInvalidPartitionPaths'i de kullanabilirsiniz. Ancak, veri kaynağı seçeneği SQL yapılandırmasından önceliklidir. Bu ayar varsayılan olarak false'tur.
  • [SPARK-48648][PYTHON][CONNECT] SparkConnectClient.tags’i düzgün bir şekilde threadlocal hale getirme
  • [SPARK-48445][SQL] Pahalı alt öğeleri olan satır içi UDF'ler yapmayın
  • [SPARK-48481][SQL][SS] Akış Veri Kümesine OptimizeOneRowPlan uygulamayın
  • [SPARK-48383][SS] Kafka'da startOffset seçeneğinde eşleşmeyen bölümler için daha iyi hata oluşturma
  • [SPARK-48503][SQL] Yanlışlıkla izin verilen ve eşdeğer olmayan sütunlarla gruplama yapılan geçersiz skaler alt sorgular düzeltildi.
  • [SPARK-48100][SQL] Şemada seçilmeyen iç içe yapı alanlarını atlama sorunlarını düzeltme
  • [SPARK-48273][SQL] PlanWithUnresolvedIdentifier'ın geç yeniden yazılmasını düzeltme
  • [SPARK-48252][SQL] Gerektiğinde CommonExpressionRef Güncelleştirme
  • [SPARK-48475][PYTHON] PySpark'ta _get_jvm_function iyileştirin.
  • [SPARK-48292][CORE] Revert [SPARK-39195][SQL] Spark OutputCommitCoordinator, kaydedilmiş dosya görev durumuyla tutarlı olmadığında aşamayı durdurmalıdır
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 17 Haziran 2024
  • applyInPandasWithState(), standart erişim moduyla işlemde kullanılabilir.
  • Photon TopK kullanarak yapılan sıralama-penceresi optimizasyonunun, yapıları içeren bölümleri yanlış işlemesiyle ilgili bir hatayı düzeltir.
  • [SPARK-48310][PYTHON][BAĞLAN] Önbelleğe alınan özellikler kopya döndürmelidir
  • [SPARK-48276][PYTHON][BAĞLAN] için eksik __repr__ yöntemi ekleyin SQLExpression
  • [SPARK-48294][SQL] nestedTypeMissingElementTypeError içinde küçük harflerin ele alınması
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 21 Mayıs 2024
  • (Davranış değişikliği) dbutils.widgets.getAll() artık bir not defterindeki tüm pencere öğesi değerlerini almakiçin desteklenmektedir.
  • try_divide() işlevinde ondalık içeren girişlerin beklenmeyen özel durumlarla sonuçlandığı bir hata düzeltildi.
  • [SPARK-48056][BAĞLAN][PYTHON] SESSION_NOT_FOUND hatası oluşursa ve kısmi yanıt alınmazsa planı yeniden yürüt
  • [SPARK-48146][SQL] "With" ifadesindeki child assertion'da toplama işlevini düzeltme
  • [SPARK-47986][BAĞLAN][PYTHON] Varsayılan oturum sunucu tarafından kapatıldığında yeni oturum oluşturulamıyor
  • [SPARK-48180][SQL] TABLE arg ile UDTF çağrısı birden çok PARTITION/ORDER BY ifade çevresindeki parantezleri unuttuğunda hatayı iyileştirme
  • [SPARK-48016][SQL] Ondalıklar olduğunda try_divide işlevindeki bir hatayı düzeltme
  • [SPARK-48197][SQL] Geçersiz lambda işlevi için onay hatasından kaçının
  • [SPARK-47994][SQL] SQLServer'da CASE WHEN sütun filtresi push down ile ilgili hata düzeltildi
  • [SPARK-48173][SQL] CheckAnalysis sorgu planının tamamını görmelidir
  • [SPARK-48105][SS] Durum deposu kaldırma ve anlık görüntü oluşturma arasındaki yarış durumunu düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Mayıs 2024
  • (Davranış değişikliği) applyInPandas ve mapInPandas UDF türleri artık Databricks Runtime 14.3 LTS ve üzerini çalıştıran paylaşılan erişim modu işlemlerinde desteklenmektedir.
  • [SPARK-47739][SQL] Mantıksal avro türünü kaydetme
  • [SPARK-47941] [SS] [Bağlan] ForeachBatch çalışan başlatma hatalarını PySpark için kullanıcılara yayma
  • [SPARK-48010][SQL] resolveExpression'da conf.resolver için yinelenen çağrılardan kaçının
  • [SPARK-48044][PYTHON][BAĞLAN] Önbellek DataFrame.isStreaming
  • [SPARK-47956][SQL] Çözümlenmemiş LCA referansı için mantık kontrolü
  • [SPARK-47543][BAĞLAN][PYTHON] DataFrame oluşturmak için Pandas DataFrame'den dict'i Harita tipi olarak tanımlama
  • [SPARK-47819][BAĞLAN][Cherry-pick-14.3] Yürütme temizliği için asenkron geri çağırma kullanma
  • [SPARK-47764][CORE][SQL] ShuffleCleanupMode tabanlı karıştırma bağımlılıklarını temizleme
  • [SPARK-48018][SS] KafkaException.couldNotReadOffsetRange oluşturulurken eksik param hatasına neden olan null groupId değeri düzeltildi
  • [SPARK-47839][SQL] RewriteWithExpression'da toplu hata düzeltildi
  • [SPARK-47371] [SQL] XML: CDATA'da bulunan satır etiketlerini görmezden gel
  • [SPARK-47895][SQL] tümüne göre gruplama idempotent olmalıdır
  • [SPARK-47973][CORE] SparkContext.stop() ve daha sonrasında SparkContext.assertNotStopped() içinde arama konumunu günlüğe kaydetme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 25 Nisan 2024
  • [SPARK-47543][BAĞLAN][PYTHON] Pandas DataFrame'den dict'yi MapType olarak belirleyerek DataFrame oluşturma imkânı sağlamak
  • [SPARK-47694][BAĞLAN] en büyük ileti boyutunu istemci tarafında yapılandırılabilir hale getirme
  • [SPARK-47664][PYTHON][CONNECT][Cherry-pick-14.3] Sütun adını önbelleğe alınmış şemayla doğrulama
  • [SPARK-47862][PYTHON][BAĞLAN]Proto dosyalarının oluşturulmasını düzeltme
  • "[SPARK-47543][CONNECT][PYTHON] Pandas DataFrame'den dict'i MapType olarak çıkarım yapmak ve DataFrame oluşturulmasına olanak tanımak"
  • [SPARK-47704][SQL] spark.sql.json.enablePartialResults etkinleştirildiğinde JSON ayrıştırma "java.lang.ClassCastException" ile başarısız oluyor
  • [SPARK-47812][BAĞLAN] ForEachBatch çalışanı için SparkSession Serileştirme desteği
  • [SPARK-47818][BAĞLAN][Cherry-pick-14.3] Analiz isteklerinin performansını geliştirmek için SparkConnectPlanner'da plan önbelleğini tanıtın
  • [SPARK-47828][BAĞLAN][PYTHON] DataFrameWriterV2.overwrite geçersiz planla başarısız oluyor
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 11 Nisan 2024
  • (Davranış değişikliği) İşlem türleri arasında tutarlı davranış sağlamak için, standart erişim moduyla işlemdeki PySpark UDF'leri artık yalıtımsız ve atanmış kümelerdeki UDF'lerin davranışıyla eşleşir. Bu güncelleştirme, mevcut kodu bozabilecek aşağıdaki değişiklikleri içerir:
    • string dönüş türüne sahip UDF'ler artıkstring olmayan değerleri örtük olarak string değerlere dönüştürmez. Daha önce, dönüş türüne str sahip UDF'ler döndürülen değerin gerçek veri türünden bağımsız olarak dönüş değerini bir str() işlevle sarmalardı.
    • timestamp dönüş türlerine sahip UDF'ler artık timestamp ile timezone arasında örtük olarak dönüşüm uygulamaz.
    • Spark kümesi yapılandırmaları spark.databricks.sql.externalUDF.* artık standart erişim moduyla işlemdeki PySpark UDF'leri için geçerli değildir.
    • Spark kümesi yapılandırması spark.databricks.safespark.externalUDF.plan.limit artık PySpark UDF'lerini etkilemez ve PySpark UDF'leri için sorgu başına 5 UDF'nin Genel Önizleme sınırlamasını kaldırır.
    • Spark kümesi yapılandırma spark.databricks.safespark.sandbox.size.default.mib artık standart erişim moduyla işlemdeki PySpark UDF'leri için geçerli değildir. Bunun yerine, sistemdeki kullanılabilir bellek kullanılır. PySpark UDF'lerinin belleğini sınırlamak için spark.databricks.pyspark.udf.isolation.memoryLimit'ı 100mminimum değeri ile kullanın.
  • TimestampNTZ veri türü artık sıvı kümeleme içeren bir kümeleme sütunu olarak desteklenmektedir. Bkz Tablolar için sıvı kümeleme kullanma.
  • [SPARK-47511][SQL] Kimlikleri yeniden atayarak ifadeleri standartlaştırın
  • [SPARK-47509][SQL] Lambda ve daha yüksek sıralı işlevlerde alt sorgu ifadelerini engelleme
  • [SPARK-46990][SQL] Event-hubs tarafından yayılan boş Avro dosyalarının yüklenmesi düzeltildi
  • [SPARK-47638][PS][CONNECT] PS'de sütun adı doğrulamayı atla
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 14 Mart 2024
  • [SPARK-47135][SS] Kafka veri kaybı özel durumları için hata sınıfları uygulama
  • [SPARK-47176][SQL] ResolveAllExpressionsUpWithPruning yardımcı işlevine sahip olun
  • [SPARK-47145][SQL] Tablo tanımlayıcısını V2 stratejisi için satır veri kaynağı tarama yürütücüsüne geçirin.
  • [SPARK-47044][SQL] Çıktıyı açıklamak üzere JDBC dış veri kaynakları için yürütülen sorgu ekleme
  • [SPARK-47167][SQL] JDBC anonim ilişkisi için somut sınıf ekleme
  • [SPARK-47070] Alt sorgu yeniden yazımı sonrasında geçersiz toplama düzeltildi.
  • [SPARK-47121][CORE] StandaloneSchedulerBackend'in kapanışı sırasında RejectedExecutionExceptions hatalarından kaçının
  • "Değişikliği Geri Al: [SPARK-46861][CORE] DAGScheduler'da Kilitlenmeyi Önle"
  • [SPARK-47125][SQL] Univocity hiçbir zaman ayrıştırma tetiklemiyorsa null döndür
  • [SPARK-46999][SQL] ExpressionWithUnresolvedIdentifier, ifade ağacında başka ifadeler içermelidir
  • [SPARK-47129][BAĞLAN][SQL] Önbellek bağlantı planını düzgün hale getirme ResolveRelations
  • [SPARK-47241][SQL] ExtractGenerator için kural sırası sorunlarını düzeltme
  • [SPARK-47035][SS][BAĞLAN] İstemci Tarafı Dinleyici protokolü
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Şubat 2024
  • MERGE komutunda kaynak olarak yerel koleksiyon kullanmanın numSourceRows işlem ölçümünün doğru satır sayısını ikiye katladığı bir sorun düzeltildi.
  • Tanımlı bir konuma sahip bir şema oluşturmak için artık kullanıcının HERHANGI BIR DOSYADA SELECT ve MODIFY ayrıcalıklarına sahip olması gerekir.
  • [SPARK-47071][SQL] Eğer özel bir ifade içeriyorsa, satır içi ifade kullanın.
  • [SPARK-47059][SQL] ALTER COLUMN v1 komutu için hata bağlamı ekleme
  • [SPARK-46993][SQL] Oturum değişkenleri için sabit katlama düzeltmesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 3 Ocak 2024
  • [SPARK-46933] JDBCRDD kullanan bağlayıcılara sorgu yürütme süresi ölçümü ekleyin.
  • [SPARK-46763] Yinelenen öznitelikler için ReplaceDeduplicateWithAggregate içindeki onay hatası düzeltildi.
  • [SPARK-46954] XML: InputStreamReader'ı BufferedReader ile sarmak.
  • [SPARK-46655]DataFrame yöntemlerinde sorgu bağlamı yakalamayı atlayın.
  • [SPARK-44815] ekstra RPC'den kaçınmak için df.schema'yı önbelleğe al.
  • [SPARK-46952] XML: Bozuk kaydın boyutunu sınırlayın.
  • [SPARK-46794] LogicalRDD kısıtlamalarından alt sorguları kaldırma.
  • [SPARK-46736] protobuf bağlayıcısında boş ileti alanını korur.
  • [SPARK-45182] Checksum tarafından belirlenen belirsiz ana aşamayı yeniden denedikten sonra, eski aşamadan gelen görev tamamlanmalarını yoksayın.
  • [SPARK-46414] javascript içeri aktarmalarını işlemek için prependBaseUri kullanın.
  • [SPARK-46383] Sürücü yığını kullanımını, TaskInfo.accumulables() ömrünü azaltarak düşürün.
  • [SPARK-46861] DAGScheduler'da kilitlenmekten kaçının.
  • [SPARK-46954] XML: Şema dizini aramalarını iyileştirme.
  • [SPARK-46676] dropDuplicatesWithinWatermark, planın kurallı hale getirilmesinde başarısız olmamalıdır.
  • [SPARK-46644] ISZero kullanmak için SQLMetric'de ekleme ve birleştirmeyi değiştirin.
  • [SPARK-46731] Durum deposu sağlayıcısı örneğini durum veri kaynağına göre yönetme - okuyucu.
  • [SPARK-46677]dataframe["*"] çözünürlük düzeltildi.
  • [SPARK-46610] Tablo oluştur seçeneği, seçeneklerde bir anahtar için değer olmadığında özel durum oluşturmalıdır.
  • [SPARK-46941] Boyuta Dayalı Pencere Fonksiyonu içeriyorsa üst k hesaplaması için pencere grubu sınır düğümü eklenemez.
  • [SPARK-45433] Zaman damgaları belirtilen zaman formatıyla uyumlu olmadığında CSV/JSON şema çıkarımı düzeltildi.
  • [SPARK-46930] Avro'daki Birleşim türü alanlarına özel bir ön ek desteği ekleyin.
  • [SPARK-46227] 14.3'e geri port etme.
  • [SPARK-46822] jdbc türünü jdbc'de katalizör türüne yazarken spark.sql.legacy.charVarcharAsString'e saygı gösterin.
  • İşletim sistemi güvenlik güncelleştirmeleri.

Databricks Runtime 13.3 LTS

Bkz . Databricks Runtime 13.3 LTS.

• 10 Temmuz 2026
  • güncelleştirilmiş Java kitaplıkları:
    • com.microsoft.sqlserver.mssql-jdbc 11.2.2.jre8, 11.2.3.jre8 sürümünden 11.2.3.jre8, 11.2.3.jre8 sürümüne
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Haziran 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Haziran 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Mayıs 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 13 Mayıs 2026
  • (Behavior change) Şema deseni kullanarak tabloları listelemek artık yabancı tablolar (örneğin, SQL Server, PostgreSQL veya AWS Glue) için Unity Kataloğu meta verilerini yenilemez. Bu değişiklik, bir şema deseni iletildiğinde JDBC sürücüsündeki SHOW TABLES IN SCHEMA LIKE ... ve getMetaData.getTables çağrılarını ve Thrift SparkGetTablesOperation API’sini etkiler. İş yükünüz bir şema düzeniyle meta veri yenilemeye bağımlıysa Databricks Desteği'ne başvurun.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Nisan 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 20 Nisan 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 2 Nisan 2026, İstanbul

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Mart 2026

  • [SPARK-55701]ES-1694761[SS] CompactibleFileStreamLog.allFiles dosyasında yarış durumu düzeltildi
  • [SPARK-55111][SS] Sorgu yeniden başlatıldığında tamamlanmamış yeniden bölümleme algılamasını yeniden denetle
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Şubat 2026

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 19 Şubat 2026

  • Sorgu yeniden başlatıldığında [SPARK-55111][SS] Tamamlanmamış yeniden bölümleme algılamasını geri döndürme
  • [SPARK-55111][SS] Sorgu yeniden başlatmada tamamlanmamış yeniden bölümleme algılama
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 27 Ocak 2026
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Ocak 2026
  • Bölümlenmiş Delta tablolarında, ileride veri parke dosyalarında yer alan bölüm sütunları olacaktır. Bu, Iceberg ve UniForm tablolarının işlenme şekliyle daha iyi bir sinerji sağlar ve Delta dışı harici okuyucularla uyumluluğu artırır.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Aralık 2025, Cumartesi
  • [SPARK-54180][SQL] BinaryFileFormat toString'ini geçersiz kılma
  • [SPARK-52579][PYTHON] Python çalışanları için düzenli olarak geri izleme dökümü ayarlama
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 18 Kasım 2025
  • [SPARK-54047][PYTHON] Boşta kalma zaman aşımında sonlandığında farklı bir hata türü kullanın
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 4 Kasım 2025
  • Güncelleştirilmiş R kitaplıkları:
    • 10.0.1 sürümünden 21.0.0 sürümüne ok
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 21 Ekim 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 7 Ekim 2025, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 24 Eylül 2025, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Eylül 2025, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 26 Ağustos 2025
  • güncelleştirilmiş Java kitaplıkları:
    • 0.7.12'den 0.7.13'e io.delta.delta-sharing-spark_2.12
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 14 Ağustos 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 29 Temmuz 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 15 Temmuz 2025

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 1 Temmuz 2025

  • İşletim sistemi güvenlik güncelleştirmeleri.

• 17 Haziran 2025
  • Tablo değerli işlevin cloud_files_state (TVF) işlem hatları arasında akış tablolarının dosya düzeyinde durumunu okumak için kullanılamayacağı sınırlaması düzeltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 3 Haziran 2025
  • güncelleştirilmiş Python kitaplıkları:
    • 3.4.8, 37.0.1 ile 37.0.1 arasında şifreleme
    • platformdirs sürüm 2.5.2, 2.6.2'den 2.5.2'ye
    • pyparsing 2.4.7 ve 3.0.9'dan 3.0.9'a
    • Pip 22.2.2 eklendi
    • Kurulum araçları 63.4.1 eklendi
    • tomli 2.0.1 eklendi
    • wcwidth 0.2.5 eklendi
    • Tekerlek 0.37.1 eklendi
    • Dağıtım sürümü 1.7.0 kaldırıldı
    • Distro-info 1.1+ubuntu0.2 kaldırıldı
    • python-apt 2.4.0+ubuntu4 kaldırıldı
  • güncelleştirilmiş Java kitaplıkları:
    • 1.1, 1.1-natives ile 1.1, 1.1 arası com.github.fommil.netlib.native_ref-java
    • 1.1, 1.1-natives ile 1.1, 1.1 arası com.github.fommil.netlib.native_system java
    • 1.1-natives'inden 1.1'e com.github.fommil.netlib.netlib-native_ref-linux-x86_64
    • com.github.fommil.netlib.netlib-native_system-linux-x86_64 sürümü 1.1-natives'ten 1.1'e güncelleniyor.
    • io.netty.netty-transport-native-epoll 4.1.87.Final, 4.1.87.Final-linux-aarch_64, 4.1.87.Final-linux-x86_64'tan 4.1.87.Final, 4.1.87.Final, 4.1.87.Final'a
    • io.netty.netty-transport-native-kqueue 4.1.87.Final-osx-aarch_64, 4.1.87.Final-osx-x86_64'dan 4.1.87.Final, 4.1.87.Final'a
    • org.apache.orc.orc-core sürümü 1.8.4-shaded-protobuf'den 1.8.4'e yükseltme
    • org.apache.orc.orc-mapreduce sürümü 1.8.4-shaded-protobuf'tan 1.8.4'e güncelleniyor.
    • yazılım.amazon.cryptools.AmazonCorrettoCryptoProvider sürüm 1.6.1-linux-x86_64'dan sürüm 1.6.1'e
  • [SPARK-52159][SQL] Jdbc diyalektleri için tablo varlığı denetimini düzgün şekilde işleme
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 20 Mayıs 2025
  • güncelleştirilmiş Java kitaplıkları:
    • io.delta.delta-sharing-spark_2.12 0.7.11'den 0.7.12'ye
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 22 Nisan 2025
  • [Davranış Değişikliği] Vakum işlemleri artık diğer işlemlere benzer Yazıcı protokolü denetimleri gerçekleştirerek uyumsuz eski Databricks Runtime sürümlerinden çalıştırıldığında daha yeni özelliklere sahip tablolarda beklenmeyen temizlemeleri önlüyor.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 9 Nisan 2025
  • [SPARK-51624][SQL] CreateNamedStruct.dataType içinde GetStructField meta verilerini yayma
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 11 Mart 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 11 Şubat 2025
  • [SPARK-50492][SS] dropDuplicatesWithinWatermark'tan sonra olay zamanı sütunu bırakıldığında oluşan java.util.NoSuchElementException hatası düzeltildi
  • [SPARK-45915][SQL] PromoteStrings içinde ondalık(x, 0)'ı IntegralType ile aynı şekilde ele almak.
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Aralık 2024, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 26 Kasım 2024
  • [SPARK-49615] [ML] Tüm ML özellik transformatörleri veri kümesi şeması doğrulamasını "spark.sql.caseSensitive" yapılandırmasına uygun hale getirin.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 5 Kasım 2024
  • [SPARK-48843] BindParameters ile sonsuz döngü önleme
  • [BACKPORT] [SPARK-49326][SS] Foreach havuzu kullanıcı işlevi hatası için Hata sınıfını sınıflandırma
  • [SPARK-49905] Karıştırmanın AQE tarafından değiştirilmesini önlemek için durum bilgisi olan operatörler için özel bir ShuffleOrigin kullanın.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 22 Ekim 2024, Cumartesi
  • [SPARK-48843] BindParameters ile sonsuz döngü önleme
  • [BACKPORT] [SPARK-49326][SS] Foreach havuzu kullanıcı işlevi hatası için Hata sınıfını sınıflandırma
  • [SPARK-49905] Karıştırmanın AQE tarafından değiştirilmesini önlemek için durum bilgisi olan operatörler için özel bir ShuffleOrigin kullanın.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 10 Ekim 2024, Cumartesi
  • [SPARK-49743][SQL] GetArrayStructFields ayıklama sırasında OptimizeCsvJsonExpr şema alanlarını değiştirmemelidir
• 25 Eylül 2024, Cumartesi
  • [SPARK-46601] [CORE] handleStatusMessage'daki günlük hatasını düzelt
  • [SPARK-48719][SQL] İlk parametre null olduğunda RegrSlope & RegrIntercept hesaplama hatasını düzeltme
  • [SPARK-43242][CORE] Shuffle bozulması tanılamasında 'Beklenmeyen BlockId türü' hatasını düzeltme
  • [SPARK-49000][SQL] RewriteDistinctAggregates'i genişleterek t tablosunun boş olduğu "select count(distinct 1) from t" düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 17 Eylül 2024, Cumartesi
  • [SPARK-49526][CONNECT] ArtifactManager'da Windows stili yolları destekleme
  • [SPARK-48463][ML] Binarizer, Bucketizer, Vector Assembler, FeatureHasher, QuantizeDiscretizer, OnehotEncoder, StopWordsRemover, Imputer ve Interactor'u iç içe giriş sütunlarını destekler hale getirme
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Ağustos 2024
• 14 Ağustos 2024
  • [SPARK-49056][SQL] ErrorClassesJsonReader null değerini düzgün işleyemiyor
  • [SPARK-49065][SQL] Eski biçimlendiriciler ve ayrıştırıcılarda yeniden yapılandırma, JVM olmayan varsayılan saat dilimlerini desteklemelidir
  • [SPARK-48597][SQL] Mantıksal planın metin gösteriminde isStreaming özelliği için bir işaretçi ekleme
• 1 Ağustos 2024
  • Bu sürüm, Spark Java arabirimindeki ColumnVector ve ColumnarArray sınıfları için bir hata düzeltmesi içerir. Bu düzeltmeden önce, eğer bu sınıflardan birinin örneği ArrayIndexOutOfBoundsException değerler içeriyorsa, bir null oluşturulabilir veya yanlış veriler döndürülebilirdi.
  • [SPARK-47202][PYTHON] tzinfo ile tarih saatlerdeki yazım hatası düzeltildi
  • [SPARK-48896][SPARK-48909][SPARK-48883] Backport spark ML yazıcı düzeltmeleri
  • [SPARK-48463] İç içe giriş sütunlarını destekleyen StringIndexer yap
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 11 Temmuz 2024
  • (Davranış değişikliği) Delta tablo kaynaklarına karşı önbelleğe alınan DataFrame'ler artık kaynak tablonun üzerine yazılırsa geçersiz kılınır. Bu değişiklik, Delta tablolarındaki tüm durum değişikliklerinin önbelleğe alınmış sonuçları geçersiz kıldığı anlamına gelir. DataFrame'in kullanım ömrü boyunca tablo durumunu kalıcı hale getirmek için .checkpoint() kullanın.
  • Bu sürüm, Databricks Container Services'da çalışırken Spark UI Ortamı sekmesinin doğru görüntülenmesini engelleyen bir soruna yönelik bir düzeltme içerir.
  • [SPARK-48383][SS] Kafka'da startOffset seçeneğinde eşleşmeyen bölümler için daha iyi hata oluşturma
  • [SPARK-48292][CORE] Revert [SPARK-39195][SQL] Spark OutputCommitCoordinator, kaydedilmiş dosya görev durumuyla tutarlı olmadığında aşamayı durdurmalıdır
  • [SPARK-48503][SQL] Yanlışlıkla izin verilen ve eşdeğer olmayan sütunlarla gruplama yapılan geçersiz skaler alt sorgular düzeltildi.
  • [SPARK-48481][SQL][SS] Akış Veri Kümesine OptimizeOneRowPlan uygulamayın
  • [SPARK-48475][PYTHON] PySpark'ta _get_jvm_function iyileştirin.
  • [SPARK-48273][SQL] PlanWithUnresolvedIdentifier'ın geç yeniden yazılmasını düzeltme
  • [SPARK-48445][SQL] Pahalı alt öğeleri olan satır içi UDF'ler yapmayın
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 17 Haziran 2024
  • [SPARK-48277] ErrorClassesJsonReader.getErrorMessage için hata iletisini iyileştirme
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 21 Mayıs 2024
  • (Davranış değişikliği) dbutils.widgets.getAll() artık bir not defterindeki tüm pencere öğesi değerlerini almakiçin desteklenmektedir.
  • [SPARK-48105][SS] Durum deposu kaldırma ve anlık görüntü oluşturma arasındaki yarış durumunu düzeltme
  • [SPARK-47994][SQL] SQLServer'da CASE WHEN sütun filtresi push down ile ilgili hata düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 9 Mayıs 2024
  • [SPARK-47956][SQL] Çözümlenmemiş LCA referansı için mantık kontrolü
  • [SPARK-46822][SQL] jdbc türünü jdbc'de katalizör türüne yazarken spark.sql.legacy.charVarcharAsString'e saygı gösterin
  • [SPARK-47895][SQL] tümüne göre gruplama idempotent olmalıdır
  • [SPARK-48018][SS] KafkaException.couldNotReadOffsetRange oluşturulurken eksik param hatasına neden olan null groupId değeri düzeltildi
  • [SPARK-47973][CORE] SparkContext.stop() ve daha sonrasında SparkContext.assertNotStopped() içinde arama konumunu günlüğe kaydetme
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 25 Nisan 2024
  • [SPARK-44653][SQL] Önemsiz olmayan DataFrame birleşimleri önbelleğe almayı kesmemelidir
  • Çeşitli hata düzeltmeleri.
• 11 Nisan 2024
  • [SPARK-47509][SQL] Lambda ve daha yüksek sıralı işlevlerde alt sorgu ifadelerini engelleme
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 1 Nisan 2024
  • [SPARK-47385] Option girişleriyle tuple kodlayıcılarını düzeltin.
  • [SPARK-38708][SQL] Hive Meta Veri Deposu İstemcisini Hive 3.1 için 3.1.3'e yükseltme
  • [SPARK-47200][SS] Foreach toplu havuz kullanıcı işlevi hatası için hata sınıfı
  • [SPARK-47368][SQL] ParquetRowConverter'da inferTimestampNTZ yapılandırma denetimini kaldırma
  • [SPARK-44252][SS] Yeni bir hata sınıfı tanımlayın ve DFS'den yükleme durumunun başarısız olduğu durum için uygulayın
  • [SPARK-47135][SS] Kafka veri kaybı özel durumları için hata sınıfları uygulama
  • [SPARK-47300][SQL] quoteIfNeeded sayılarla başlayan tanımlayıcıları tırnak içine almalıdır
  • [SPARK-47305][SQL] Plan hem toplu hem de akışa sahip olduğunda LocalRelation'ın isStreaming bayrağını doğru şekilde işaretlemek için PruneFilters'ı düzeltin.
  • [SPARK-47070] Alt sorgu yeniden yazımı sonrasında geçersiz toplama düzeltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 14 Mart 2024
  • [SPARK-47145][SQL] Tablo tanımlayıcısını V2 stratejisi için satır veri kaynağı tarama yürütücüsüne geçirin.
  • [SPARK-47167][SQL] JDBC anonim ilişkisi için somut sınıf ekleme
  • [SPARK-47176][SQL] ResolveAllExpressionsUpWithPruning yardımcı işlevine sahip olun
  • [SPARK-47044][SQL] Çıktıyı açıklamak üzere JDBC dış veri kaynakları için yürütülen sorgu ekleme
  • [SPARK-47125][SQL] Univocity hiçbir zaman ayrıştırma tetiklemiyorsa null döndür
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Şubat 2024
  • MERGE komutunda kaynak olarak yerel koleksiyon kullanmanın numSourceRows işlem ölçümünün doğru satır sayısını ikiye katladığı bir sorun düzeltildi.
  • Tanımlı bir konuma sahip bir şema oluşturmak için artık kullanıcının HERHANGI BIR DOSYADA SELECT ve MODIFY ayrıcalıklarına sahip olması gerekir.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 8 Şubat 2024, İstanbul
  • Unity Kataloğu'nda materyalize edilmiş görünümlerde değişiklik veri akışı (CDF) sorguları desteklenmez ve bir Unity Kataloğu materyalize edilmiş görünümü kullanarak CDF sorgusu çalıştırma girişimi hata verir. Unity Kataloğu akış tabloları, Databricks Runtime 14.1 ve sonraki sürümlerinde AUTO özelliği taşımayan CDC tablolarında CDF sorgularını destekler. CDF sorguları, Databricks Runtime 14.0 ve önceki sürümlerde Unity Kataloğu akış tablolarında desteklenmez.
  • [SPARK-46794] LogicalRDD kısıtlamalarından alt sorguları kaldırma.
  • [SPARK-46933] JDBCRDD kullanan bağlayıcılara sorgu yürütme süresi ölçümü ekleyin.
  • [SPARK-45582] Çıkış modu akış toplaması sırasında, "commit" işlemi yapıldıktan sonra depolama örneğinin kullanılmadığından emin olun.
  • [SPARK-46396] Zaman damgası çıkarımı istisna oluşturmamalıdır.
  • [SPARK-46861] DAGScheduler'da kilitlenmekten kaçının.
  • [SPARK-46941] Boyuta Dayalı Pencere Fonksiyonu içeriyorsa üst k hesaplaması için pencere grubu sınır düğümü eklenemez.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 31 Ocak 2024
  • [SPARK-46610] Tablo oluştur seçeneği, seçeneklerde bir anahtar için değer olmadığında özel durum oluşturmalıdır.
  • [SPARK-46383] TaskInfo.accumulables() ömrünü azaltarak sürücü yığını kullanımını azaltın.
  • [SPARK-46600] Paylaşılan kodu SqlConf ile SqlApiConf arasında SqlApiConfHelper'a taşıyın.
  • [SPARK-46676] dropDuplicatesWithinWatermark, planın kurallı hale getirilmesinde başarısız olmamalıdır.
  • [SPARK-46763] Yinelenen öznitelikler için ReplaceDeduplicateWithAggregate içindeki onay hatası düzeltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 17 Ocak 2024
  • Photon sorgusu tarafından döndürülen açıklama planının shuffle düğümü, yayın birleştirmenin parçası olan bir dağıtım işlemi sırasında bellek yetersizliği hatası meydana geldiğinde causedBroadcastJoinBuildOOM=true bayrağını ekleyecek şekilde güncellenir.
  • TLSv1.3 üzerinden iletişim kurarken artan gecikme süresini önlemek için bu bakım sürümü JDK 8 yüklemesinde JDK hatası JDK-8293562'yi düzeltmeye yönelik bir düzeltme eki içerir.
  • [SPARK-46058] privateKeyPassword için ayrı bayrak ekleyin.
  • [SPARK-46173] Tarih ayrıştırma sırasında trimAll çağrısı atlanıyor.
  • [SPARK-46370] Sütun varsayılanlarını değiştirdikten sonra tablodan sorgu yaparken oluşan hatayı düzeltin.
  • [SPARK-46370] Sütun varsayılanlarını değiştirdikten sonra tablodan sorgu yaparken oluşan hatayı düzeltin.
  • [SPARK-46370] Sütun varsayılanlarını değiştirdikten sonra tablodan sorgu yaparken oluşan hatayı düzeltin.
  • [SPARK-46609] PartitioningPreservingUnaryExecNode'da üstel patlamadan kaçının.
  • [SPARK-46132] RPC SSL için JKS anahtarları için destek anahtarı parolası.
  • [SPARK-46602] Görünüm/tablo mevcut olmadığında görünüm oluşturulmasında allowExisting'nin yayılması.
  • [SPARK-46249] Arka plan işlemleriyle yarışmayı önlemek için RocksDB ölçümlerinin elde edilmesi için örnek kilidi gereklidir.
  • [SPARK-46417] hive.getTable çağrıldığında ve throwException false olduğunda başarısız olmaz.
  • [SPARK-46538]ALSModel.transform'da belirsiz sütun başvurusu sorunu düzeltildi.
  • [SPARK-46478] SPARK-43049'u, dize için oracle varchar(255) kullanmak amacıyla geri çevirin.
  • [SPARK-46250] test_parity_listener'ı istikrara kavuştur.
  • [SPARK-46394] spark.sql.legacy.keepCommandOutputSchema true olarak ayarlandığında özel karakterler içeren şemalardaki spark.catalog.listDatabases() sorunlarını düzeltin.
  • [SPARK-46056] ByteArrayDecimalType varsayılan değeriyle Parquet'teki vektörleştirilmiş okuma sırasında oluşan NPE hatası düzeltildi.
  • [SPARK-46145] spark.catalog.listTables tablo veya görünüm bulunamadığında özel durum oluşturmaz.
  • [SPARK-46466] Vektörleştirilmiş parquet okuyucu, zaman damgası ntz için asla yeniden zamanlama yapmamalıdır.
• 14 Aralık 2023, Cumartesi
  • JDBC veya ODBC istemcilerinden kaynaklanan getColumns işlemlerinde, kaçış karakterli alt çizgilerin yanlış işlenmesi ve joker karakter olarak yorumlanması sorunu düzeltildi.
  • [SPARK-45920] ordinal ile gruplama idempotent olmalıdır.
  • [SPARK-44582] Temizlenmişse SMJ'deki yineleyiciyi atlayın.
  • [SPARK-45433] Zaman damgaları belirtilen zaman formatıyla uyumlu olmadığında CSV/JSON şema çıkarımı düzeltildi.
  • [SPARK-45655] CollectMetrics içindeki AggregateFunctions içinde belirlenemeyen ifadelere izin verin.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Kasım 2023
  • PyArrow RCE güvenlik açığını düzeltmek için yeni bir paket pyarrow-hotfix yüklendi.
  • Spark-snowflake bağlayıcısı 2.12.0 sürümüne yükseltilir.
  • [SPARK-44846] sonrasındaki RemoveRedundantAggregateskarmaşık gruplandırma ifadeleri kaldırıldı.
  • [SPARK-45544] ile TransportContexttümleşik SSL desteği.
  • [SPARK-45892] Optimizasyon planı doğrulamasını validateSchemaOutput ile validateExprIdUniqueness öğelerini ayıracak şekilde yeniden düzenleme.
  • [SPARK-45730] için ReloadingX509TrustManagerSuitegeliştirilmiş zaman kısıtlamaları.
  • [SPARK-45859] UDF nesneleri tembel hale ml.functions getirildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 10 Kasım 2023
  • Delta Lake akış sorgularında bölüm filtreleri, daha iyi kullanım elde etmek için hız sınırlamadan önce aşağı itilir.
  • Unity Kataloğu'ndaki akış tabloları ve oluşturulmuş görünümlerde hata mesajlarını görüntülemek amacıyla veri besleme sorguları değiştirildi.
  • [SPARK-45545], SparkTransportConf oluşturulurken SSLOptions'i devralır.
  • [SPARK-45584] ile TakeOrderedAndProjectExecalt sorgu çalıştırma hatası düzeltildi.
  • [SPARK-45427] ve SSLOptionsöğesine SparkTransportConf RPC SSL ayarları eklendi.
  • [SPARK-45541] eklendi SSLFactory.
  • [SPARK-45430]FramelessOffsetWindowFunction artık IGNORE NULLS ve offset > rowCount olduğunda başarısız olmaz.
  • [SPARK-45429] SSL RPC iletişimi için yardımcı sınıflar eklendi.
  • [SPARK-44219] İyileştirme yeniden yazma işlemleri için kural başına ek doğrulamalar eklendi.
  • [SPARK-45543] Diğer pencere işlevlerinin derece benzeri işlevlerle aynı pencere çerçevesine sahip olmadığı durumlarda soruna neden olan bir sorun InferWindowGroupLimit düzeltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 23 Ekim 2023, Cumartesi
  • [SPARK-45256] İlk kapasiteden daha fazla değer yazarken DurationWriter başarısız olması sorunu düzeltildi.
  • [SPARK-45419] Daha büyük sürümlerin rocksdb sst dosya sürümü eşleme girdilerini kaldırarak farklı rocksdb bir örnekteki dosyaları yeniden kullanmaktan kaçının.
  • [SPARK-45426] için ReloadingX509TrustManagerdestek eklendi.
  • Çeşitli düzeltmeler.
• 13 Ekim 2023, Cumartesi
  • Snowflake-jdbc bağımlılığı 3.13.29'dan 3.13.33'e yükseltildi.
  • İşlev array_insert , pozitif ve negatif dizinler için 1 tabanlıyken, daha önce negatif dizinler için 0 tabanlıydı. Şimdi -1 dizini için giriş dizilerinin sonuna yeni bir öğe ekler. Önceki davranışı geri yüklemek için spark.sql.legacy.negativeIndexInArrayInserttrueolarak ayarlayın.
  • CSV şeması çıkarımı sırasında Otomatik Yükleyici ile ignoreCorruptFiles etkinleştirildiğinde bozuk dosyaların görmezden gelinmemesiyle ilgili sorun düzeltildi.
  • "[SPARK-42946]"i geri döndür
  • [SPARK-42205] JSON protokolü, bir görev veya aşamanın başlangıç etkinliklerindeki Accumulable loglamasını kaldırmak üzere güncellendi.
  • [SPARK-45178] Sarmalayıcıyı kullanmak yerine desteklenmeyen kaynaklar için tek bir işlem gerçekleştirmeye geçiş.
  • [SPARK-45316] ignoreCorruptFiles ve ignoreMissingFilesiçin yeni parametreler HadoopRDD ve NewHadoopRDD ekleyin.
  • [SPARK-44740] Yapıtlar için sabit meta veri değerleri.
  • [SPARK-45360] Spark oturum oluşturucu yapılandırmasından SPARK_REMOTEbaşlatma yapılandırması gerçekleştirildi.
  • [SPARK-44551] Açıklamalar, OSS ile eşitlemek üzere düzenlendi.
  • [SPARK-45346] Parquet şema çıkarımı artık şemaları birleştirirken büyük/küçük harfe duyarlı bayrakları dikkate alır.
  • [SPARK-44658]ShuffleStatus.getMapStatus şimdi None yerine Some(null) döndürür.
  • [SPARK-44840] Negatif dizinler için indeksler 1 tabanlı olacak şekilde array_insert() hale getirildi.
• 14 Eylül 2023, Cumartesi
  • [SPARK-44873] Hive istemcisinde iç içe sütunlara sahip alter view desteği eklendi.
  • [SPARK-44878] Önbelleğin tamamlanması sırasında ekleme istisnalarını önlemek için RocksDB yazma yöneticisi için katı sınırlama kapatıldı.
• 30 Ağustos 2023
  • dbutils cp komutu (dbutils.fs.cp) daha hızlı kopyalama için iyileştirilmiştir. Bu geliştirmeyle, dosya boyutuna bağlı olarak kopyalama işlemleri 100'e kadar daha az zaman alabilir. Bu özellik, Unity Katalog Birimleri ve DBFS bağlamaları dahil olmak üzere Databricks'te erişilebilen tüm Bulutlarda ve dosya sistemlerinde kullanılabilir.
  • [SPARK-44455] Sonuçta tanımlayıcıları ters tırnak işaretleriyle belirtin SHOW CREATE TABLE.
  • [SPARK-44763] İkili aritmetikte bir dizeyi aralıklı çift olarak gösteren bir sorun düzeltildi.
  • [SPARK-44871] Sabit percentile_disc davranış.
  • [SPARK-44714] Sorgular ile ilgili LCA çözümlemesi kısıtlamasını kolaylaştırma.
  • [SPARK-44818]taskThread başlatılmadan önce verilen bekleyen görev kesintisi için yarış durumu düzeltildi.
  • [SPARK-44505] DSv2 taramasında sütun tabanlı destek için aşma eklendi.
  • [SPARK-44479] Boş bir yapı türünden protobuf dönüşümü düzeltildi.
  • [SPARK-44718] Hafıza modu yapılandırmasının varsayılan ayarını ColumnVector yapılandırma değeriyle OffHeapMemoryMode eşleştir.
  • [SPARK-42941] Python'da StreamingQueryListener desteği eklendi.
  • [SPARK-44558] PySpark'ın Spark Connect Günlük Seviyesi'ni dışa aktarın.
  • [SPARK-44464] İlk sütun değeri Null olan satırların çıktısını oluşturmak için düzeltildi.
  • [SPARK-44643] Alan boş bir satır olduğunda düzeltildi Row.__repr__ .
  • İşletim sistemi güvenlik güncelleştirmeleri.

Databricks Runtime 9.1 LTS

• 9 Nisan 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 11 Mart 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 11 Şubat 2025
  • İşletim sistemi güvenlik güncelleştirmeleri.

• 10 Aralık 2024, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 26 Kasım 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 5 Kasım 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 22 Ekim 2024, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 10 Ekim 2024, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 25 Eylül 2024, Cumartesi
  • [SPARK-49000][SQL] RewriteDistinctAggregates'i genişleterek t tablosunun boş olduğu "select count(distinct 1) from t" düzeltildi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 6 Eylül 2024, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Ağustos 2024
  • [SPARK-49065][SQL] Eski biçimlendiriciler ve ayrıştırıcılarda yeniden yapılandırma, JVM olmayan varsayılan saat dilimlerini desteklemelidir
• 14 Ağustos 2024
• 1 Ağustos 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 11 Temmuz 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 17 Haziran 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 21 Mayıs 2024
  • [SPARK-48105][SS] Durum deposu kaldırma ve anlık görüntü oluşturma arasındaki yarış durumunu düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 9 Mayıs 2024
  • [SPARK-47973][CORE] SparkContext.stop() ve daha sonrasında SparkContext.assertNotStopped() içinde arama konumunu günlüğe kaydetme
  • [SPARK-44251][SQL] Tam dış USING JOIN işleminde birleştirilmiş birleştirme anahtarında nullable ayarını doğru ayarlama
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 25 Nisan 2024
  • Çeşitli hata düzeltmeleri.
• 11 Nisan 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 1 Nisan 2024
  • "Değişikliği Geri Al: [SPARK-46861][CORE] DAGScheduler'da Kilitlenmeyi Önle"
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 14 Mart 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Şubat 2024
  • MERGE komutunda kaynak olarak yerel koleksiyon kullanmanın numSourceRows işlem ölçümünün doğru satır sayısını ikiye katladığı bir sorun düzeltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 13 Şubat 2024
  • [SPARK-46861] DAGScheduler'da kilitlenmekten kaçının.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 31 Ocak 2024
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 25 Aralık 2023, Cumartesi
  • TLSv1.3 üzerinden iletişim kurarken artan gecikme süresini önlemek için bu bakım sürümü JDK 8 yüklemesinde JDK hatası JDK-8293562'yi düzeltmeye yönelik bir düzeltme eki içerir.
  • [SPARK-46058] privateKeyPassword için ayrı bayrak ekleyin.
  • [SPARK-39440] Olay zaman çizelgesini devre dışı bırakmak için bir yapılandırma ekleyin.
  • [SPARK-46132] RPC SSL için JKS anahtarları için destek anahtarı parolası.
• 14 Aralık 2023, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Kasım 2023
  • PyArrow RCE güvenlik açığını düzeltmek için yeni bir paket pyarrow-hotfix yüklendi.
  • [SPARK-45859] UDF nesneleri tembel hale ml.functions getirildi.
  • [SPARK-45544] ile TransportContexttümleşik SSL desteği.
  • [SPARK-45730] için ReloadingX509TrustManagerSuitegeliştirilmiş zaman kısıtlamaları.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 14 Kasım 2023
  • [SPARK-45545], SparkTransportConf oluşturulurken SSLOptions'i devralır.
  • [SPARK-45429] SSL RPC iletişimi için yardımcı sınıflar eklendi.
  • [SPARK-45427] ve SSLOptionsöğesine SparkTransportConf RPC SSL ayarları eklendi.
  • [SPARK-45584] ile TakeOrderedAndProjectExecalt sorgu çalıştırma hatası düzeltildi.
  • [SPARK-45541] eklendi SSLFactory.
  • [SPARK-42205] Aşama ve Görev başlatma olaylarında kayıt birikimleri kaldırıldı.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 24 Ekim 2023, Cumartesi
  • [SPARK-45426] için ReloadingX509TrustManagerdestek eklendi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 13 Ekim 2023, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 10 Eylül 2023, Cumartesi
  • Çeşitli düzeltmeler.
• 30 Ağustos 2023
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 15 Ağustos 2023
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 23 Haziran 2023
  • Snowflake-jdbc kitaplığı, bir güvenlik sorununu gidermek için 3.13.29 sürümüne yükseltilir.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 15 Haziran 2023
  • [SPARK-43098] Skaler alt sorguda GROUP BY ifadesi olduğunda COUNT fonksiyonunun doğruluğu hatası düzeltildi.
  • [SPARK-43156][SPARK-43098] Skaler alt sorgu sayısı hata testini decorrelateInnerQuery kapalıyken genişletin.
  • [SPARK-40862] RewriteCorrelatedScalarSubquery'de toplanmamış alt sorguları destekleyin.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 2 Haziran 2023
  • failOnUnknownFields modunda JSON ayrıştırıcısı bir kaydı bırakır, DROPMALFORMED modunda ve doğrudan FAILFAST modunda başarısız olur.
  • JSON ile kurtarılan verilerin ayrıştırılmasındaki UnknownFieldException sorununu önlemek için bir düzeltme yapıldı.
  • Otomatik Yükleyici'de sağlanan şemada türetilmiş bölümler bulunmadığında, farklı kaynak dosya biçimlerinin uyumsuz olduğu bir sorun düzeltildi. Bu sorun, çıkarsanan bölüm şemasında eksik sütunlara sahip dosyalar okunurken beklenmeyen hatalara neden olabilir.
  • [SPARK-37520]startswith() ve endswith() dize işlevlerini ekleme
  • [SPARK-43413] Alt sorguların null olma durumu düzeltildi. IN
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 17 Mayıs 2023
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 25 Nisan 2023
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 11 Nisan 2023
  • İç içe JSON nesnesinin şemasında yeni bir sütun algılandığında Otomatik Yükleyici şemasının evriminin sonsuz bir hata döngüsüne girebildiği bir sorun düzeltildi.
  • [SPARK-42967] Aşama iptal edildikten sonra bir görev başlatıldığında SparkListenerTaskStart.stageAttemptId dosyasını düzeltin.
• 29 Mart 2023
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 14 Mart 2023
  • [SPARK-42484] için UnsafeRowUtilsgeliştirilmiş hata iletisi.
  • Çeşitli düzeltmeler.
• 28 Şubat 2023
  • Kullanıcılar artık Databricks Runtime 9.1 LTS veya üzerini kullanarak Okuyucu sürüm 3 ve Yazıcı sürüm 7 gerektiren belirli Delta tablolarını okuyabilir ve yazabilir. Başarılı olmak için tabloların protokolünde listelenen tablo özellikleri Databricks Runtime'ın geçerli sürümü tarafından desteklenmelidir.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 16 Şubat 2023
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 31 Ocak 2023
  • JDBC tablolarının tablo türleri artık varsayılan olarak EXTERNAL'tir.
• 18 Ocak 2023
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 29 Kasım 2022
  • Otomatik Yükleyici'de JSON iç içe nesneler içerdiğinde ve tüm sütunlar dize olarak bırakıldığında (cloudFiles.inferColumnTypes ayarlanmadığında veya false olarak ayarlandığında) JSON ayrıştırma problemi düzeltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 15 Kasım 2022
  • Apache commons-text 1.10.0 sürümüne yükseltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
  • Çeşitli düzeltmeler.
• 1 Kasım 2022, İstanbul
  • Delta tablosunun _change_typeadlı kullanıcı tanımlı bir sütunu varsa ancak Veri akışını değiştir bu tabloda kapalıysa, bu sütundaki verilerin MERGEçalıştırılırken hatalı bir şekilde NULL değerleriyle doldurulması sorunu düzeltildi.
  • allowOverwrites etkinleştirildiğinde dosyanın aynı mikro toplu işlemde çoğaltılabilmesine neden olan Otomatik Yükleyici ile ilgili bir sorun düzeltildi
  • [SPARK-40596] ExecutorDecommissionInfo'daki mesajlarla ExecutorDecommission'i doldurun
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 18 Ekim 2022, Cumartesi
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 5 Ekim 2022, Cumartesi
  • Çeşitli düzeltmeler.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 22 Eylül 2022, Cumartesi
  • Kullanıcılar, ADLS üzerinde Otomatik Yükleyici için yerleşik listeyi yeniden etkinleştirmek üzere spark.conf.set("spark.databricks.io.listKeysWithPrefix.azure.enabled", "true") ayarlayabilir. Daha önce performans sorunları nedeniyle kapatılan yerleşik liste, müşteriler için depolama maliyetlerinin artmasına yol açmış olabilir.
  • [SPARK-40315] ArrayBasedMapData'nın Literal'i için hashCode() ekle
  • [SPARK-40089] Bazı Ondalık türleri için sıralamayı düzeltme
  • [SPARK-39887] RemoveRedundantAliases, gösterim düğümlerinin çıkışını benzersiz hale getiren takma adları korumalıdır
• 6 Eylül 2022, Cumartesi
  • [SPARK-40235] Executor.updateDependencies() içinde eşzamanlanmış yerine kesilebilir kilit kullanın
  • [SPARK-35542] Düzeltme: SplitsArray, inputCols ve outputCols parametreleriyle birden çok sütun için oluşturulan Bucketizer kaydedildikten sonra yüklenemiyor.
  • [SPARK-40079] Boş giriş durumları için Imputer inputCols doğrulamasını ekle
• 24 Ağustos 2022
  • [SPARK-39666] ExpressionEncoder'da spark.sql.codegen.factoryMode dikkate almak için UnsafeProjection.create'i kullanın
  • [SPARK-39962] Grup öznitelikleri boş olduğunda projeksiyonu uygulama
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 9 Ağustos 2022
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 27 Temmuz 2022, Saat 20:00
  • Kaynak belirleyici olmadığında Delta MERGE işleminin sonuçlarını tutarlı hale getirin.
  • [SPARK-39689] CSV veri kaynağında 2 karakter lineSep desteği
  • [SPARK-39575]ByteBuffer#rewind ardından ByteBuffer#getAvroDeserializer içine eklendi.
  • [SPARK-37392] Katalizör iyileştiricisinin performans hatası düzeltildi.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 13 Temmuz 2022
  • [SPARK-39419]ArraySort karşılaştırıcı null döndürdüğünde bir özel durum oluşturur.
  • Otomatik Yükleyici'nin Azure'de dizin listesi için yerleşik bulut API'leri kullanımı kapatıldı.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 5 Temmuz 2022
  • İşletim sistemi güvenlik güncelleştirmeleri.
  • Çeşitli düzeltmeler.
• 15 Haziran 2022
  • [SPARK-39283] ve TaskMemoryManagerarasındaki UnsafeExternalSorter.SpillableIterator kilitlenme düzeltildi.
• 2 Haziran 2022
  • [SPARK-34554]copy() yöntemini ColumnarMap içinde uygulayın.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 18 Mayıs 2022
  • Otomatik Yükleyici'de olası yerleşik bellek sızıntısı düzeltildi.
  • AWS SDK sürümünü 1.11.655 sürümünden 1.11.678 sürümüne yükseltin.
  • [SPARK-38918] İç içe sütun ayıklama, geçerli ilişkiye ait olmayan öznitelikleri filtrelemelidir
  • [SPARK-39084] Görev tamamlandığında yineleyiciyi durdurma sorununu df.rdd.isEmpty() ve TaskContext kullanarak düzeltme
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 19 Nisan 2022
  • İşletim sistemi güvenlik güncelleştirmeleri.
  • Çeşitli düzeltmeler.
• 6 Nisan 2022, İstanbul
  • [SPARK-38631] Utils.unpack'te Java tabanlı bir uygulama kullanarak tar dosyalarını açar.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 22 Mart 2022
  • Yüksek Eşzamanlılık kümelerindeki not defterlerinin geçerli çalışma dizini, kullanıcının giriş dizininde tablo erişim denetimi veya kimlik bilgisi geçişi etkinleştirilerek değiştirildi. Daha önce Active Directory'ydi /databricks/driver.
  • [SPARK-38437] Veri kaynağından tarih saat verilerinin esnek şekilde seri hale getirilmesi
  • [SPARK-38180] Bağıntılı eşitlik önermelerinde güvenli yukarı atama ifadelerine izin ver
  • [SPARK-38155] Desteklenmeyen koşullarla yanal alt sorgularda ayrı toplama işlemlerine izin verilmemesi
  • [SPARK-27442] Bir parkedeki verileri okurken veya yazarken bir onay alanı kaldırıldı.
• 14 Mart 2022
  • [SPARK-38236] Create/alter tablosunda belirtilen Mutlak dosya yolları göreli olarak değerlendirilir
  • [SPARK-34069] Yerel özellik true olarak ayarlanmışsa görev iş parçacığını kesintiye uğrat.
• 23 Şubat 2022
  • [SPARK-37859] Spark 3.1 ile JDBC ile oluşturulan SQL tabloları Spark 3.2 ile okunamaz.
• 8 Şubat 2022, İstanbul
  • [SPARK-27442] Bir parkedeki verileri okurken veya yazarken bir onay alanı kaldırıldı.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 1 Şubat 2022, İstanbul
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 26 Ocak 2022
  • Delta tablolarındaki eşzamanlı işlemlerin bazı nadir koşullarda seri hale getirilemez bir sırada işlemesi sorunu düzeltildi.
  • ANSI SQL diyalekt etkinleştirildiğinde OPTIMIZE komutunun başarısız olmasına neden olan bir sorun düzeltildi.
• 19 Ocak 2022
  • Küçük düzeltmeler ve güvenlik geliştirmeleri.
  • İşletim sistemi güvenlik güncelleştirmeleri.
• 4 Kasım 2021
  • Structured Streaming akışlarının ArrayIndexOutOfBoundsException ile başarısız olmasına neden olabilen bir sorun düzeltildi.
  • Gibi bir IO Exception ile java.io.IOException: No FileSystem for scheme bir sorgu hatasına ya da sparkContext.hadoopConfiguration üzerinde yapılan değişikliklerin sorgularda etkili olamamasına yol açabilecek bir yarış durumu düzeltildi.
  • Delta Sharing için Apache Spark Bağlayıcısı 0.2.0 sürümüne yükseltildi.
• 20 Ekim 2021, Cumartesi
  • BigQuery bağlayıcısı 0.18.1'den 0.22.2'ye yükseltildi. Bu, BigNumeric türü için destek ekler.