Machine Learning için Databricks Runtime 15.0 (EoS)

Uyarı

Bu Databricks Runtime sürümü desteği sona erdi. Destek sonu tarihi için bkz. Destek sonu ve kullanım süresi sonu geçmişi. Desteklenen tüm Databricks Runtime sürümlerini görmek için Databricks Runtime sürüm notları, versiyonlar ve uyumluluk kısmına bakınız.

Machine Learning için Databricks Runtime 15.0, Databricks Runtime 15.0 (EoS) temelinde makine öğrenimi ve veri bilimi için kullanıma hazır bir ortam sağlar. Databricks Runtime ML, TensorFlow, PyTorch ve XGBoost gibi birçok popüler makine öğrenmesi kitaplığı içerir. Databricks Runtime ML, makine öğrenmesi işlem hatlarını otomatik olarak eğitmeye yönelik bir araç olan AutoML'yi içerir. Databricks Runtime ML, Horovod kullanarak dağıtılmış derin öğrenme eğitimini de destekler.

Yeni özellikler ve geliştirmeler

Databricks Runtime 15.0 ML, Databricks Runtime 15.0'ın üzerine kurulmuştur. Apache Spark MLlib ve SparkR dahil olmak üzere Databricks Runtime 15.0'daki yenilikler hakkında bilgi için Databricks Runtime 15.0 (EoS) sürüm notlarına bakın.

Kritik değişiklikler

Eski Databricks CLI artık varsayılan olarak yüklü değil

Databricks Runtime 14.3 LTS ML'de ve altında, MLflow'un önceden yüklenmiş sürümü eski Databricks CLI'yi (databricks/databricks-cli) gerektirdiğinden, $PATH'de otomatik olarak yüklendi. Databricks Runtime 15.0 ML, eski CLI gerektirmeyen MLflow sürüm 2.10.2'yi içerir.

Databricks Runtime 15.0 ML'den başlayarak, eski Databricks CLI artık $PATH'de otomatik olarak yüklenmez. Bu, çalışma ortamında eski CLI'nın yüklü olmasına bağımlı olan kullanıcılar için büyük bir değişikliktir. Gibi %sh databricks ... komutlar artık Databricks Runtime 15.0 ML ve üzerinde çalışmaz.

Eski Databricks CLI'yi bir not defterinden kullanmaya devam etmek için küme veya not defteri kitaplığı olarak yükleyin. Yeni Databricks CLI (databricks/cli) web terminalinden kullanılabilir. Daha fazla bilgi için Web terminali ve Databricks CLI kullanma bölümüne bakın.

MLeap artık Databricks Runtime 15.0 ML'den başlayarak kullanılamıyor

MLeap artık Databricks Runtime 15.0 ML ve üzerinde kullanılamaz. Databricks, JVM tabanlı çerçevelere dağıtım modellerini paketlemek için ONNX biçiminin kullanılmasını önerir.

Horovod ve HorovodRunner'ın kullanımdan kaldırılması

Horovod ve HorovodRunner artık kullanım dışı bırakıldı. Dağıtılmış derin öğrenme için, Databricks PyTorch ile dağıtılmış eğitim için TorchDistributor veya TensorFlow ile dağıtılmış eğitim için tf.distribute.Strategy API'sini kullanmanızı önerir. Horovod ve HorovodRunner, Databricks Runtime 15.0 ML'ye önceden yüklenmiştir, ancak sonraki ana Databricks Runtime ML sürümünde kaldırılacaktır.

Uyarı

horovod.spark 11.0 ve üzeri pyarrow sürümlerini desteklemez (ilgili GitHub Sorunu) bakın). Databricks Runtime 15.0 ML, pyarrow sürüm 14.0.1'i içerir. Databricks Runtime 15.0 ML veya üzeri sürümlerde horovod.spark kullanabilmek için, 11.0 sürümünden daha düşük bir versiyonu belirterek pyarrow'u manuel olarak yüklemeniz gerekir.

Sistem ortamı

Databricks Runtime 15.0 ML'deki sistem ortamı, Databricks Runtime 15.0'dan aşağıdaki gibi farklıdır:

  • GPU kümeleri için Databricks Runtime ML aşağıdaki NVIDIA GPU kitaplıklarını içerir:
    • CUDA 12.1
    • cuDNN 8.9.0.131-1
    • NCCL 2.17.1
    • TensorRT 8.6.1.6-1

Kitaplıklar

Aşağıdaki bölümlerde Databricks Runtime 15.0 ML'de bulunan ve Databricks Runtime 15.0'daki kitaplıklardan farklı kitaplıklar listelenmiştir.

Bu bölümde:

Üst katman kitaplıkları

Databricks Runtime 15.0 ML aşağıdaki üst katman kitaplıklarını içerir:

Python kitaplıkları

Databricks Runtime 15.0 ML, Python paket yönetimi için virtualenv kullanır ve birçok popüler ML paketi içerir.

Aşağıdaki bölümlerde belirtilen paketlere ek olarak Databricks Runtime 15.0 ML aşağıdaki paketleri de içerir:

  • hyperopt 0.2.7+db4
  • sparkdl 3.0.0_db1
  • automl 1.25.0

Databricks Runtime ML Python ortamını yerel Python sanal ortamınızda yeniden oluşturmak için requirements-15.0.txt dosyasını indirin ve pip install -r requirements-15.0.txt çalıştırın. Bu komut, Databricks Runtime ML'nin kullandığı tüm open source kitaplıklarını yükler, ancak databricks tarafından geliştirilen databricks-automl, databricks-feature-store veya hyperopt Databricks çatalı gibi kitaplıkları yüklemez.

Python kitaplıkları CPU kümeleri üzerinde

Kütüphane Sürüm Kütüphane Sürüm Kütüphane Sürüm
absl-py 1.0.0 hızlandırmak 0.25.0 aiohttp 3.8.5
aiohttp-cors 0.7.0 aiosignal 1.2.0 anyio 3.5.0
argon2-cffi 21.3.0 argon2-cffi-bağlantıları 21.2.0 Astor 0.8.1
ast jetonları 2.0.5 astunparse 1.6.3 asenkron zaman aşımı 4.0.2
özellikler 22.1.0 sesli okuma 3.0.1 azure-core 1.30.1
azure-cosmos 4.3.1 Azure depolama bloğu 12.19.0 Azure Storage File Data Lake 12.14.0
geri arama 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.12.2
siyah 23.3.0 beyazlatma 4.1.0 mübarek 1.20.0
sinyal lambası 1.4 mutluluk 0.7.11 boto3 1.34.39
botocore 1.34.39 önbellek araçları 5.3.3 katalog 2.0.10
kategori kodlayıcıları 2.6.3 sertifika 2023.7.22 cffi 1.15.1
chardet 4.0.0 karakter seti normalleştirici 2.0.4 tıkla 8.0.4
cloudpathlib 0.16.0 cloudpickle (bulut serileştirme modülü) 2.2.1 cmdstanpy 1.2.1
renkli 0.5.6 İletişim 0.1.2 şekerleme 0.1.4
configparser 5.2.0 ContourPy 1.0.5 şifreleme 41.0.3
bisikletçi 0.11.0 cymem 2.0.8 Cython 0.29.32
dazit 1.8.1 databricks-automl-runtime 0.2.21 Databricks Özellik Mühendisliği 0.3.0
databricks yazılım geliştirme kiti (SDK) 0.20.0 dataclasses-json (veri sınıfları için JSON desteği) 0.6.4 veri kümeleri 2.16.1
dbl-tempo 0.1.26 dbus-python 1.2.18 debugpy 1.6.7
dekoratör 5.1.1 Deepspeed 0.13.1 defusedxml modülü 0.7.1
dereotu 0.3.6 disk önbelleği 5.6.3 distlib 0.3.8
dm-tree 0.1.8 giriş noktaları 0.4 değerlendirmek 0.4.1
Uygulamak 0.8.3 fasetler-genel bakış 1.1.1 Farama-Bildirimler 0.0.4
fastjsonschema 2.19.1 fasttext (hızlı metin işleme kütüphanesi) 0.9.2 dosya kilidi 3.9.0
Flask 2.2.5 FlatBuffers 23/05/26 font araçları 4.25.0
dondurulmuş liste 1.3.3 fsspec 2023.5.0 gelecek 0.18.3
Misafir 0.4.0 gitdb (Git veritabanı) 4.0.11 GitPython 3.1.27
google-api-core (Google API çekirdek kütüphanesi) 2.17.1 google-auth (kimlik doğrulama) 2.21.0 google-auth-oauthlib 1.0.0
google-cloud-core 2.4.1 Google Cloud Storage (Google Bulut Depolama) 2.11.0 google-crc32c 1.5.0
Google-Pasta 0.2.0 Google Devam Ettirilebilir Medya 2.7.0 googleapis-common-protos kütüphaneleri 1.62.0
gpustat 1.1.1 yeşillik 2.0.1 grpcio 1.60.0
grpcio-status 1.60.0 gunicorn 20.1.0 gviz-api 1.10.0
spor salonu 0.28.1 h11 0.14.0 h5py 3.9.0
hjson 3.1.0 Tatil 0,38 Slav halk dansı 'horovod' 0.28.1+db1
htmlmin (HTML küçültme aracı) 0.1.12 httpcore 1.0.4 httplib2 0.20.2
httpx 0.27.0 huggingface-hub (Hugging Face merkezi) 0.20.2 Uluslararası Alan Adları Uygulaması (IDNA) 3.4
Görüntü Hash 4.3.1 imageio 2.31.1 dengesiz-öğrenme 0.11.0
importlib-metadata 6.0.0 importlib_resources 6.1.2 ipyflow-core 0.0.198
ipykernel 6.25.1 ipython 8.15.0 ipython-genutils 0.2.0
ipywidgets 8.0.4 isodate 0.6.1 bu tehlikeli 2.0.1
jax-jumpy 1.0.0 Jedi 0.18.1 Jeepney (Filipinler'de yaygın bir toplu taşıma aracı) 0.7.1
Jinja2 3.1.2 jmespath 0.10.0 joblib kütüphanesi 1.2.0
joblibspark 0.5.1 json yaması 1,33 jsonpointer 2.4
JSON şeması 4.17.3 Jupyter sunucusu 1.23.4 Jupyter istemcisi 7.4.9
jupyter_core 5.3.0 jupyterlab-pygments 0.1.2 JupyterLab widget'leri 3.0.5
Keras 2.15.0 anahtarlık 23.5.0 kiwisolver 1.4.4
langchain 0.1.3 Langchain Topluluğu 0.0.20 langchain-core 0.1.23
dil kodları 3.3.0 langsmith 0.0.87 launchpadlib 1.10.16
lazr.restfulclient 0.14.4 lazr.uri 1.0.6 tembel yükleyici 0.2
libclang 16.0.6 librosa 0.10.1 LightGBM (açık kaynak kodlu bir makine öğrenme algoritması) 4.2.0
llvmlite 0.40.0 lxml 4.9.2 lz4 4.3.2
Mako 1.2.0 Markdown 3.4.1 markdown-it-py 2.2.0
MarkupSafe 2.1.1 Marshmallow 3.21.1 matplotlib (Python için popüler bir grafik kütüphanesi) 3.7.2
matplotlib-inline 0.1.6 mdurl 0.1.0 hatalı ayarlamak 0.8.4
ml-dtypes 0.2.0 mlflow-skinny 2.10.2 more-itertools kütüphanesi 8.10.0
mpmath 1.3.0 msgpack 1.0.8 Multidict sözlük 6.0.2
çoklu yöntem 1.11.2 çok işlemcili 0.70.14 MurmurHash 1.0.10
mypy uzantıları 0.4.3 nbclassic 0.5.5 nbclient 0.5.13
nbconvert (belge dönüştürme aracı) 6.5.4 nbformat 5.7.0 nest-asyncio 1.5.6
networkx 3.1 Ninja 1.11.1.1 nltk 3.8.1
notebook 6.5.4 notebook_shim 0.2.2 numba 0.57.1
numpy kütüphanesi 1.23.5 nvidia-ml-py 12.535.133 oauthlib (kimlik doğrulama kütüphanesi) 3.2.0
openai 1.9.0 opencensus 0.11.4 opencensus bağlamı 0.1.3
opt-einsum 3.3.0 Ambalaj 23.2 Pandalar 2.0.3
pandoc filtreleri 1.5.0 paramiko 2.9.2 Parso 0.8.3
pathspec 0.10.3 avanak 0.5.3 petastorm 0.12.1
pexpect 4.8.0 phik 0.12.4 pickleshare (Python veri saklama modülü) 0.7.5
Yastık 9.4.0 Pip 23.2.1 platformdirs 3.10.0
Plotly yazılımı 5.9.0 pmdarima 2.0.4 köpekçik 1.8.1
["Preshed" kelimesinin tam anlamı ve bağlamı hakkında daha fazla bilgiye ihtiyaç duyulmaktadır.] 3.0.9 prometheus-client 0.14.1 Prompt Araç Takımı 3.0.36
peygamber 1.1.5 Protobuf 4.24.1 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
py-cpuinfo 8.0.0 py-spy 0.3.14 pyarrow 14.0.1
pyarrow yazılım düzeltmesi 0,6 pyasn1 0.4.8 pyasn1-modules 0.2.8
pybind11 2.11.1 pyccolo 0.0.52 pycparser kütüphanesi 2.21
Python programlama dilinde veri doğrulama ve ayar yönetimi için kullanılan "pydantic" kütüphanesi. 1.10.6 Pygmentler 2.15.1 PyGObject 3.42.1
PyJWT (JWT'leri Python ile oluşturmak, kodlamak ve doğrulamak için kullanılan bir kütüphane) 2.3.0 PyNaCl 1.5.0 pynvml 11.5.0
pyodbc 4.0.38 pyparsing (bir Python kütüphanesi) 3.0.9 pyrsistent 0.18.0
pytesseract 0.3.10 python-dateutil (Python tarih ve saat işleme kütüphanesi) 2.8.2 python düzenleyicisi 1.0.4
python-lsp-jsonrpc 1.1.1 pytz kütüphanesi (Python zaman dilimi hesaplamaları için kullanılan) 2022.7 PyWavelets 1.4.1
PyYAML 6,0 pyzmq 23.2.0 ışın 2.9.3
regex 2022.7.9 requests 2.31.0 requests-oauthlib (bir OAuth şifreleme kütüphanesi) 1.3.1
Yanıt 0.13.3 zengin 13.7.1 RSA şifreleme algoritması 4,9
s3transfer 0.10.0 güvenlitensörler 0.3.2 scikit-image 0.20.0
scikit-learn 1.3.0 scipy (Python için bir bilimsel hesaplama kütüphanesi) 1.11.1 denizanadan 0.12.2
Gizli Depo 3.3.1 Send2Trash 1.8.0 cümle transformatörleri 2.2.2
cümle parçası 0.1.99 kurulum araçları 68.0.0 şekil 0.44.0
simplejson 3.17.6 Altı 1.16.0 Dilimleyici 0.0.7
Smart-Open 5.2.1 smmap 5.0.0 sniffio 1.2.0
ses dosyası 0.12.1 çorba süzgeci 2.4 soxr 0.3.7
boşluklu 3.7.2 spacy-legacy (bir yazılım kütüphanesi veya araç adı olabilir) 3.0.12 spacy-loggers 1.0.5
spark-tensorflow-distributor 1.0.0 SQLAlchemy 1.4.39 sqlparse 0.4.2
Harbi mi? 2.4.8 ssh-import-id—SSH kimlik aktarımı komutu 5.11 yığın verisi 0.2.0
stanio 0.3.0 statsmodeller 0.14.0 Sympy (Python'da sembolik matematik kütüphanesi) 1.11.1
Unicode'da karmaşa 0.2.0 Azim 8.2.2 TensorBoard aracı 2.15.1
TensorBoard veri sunucusu 0.7.2 tensorboard-plugin-profile (TensorBoard eklenti profili) 2.15.0 tensorboardX 2.6.2.2
tensorflow-cpu 2.15.0 tensorflow-estimatör 2.15.0 tensorflow-io-gcs-filesystem 0.36.0
termcolor 2.4.0 tamamlandı 0.17.1 thinc 8.2.3
threadpoolctl 2.2.0 tifffile (TIFF dosya kütüphanesi) 2021.7.2 tiktoken 0.5.2
tinycss2 1.2.1 tokenize-rt 4.2.1 tokenleştiriciler 0.15.0
meşale 2.1.2+cpu torcheval 0.0.7 meşale vizyonu 0.16.2+cpu
kasırga 6.3.2 tqdm (bir Python kütüphanesi) 4.65.0 Traitlets (Python kütüphanesi/modülü) 5.7.1
Transformatörler 4.36.2 typeguard (tip koruma) 2.13.3 Typer 0.9.0
yazım denetimi 0.9.0 typing_extensions 4.7.1 tzdata 2022.1
ujson (hızlı JSON işleme kütüphanesi) 5.4.0 katılımsız yükseltmeler 0,1 urllib3 1.26.16
virtualenv 20.21.0 Vizyonlar/Görüler 0.7.5 wadllib 1.3.6
Wasabi 1.1.2 wcwidth (bir karakterin genişliğini hesaplayan fonksiyon) 0.2.5 gelincik 0.3.4
web kodlamaları 0.5.1 WebSocket istemcisi 0.58.0 Werkzeug 2.2.3
tekerlek 0.38.4 widgetsnbextension 4.0.5 kelime bulutu 1.9.3
sarmalanmış 1.14.1 xgboost 2.0.3 xxhash 3.4.1
yarl 1.8.1 ydata profil oluşturma 4.5.1 fermuar çek 3.11.0

Python kitaplıkları GPU kümeleri üzerinde

Kütüphane Sürüm Kütüphane Sürüm Kütüphane Sürüm
absl-py 1.0.0 hızlandırmak 0.25.0 aiohttp 3.8.5
aiohttp-cors 0.7.0 aiosignal 1.2.0 anyio 3.5.0
argon2-cffi 21.3.0 argon2-cffi-bağlantıları 21.2.0 Astor 0.8.1
ast jetonları 2.0.5 astunparse 1.6.3 asenkron zaman aşımı 4.0.2
özellikler 22.1.0 sesli okuma 3.0.1 azure-core 1.30.1
azure-cosmos 4.3.1 Azure depolama bloğu 12.19.0 Azure Storage File Data Lake 12.14.0
geri arama 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.12.2
siyah 23.3.0 beyazlatma 4.1.0 mübarek 1.20.0
sinyal lambası 1.4 mutluluk 0.7.11 boto3 1.34.39
botocore 1.34.39 önbellek araçları 5.3.3 katalog 2.0.10
kategori kodlayıcıları 2.6.3 sertifika 2023.7.22 cffi 1.15.1
chardet 4.0.0 karakter seti normalleştirici 2.0.4 tıkla 8.0.4
cloudpathlib 0.16.0 cloudpickle (bulut serileştirme modülü) 2.2.1 cmdstanpy 1.2.1
renkli 0.5.6 İletişim 0.1.2 şekerleme 0.1.4
configparser 5.2.0 ContourPy 1.0.5 şifreleme 41.0.3
bisikletçi 0.11.0 cymem 2.0.8 Cython 0.29.32
dazit 1.8.1 databricks-automl-runtime 0.2.21 Databricks Özellik Mühendisliği 0.3.0
databricks yazılım geliştirme kiti (SDK) 0.20.0 dataclasses-json (veri sınıfları için JSON desteği) 0.6.4 veri kümeleri 2.16.1
dbl-tempo 0.1.26 dbus-python 1.2.18 debugpy 1.6.7
dekoratör 5.1.1 Deepspeed 0.13.1 defusedxml modülü 0.7.1
dereotu 0.3.6 disk önbelleği 5.6.3 distlib 0.3.8
dm-tree 0.1.8 einops 0.7.0 giriş noktaları 0.4
değerlendirmek 0.4.1 Uygulamak 0.8.3 fasetler-genel bakış 1.1.1
Farama-Bildirimler 0.0.4 fastjsonschema 2.19.1 fasttext (hızlı metin işleme kütüphanesi) 0.9.2
dosya kilidi 3.9.0 flash-attn 2.5.0 Flask 2.2.5
FlatBuffers 23/05/26 font araçları 4.25.0 dondurulmuş liste 1.3.3
fsspec 2023.5.0 gelecek 0.18.3 Misafir 0.4.0
gitdb (Git veritabanı) 4.0.11 GitPython 3.1.27 google-api-core (Google API çekirdek kütüphanesi) 2.17.1
google-auth (kimlik doğrulama) 2.21.0 google-auth-oauthlib 1.0.0 google-cloud-core 2.4.1
Google Cloud Storage (Google Bulut Depolama) 2.11.0 google-crc32c 1.5.0 Google-Pasta 0.2.0
Google Devam Ettirilebilir Medya 2.7.0 googleapis-common-protos kütüphaneleri 1.62.0 gpustat 1.1.1
yeşillik 2.0.1 grpcio 1.60.0 grpcio-status 1.60.0
gunicorn 20.1.0 gviz-api 1.10.0 spor salonu 0.28.1
h11 0.14.0 h5py 3.9.0 hjson 3.1.0
Tatil 0,38 Slav halk dansı 'horovod' 0.28.1+db1 htmlmin (HTML küçültme aracı) 0.1.12
httpcore 1.0.4 httplib2 0.20.2 httpx 0.27.0
huggingface-hub (Hugging Face merkezi) 0.20.2 Uluslararası Alan Adları Uygulaması (IDNA) 3.4 Görüntü Hash 4.3.1
imageio 2.31.1 dengesiz-öğrenme 0.11.0 importlib-metadata 6.0.0
importlib_resources 6.1.2 ipyflow-core 0.0.198 ipykernel 6.25.1
ipython 8.15.0 ipython-genutils 0.2.0 ipywidgets 8.0.4
isodate 0.6.1 bu tehlikeli 2.0.1 jax-jumpy 1.0.0
Jedi 0.18.1 Jeepney (Filipinler'de yaygın bir toplu taşıma aracı) 0.7.1 Jinja2 3.1.2
jmespath 0.10.0 joblib kütüphanesi 1.2.0 joblibspark 0.5.1
json yaması 1,33 jsonpointer 2.4 JSON şeması 4.17.3
Jupyter sunucusu 1.23.4 Jupyter istemcisi 7.4.9 jupyter_core 5.3.0
jupyterlab-pygments 0.1.2 JupyterLab widget'leri 3.0.5 Keras 2.15.0
anahtarlık 23.5.0 kiwisolver 1.4.4 langchain 0.1.3
Langchain Topluluğu 0.0.20 langchain-core 0.1.23 dil kodları 3.3.0
langsmith 0.0.87 launchpadlib 1.10.16 lazr.restfulclient 0.14.4
lazr.uri 1.0.6 tembel yükleyici 0.2 libclang 16.0.6
librosa 0.10.1 LightGBM (açık kaynak kodlu bir makine öğrenme algoritması) 4.2.0 llvmlite 0.40.0
lxml 4.9.2 lz4 4.3.2 Mako 1.2.0
Markdown 3.4.1 markdown-it-py 2.2.0 MarkupSafe 2.1.1
Marshmallow 3.21.1 matplotlib (Python için popüler bir grafik kütüphanesi) 3.7.2 matplotlib-inline 0.1.6
mdurl 0.1.0 hatalı ayarlamak 0.8.4 ml-dtypes 0.2.0
mlflow-skinny 2.10.2 more-itertools kütüphanesi 8.10.0 mpmath 1.3.0
msgpack 1.0.8 Multidict sözlük 6.0.2 çoklu yöntem 1.11.2
çok işlemcili 0.70.14 MurmurHash 1.0.10 mypy uzantıları 0.4.3
nbclassic 0.5.5 nbclient 0.5.13 nbconvert (belge dönüştürme aracı) 6.5.4
nbformat 5.7.0 nest-asyncio 1.5.6 networkx 3.1
Ninja 1.11.1.1 nltk 3.8.1 notebook 6.5.4
notebook_shim 0.2.2 numba 0.57.1 numpy kütüphanesi 1.23.5
nvidia-ml-py 12.535.133 oauthlib (kimlik doğrulama kütüphanesi) 3.2.0 openai 1.9.0
opencensus 0.11.4 opencensus bağlamı 0.1.3 opt-einsum 3.3.0
Ambalaj 23.2 Pandalar 2.0.3 pandoc filtreleri 1.5.0
paramiko 2.9.2 Parso 0.8.3 pathspec 0.10.3
avanak 0.5.3 petastorm 0.12.1 pexpect 4.8.0
phik 0.12.4 pickleshare (Python veri saklama modülü) 0.7.5 Yastık 9.4.0
Pip 23.2.1 platformdirs 3.10.0 Plotly yazılımı 5.9.0
pmdarima 2.0.4 köpekçik 1.8.1 ["Preshed" kelimesinin tam anlamı ve bağlamı hakkında daha fazla bilgiye ihtiyaç duyulmaktadır.] 3.0.9
Prompt Araç Takımı 3.0.36 peygamber 1.1.5 Protobuf 4.24.1
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 py-cpuinfo 8.0.0 py-spy 0.3.14
pyarrow 14.0.1 pyarrow yazılım düzeltmesi 0,6 pyasn1 0.4.8
pyasn1-modules 0.2.8 pybind11 2.11.1 pyccolo 0.0.52
pycparser kütüphanesi 2.21 Python programlama dilinde veri doğrulama ve ayar yönetimi için kullanılan "pydantic" kütüphanesi. 1.10.6 Pygmentler 2.15.1
PyGObject 3.42.1 PyJWT (JWT'leri Python ile oluşturmak, kodlamak ve doğrulamak için kullanılan bir kütüphane) 2.3.0 PyNaCl 1.5.0
pynvml 11.5.0 pyodbc 4.0.38 pyparsing (bir Python kütüphanesi) 3.0.9
pyrsistent 0.18.0 pytesseract 0.3.10 python-dateutil (Python tarih ve saat işleme kütüphanesi) 2.8.2
python düzenleyicisi 1.0.4 python-lsp-jsonrpc 1.1.1 pytz kütüphanesi (Python zaman dilimi hesaplamaları için kullanılan) 2022.7
PyWavelets 1.4.1 PyYAML 6,0 pyzmq 23.2.0
ışın 2.9.3 regex 2022.7.9 requests 2.31.0
requests-oauthlib (bir OAuth şifreleme kütüphanesi) 1.3.1 Yanıt 0.13.3 zengin 13.7.1
RSA şifreleme algoritması 4,9 s3transfer 0.10.0 güvenlitensörler 0.3.2
scikit-image 0.20.0 scikit-learn 1.3.0 scipy (Python için bir bilimsel hesaplama kütüphanesi) 1.11.1
denizanadan 0.12.2 Gizli Depo 3.3.1 Send2Trash 1.8.0
cümle transformatörleri 2.2.2 cümle parçası 0.1.99 kurulum araçları 68.0.0
şekil 0.44.0 simplejson 3.17.6 Altı 1.16.0
Dilimleyici 0.0.7 Smart-Open 5.2.1 smmap 5.0.0
sniffio 1.2.0 ses dosyası 0.12.1 çorba süzgeci 2.4
soxr 0.3.7 boşluklu 3.7.2 spacy-legacy (bir yazılım kütüphanesi veya araç adı olabilir) 3.0.12
spacy-loggers 1.0.5 spark-tensorflow-distributor 1.0.0 SQLAlchemy 1.4.39
sqlparse 0.4.2 Harbi mi? 2.4.8 ssh-import-id—SSH kimlik aktarımı komutu 5.11
yığın verisi 0.2.0 stanio 0.3.0 statsmodeller 0.14.0
Sympy (Python'da sembolik matematik kütüphanesi) 1.11.1 Unicode'da karmaşa 0.2.0 Azim 8.2.2
TensorBoard aracı 2.15.1 TensorBoard veri sunucusu 0.7.2 tensorboard-plugin-profile (TensorBoard eklenti profili) 2.15.0
tensorboardX 2.6.2.2 TensorFlow 2.15.0 tensorflow-estimatör 2.15.0
tensorflow-io-gcs-filesystem 0.36.0 termcolor 2.4.0 tamamlandı 0.17.1
thinc 8.2.3 threadpoolctl 2.2.0 tifffile (TIFF dosya kütüphanesi) 2021.7.2
tiktoken 0.5.2 tinycss2 1.2.1 tokenize-rt 4.2.1
tokenleştiriciler 0.15.0 meşale 2.1.2+cu121 torcheval 0.0.7
meşale vizyonu 0.16.2+cu121 kasırga 6.3.2 tqdm (bir Python kütüphanesi) 4.65.0
Traitlets (Python kütüphanesi/modülü) 5.7.1 Transformatörler 4.36.2 Triton (Neptün'ün uydusu) 2.1.0
typeguard (tip koruma) 2.13.3 Typer 0.9.0 yazım denetimi 0.9.0
typing_extensions 4.7.1 tzdata 2022.1 ujson (hızlı JSON işleme kütüphanesi) 5.4.0
katılımsız yükseltmeler 0,1 urllib3 1.26.16 virtualenv 20.21.0
Vizyonlar/Görüler 0.7.5 wadllib 1.3.6 Wasabi 1.1.2
wcwidth (bir karakterin genişliğini hesaplayan fonksiyon) 0.2.5 gelincik 0.3.4 web kodlamaları 0.5.1
WebSocket istemcisi 0.58.0 Werkzeug 2.2.3 tekerlek 0.38.4
widgetsnbextension 4.0.5 kelime bulutu 1.9.3 sarmalanmış 1.14.1
xgboost 2.0.3 xxhash 3.4.1 yarl 1.8.1
ydata profil oluşturma 4.5.1 fermuar çek 3.11.0

R kütüphaneleri

R kitaplıkları Databricks Runtime 15.0'daki R Kitaplıklarıyla aynıdır.

Java ve Scala kitaplıkları (Scala 2.12 kümesi)

Databricks Runtime 15.0'daki Java ve Scala kitaplıklarına ek olarak, Databricks Runtime 15.0 ML aşağıdaki JAR'leri içerir:

CPU kümeleri

Grup Kimliği Nesne Kimliği Sürüm
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.10.2
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

GPU kümeleri

Grup Kimliği Nesne Kimliği Sürüm
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.10.2
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0
  • Last updated on