Nuta
Dostęp do tej strony wymaga autoryzacji. Możesz spróbować się zalogować lub zmienić katalog.
Dostęp do tej strony wymaga autoryzacji. Możesz spróbować zmienić katalogi.
Uwaga
Obsługa tej wersji środowiska Databricks Runtime została zakończona. Aby uzyskać datę zakończenia pomocy technicznej, zobacz Historia zakończenia pomocy technicznej. Wszystkie obsługiwane wersje środowiska Databricks Runtime można znaleźć w temacie Databricks Runtime release notes versions and compatibility (Wersje i zgodność środowiska Databricks Runtime).
Usługa Databricks wydała tę wersję w grudniu 2019 roku.
Poniższe informacje o wersji zawierają informacje o środowisku Databricks Runtime 6.2 obsługiwanym przez platformę Apache Spark.
Nowe funkcje
Scalanie tylko do wstawiania usługi Delta Lake jest zoptymalizowane
Wydajność operacji scalania usługi Delta Lake, które nie mają żadnych klauzul aktualizacji, została zoptymalizowana. Zapisy wykonywane przez takie operacje scalania tylko wstawiania teraz dołączają tylko dane i nie modyfikują istniejących danych, co pozwala na ciągłe odczytywanie dołączonych danych przez podrzędne zapytania przesyłania strumieniowego. Lepiej obsługuje deduplikację opartą na scalaniu: zadania przetwarzania wsadowego lub przesyłania strumieniowego ETL mogą zapisywać deduplikowane dane w tabelach przy użyciu scalania tylko do wstawiania, a podrzędne zapytania przesyłania strumieniowego mogą stale odczytywać te deduplikowane dane.
Ulepszenia
-
display()kolumnyBinaryTypesą automatycznie obcinane do kodowania base64 pierwszych 128 bajtów, a nie wszystkich bajtów. Jeśli pole zostanie obcięte, zobaczysz"(truncated)"na końcu. - Uaktualniono kilka zainstalowanych bibliotek języka R. Zobacz Zainstalowane biblioteki języka R.
Przestarzałe elementy
display() modele spark.mllib są przestarzałe i zostaną usunięte w następnej wersji głównej. Usługa Azure Databricks zaleca korzystanie z spark.ml modeli.
Apache Spark
Środowisko Databricks Runtime 6.2 obejmuje platformę Apache Spark 2.4.4. Ta wersja zawiera wszystkie poprawki i ulepszenia platformy Spark zawarte w środowisku Databricks Runtime 6.1 (EoS), a także następujące dodatkowe poprawki błędów i ulepszenia wprowadzone na platformie Spark:
- [SPARK-29875][PYTHON][SQL] Unikaj używania przestarzałego interfejsu API pyarrow.open_stream na platformie Spark 2.4.x
- [SPARK-29001][CORE] Drukowanie zdarzeń, które zajmują zbyt dużo czasu do przetworzenia
- [SPARK-29850][SQL] sort-merge-join pusta tabela nie powinna przeciekać pamięci
- [SPARK-29790][DOC] Zwróć uwagę na wymagany port dla interfejsu API kube
- [SPARK-29743][SQL] przykład powinien ustawić właściwość needCopyResult na wartość true, jeśli jego element podrzędny jest
- [SPARK-29651][SQL] Naprawiono analizowanie ułamka interwału sekund
- [SPARK-29604][SQL] Wymuś zainicjowanie elementu SessionState przed zainicjowaniem klasy HiveClient w usłudze SparkSQLEnv
- [SPARK-29637][CORE] Dodawanie opisu do internetowego interfejsu API SHS zadania
- [SPARK-26985][CORE] Poprawka "uzyskiwanie dostępu tylko do niektórych kolumn wszystkich kolumn" dla architektury big endian
- [SPARK-29498][SQL] Przekształcenie z CatalogTable na HiveTable nie powinno zmieniać właściciela tabeli
- [SPARK-29530][SQL] Bezpieczne analizowanie wątku procesu SQLConf w programie SQL
- [SPARK-21287][SQL] Usuń wymaganie fetch_size>=0 z JDBCOptions
- [SPARK-29081]Zastąp wywołania pliku SerializationUtils.clone we właściwościach szybszą implementacją
- [SPARK-21492][SQL][KONTYNUACJA] Reimplement UnsafeExternalRowSorter w iteratorze stylu bazy danych
- [SPARK-21492][SQL] Naprawianie przecieku pamięci w pliku SortMergeJoin
- [SPARK-29556][CORE] Unikaj umieszczania ścieżki żądania w odpowiedzi na błąd w serwletze ErrorServlet
- [SPARK-29494][SQL] Poprawka dotycząca elementu ArrayOutofBoundsException podczas konwertowania ciągu na znacznik czasu
- [SPARK-27259][CORE] Zezwalaj na ustawienie -1 jako długość elementu FileBlock
- [SPARK-29445][CORE] Bump netty-all z 4.1.39.Final do 4.1.42.Final
- [SPARK-29410] Aktualizacja commons-beanutils do wersji 1.9.4
- [SPARK-28917][CORE] Synchronizowanie dostępu do stanu modyfikowalnego RDD
- [SPARK-28476][SQL] Obsługa ALTER DATABASESET LOKALIZACJA
- [SPARK-29048] Zwiększanie wydajności kolekcji Column.isInCollection() przy użyciu kolekcji o dużym rozmiarze
- [SPARK-28962][SQL] Podawanie argumentu indeksu w celu filtrowania funkcji lambda
- [SPARK-25753][CORE] Naprawianie odczytywania małych plików za pomocą pliku BinaryFileRDD
- [SPARK-28140][MLLIB][PYTHON] Akceptowanie ramek danych w konstruktorach RowMatrix i IndexedRowMatrix
- [SPARK-29244][CORE] Uniemożliwianie zwolnienia strony w funkcji BytesToBytesMap bezpłatnie
- [SPARK-29055][CORE] Aktualizowanie pamięci magazynu sterownika/wykonawców, gdy blok jest usuwany z BlockManager.
- [SPARK-29186][SQL] AliasIdentifier należy przekonwertować na plik Json w formacie prettyJson
- [SPARK-29186][SQL] AliasIdentifier należy przekonwertować na plik Json w formacie prettyJson
- [SPARK-29247][SQL] Redact poufne informacje w podczas konstruowania HiveClientHive.state
- [SPARK-29263][SCHEDULER] Przed sprawdzeniem dostępnych miejsc dla zestawu zadań barierowychzaktualizuj dostępne miejsca w elemecie resourceOffers()
- [SPARK-29240][PYTHON] Przekazywanie wystąpienia kolumny Py4J w celu obsługi kolumny PySpark w funkcji element_at
- [SPARK-29213][SQL] Generowanie dodatkowego predykatu IsNotNull w elemecie FilterExec
- [SPARK-29229][SQL] Zmiana dodatkowego repozytorium zdalnego w elem. IsolatedClientLoader na google minor
- [SPARK-28599][SQL] Naprawiono sortowanie kolumn Czasu trwania dla elementu ThriftServerSessionPage
- [SPARK-25903][CORE] CzasomierzTask powinien być synchronizowany w parametrze ContextBarrierState
- [SPARK-29053][WEBUI] Sortowanie nie działa w niektórych kolumnach
- [SPARK-29177][CORE] naprawianie zadań zombie po przerwaniu etapu
Aktualizacje konserwacyjne
Zobacz Aktualizacje konserwacji środowiska Databricks Runtime 6.2.
Środowisko systemu
- System operacyjny: Ubuntu 16.04.6 LTS
- Java: 1.8.0_232
- Scala: 2.11.12
- Python: 3.7.3
- R: R w wersji 3.6.1 (2019-07-05)
- Delta Lake: 0.4.0
Uwaga
Mimo że język Scala 2.12 jest dostępny jako funkcja eksperymentalna w systemie Apache Spark 2.4, nie jest obsługiwany w środowisku Databricks Runtime 6.2.
W tej sekcji:
- Zainstalowane biblioteki języka Python
- Zainstalowane biblioteki języka R
- Zainstalowane biblioteki Java i Scala (wersja klastra Scala 2.11)
Zainstalowane biblioteki języka Python
| Biblioteka | Wersja | Biblioteka | Wersja | Biblioteka | Wersja |
|---|---|---|---|---|---|
| asn1crypto | 0.24.0 | Wezwanie zwrotne | 0.1.0 | boto | 2.49.0 |
| boto3 | 1.9.162 | botocore | 1.12.163 | certyfikat | 2019.3.9 |
| cffi | 1.12.2 | chardet | 3.0.4 | kryptografia | 2.6.1 |
| rowerzysta | 0.10.0 | Cython | 0.29.6 | dekorator | 4.4.0 |
| docutils | 0,14 | IDNA | 2.8 | ipython | 7.4.0 |
| ipython-genutils | 0.2.0 | Jedi | 0.13.3 | jmespath | 0.9.4 |
| kiwisolver | 1.1.0 | biblioteka matplotlib | 3.0.3 | numpy | 1.16.2 |
| Pandas | 0.24.2 | parso | 0.3.4 | Patsy | 0.5.1 |
| pexpect | 4.6.0 | pickleshare (jeśli to nazwa własna, nie trzeba tłumaczyć) | 0.7.5 | pip (menedżer pakietów Pythona) | 19.0.3 |
| zestaw narzędzi prompt | 2.0.9 | psycopg2 | 2.7.6.1 | ptyprocess | 0.6.0 |
| pyarrow | 0.13.0 | pycparser | 2.19 | pycurl | 7.43.0 |
| Pygments | 2.3.1 | PyGObject | 3.20.0 | pyOpenSSL | 19.0.0 |
| pyparsing – biblioteka do przetwarzania tekstu w Pythonie | 2.4.2 | PySocks | 1.6.8 | python-apt | 1.1.0.b1+ubuntu0.16.04.5 |
| python-dateutil (biblioteka Pythona do zarządzania datami) | 2.8.0 | pytz (biblioteka Pythona do obliczeń stref czasowych) | 2018.9 | żądania | 2.21.0 |
| s3transfer | 0.2.1 | scikit-learn | 0.20.3 | scipy (biblioteka naukowa dla Pythona) | 1.2.1 |
| urodzony na morzu | 0.9.0 | setuptools | 40.8.0 | Sześć | 1.12.0 |
| ssh-import-id (narzędzie do importowania kluczy SSH) | 5,5 | statsmodels - biblioteka do modelowania statystycznego | 0.9.0 | traitlety | 4.3.2 |
| nienadzorowane uaktualnienia | 0.1 | urllib3 | 1.24.1 | virtualenv | 16.4.1 |
| szerokość(wcwidth) | 0.1.7 | wheel | 0.33.1 |
Zainstalowane biblioteki języka R
| Biblioteka | Wersja | Biblioteka | Wersja | Biblioteka | Wersja |
|---|---|---|---|---|---|
| abind | 1.4-5 | askpass | 1.1 | potwierdzić to | 0.2.1 |
| backports (backports) | 1.1.5 | baza | 3.6.1 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bitowe | 1.1-14 | bit-64 | 0.9-7 |
| bitops | 1.0-6 | blob | 1.2.0 | rozruch | 1.3-23 |
| warzyć | 1.0-6 | obiekt wywołujący | 3.3.2 | samochód | 3.0-4 |
| dane samochodu | 3.0-2 | karetka | 6.0-84 | cellranger | 1.1.0 |
| Chroń | 2.3-54 | klasa | 7.3-15 | CLI | 1.1.0 |
| clipr | 0.7.0 | clisymbols | 1.2.0 | klaster | 2.1.0 |
| codetools | 0.2-16 | przestrzeń kolorów | 1.4-1 | commonmark | 1,7 |
| kompilator | 3.6.1 | konfig | 0,3 | cover | 3.3.2 |
| kredka | 1.3.4 | Crosstalk | 1.0.0 | lok | 4.2 |
| tabela danych | 1.12.6 | usługi Power BI | 3.6.1 | DBI | 1.0.0 |
| dbplyr | 1.4.2 | Desc | 1.2.0 | devtools | 2.2.1 |
| skrót | 0.6.22 | DoMC | 1.3.6 | dplyr | 0.8.3 |
| DT | 0,9 | wielokropek | 0.3.0 | ocenić | 0,14 |
| fani | 0.4.0 | szybka mapa | 1.0.1 | dla kotów | 0.4.0 |
| foreach | 1.4.7 | zagraniczny | 0.8-72 | kuźnia | 0.2.0 |
| Fs | 1.3.1 | Gbm | 2.1.5 | typy ogólne | 0.0.2 |
| ggplot2 | 3.2.1 | Gh | 1.0.1 | git2r | 0.26.1 |
| glmnet | 2.0-18 | klej | 1.3.1 | Gower | 0.2.1 |
| grafika | 3.6.1 | grDevices | 3.6.1 | siatka | 3.6.1 |
| gridExtra | 2.3 | gsubfn | 0,7 | gtabela | 0.3.0 |
| H2O | 3.26.0.2 | przystań | 2.1.1 | Hms | 0.5.1 |
| htmltools – narzędzie do tworzenia stron internetowych | 0.4.0 | widżety HTML | 1.5.1 | httpuv | 1.5.2 |
| httr | 1.4.1 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| ini | 0.3.1 | ipred | 0.9-9 | Iteratory | 1.0.12 |
| jsonlite | 1.6 | KernSmooth | 2.23-16 | Etykietowania | 0,3 |
| później | 1.0.0 | krata | 0.20-38 | lawa | 1.6.6 |
| opóźnienie | 0.2.2 | cykl życia | 0.1.0 | mniejszy | 0.3.9 |
| lme4 | 1.1-21 | lubridate | 1.7.4 | magrittr | 1.5 |
| mapproj | 1.2.6 | Mapy | 3.3.0 | maptools | 0.9-8 |
| MASA | 7.3-51.4 | Macierz | 1.2-17 | MatrixModels | 0.4-1 |
| zapamiętywanie | 1.1.0 | metody | 3.6.1 | mgcv | 1.8-30 |
| mim | 0,7 | minqa | 1.2.4 | Metryki modelu | 1.2.2 |
| munsell | 0.5.0 | mvtnorm | 1.0-11 | nlme | 3.1-141 |
| nloptr | 1.2.1 | sieć neuronowa (nnet) | 7.3-12 | numDeriv | 2016.8-1.1 |
| openssl | 1.4.1 | openxlsxx | 4.1.2 | równoległy | 3.6.1 |
| pbkrtest | 0.4-7 | filar | 1.4.2 | pkgbuild | 1.0.6 |
| pkgconfig | 2.0.3 | pkgKitten | 0.1.5 | pkgload | 1.0.2 |
| plogr | 0.2.0 | plyr | 1.8.4 | pochwała | 1.0.0 |
| prettyunits | 1.0.2 | Proc | 1.15.3 | Procesx | 3.4.1 |
| prodlim | 2018.04.18 | Postęp | 1.2.2 | Obietnice | 1.1.0 |
| Proto | 1.0.0 | PS | 1.3.0 | mruczenie | 0.3.3 |
| quantreg | 5.51 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.9.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| "randomForest" | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.3 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.2 | RcppEigen | 0.3.3.5.0 |
| RCurl | 1.95-4.12 | czytnik | 1.3.1 | readxl (biblioteka do odczytu plików Excel) | 1.3.1 |
| przepisy | 0.1.7 | rewanż | 1.0.1 | Piloty | 2.1.0 |
| zmień kształt2 | 1.4.3 | Rex | 1.1.2 | Rio | 0.5.16 |
| rlang | 0.4.1 | RODBC | 1.3-16 | roxygen2 | 6.1.1 |
| rpart | 4.1-15 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.2 | rstudioapi | 0.10 | rversions (rversions) | 2.0.0 |
| waga | 1.0.0 | Informacje o sesji | 1.1.1 | błyszczący | 1.4.0 |
| sourcetools | 0.1.7 | Sp | 1.3-1 | sparklyr | 1.0.4 |
| SparkR | 2.4.5 | Rozrzednia | 1.77 | przestrzenny | 7.3-11 |
| Splajnów | 3.6.1 | sqldf | 0.4-11 | KWADRAT | 2017.10-1 |
| statmod | 1.4.32 | Statystyki | 3.6.1 | statystyki4 | 3.6.1 |
| łańcuchy | 1.4.3 | stringr | 1.4.0 | przetrwanie | 2.44-1.1 |
| sys | 3.3 | tcltk | 3.6.1 | NauczanieDemos | 2.10 |
| testthat | 2.2.1 | tibble | 2.1.3 | tidyr | 1.0.0 |
| tidyselect | 0.2.5 | czasData | 3043.102 | narzędzia | 3.6.1 |
| użyj tego | 1.5.1 | utf8 | 1.1.4 | narzędzia | 3.6.1 |
| vctrs | 0.2.0 | viridisLite | 0.3.0 | wąs | 0,4 |
| Withr | 2.1.2 | xml2 | 1.2.2 | xopen | 1.0.0 |
| Xtable | 1.8-4 | yaml | 2.2.0 | gorliwość | 0.1.0 |
| zamek | 2.0.4 |
Zainstalowane biblioteki Java i Scala (wersja klastra Scala 2.11)
| Identyfikator grupy | Identyfikator artefaktu | Wersja |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | Klient Amazon Kinesis | 1.8.10 |
| com.amazonaws | aws-java-sdk-automatyczne-skalowanie | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudhsm (zestaw narzędzi Java dla usługi CloudHSM) | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.595 |
| com.amazonaws | aws-java-sdk-codedeploy (biblioteka do zarządzania wdrażaniem kodu w AWS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.595 |
| com.amazonaws | aws-java-sdk-config (konfiguracja aws-java-sdk) | 1.11.595 |
| com.amazonaws | aws-java-sdk-core | 1.11.595 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.595 |
| com.amazonaws | aws-java-sdk-directconnect (pakiet narzędzi programistycznych dla Java do współpracy z AWS Direct Connect) | 1.11.595 |
| com.amazonaws | aws-java-sdk-directory | 1.11.595 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.595 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.595 |
| com.amazonaws | aws-java-sdk-efs | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.595 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.595 |
| com.amazonaws | aws-java-sdk-emr (biblioteka SDK Java dla usługi Amazon EMR) | 1.11.595 |
| com.amazonaws | AWS Java SDK dla Glacier | 1.11.595 |
| com.amazonaws | aws-java-sdk-klej | 1.11.595 |
| com.amazonaws | aws-java-sdk-iam | 1.11.595 |
| com.amazonaws | AWS-Java-SDK-ImportExport | 1.11.595 |
| com.amazonaws | AWS SDK dla Javy - Kinesis | 1.11.595 |
| com.amazonaws | aws-java-sdk-kms | 1.11.595 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.595 |
| com.amazonaws | aws-java-sdk-logs | 1.11.595 |
| com.amazonaws | aws-java-sdk-uczenie-maszynowe | 1.11.595 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.595 |
| com.amazonaws | aws-java-sdk-rds (pakiet programistyczny Java dla AWS RDS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.595 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.595 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ses | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.595 |
| com.amazonaws | aws-java-sdk-sns | 1.11.595 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.595 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.595 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.595 |
| com.amazonaws | aws-java-sdk-sts (pakiet programistyczny Java dla AWS STS) | 1.11.595 |
| com.amazonaws | wsparcie dla aws-java-sdk | 1.11.595 |
| com.amazonaws | aws-java-sdk-biblioteka-biblioteka | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.595 |
| com.amazonaws | jmespath-java | 1.11.595 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | odtwarzać strumieniowo | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | kompilatorwtyczka_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-cieniowane | 4.0.2 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | kolega z klasy | 1.0.0 |
| com.fasterxml.jackson.core | adnotacje jackson | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | Jackson-format-danych-CBOR | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | rdzeń | 1.1.2 |
| com.github.fommil.netlib | natywne_odniesienie-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system java | 1.1 |
| com.github.fommil.netlib | system natywny-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | "netlib-native_system-linux-x86_64-natives" | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | guawa | 15,0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.WYDANIE |
| com.microsoft.azure | azure-data-lake-store-sdk (SDK do przechowywania danych Azure Data Lake) | 2.2.8 |
| com.microsoft.azure | Azure Storage | 7.0.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf (biblioteka do kompresji danych) | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0,3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | relaks_2.11 | 0.9.3 |
| com.twitter | pakiet parquet-hadoop | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | konfig | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | parsery jednowołciowości | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.4 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| Zbiory Commons | Zbiory Commons | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2,4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | kompresor powietrza | 0.10 |
| io.dropwizard.metrics | metryki —rdzeń | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | wskaźniki-kontrole zdrowia | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metryki w formacie JSON | 3.1.5 |
| io.dropwizard.metrics | metryki-JVM | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | serwlety metrics-servlets | 3.1.5 |
| io.netty | Netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.42.Final |
| javax.activation | aktywacja | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| junit | junit | 4.12 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hydromatic | eigenbase-properties | 1.1.5 |
| net.razorvine | pirolit | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | SDK do pobierania danych Snowflake | 0.9.6 |
| net.snowflake | snowflake-jdbc | 3.12.0 |
| net.snowflake | spark-snowflake_2.11 | 2.5.9-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | Szablon łańcucha | 3.2.1 |
| org.apache.ant | tat | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | program uruchamiający Ant | 1.9.2 |
| org.apache.arrow | format strzałki | 0.10.0 |
| org.apache.arrow | strzałka w pamięci | 0.10.0 |
| org.apache.arrow | wektor strzałki | 0.10.0 |
| org.apache.avro | avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | 1.2.0 inkubacja |
| org.apache.calcite | rdzeń kalcytowy | 1.2.0 inkubacja |
| org.apache.calcite | calcite-linq4j | 1.2.0 inkubacja |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | kurator-klient | 2.7.1 |
| org.apache.curator | struktura kuratora | 2.7.1 |
| org.apache.curator | przepisy kuratora | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | adnotacje hadoop | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-klient | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | Hadoop-HDFS (Hadoop Distributed File System) | 2.7.3 |
| org.apache.hadoop | Klient aplikacji Hadoop MapReduce | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle (moduł mieszający klienta w Hadoop MapReduce) | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client (klient Hadoop YARN) | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common (Wspólne komponenty serwera Hadoop YARN) | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0 inkubacja |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | httpcore | 4.4.10 |
| org.apache.ivy | bluszcz | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.5 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.5 |
| org.apache.orc | podkładki orc-shim | 1.5.5 |
| org.apache.parquet | parquet-kolumna | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-wspólny | 1.10.1.2-databricks4 |
| org.apache.parquet | kodowanie parquet | 1.10.1.2-databricks4 |
| org.apache.parquet | format parquet | 2.4.0 |
| org.apache.parquet | Parquet-Hadoop (framework do analizy danych) | 1.10.1.2-databricks4 |
| org.apache.parquet | parquet-jackson | 1.10.1.2-databricks4 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-cieniowany | 4.8 |
| org.apache.zookeeper - system do zarządzania konfiguracją i synchronizacją dla aplikacji rozproszonych. | opiekun zoo | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapujący-ASL | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-kompilator | 3.0.10 |
| org.codehaus.janino | Janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-kontynuacja | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-http | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-io | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-jndi | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty-plus | 9.3.27.v20190418 |
| org.eclipse.jetty | serwer pośredniczący Jetty | 9.3.27.v20190418 |
| org.eclipse.jetty | moduł bezpieczeństwa Jetty | 9.3.27.v20190418 |
| org.eclipse.jetty | serwer aplikacji Jetty | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlet | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-servlets | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-util | 9.3.27.v20190418 |
| org.eclipse.jetty | Jetty-aplikacja internetowa | 9.3.27.v20190418 |
| org.eclipse.jetty | jetty-xml | 9.3.27.v20190418 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | lokalizator hk2 | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-lokalizator-zasobów | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-zapakowane ponownie | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject (pakiet w języku Java) | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guawa | 2.22.2 |
| org.glassfish.jersey.containers | serwlet kontenerowy Jersey | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | dzianina-zwykła | 2.22.2 |
| org.glassfish.jersey.core | serwer jersey | 2.22.2 |
| org.glassfish.jersey.media | - "jersey-media-jaxb" не wymaga tłumaczenia, gdyż jest to nazwa techniczna, ale dla polskich odbiorców warto dodać opis lub kontynuować bez zmian, jeżeli nazwa już jako taka przyjęła się w lokalnym użyciu. | 2.22.2 |
| org.hamcrest | hamcrest-core | 1.3 |
| org.hamcrest | hamcrest-biblioteka | 1.3 |
| org.hibernate | moduł sprawdzania poprawności hibernacji | 5.1.1.Ostateczna |
| org.iq80.snappy | Żwawy | 0,2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging (narzędzie do rejestrowania zdarzeń w JBoss) | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1,7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-core | 1.10.19 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | Podkładki | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | interfejs testowy | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline (narzędzie do interakcji z bazą danych Hive) | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | magazyn metadanych Hive | 1.2.1.spark2 |
| org.spark-project.spark.spark | Nieużywane | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core (podstawowy moduł Spring) | 4.1.4.WYDANIE |
| org.springframework | test sprężynowy | 4.1.4.WYDANIE |
| org.tukaani | xz | 1.5 |
| org.typelevel | mechanik_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.3 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| oprogramowanie.amazon.ion | ion-java | 1.0.2 |
| Stax | stax-api | 1.0.1 |
| xmlenc (standard szyfrowania XML) | xmlenc (standard szyfrowania XML) | 0.52 |