Compartir a través de

Databricks Runtime 5.4 (EoS)

Nota:

El soporte técnico con esta versión de Databricks Runtime ha finalizado. Para obtener la fecha de finalización del soporte técnico, consulte Historial de finalización del soporte técnico. Para ver todas las versiones de Databricks Runtime con soporte técnico, consulte las notas de la versión de Databricks Runtime versiones y compatibilidad.

Databricks publicó esta versión en junio de 2019.

En las siguientes notas de la versión se proporciona información sobre Databricks Runtime 5.4, con tecnología de Apache Spark.

Nuevas características

Delta Lake en Azure Databricks agrega la optimización automática (versión preliminar pública)

En este momento, al escribir datos en el almacenamiento en la nube, debe compactar los archivos para obtener un rendimiento óptimo de E/S. Tiene que preocuparse por el tamaño adecuado del archivo y la frecuencia con la que se deben compactar, así como del tamaño del clúster que va a usar, entre otras cosas. Para resolver esta clase de problemas, nos complace presentar Auto Optimize con Delta Lake en Azure Databricks. Durante cada escritura en tablas Delta, calculamos automáticamente los tamaños de archivo correctos y los archivos compactos para que no tenga que preocuparse por optimizar el diseño de almacenamiento. Al escribir, si la opción auto-optimize es true, Azure Databricks determina automáticamente si se necesita una optimización y optimiza los archivos pequeños. Para obtener más información, consulta Configuración de Delta Lake para controlar el tamaño del archivo de datos.

Utilidades de biblioteca disponibles con carácter general

Las utilidades de biblioteca ya están disponibles con carácter general. Esta característica permite manipular bibliotecas de Python desde el ámbito de una sesión de cuaderno. Consulte Utilidad de biblioteca (dbutils.library) (heredado).

Databricks Connect está disponible con carácter general

Databricks Connect ya está disponible con carácter general. Esta característica es una biblioteca cliente de Spark que le permite conectar su IDE favorito (IntelliJ, Eclipse, PyCharm, RStudio), un servidor de cuadernos (Zeppelin, Jupyter) y otras aplicaciones personalizadas a clústeres de Azure Databricks y ejecutar código de Spark. Consulte Databricks Connect.

Origen de datos de archivos binarios

El origen de datos de archivos binarios lee archivos binarios y convierte cada uno de ellos en un único registro que contiene el contenido sin formato y los metadatos del archivo. Ya puede leer archivos arbitrarios de forma eficaz en un dataframe de Spark sin necesidad de visitar el contenido de los archivos. Esto resulta especialmente útil si desea usar Spark para cargar archivos grandes, como imágenes, para la puntuación. Consulte Archivo binario.

Mejoras

Almacenamiento en caché de disco

El almacenamiento en caché de disco ahora está preconfigurado para las instancias Lsv2. Sin embargo, la caché no está habilitada de forma predeterminada. Para obtener información sobre cómo se habilita, consulte Habilitación o deshabilitación de la caché de disco.

Acceso directo a credenciales de Azure AD de Azure Data Lake Storage

Ahora se admite el montaje de DBFS del sistema de archivos de Azure Data Lake Storage (ADLS) Gen2 con acceso directo a las credenciales de Microsoft Entra ID. Consulte Azure Data Lake Storage.

Se ha actualizado R a la versión 3.6.0

La base de R se ha actualizado de la versión 3.5.2 a la 3.6.0.

Spark de Apache

Databricks Runtime 5.4 incluye Apache Spark 2.4.3. Esta versión incluye todas las correcciones y mejoras de Spark que se han incorporado en Databricks Runtime 5.3 (EoS), así como las siguientes correcciones de errores y mejoras adicionales realizadas en Spark:

  • [SPARK-27596][SQL] La opción "consulta" de JDBC no funciona para la base de datos de Oracle
  • [SPARK-27240][PYTHON] Uso de Pandas dataframe para un argumento de tipo struct en la UDF escalar de Pandas.
  • [SPARK-26745][SQL][TESTS] Caso de prueba de JsonSuite: línea vacía -> 0 registros
  • [SPARK-25535][CORE] Solución del problema del control de errores incorrecto en commons-crypto.
  • [SPARK-26891][YARN] Corrección de pruebas no confiables en YarnSchedulerBackendSuite
  • [SPARK-27563][SQL][TEST] obtención automática de las versiones más recientes de Spark en HiveExternalCatalogVersionsSuite
  • [SPARK-27494][SS] Los valores NULL no funcionan en el origen v2 de Kafka
  • [SPARK-27550][TEST] Corrección de que test-dependencies.sh no usa el perfil kafka-0-8 para Scala-2.12
  • [SPARK-26992][STS] Corrección de la entrega correcta del grupo de programadores de STS
  • [SPARK-27544][PYTHON][TEST] Corrección del script de prueba de Python para que funcione en la compilación Scala-2.12
  • [SPARK-27539][SQL] Corrección de cálculos erróneos de outputRows agregadas con columnas que contienen valores NULL
  • [SPARK-27469][BUILD] Unificación de deps de commons-beanutils a la reciente 1.9.3
  • [SPARK-27419][FOLLOWUP][DOCS] Adición de una nota sobre el cambio de spark.executor.heartbeatInterval a la guía de migración
  • [SPARK-27496][CORE] Los errores graves también deben devolverse al remitente
  • [SPARK-25079][PYTHON] Actualización del ejecutable de python3 a la versión 3.6.x
  • [SPARK-27163][PYTHON] Limpieza y consolidación de la funcionalidad de la UDF de Pandas
  • [SPARK-27403][SQL] Corrección de updateTableStats para actualizar las estadísticas de tabla siempre con estadísticas nuevas o Ninguna
  • [SPARK-27479][BUILD] Ocultación de documentación de API para org.apache.spark.util.kvstore
  • [SPARK-27446][R] Uso de la configuración de Spark existente, si está disponible
  • [SPARK-27453] Paso de partitionBy como opciones en DataFrameWriter
  • [SPARK-27454][SPARK-27454][HOT-FIX][ML][SQL] Cherrypick (corrección del error en el origen de datos de la imagen de Spark cuando se encuentran algunas imágenes ilegales)
  • [SPARK-27351][SQL] Cálculo de outputRows incorrecto después de AggregateEstimation con una única columna de valor NULL
  • [SPARK-27314][SQL] Desduplicación de exprIds para Union.
  • [SPARK-27394][WEBUI] Vaciado de LiveEntity si es necesario al recibir SparkListenerExecutorMetricsUpdate (backport 2.4)
  • [SPARK-27406][SQL] La serialización UnsafeArrayData se interrumpe cuando dos máquinas tienen un tamaño de Oops diferente
  • [SPARK-27419][CORE] No convertir el intervalo de latido en segundos (2.4)
  • [SPARK-27391][SS] No inicializar un valor perezoso en una tarea de ContinuousExecution.
  • [SPARK-27390][CORE][SQL][TEST] Corrección de la falta de coincidencia del nombre del paquete
  • [SPARK-27358][UI] Actualización de jquery a 1.12.x para recoger correcciones de seguridad
  • [SPARK-27216][CORE] Actualización de RoaringBitmap a 0.7.45 para corregir el problema de ser/dser no seguros de Kryo
  • [SPARK-27382][SQL][TEST] Actualización de las pruebas de Spark 2.4.x en HiveExternalCatalogVersionsSuite
  • [SPARK-27338][CORE] Corrección del interbloqueo entre UnsafeExternalSorter y TaskMemoryManager
  • [SPARK-27338][CORE][FOLLOWUP] Eliminación del espacio final
  • [SPARK-27338][CORE] Corrección del interbloqueo en UnsafeExternalSorter.SpillableIterator al bloquear unsafeExternalSorter.SpillableIterator y TaskMemoryManager
  • [SPARK-27346][SQL] Relajar la condición de aserción de nueva línea en el campo "examples" en ExpressionInfo
  • [SPARK-26998][CORE] Eliminación de la configuración de SSL de los ejecutores
  • [SPARK-27244][CORE][TEST][FOLLOWUP] toDebugString oculta la información confidencial
  • [SPARK-27267][FOLLOWUP] Actualización del manifiesto de dependencia de hadoop-2.6
  • [SPARK-27267][CORE] Actualización de snappy para evitar errores al descomprimir datos serializados vacíos
  • [SPARK-27301][DSTREAM] Acortar el ciclo de vida almacenado en caché de FileSystem al ámbito interno del método de limpieza
  • [SPARK-27244][CORE] Ocultación de contraseñas al usar la opción logConf=true
  • [SPARK-26208][SQL] agregar encabezados a archivos CSV vacíos cuando header=true
  • [SPARK-27275][CORE] Corrección de posibles daños en EncryptedMessage.transferTo (2.4)
  • [SPARK-23836][PYTHON] Adición de compatibilidad con la devolución de StructType en la UDF escalar de Pandas
  • [SPARK-26961][CORE] Habilitación de la funcionalidad de carga de clases en paralelo
  • [SPARK-27274][DOCS] Corrección de referencias a Scala 2.11 en documentos de la versión 2.4.1+. Nota: La compatibilidad con la versión 2.11 está en desuso en la versión 2.4.1+
  • [SPARK-27198][CORE] Error de coincidencia del intervalo entre latidos en el controlador y el ejecutor
  • [SPARK-27094][YARN] Solución del problema de interrupción del subproceso de ingesta de RackResolver
  • [SPARK-24935][SQL] Corrección del UDAF de Hive con dos búferes de agregación
  • [SPARK-27160][SQL] Corrección de DecimalType al compilar filtros orc
  • [SPARK-26606][CORE] Control correcto de las opciones del controlador al enviar al modo de clúster independiente a través de un cliente heredado
  • [SPARK-27221][SQL] Mejora del mensaje de error de aserción en TreeNode.parseToJson (5.x)
  • [SPARK-27102][R][PYTHON][CORE] Quitar las referencias a los códigos de Scala de Python en los códigos de Scala de R
  • [SPARK-27159][SQL] Actualización del dialecto del servidor mssql para admitir el tipo binario
  • [SPARK-27112][CORE] : Creación de una ordenación de recursos entre subprocesos para resolver los interbloqueos detectados al intentar terminar ejecutores debido a una asignación dinámica o a una lista de bloqueo
  • [SPARK-27178][K8S] Incorporación de un paquete nss para corregir pruebas
  • [SPARK-27045][SQL] La pestaña de SQL en la interfaz de usuario muestra el SQL real, en lugar del sitio de llamada, en el caso de SparkSQLDriver
  • [SPARK-27119][SQL] No inferir un esquema al leer la tabla serd de Hive con un origen de datos nativo
  • [SPARK-27165][SPARK-27107][BUILD][SQL] Actualización de Apache ORC a 1.5.5
  • [SPARK-26742][K8S] Actualización de la versión de cliente k8s a 4.1.2
  • [SPARK-26927][CORE] Asegúrese de que el ejecutor está activo al procesar eventos en el administrador de asignación dinámica.
  • [SPARK-27097][CHERRY-PICK 2.4] Evite insertar desplazamientos que dependan de la plataforma literalmente en el código generado en toda la fase
  • [SPARK-27111][SS] Corrección del problema de que se puede producir un error en una consulta continua con InterruptedException (5.x)
  • [SPARK-27111][SS] Corrección del problema de que se puede producir un error en una consulta continua con InterruptedException
  • [SPARK-27080][SQL] Corrección de errores: mergeWithMetastoreSchema con comparación uniforme en minúsculas
  • [SPARK-26604][CORE] Limpieza del registro de canales de StreamManager
  • [SPARK-27016][SQL][BUILD] Tratar todas las advertencias de antlr como errores al generar el analizador desde el archivo de gramática de SQL
  • [SPARK-25863][SPARK-21871][SQL] Compruebe si las estadísticas de tamaño del código están vacías en updateAndGetCompilationStats
  • [SPARK-27078][SQL] Corrección de NoSuchFieldError al leer vistas materializadas de Hive
  • [SPARK-27019][SQL][WEBUI] onJobStart se produce después de onExecutionEnd no debe sobrescribir kvstore
  • [SPARK-27065][CORE] Evitar más de un administrador de conjunto de tareas activo para una fase
  • [SPARK-24669][SQL] Invalidar las tablas en caso de DROP DATABASE CASCADE
  • [SPARK-26932][DOC] Adición de una advertencia para el problema del lector ORC de Hive 2.1.1
  • [SPARK-25139][SPARK-18406][CORE] Evita que NonFatals terminen el ejecutor en PythonRunner

Actualizaciones de mantenimiento

Consulte Actualizaciones de mantenimiento de Databricks Runtime 5.4.

Entorno del sistema

  • Sistema operativo: Ubuntu 16.04.6 LTS
  • Java: 1.8.0_191
  • Scala: 2.11.12
  • Python: 2.7.12 para clústeres de Python 2 y 3.5.2 para clústeres de Python 3.
  • R: R, versión 3.6.0 (2019-04-26)
  • Clústeres de GPU: están instaladas las siguientes bibliotecas de GPU de NVIDIA:
    • Controlador Tesla 375.66
    • CUDA 9.0
    • cuDNN 7.0

Nota:

Aunque Scala 2.12 es compatible con Apache Spark 2.4, no lo es con Databricks Runtime 5.4.

Bibliotecas de Python instaladas

Biblioteca Versión Biblioteca Versión Biblioteca Versión
ansi2html 1.1.1 argparse (una biblioteca de Python para el análisis de argumentos de línea de comandos) 1.2.1 backports-abc 0,5
boto 2.42.0 boto3 1.4.1 botocore 1.4.70
brewer2mpl 1.4.1 certifi 2016.2.28 cffi 1.7.0
chardet 2.3.0 colorama 0.3.7 configobj 5.0.6
criptografía 1.5 ciclista 0.10.0 Cython 0.24.1
decorador 4.0.10 docutils 0.14 enum34 1.1.6
et-xmlfile 1.0.1 freetype-py 1.0.2 funcsigs 1.0.2
fusepy 2.0.4 futuros 3.2.0 ggplot 0.6.8
html5lib 0,999 idna 2.1 dirección IP 1.0.16
ipython 2.2.0 ipython-genutils 0.1.0 jdcal 1.2
Jinja2 2.8 jmespath 0.9.0 llvmlite 0.13.0
lxml 3.6.4 MarkupSafe 0,23 matplotlib 1.5.3
mpld3 0,2 msgpack-python 0.4.7 ndg-httpsclient 0.3.3
entumecida 0.28.1 numpy 1.11.1 openpyxl 2.3.2
Pandas 0.19.2 pathlib2 2.1.0 chivo expiatorio 0.4.1
pexpect 4.0.1 pickleshare 0.7.4 Almohada 3.3.1
pepita 19.1.1 Capas 3.9 prompt-toolkit 1.0.7
psycopg2 2.6.2 ptyprocess 0.5.1 py4j 0.10.3
pyarrow 0.8.0 pyasn1 0.1.9 pycparser 2.14
Pygments 2.1.3 PyGObject 3.20.0 pyOpenSSL 16.0.0
pyparsing 2.2.0 pypng 0.0.18 Pitón 2.7.12
Python-dateutil 2.5.3 python-geohash 0.8.5 pytz 1.6.2016
Solicitudes 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
scipy 0.18.1 restregar 0,32 biblioteca de visualización de datos de Python llamada seaborn 0.7.1
setuptools 41.0.1 simplejson 3.8.2 simples3 1,0
singledispatch (despacho único) 3.4.0.3 six (seis) 1.10.0 statsmodels (paquete de Python para análisis estadístico) 0.6.1
tornado 5.1.1 traitlets 4.3.0 urllib3 1.19.1
virtualenv 16.1.0 wcwidth 0.1.7 rueda 0.33.3
wsgiref 0.1.2

Bibliotecas de R instaladas

Biblioteca Versión Biblioteca Versión Biblioteca Versión
abind 1.4-5 askpass 1.1 asegúrate de que 0.2.1
retroportaciones 1.1.3 base 3.6.0 base64enc 0.1-3
BH 1.69.0-1 poco 1.1-14 bit 64 0.9-7
bitops 1.0-6 mancha 1.1.1 bota 1.3-20
fermentar 1.0-6 callr 3.2.0 automóvil 3.0-2
datosDelCoche 3.0-2 cursor 6.0-82 cellranger (herramienta de análisis de datos celulares) 1.1.0
Chron 2.3-53 clase 7.3-15 Cli 1.1.0
clipr 0.5.0 clisymbols 1.2.0 conglomerado 2.0.8
codetools 0.2-16 espacio de colores 1.4-1 commonmark 1.7
compilador 3.6.0 configuración 0,3 crayón 1.3.4
rizo 3.3 tabla de datos 1.12.0 conjuntos de datos 3.6.0
DBI 1.0.0 dbplyr 1.3.0 Descripción 1.2.0
devtools 2.0.1 digerir 0.6.18 doMC 1.3.5
dplyr 0.8.0.1 elipsis 0.1.0 fans 0.4.0
convictos 0.4.0 foreach 1.4.4 extranjero 0.8-71
fragua 0.2.0 Fs 1.2.7 Gbm 2.1.5
genéricos 0.0.2 ggplot2 3.1.0 Gh 1.0.1
git2r 0.25.2 glmnet 2.0-16 pegamento 1.3.1
Gower 0.2.0 elementos gráficos 3.6.0 grDevices 3.6.0
rejilla 3.6.0 gridExtra 2.3 gsubfn 0,7
gtable 0.3.0 H₂O 3.22.1.1 refugio 2.1.0
HMS 0.4.2 herramientas de HTML 0.3.6 htmlwidgets 1.3
httr 1.4.0 hwriter 1.3.2 hwriterPlus 1.0-3
ini 0.3.1 ipred 0.9-8 Iteradores 1.0.10
jsonlite 1.6 KernSmooth 2.23-15 etiquetado 0,3
retícula 0.20-38 lava 1.6.5 evaluación diferida 0.2.2
más pequeño/a 0.3.7 lme4 1.1-21 lubridate 1.7.4
magrittr 1.5 mapproj 1.2.6 Mapas 3.3.0
maptools 0.9-5 MASA 7.3-51.1 Matriz 1.2-17
MatrixModels 0.4-1 memorizar 1.1.0 métodos 3.6.0
mgcv 1.8-28 mimo 0.6 minqa 1.2.4
ModelMetrics 1.2.2 munsell 0.5.0 mvtnorm 1.0-10
nlme 3.1-139 nloptr 1.2.1 nnet 7.3-12
numDeriv 2016.8-1 openssl (software de cifrado) 1.3 openxlsx 4.1.0
paralelo 3.6.0 pbkrtest 0.4-7 pilar 1.3.1
pkgbuild 1.0.3 pkgconfig 2.0.2 pkgKitten 0.1.4
pkgload 1.0.2 plogr 0.2.0 plyr 1.8.4
elogio 1.0.0 prettyunits 1.0.2 Proc 1.14.0
processx 3.3.0 prodlim 2018.04.18 progreso 1.2.0
prototipo 1.0.0 P.D 1.3.0 ronroneo 0.3.2
quantreg 5.38 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.8.0 r2d3 0.2.3 R6 2.4.0
Bosque Aleatorio (randomForest) 4.6-14 rappdirs 0.3.1 rcmdcheck 1.3.2
RColorBrewer 1.1-2 Rcpp 1.0.1 RcppEigen 0.3.3.5.0
RcppRoll 0.3.0 RCurl 1.95-4.12 readr 1.3.1
readxl 1.3.1 recetas 0.1.5 partido de revancha 1.0.1
Telecontroles 2.0.2 reshape2 1.4.3 río 0.5.16
rlang 0.3.3 RODBC 1.3-15 roxygen2 6.1.1
rpart 4.1-15 rprojroot 1.3-2 Rserve 1.8-6
RSQLite 2.1.1 rstudioapi 0,10 balanzas 1.0.0
información de sesión 1.1.1 Sp 1.3-1 sparklyr 1.0.0
SparkR 2.4.3 DispersoM 1.77 espacial 7.3-11
Tiras 3.6.0 sqldf 0.4-11 SQUAREM 2017.10-1
statmod 1.4.30 Estadísticas 3.6.0 estadísticas4 3.6.0
stringi 1.4.3 stringr 1.4.0 supervivencia 2.43-3
sys 3.1 tcltk 3.6.0 TeachingDemos 2,10
testthat 2.0.1 tibble 2.1.1 tidyr 0.8.3
tidyselect 0.2.5 fechaHora 3043.102 herramientas 3.6.0
usa esto 1.4.0 utf8 1.1.4 utilidades 3.6.0
viridisLite 0.3.0 bigotes 0,3-2 withr 2.1.2
xml2 1.2.0 xopen 1.0.0 yaml 2.2.0
cremallera 2.0.1

Bibliotecas de Java y Scala instaladas (versión de clúster de Scala 2.11)

Identificador de grupo Identificador de artefacto Versión
antlr antlr 2.7.7
com.amazonaws cliente de Amazon Kinesis 1.8.10
com.amazonaws aws-java-sdk-autoscaling 1.11.313
com.amazonaws aws-java-sdk-cloudformation 1.11.313
com.amazonaws aws-java-sdk-cloudfront 1.11.313
com.amazonaws aws-java-sdk-cloudhsm 1.11.313
com.amazonaws aws-java-sdk-cloudsearch 1.11.313
com.amazonaws aws-java-sdk-cloudtrail 1.11.313
com.amazonaws aws-java-sdk-cloudwatch 1.11.313
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.313
com.amazonaws aws-java-sdk-codedeploy 1.11.313
com.amazonaws aws-java-sdk-cognitoidentity 1.11.313
com.amazonaws aws-java-sdk-cognitosync 1.11.313
com.amazonaws aws-java-sdk-config (configuración del SDK de Java de AWS) 1.11.313
com.amazonaws aws-java-sdk-core 1.11.313
com.amazonaws aws-java-sdk-datapipeline 1.11.313
com.amazonaws aws-java-sdk-directconnect 1.11.313
com.amazonaws aws-java-sdk-directory 1.11.313
com.amazonaws aws-java-sdk-dynamodb 1.11.313
com.amazonaws aws-java-sdk-ec2 1.11.313
com.amazonaws aws-java-sdk-ecs 1.11.313
com.amazonaws aws-java-sdk-efs 1.11.313
com.amazonaws aws-java-sdk-elasticache 1.11.313
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.313
com.amazonaws aws-java-sdk-elasticloadbalancing (paquete de software para la gestión de balanceo de carga elástica) 1.11.313
com.amazonaws aws-java-sdk-elastictranscoder 1.11.313
com.amazonaws aws-java-sdk-emr 1.11.313
com.amazonaws aws-java-sdk-glacier 1.11.313
com.amazonaws aws-java-sdk-glue 1.11.313
com.amazonaws aws-java-sdk-iam 1.11.313
com.amazonaws aws-java-sdk-importexport 1.11.313
com.amazonaws aws-java-sdk-kinesis (kit de desarrollo de software Java para AWS Kinesis) 1.11.313
com.amazonaws aws-java-sdk-kms 1.11.313
com.amazonaws aws-java-sdk-lambda 1.11.313
com.amazonaws aws-java-sdk-logs (registros del SDK de AWS para Java) 1.11.313
com.amazonaws aws-java-sdk-machinelearning 1.11.313
com.amazonaws aws-java-sdk-opsworks 1.11.313
com.amazonaws aws-java-sdk-rds 1.11.313
com.amazonaws aws-java-sdk-redshift 1.11.313
com.amazonaws aws-java-sdk-route53 1.11.313
com.amazonaws aws-java-sdk-s3 1.11.313
com.amazonaws aws-java-sdk-ses 1.11.313
com.amazonaws aws-java-sdk-simpledb 1.11.313
com.amazonaws aws-java-sdk-simpleworkflow 1.11.313
com.amazonaws aws-java-sdk-sns 1.11.313
com.amazonaws aws-java-sdk-sqs 1.11.313
com.amazonaws aws-java-sdk-ssm 1.11.313
com.amazonaws aws-java-sdk-storagegateway (SDK de Java para Storage Gateway de AWS) 1.11.313
com.amazonaws aws-java-sdk-sts 1.11.313
com.amazonaws SDK de AWS para Java - Soporte 1.11.313
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.313
com.amazonaws jmespath-java 1.11.313
com.carrotsearch hppc 0.7.2
com.chuusai shapeless_2.11 2.3.2
com.clearspring.analytics flujo 2.7.0
com.databricks Rserve 1.8-3
com.databricks dbml-local_2.11 0.5.0-db8-spark2.4
com.databricks dbml-local_2.11-tests 0.5.0-db8-spark2.4
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.11 0.4.15-9
com.databricks.scalapb scalapb-runtime_2.11 0.4.15-9
com.esotericsoftware kryo sombreado 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml compañero de clase 1.0.0
com.fasterxml.jackson.core jackson-annotations 2.6.7
com.fasterxml.jackson.core jackson-core 2.6.7
com.fasterxml.jackson.core jackson-databind 2.6.7.1
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.6.7
com.fasterxml.jackson.datatype jackson-datatype-joda 2.6.7
com.fasterxml.jackson.module jackson-module-paranamer 2.6.7
com.fasterxml.jackson.module jackson-module-scala_2.11 2.6.7.1
com.github.fommil jniloader 1.1
com.github.fommil.netlib núcleo 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib sistema_nativo-java 1.1
com.github.fommil.netlib sistema_nativo-java-nativos 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.3.2-2
com.github.rwl jtransforms 2.4.0
com.google.code.findbugs jsr305 2.0.1
com.google.code.gson Gson 2.2.4
com.google.guava guayaba 15,0
com.google.protobuf protobuf-java 2.6.1
com.googlecode.javaewah JavaEWAH 0.3.2
com.h2database h2 1.3.174
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.microsoft.azure azure-data-lake-store-sdk (SDK de Azure para almacenamiento en lago de datos) 2.2.8
com.microsoft.azure azure-storage 5.2.0
com.microsoft.sqlserver mssql-jdbc 6.2.2.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lentes_2.11 0,3
com.twitter chill-java 0.9.3
com.twitter chill_2.11 0.9.3
com.twitter parquet-hadoop-bundle 1.6.0
com.twitter util-app_2.11 6.23.0
com.twitter util-core_2.11 6.23.0
com.twitter util-jvm_2.11 6.23.0
com.typesafe configuración 1.2.1
com.typesafe.scala-logging scala-logging-api_2.11 2.1.2
com.typesafe.scala-logging scala-logging-slf4j_2.11 2.1.2
com.univocity analizadores de univocidad 2.7.3
com.vlkan flatbuffers 1.2.0-3f79e055
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.7.0
commons-beanutils commons-beanutils-core 1.8.0
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2,4
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.7
io.airlift compresor de aire 0,10
io.dropwizard.metrics núcleo de métricas 3.1.5
io.dropwizard.metrics metrics-ganglia 3.1.5
io.dropwizard.metrics metrics-graphite 3.1.5
io.dropwizard.metrics métricas y verificaciones de salud 3.1.5
io.dropwizard.metrics metrics-jetty9 3.1.5
io.dropwizard.metrics metrics-json 3.1.5
io.dropwizard.metrics metrics-jvm 3.1.5
io.dropwizard.metrics metrics-log4j 3.1.5
io.dropwizard.metrics metrics-servlets 3.1.5
io.netty Netty 3.9.9.Final
io.netty netty-all 4.1.17.Final
io.prometheus simpleclient 0.0.16
io.prometheus cliente_simple_común 0.0.16
io.prometheus simpleclient_dropwizard 0.0.16
io.prometheus simpleclient_servlet 0.0.16
io.prometheus.jmx recopilador 0,7
javax.activation activación 1.1.1
javax.annotation javax.annotation-api 1.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.validation validation-api 1.1.0.Final
javax.ws.rs javax.ws.rs-api 2.0.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolución javolución 5.5.1
jline jline 2.14.6
joda-time joda-time 2.9.3
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
maven-trees ejecución de hive con glue hive-12679-patch_deploy
maven-trees ejecución de hive con glue hive-exec_shaded
net.hydromatic eigenbase-propiedades 1.1.5
net.razorvine pyrolita 4.13
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.5
net.snowflake snowflake-jdbc 3.6.15
net.snowflake spark-snowflake_2.11 2.4.10-spark_2.4
net.sourceforge.f2j arpack_combinado_todo 0,1
org.acplt oncrpc 1.0.7
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.4
org.antlr antlr4-runtime 4,7
org.antlr plantilla de cadenas 3.2.1
org.apache.ant hormiga 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant lanzador de aplicaciones Ant 1.9.2
org.apache.arrow formato de flecha 0.10.0
org.apache.arrow memoria de flecha 0.10.0
org.apache.arrow vector de flecha 0.10.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.calcte calcte-avatica 1.2.0-incubación
org.apache.calcte núcleo de calcita 1.2.0-incubación
org.apache.calcte calcte-linq4j 1.2.0-incubación
org.apache.commons commons-compress 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3,5
org.apache.commons commons-math3 3.4.1
org.apache.curator curador-cliente 2.7.1
org.apache.curator marco de trabajo para curadores 2.7.1
org.apache.curator curador-recetas 2.7.1
org.apache.derby derbi 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop anotaciones de Hadoop 2.7.3
org.apache.hadoop hadoop-auth 2.7.3
org.apache.hadoop hadoop-cliente 2.7.3
org.apache.hadoop hadoop-common 2.7.3
org.apache.hadoop Hadoop-HDFS 2.7.3
org.apache.hadoop hadoop-mapreduce-client-app 2.7.3
org.apache.hadoop hadoop-mapreduce-client-common 2.7.3
org.apache.hadoop hadoop-mapreduce-client-core 2.7.3
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.3
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.3
org.apache.hadoop hadoop-yarn-api 2.7.3
org.apache.hadoop hadoop-yarn-client 2.7.3
org.apache.hadoop hadoop-yarn-common 2.7.3
org.apache.hadoop hadoop-yarn-server-common 2.7.3
org.apache.htrace htrace-core 3.1.0-incubación
org.apache.httpcomponents httpclient 4.5.4
org.apache.httpcomponents httpcore 4.4.8
org.apache.ivy hiedra 2.4.0
org.apache.orc orc-core-nohive 1.5.2
org.apache.orc orc-mapreduce-nohive 1.5.2
org.apache.orc calzos de orco 1.5.2
org.apache.parquet parquet-columna 1.10.1.1-databricks3
org.apache.parquet parquet-common 1.10.1.1-databricks3
org.apache.parquet codificación de parquet 1.10.1.1-databricks3
org.apache.parquet formato parquet 2.4.0
org.apache.parquet parquet-hadoop 1.10.1.1-databricks3
org.apache.parquet parquet-jackson 1.10.1.1-databricks3
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.9.3
org.apache.xbean sombreado xbean-asm6 4.8
org.apache.zookeeper guardián de zoológico 3.4.6
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino compilador común 3.0.10
org.codehaus.janino janino 3.0.10
org.datanucleus datanucleus-api-jdo 3.2.6
org.datanucleus datanucleus-core 3.2.10
org.datanucleus datanucleus-rdbms 3.2.9
org.eclipse.jetty jetty-client 9.3.20.v20170531
org.eclipse.jetty jetty-continuation 9.3.20.v20170531
org.eclipse.jetty jetty-http 9.3.20.v20170531
org.eclipse.jetty jetty-io 9.3.20.v20170531
org.eclipse.jetty jetty-jndi 9.3.20.v20170531
org.eclipse.jetty jetty-plus 9.3.20.v20170531
org.eclipse.jetty jetty-proxy 9.3.20.v20170531
org.eclipse.jetty Seguridad de Jetty 9.3.20.v20170531
org.eclipse.jetty servidor Jetty 9.3.20.v20170531
org.eclipse.jetty jetty-servlet 9.3.20.v20170531
org.eclipse.jetty jetty-servlets 9.3.20.v20170531
org.eclipse.jetty jetty-util 9.3.20.v20170531
org.eclipse.jetty Aplicación web de Jetty 9.3.20.v20170531
org.eclipse.jetty jetty-xml 9.3.20.v20170531
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.4.0-b34
org.glassfish.hk2 hk2-locator 2.4.0-b34
org.glassfish.hk2 hk2-utils 2.4.0-b34
org.glassfish.hk2 osgi-resource-locator 1.0.1
org.glassfish.hk2.external aopalliance-repackaged 2.4.0-b34
org.glassfish.hk2.external javax.inject 2.4.0-b34
org.glassfish.jersey.bundles.repackaged jersey-guayaba 2.22.2
org.glassfish.jersey.containers servlet de contenedor de Jersey 2.22.2
org.glassfish.jersey.containers jersey-container-servlet-core 2.22.2
org.glassfish.jersey.core jersey-client 2.22.2
org.glassfish.jersey.core jersey-common 2.22.2
org.glassfish.jersey.core jersey-server 2.22.2
org.glassfish.jersey.media jersey-media-jaxb 2.22.2
org.hibernate validador de hibernación 5.1.1.Final
org.iq80.snappy rápido 0,2
org.javassist javassist 3.18.1-GA
org.jboss.logging jboss-logging 3.1.3.GA
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org.lz4 lz4-java 1.4.0
org.mariadb.jdbc mariadb-java-client 2.1.2
org.mockito mockito-all 1.9.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.7.45
org.roaringbitmap Cuñas 0.7.45
org.rocksdb rocksdbjni 5.2.1
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.11 2.11.12
org.scala-lang scala-library_2.11 2.11.12
org.scala-lang scala-reflect_2.11 2.11.12
org.scala-lang.modules scala-parser-combinators_2.11 1.1.0
org.scala-lang.modules scala-xml_2.11 1.0.5
org.scala-sbt interfaz de prueba 1,0
org.scalacheck scalacheck_2.11 1.12.5
org.scalactic scalactic_2.11 3.0.3
org.scalanlp breeze-macros_2.11 0.13.2
org.scalanlp breeze_2.11 0.13.2
org.scalatest scalatest_2.11 3.0.3
org.slf4j jcl-over-slf4j 1.7.16
org.slf4j jul-to-slf4j 1.7.16
org.slf4j slf4j-api 1.7.16
org.slf4j slf4j-log4j12 1.7.16
org.spark-project.hive hive-beeline 1.2.1.spark2
org.spark-project.hive hive-cli 1.2.1.spark2
org.spark-project.hive hive-jdbc 1.2.1.spark2
org.spark-project.hive hive-metastore 1.2.1.spark2
org.spark-project.spark no utilizado 1.0.0
org.spire-math spire-macros_2.11 0.13.0
org.spire-math spire_2.11 0.13.0
org.springframework spring-core 4.1.4.LANZAMIENTO
org.springframework Prueba de primavera 4.1.4.LANZAMIENTO
org.tukaani xz 1.5
org.typelevel maquinista_2.11 0.6.1
org.typelevel macro-compat_2.11 1.1.1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.3
org.yaml snakeyaml 1.16
oro oro 2.0.8
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1
xmlenc xmlenc 0,52
  • Last updated on