Nota
O acesso a esta página requer autorização. Podes tentar iniciar sessão ou mudar de diretório.
O acesso a esta página requer autorização. Podes tentar mudar de diretório.
Nota
O suporte para esta versão do Databricks Runtime terminou. Para obter a data de fim do suporte, consulte Histórico de fim do suporte. Para todas as versões suportadas do Databricks Runtime, consulte Versões e compatibilidade das notas de versão do Databricks Runtime.
A Databricks lançou esta versão em outubro de 2019.
As notas de versão a seguir fornecem informações sobre o Databricks Runtime 6.1, desenvolvido pelo Apache Spark.
Novas funcionalidades
Melhorias no Lago Delta
APIs Python para tabelas Delta (Visualização pública)
Agora você pode excluir e atualizar dados em tabelas Delta, limpar tabelas e obter o histórico de tabelas usando APIs Python.
Para obter detalhes, consulte O que é Delta Lake no Azure Databricks?.
Remoção dinâmica de arquivos (DFP) habilitada por padrão
O DFP usa metadados de tabela Delta (por exemplo, estatísticas de coluna min/max em um arquivo) melhora significativamente o desempenho de muitas consultas ignorando arquivos com valores de coluna fora do intervalo. Ao contrário da Poda Dinâmica de Partições (DPP), o DFP também funciona em colunas não particionadas. O DFP pode ser benéfico para cargas de trabalho que se juntam em chaves não particionadas.
Configurar clusters com a sua própria imagem de contentor mediante a utilização do Databricks Container Services
O Databricks Container Services permite configurar um cluster com sua própria imagem de contêiner. Você pode pré-empacotar ambientes complexos dentro de um contêiner, publicá-lo em um registro de contêiner popular, como ACR, ECR ou Docker Hub, e fazer com que o Databricks puxe a imagem para criar um cluster. Alguns exemplos de casos de uso incluem:
- Personalização de bibliotecas - você tem controle total sobre as bibliotecas do sistema que deseja instalar
- Ambiente de contêiner dourado - sua imagem do Docker é um ambiente bloqueado que nunca mudará
- Integração de CI/CD do Docker - você pode integrar o Azure Databricks com seus pipelines de CI/CD do Docker
Há muitos outros casos de uso, desde a especificação da configuração até a instalação de pacotes de aprendizado de máquina.
Para obter detalhes, consulte Personalizar contêineres com o Databricks Container Service.
Segredos referenciados pelas propriedades de configuração do Spark e pelas variáveis de ambiente (Pré-visualização Pública)
A partir da atualização de manutenção de 7 de novembro do Databricks Runtime 6.1, a capacidade de fazer referência a um segredo em uma propriedade de configuração do Spark ou variável de ambiente está em versão prévia pública. Para obter detalhes, consulte Usar um segredo em uma propriedade de configuração do Spark ou variável de ambiente.
Métricas de gânglios agora disponíveis em clusters com ACLs de tabela e passagem de credenciais
Anteriormente, as métricas Ganglia não eram suportadas em clusters com controle de acesso à tabela ou passagem de credenciais habilitado. Já estão disponíveis.
Melhorias
- Netty-all atualizado de 4.1.17.Final para 4.1.39.Final
- Conector Snowflake atualizado de 2.4.10 para 2.5.3
Pass-through de credenciais
- As credenciais do Microsoft Entra ID agora são propagadas em blocos de anotações executados usando
dbutils.notebook.run()o . - Todas as classes PySpark ML agora são suportadas.
- A interface do usuário do Ganglia já está disponível.
Para obter detalhes, consulte Access Azure Data Lake Storage using Microsoft Entra ID credential passthrough (legacy).
Apache Spark
O Databricks Runtime 6.1 inclui o Apache Spark 2.4.4. Esta versão inclui todas as correções e melhorias do Spark incluídas no Databricks Runtime 6.0 (EoS), bem como as seguintes correções de bugs adicionais e melhorias feitas no Spark:
- [FAÍSCA-28782][SQL] Suporte ao gerador em expressões agregadas
- [FAÍSCA-19147][CORE] Lidar graciosamente com erro na tarefa depois que o executor é interrompido
- [FAÍSCA-26003][SQL] Melhorar o desempenho SQLAppStatusListener.aggregateMetrics
- [FAÍSCA-29101][SQL] Corrigir a API de contagem para o arquivo csv quando o modo DROPMALFORMED estiver selecionado
- [FAÍSCA-29042][CORE] RDD baseado em amostragem com entrada não ordenada deve ser INDETERMINADO
- [FAÍSCA-29124][CORE] Use MurmurHash3 bytesHash(data, seed) em vez de bytesHash(data)
- [FAÍSCA-26713][CORE] Interromper threads de E/S de pipe no PipedRDD quando a tarefa for concluída
- [FAÍSCA-29046][SQL] Corrija o NPE no SQLConf.get quando o SparkContext ativo estiver parando
- [FAÍSCA-28483] Corrigir tarefa do modo barreira travar em barrier() quando a tarefa for morta
- [FAÍSCA-29087][CORE][STREAMING] Use DelegatingServletContextHandler para evitar CCE
- [FAÍSCA-27122][CORE] As classes de píer não devem ser retornadas via getters em org.apache.spark.ui.WebUI
- [FAÍSCA-11150][SQL] Poda dinâmica de partições
- [FAÍSCA-27592][SQL] Definir a tabela de fonte de dados bucketed SerDe corretamente
- [FAÍSCA-23519][SQL] Criar modo de exibição deve funcionar a partir de consulta com colunas de saída duplicadas
- [FAÍSCA-29011][CONSTRUIR] Atualize netty-all de 4.1.17-Final para 4.1.39-Final
- [FAÍSCA-28912] Corrigido MatchError em getCheckpointFiles()
- [FAÍSCA-26046][SS] Adicionar StreamingQueryManager.listListeners()
- [FAÍSCA-3137][CORE] Substitua o bloqueio global TorrentBroadcast por KeyLock de grão fino (6.x)
- [FAÍSCA-28709][DSTREAMS] Corrigir vazamento de contexto de streaming por meio de streaming
- [SPARK-22955][DSTREAMS] - o desligamento gracioso não deve levar à geração de tarefas ...
- [FAÍSCA-28730][FAÍSCA-28495] Introduzir a política de atribuição de armazenamento ANSI para inserção de tabela
- [SPARK-27992][SPARK-28881][PYTHON] Permitir que o Python se conecte ao thread de conexão para propagar erros
- [FAÍSCA-28025][SS] Corrigir FileContextBasedCheckpointFileManager vazando arquivos crc
- [FAÍSCA-28699][CORE] Corrigir um caso de canto para abortar estágio indeterminado
- [FAÍSCA-28780][ML] depreciar LinearSVCModel.setWeightCol
- [FAÍSCA-28844][SQL] Corrigir erro de digitação no SQLConf FILE_COMRESSION_FATOR
- [FAÍSCA-26895][CORE] prepareSubmitEnvironment deve ser chamado dentro doAs para usuários proxy
Atualizações de manutenção
Consulte Atualizações de manutenção do Databricks Runtime 6.1.
Ambiente do sistema
- Sistema Operacional: Ubuntu 16.04.6 LTS
- Java: 1.8.0_232
- Escala: 2.11.12
- Píton: 3.7.3
- R: R versão 3.6.1 (2019-07-05)
- Lago Delta: 0.4.0
Nota
Embora o Scala 2.12 esteja disponível como um recurso experimental no Apache Spark 2.4, ele não é suportado no Databricks Runtime 6.1.
Bibliotecas Python instaladas
| Biblioteca | Versão | Biblioteca | Versão | Biblioteca | Versão |
|---|---|---|---|---|---|
| asn1crypto | 0.24.0 | Backcall | 0.1.0 | botão | 2.49.0 |
| Boto3 | 1.9.162 | Botocore | 1.12.163 | certifi | 2019.3.9 |
| CFFI | 1.12.2 | Chardet | 3.0.4 | criptografia | 2.6.1 |
| ciclista | 0.10.0 | Quisto | 0.29.6 | decorador | 4.4.0 |
| Docutils | 0.14 | IDNA | 2.8 | IPython | 7.4.0 |
| ipython-genutils | 0.2.0 | Jedi | 0.13.3 | JmesPath | 0.9.4 |
| Kiwisolver | 1.1.0 | Matplotlib | 3.0.3 | dormência | 1.16.2 |
| pandas | 0.24.2 | Parso | 0.3.4 | vítima | 0.5.1 |
| Espere | 4.6.0 | pickleshare | 0.7.5 | pip (o gestor de pacotes do Python) | 19.0.3 |
| kit de ferramentas de prompt | 2.0.9 | PSYCOPG2 | 2.7.6.1 | ptyprocess | 0.6.0 |
| Pyarrow | 0.13.0 | Pycparser | 2.19 | Pycurl | 7.43.0 |
| Pigmentos | 2.3.1 | PyGObject | 3.20.0 | pyOpenSSL | 19.0.0 |
| Pyparsing | 2.4.2 | Meias PySocks | 1.6.8 | python-apt | 1.1.0.b1+ubuntu0.16.04.5 |
| python-dateutil (uma biblioteca de software para manipulação de datas em Python) | 2.8.0 | Pytz | 2018.9 | pedidos | 2.21.0 |
| s3transferir | 0.2.1 | scikit-learn (biblioteca de aprendizado de máquina em Python) | 0.20.3 | SciPy | 1.2.1 |
| nascido no mar | 0.9.0 | Ferramentas de configuração | 40.8.0 | seis | 1.12.0 |
| ssh-import-id | 5,5 | statsmodels (uma biblioteca de Python para modelos estatísticos) | 0.9.0 | traços | 4.3.2 |
| Upgrades autônomos | 0.1 | urllib3 | 1.24.1 | virtualenv | 16.4.1 |
| largura de wc | 0.1.7 | wheel | 0.33.1 |
Bibliotecas R instaladas
| Biblioteca | Versão | Biblioteca | Versão | Biblioteca | Versão |
|---|---|---|---|---|---|
| Abind | 1.4-5 | AskPass | 1.1 | asserçãoat | 0.2.1 |
| Retroportagens | 1.1.3 | base | 3.6.1 | base64enc | 0.1-3 |
| Belo Horizonte | 1.69.0-1 | pouco | 1.1-14 | bit64 | 0.9-7 |
| Bitops | 1.0-6 | blob | 1.1.1 | arranque | 1.3-23 |
| fabricação de cerveja | 1.0-6 | Chamador | 3.2.0 | carro | 3.0-2 |
| dadosDoCarro | 3.0-2 | acento circunflexo | 6.0-82 | Cellranger | 1.1.0 |
| crono | 2.3-53 | classe | 7.3-15 | CLI | 1.1.0 |
| Clipr | 0.5.0 | clisímbolos | 1.2.0 | cluster | 2.1.0 |
| CodeTools | 0,2-16 | espaço em cores | 1.4-1 | marca comum | 1.7 |
| compilador | 3.6.1 | configuração | 0,3 | lápis de cor | 1.3.4 |
| encaracolar | 3.3 | tabela de dados | 1.12.0 | conjuntos de dados | 3.6.1 |
| DBI | 1.0.0 | DBPlyr | 1.3.0 | descrição | 1.2.0 |
| DevTools | 2.0.1 | resumo | 0.6.18 | doMC | 1.3.5 |
| DPLYR | 0.8.0.1 | reticências | 0.1.0 | Fãsi | 0.4.0 |
| FORCATS | 0.4.0 | para cada | 1.4.4 | externa | 0.8-72 |
| forjar | 0.2.0 | FS | 1.2.7 | GBM | 2.1.5 |
| genérico | 0.0.2 | GGPLOT2 | 3.1.0 | GH | 1.0.1 |
| Git2R | 0.25.2 | GLMNET | 2.0-16 | colar | 1.3.1 |
| Gower | 0.2.0 | gráficos | 3.6.1 | grDispositivos | 3.6.1 |
| grelha | 3.6.1 | gridExtra | 2.3 | GSUBFN | 0,7 |
| tabela g | 0.3.0 | H2O | 3.22.1.1 | Refúgio | 2.1.0 |
| HMS | 0.4.2 | htmltools | 0.3.6 | htmlwidgets (componentes HTML interativos) | 1.3 |
| HTTR | 1.4.0 | Hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| ini | 0.3.1 | ipred | 0.9-8 | iteradores | 1.0.10 |
| jsonlite | 1.6 | KernSmooth | 2.23-15 | etiquetagem | 0,3 |
| treliça | 0.20-38 | lave | 1.6.5 | preguiça | 0.2.2 |
| menor | 0.3.7 | LME4 | 1.1-21 | lubridato | 1.7.4 |
| Magrittr | 1.5 | Mapproj | 1.2.6 | mapas | 3.3.0 |
| Ferramentas de mapa | 0.9-5 | MASSA | 7.3-51.4 | Matriz | 1.2-17 |
| MatrizModels | 0.4-1 | memorização | 1.1.0 | métodos | 3.6.1 |
| MGCV | 1.8-29 | mímica | 0,6 | Minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | Munsell | 0.5.0 | MVTnorm | 1.0-10 |
| NLME | 3.1-141 | NLOPTR | 1.2.1 | NNET | 7.3-12 |
| numDeriv | 2016.8-1 | openssl (conjunto de ferramentas para criptografia) | 1.3 | OpenXLSX | 4.1.0 |
| paralelo | 3.6.1 | pbkrtest | 0.4-7 | pilar | 1.3.1 |
| pkgbuild | 1.0.3 | pkgconfig | 2.0.2 | pkgGatinho | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | Plyr | 1.8.4 |
| elogiar | 1.0.0 | unidades bonitas | 1.0.2 | pROC | 1.14.0 |
| processx | 3.3.0 | Prodlim | 2018.04.18 | Progresso | 1.2.0 |
| prototipo | 1.0.0 | PS | 1.3.0 | ronronar | 0.3.2 |
| Quantreg | 5,38 | R.métodosS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| Floresta Aleatória | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.1 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.12 | Leitor | 1.3.1 |
| ReadXL | 1.3.1 | receitas | 0.1.5 | revanche | 1.0.1 |
| Controles remotos | 2.0.2 | remodelar2 | 1.4.3 | Rio | 0.5.16 |
| Rlang | 0.3.3 | RODBC | 1.3-15 | oxigénio2 | 6.1.1 |
| rpart (função de partição recursiva em R) | 4.1-15 | rprojroot | 1.3-2 | Reserva | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.10 | escalas | 1.0.0 |
| Informação da sessão | 1.1.1 | SP | 1.3-1 | Brilho | 1.0.0 |
| Faísca | 2.4.5 | Disperso | 1.77 | espacial | 7.3-11 |
| estrias | 3.6.1 | sqldf | 0.4-11 | QUADRADO | 2017.10-1 |
| estatmod | 1.4.30 | estatísticas | 3.6.1 | estatísticas4 | 3.6.1 |
| string | 1.4.3 | stringr | 1.4.0 | sobrevivência | 2.44-1.1 |
| Sistema | 3.1 | tcltk (uma linguagem de programação) | 3.6.1 | Demonstrações de Ensino | 2.10 |
| testeatat | 2.0.1 | Tibble | 2.1.1 | Tidyr | 0.8.3 |
| arrumadoselecionar | 0.2.5 | data e hora | 3043.102 | ferramentas | 3.6.1 |
| usethis | 1.4.0 | UTF8 | 1.1.4 | utilitários | 3.6.1 |
| viridisLite | 0.3.0 | vibrissas | 0.3-2 | murchar | 2.1.2 |
| XML2 | 1.2.0 | xopen | 1.0.0 | yaml | 2.2.0 |
| ZIP | 2.0.1 |
Bibliotecas Java e Scala instaladas (versão do cluster Scala 2.11)
| ID do Grupo | ID do Artefacto | Versão |
|---|---|---|
| Antlr | Antlr | 2.7.7 |
| com.amazonaws | Amazon Kinesis Client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling (SDK de Java da AWS - escalonamento automático) | 1.11.595 |
| com.amazonaws | AWS-Java-SDK-CloudFormation | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.595 |
| com.amazonaws | AWS Java SDK para CloudSearch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.595 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.595 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.595 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.595 |
| com.amazonaws | aws-java-sdk-config (configuração do AWS Java SDK) | 1.11.595 |
| com.amazonaws | aws-java-sdk-core | 1.11.595 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.595 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.595 |
| com.amazonaws | aws-java-sdk-diretório | 1.11.595 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.595 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.595 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.595 |
| com.amazonaws | aws-java-sdk-efs | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticache (kit de desenvolvimento de software Java para Elasticache da AWS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk (SDK Java para Elastic Beanstalk da AWS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing (SDK Java para equilíbrio de carga elástico da AWS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.595 |
| com.amazonaws | aws-java-sdk-emr | 1.11.595 |
| com.amazonaws | aws-java-sdk-glacier (Biblioteca de armazenamento Glacier da AWS) | 1.11.595 |
| com.amazonaws | aws-java-sdk-glue | 1.11.595 |
| com.amazonaws | aws-java-sdk-iam | 1.11.595 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.595 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.595 |
| com.amazonaws | aws-java-sdk-kms | 1.11.595 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.595 |
| com.amazonaws | aws-java-sdk-logs | 1.11.595 |
| com.amazonaws | aws-java-sdk-aprendizado de máquina | 1.11.595 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.595 |
| com.amazonaws | aws-java-sdk-rds | 1.11.595 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.595 |
| com.amazonaws | aws-java-sdk-rota53 | 1.11.595 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.595 |
| com.amazonaws | AWS Java SDK para SES | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.595 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.595 |
| com.amazonaws | aws-java-sdk-sns | 1.11.595 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.595 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.595 |
| com.amazonaws | aws-java-sdk-storagegateway (SDK da AWS para Storage Gateway em Java) | 1.11.595 |
| com.amazonaws | AWS-Java-SDK-STS | 1.11.595 |
| com.amazonaws | aws-java-sdk-suporte | 1.11.595 |
| com.amazonaws | aws-java-sdk-swf-bibliotecas | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.595 |
| com.amazonaws | jmespath-java | 1.11.595 |
| com.carrotsearch | HPPC | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | fluxo | 2.7.0 |
| com.databricks | Reserva | 1.8-3 |
| com.databricks | DBML-local_2,11 | 0.5.0-db8-faísca2.4 |
| com.databricks | dbml-local_2.11-testes | 0.5.0-db8-faísca2.4 |
| com.databricks | Jatos 3T | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | SCALAPB-runtime_2,11 | 0.4.15-9 |
| com.esotericsoftware | sombreado de kryo | 4.0.2 |
| com.esotericsoftware | Minlog | 1.3.0 |
| com.fasterxml | colega de turma | 1.0.0 |
| com.fasterxml.jackson.core | jackson-anotações | 2.6.7 |
| com.fasterxml.jackson.core | Jackson-Core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | módulo-jackson-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-módulo-scala_2.11 | 2.6.7.1 |
| com.github.fommil | Jniloader | 1.1 |
| com.github.fommil.netlib | núcleo | 1.1.2 |
| com.github.fommil.netlib | native_ref-Java | 1.1 |
| com.github.fommil.netlib | native_ref-java-nativos | 1.1 |
| com.github.fommil.netlib | sistema_nativo-Java | 1.1 |
| com.github.fommil.netlib | native_system-java-nativos | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-nativos | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-nativos | 1.1 |
| com.github.luben | ZSTD-JNI | 1.3.2-2 |
| com.github.rwl | Jtransforms | 2.4.0 |
| com.google.code.findbugs | JSR305 | 2.0.1 |
| com.google.code.gson | Gson | 2.2.4 |
| com.google.goiaba | Goiaba | 15,0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2banco de dados | h2 | 1.3.174 |
| com.jcraft | JSCH | 0.1.50 |
| com.jolbox | BoneCP | 0.8.0.LANÇAMENTO |
| com.microsoft.azure | azure-data-lake-store-sdk (SDK para Azure Data Lake Store) | 2.2.8 |
| com.microsoft.azure | armazenamento-do-azure | 7.0.0 |
| com.microsoft.sqlserver | MSSQL-JDBC | 6.2.2.JRE8 |
| com.ning | compressa-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0,3 |
| com.twitter | Chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | configuração | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocidade | analisadores de univocidade | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3F79E055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.9.3 |
| commons-cli | commons-cli | 1.2 |
| codec commons | codec commons | 1.10 |
| Commons Collections | Commons Collections | 3.2.2 |
| commons-configuração | commons-configuração | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digestor | commons-digestor | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2,4 |
| commons-lang | commons-lang | 2.6 |
| registo de comuns | registo de comuns | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.ponte aérea | compressor de ar | 0.10 |
| io.dropwizard.metrics | métricas-base | 3.1.5 |
| io.dropwizard.metrics | métricas-Ganglia | 3.1.5 |
| io.dropwizard.metrics | métricas-grafite | 3.1.5 |
| io.dropwizard.metrics | métricas e verificações de saúde | 3.1.5 |
| io.dropwizard.metrics | métricas-jetty9 | 3.1.5 |
| io.dropwizard.metrics | métricas-json | 3.1.5 |
| io.dropwizard.metrics | métricas do JVM | 3.1.5 |
| io.dropwizard.metrics | métricas-log4j | 3.1.5 |
| io.dropwizard.metrics | Métricas-Servlets | 3.1.5 |
| io.netty | biblioteca Netty | 3.9.9.Final |
| io.netty | netty-tudo | 4.1.39.Final |
| javax.ativação | ativação | 1.1.1 |
| javax.anotação | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | JDO-API | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | JSP-API | 2.1 |
| javax.transaction | JTA | 1.1 |
| javax.validação | API de validação | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | JAXB-API | 2.2.2 |
| javax.xml.stream | Stax-API | 1.0-2 |
| Javolution | Javolution | 5.5.1 |
| Jline | Jline | 2.14.6 |
| Joda-Time | Joda-Time | 2.9.3 |
| JUNIT | JUNIT | 4.12 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hidromática | eigenbase-propriedades | 1.1.5 |
| net.razorvine | pirolite | 4.13 |
| net.sf.jpam | JPAM | 1.1 |
| net.sf.opencsv | OpenCSV | 2.3 |
| net.sf.supercsv | Super-CSV | 2.2.0 |
| net.floco de neve | flocos de neve-ingestão-sdk | 0.9.6 |
| net.floco de neve | Flocos de Neve-JDBC | 3.12.0 |
| net.floco de neve | faísca-snowflake_2.11 | 2.5.9-spark_2.4 |
| net.sourceforge.f2j | arpack_combinado_tudo | 0.1 |
| org.acplt | ONCRPC | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | ANTLR Runtime | 3.4 |
| org.antlr | antlr4-tempo de execução | 4.7 |
| org.antlr | StringTemplate | 3.2.1 |
| org.apache.ant | formiga | 1.9.2 |
| org.apache.ant | ANT-JSCH | 1.9.2 |
| org.apache.ant | lançador de formigas | 1.9.2 |
| org.apache.arrow | formato de seta | 0.10.0 |
| org.apache.arrow | seta-memória | 0.10.0 |
| org.apache.arrow | vetor de seta | 0.10.0 |
| org.apache.avro | Avro | 1.8.2 |
| org.apache.avro | AVRO-IPC | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcita-avatica | 1.2.0 incubação |
| org.apache.calcite | núcleo de calcita | 1.2.0 incubação |
| org.apache.calcite | calcita-linq4j | 1.2.0 incubação |
| org.apache.commons | commons-comprimir | 1.8.1 |
| org.apache.commons | commons-cripto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-matemática3 | 3.4.1 |
| org.apache.curador | curador-cliente | 2.7.1 |
| org.apache.curador | curador-framework | 2.7.1 |
| org.apache.curador | curador-receitas | 2.7.1 |
| org.apache.derby | Dérbi | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | API-Util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations (anotações do hadoop) | 2.7.3 |
| org.apache.hadoop | autenticação do Hadoop | 2.7.3 |
| org.apache.hadoop | Cliente Hadoop | 2.7.3 |
| org.apache.hadoop | hadoop-comum | 2.7.3 |
| org.apache.hadoop | Hadoop-HDFS | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app (aplicação cliente do hadoop-mapreduce) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common (Cliente comum do Hadoop MapReduce) | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-cliente-core | 2.7.3 |
| org.apache.hadoop | Cliente de Trabalho Hadoop MapReduce | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-cliente | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-comum | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common (componente do servidor comum do Hadoop YARN) | 2.7.3 |
| org.apache.htrace | htrace-núcleo | 3.1.0 incubação |
| org.apache.httpcomponents | httpclient | 4.5.6 |
| org.apache.httpcomponents | Núcleo Http | 4.4.10 |
| org.apache.ivy | hera | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.5 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.5 |
| org.apache.orc | Orc-calços | 1.5.5 |
| org.apache.parquet | coluna de parquet | 1.10.1.2-DATABRICKS4 |
| org.apache.parquet | parquet-comum | 1.10.1.2-DATABRICKS4 |
| org.apache.parquet | codificação-parquet | 1.10.1.2-DATABRICKS4 |
| org.apache.parquet | formato parquet | 2.4.0 |
| org.apache.parquet | Parquet-Hadoop | 1.10.1.2-DATABRICKS4 |
| org.apache.parquet | Parquet-Jackson | 1.10.1.2-DATABRICKS4 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-sombreado | 4.8 |
| org.apache.zookeeper | cuidador de zoológico | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | Jackson-Jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-ASL | 1.9.13 |
| org.codehaus.jackson | Jackson-XC | 1.9.13 |
| org.codehaus.janino | compilador comum | 3.0.10 |
| org.codehaus.janino | Janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | DataNucleus Core | 3.2.10 |
| org.datanucleus | Datanucleus-RDBMS | 3.2.9 |
| org.eclipse.píer | Jetty-Cliente | 9.3.27.v20190418 |
| org.eclipse.píer | jetty-continuation (componente de software do Jetty) | 9.3.27.v20190418 |
| org.eclipse.píer | Jetty-HTTP | 9.3.27.v20190418 |
| org.eclipse.píer | Molhe IO | 9.3.27.v20190418 |
| org.eclipse.píer | Cais-JNDI | 9.3.27.v20190418 |
| org.eclipse.píer | Cais-Plus | 9.3.27.v20190418 |
| org.eclipse.píer | Jetty-Proxy | 9.3.27.v20190418 |
| org.eclipse.píer | Segurança do Jetty | 9.3.27.v20190418 |
| org.eclipse.píer | servidor jetty | 9.3.27.v20190418 |
| org.eclipse.píer | Jetty-servlet | 9.3.27.v20190418 |
| org.eclipse.píer | Jetty-servlets | 9.3.27.v20190418 |
| org.eclipse.píer | Jetty-util | 9.3.27.v20190418 |
| org.eclipse.píer | Aplicação web Jetty | 9.3.27.v20190418 |
| org.eclipse.píer | Jetty-XML | 9.3.27.v20190418 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | HK2-API | 2.4.0-B34 |
| org.glassfish.hk2 | localizador hk2 | 2.4.0-B34 |
| org.glassfish.hk2 | HK2-Utils | 2.4.0-B34 |
| org.glassfish.hk2 | localizador de recursos OSGi | 1.0.1 |
| org.glassfish.hk2.externo | aopalliance-reembalado | 2.4.0-B34 |
| org.glassfish.hk2.externo | javax.injet | 2.4.0-B34 |
| org.glassfish.jersey.bundles.reembalado | Jersey-Goiaba | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet (serviço de contêiner Jersey) | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-cliente | 2.22.2 |
| org.glassfish.jersey.core | Jersey comum | 2.22.2 |
| org.glassfish.jersey.core | servidor de jersey | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hamcrest | núcleo de hamcreste | 1.3 |
| org.hamcrest | hamcrest-biblioteca | 1.3 |
| org.hibernate | hibernate-validator (ferramenta de validação de dados de Java) | 5.1.1.Final |
| org.iq80.snappy | rápido | 0.2 |
| org.javassist | Javassist | 3.18.1-GA |
| org.jboss.logging | jboss-registro em log | 3.1.3.GA |
| org.jdbi | JDBI | 2.63.1 |
| org.joda | joda-converter | 1.7 |
| org.jodd | JODD-CORE | 3.5.2 |
| org.json4s | JSON4S-ast_2.11 | 3.5.3 |
| org.json4s | JSON4S-core_2.11 | 3.5.3 |
| org.json4s | JSON4S-jackson_2.11 | 3.5.3 |
| org.json4s | JSON4S-scalap_2.11 | 3.5.3 |
| org.lz4 | LZ4-Java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-cliente | 2.1.2 |
| org.mockito | mockito-núcleo | 1.10.19 |
| org.objenesis | objenese | 2.5.1 |
| org.postgresql | PostgreSQL | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.7.45 |
| org.roaringbitmap | calços | 0.7.45 |
| org.rocksdb | rocksdbjni | 6.2.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | Escala-compiler_2,11 | 2.11.12 |
| org.scala-lang | Escala-library_2,11 | 2.11.12 |
| org.scala-lang | Escala-reflect_2,11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2,11 | 1.1.0 |
| org.scala-lang.modules | Escala-xml_2.11 | 1.0.5 |
| org.scala-sbt | interface de teste | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | Brisa-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-compatível-com-slf4j | 1.7.16 |
| org.slf4j | jul-para-slf4j | 1.7.16 |
| org.slf4j | SLF4J-API | 1.7.16 |
| org.slf4j | SLF4J-Log4J12 | 1.7.16 |
| org.spark-project.hive | colmeia-abelha | 1.2.1.faísca2 |
| org.spark-project.hive | Hive-CLI | 1.2.1.faísca2 |
| org.spark-project.hive | Hive-JDBC | 1.2.1.faísca2 |
| org.spark-project.hive | sistema de metadados do Hive | 1.2.1.faísca2 |
| org.spark-project.spark | não utilizado | 1.0.0 |
| org.spire-matemática | torre-macros_2.11 | 0.13.0 |
| org.spire-matemática | spire_2.11 | 0.13.0 |
| org.springframework | spring-core (núcleo do Spring) | 4.1.4.VERSÃO |
| org.springframework | teste de primavera | 4.1.4.VERSÃO |
| org.tukaani | XZ | 1.5 |
| org.typelevel | mecânico_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | SQLITE-JDBC | 3.8.11.2 |
| org.xerial.snappy | Snappy-java | 1.1.7.3 |
| org.yaml | Snakeyaml | 1.16 |
| ouro | ouro | 2.0.8 |
| software.amazon.ion | íon-java | 1.0.2 |
| Stax | Stax-API | 1.0.1 |
| XMLENC | XMLENC | 0.52 |