Partilhar via

Tempo de execução do Databricks 10.5 (EoS)

Nota

O suporte para esta versão do Databricks Runtime terminou. Para obter a data de fim do suporte, consulte Histórico de fim do suporte. Para todas as versões suportadas do Databricks Runtime, consulte Versões e compatibilidade das notas de versão do Databricks Runtime.

As notas de versão a seguir fornecem informações sobre o Databricks Runtime 10.5, alimentado pelo Apache Spark 3.2.1. A Databricks lançou esta versão em maio de 2022.

Novos recursos e melhorias

SQL: Novas funções to_number e try_to_number

A função to_number e a try_to_number permitem a conversão de representações de caracteres de números em vários formatos para DECIMAL.

SQL: Nova função try_sum

Ao contrário de sum, a função de agregação try_sum retorna NULL em vez de um erro quando ocorre um overflow.

SQL: Atualizar para ceil, ceilinge floor funções

A ceil função, ceiling função e floor função agora suportam um segundo argumento opcional para especificar uma escala de destino.

SQL: Novas funções regr_avgx agregadas e regr_avgy

A nova regr_avgx função agregada e regr_avgy a função agregada suportam regressões lineares.

SQL: Atualizar para contains, startswithe endswith funções

A contains função, startswith função, e endswith função agora suportam tipos de dados binários como entrada, além de strings.

SQL: Nova função array_size

A nova array_size função calcula o tamanho de uma matriz.

Unity Catalog: saída SQL LIST remove is_directory coluna e adiciona trailing / para caminhos de diretório (Visualização pública)

A saída da instrução SQL LIST para listar caminhos governados por Unity Catalog foi alterada. A is_directory coluna não é mais exibida. Em vez disso, os caminhos que representam diretórios agora terminam com uma barra à direita (/) para as path colunas e name . Essa alteração é para consistência com a dbutils.fs.ls saída do comando.

Auto Loader: nova função SQL CLOUD_FILES_STATE

Você pode usar a nova CLOUD_FILES_STATE função para consultar o estado interno de um fluxo do Auto Loader, consulte Consultando arquivos descobertos pelo Auto Loader.

Auto Loader: suporte de notificação de arquivo agora é GA

O suporte de notificação de ficheiros para O que é o Auto Loader? no Google Cloud está agora disponível para o público em geral.

Delta Lake: nova maxRecordsPerFile opção para o máximo de registros gravados em um único arquivo

Quando você usa as APIs DataFrame para gravar em uma tabela Delta, você pode usar a maxRecordsPerFile opção para especificar o número máximo de registros para gravar em um único arquivo. Especificar um valor zero ou um valor negativo não representa limite. Consulte Configurar o Delta Lake para controlar o tamanho do arquivo de dados.

Descontinuação dos coalas

Koalas agora está obsoleto. O Koalas fornece APIs de pandas sobre o Apache Spark. Koalas foi contribuído pela comunidade e está disponível como API pandas no Spark a partir do Apache Spark 3.2. O Koalas continua a ser pré-instalado para o Databricks Runtime 10.5, mas o Koalas não será mais pré-instalado a partir da próxima versão do Databricks Runtime.

Para saber mais sobre a API pandas no Spark, consulte:

Nova _metadata coluna para todos os formatos de ficheiro

Você pode obter informações de metadados para arquivos de entrada com a _metadata coluna. A _metadata coluna está oculta. Esta coluna está disponível para todos os formatos de arquivo de entrada. Para incluir a _metadata coluna em um retornado DataFrame, você deve fazer referência explícita a essa coluna em sua consulta. Consulte Coluna de metadados do arquivo.

Teste seu pipeline com o Databricks Runtime 10.5

O Databricks Runtime 10.5 agora é a versão suportada preview para Lakeflow Spark Declarative Pipelines. Para testar seu pipeline com o Databricks Runtime 10.5, defina a channel configuração como preview nas configurações do pipeline.

Correções de erros

  • Corrigida a exibição e numUpdatedRows os resultados da métrica para operações de atualização em tabelas Delta que têm a captura de dados de numCopiedRows alteração (CDC) habilitada.

Atualizações da biblioteca

  • Bibliotecas Python atualizadas:
    • plotly de 5.5.0 a 5.6.0
  • Bibliotecas R atualizadas:
    • base de 4.1.2 a 4.1.3
    • Cursor de 6,0-90 a 6,0-91
    • agrupamento de 2.1.2 a 2.1.3
    • marca comum de 1.7 a 1.8.0
    • compilador de 4.1.2 a 4.1.3
    • giz de cera de 1.5.0 a 1.5.1
    • conjuntos de dados de 4.1.2 a 4.1.3
    • desc de 1.4.0 a 1.4.1
    • fansi de 1.0.2 a 1.0.3
    • cola de 1.6.1 a 1.6.2
    • gráficos de 4.1.2 a 4.1.3
    • grDevices de 4.1.2 a 4.1.3
    • grelha de 4.1.2 a 4.1.3
    • knitr de 1,37 a 1,38
    • MASSA de 7,3-55 a 7,3-56
    • Matriz de 1,4-0 a 1,4-1
    • Métodos de 4.1.2 a 4.1.3
    • mgcv de 1.8-39 a 1.8-40
    • nlme de 3.1-155 a 3.1-157
    • openssl de 1.4.6 a 2.0.0
    • paralelo de 4.1.2 a 4.1.3
    • plyr de 1.8.6 a 1.8.7
    • processx de 3.5.2 a 3.5.3
    • r2d3 de 0.2.5 a 0.2.6
    • Rcpp de 1.0.8 a 1.0.8.3
    • RLANG de 1.0.1 a 1.0.2
    • rmarkdown de 2.11 para 2.13
    • RSQLite de 2.2.10 a 2.2.11
    • sass de 0.4.0 a 0.4.1
    • splines de 4.1.2 a 4.1.3
    • Estatísticas de 4.1.2 a 4.1.3
    • stats4 de 4.1.2 a 4.1.3
    • tcltk de 4.1.2 a 4.1.3
    • Ferramentas de 4.1.2 a 4.1.3
    • utils de 4.1.2 a 4.1.3
    • uuid de 1.0-3 a 1.0-4
    • Waldo de 0.3.1 a 0.4.0
    • Withr de 2.4.3 a 2.5.0
    • xfun de 0,29 a 0,30
  • Bibliotecas Java atualizadas:
    • com.h2database.h2 de 1.4.195 a 2.1.210
    • org.apache.hadoop.hadoop-client-api de 3.3.1-databricks para 3.3.2-databricks
    • org.apache.hadoop.hadoop-client-runtime de 3.3.1 a 3.3.2
    • org.rocksdb.rocksdbjni de 6.24.2 a 6.20.3

Faísca Apache

O Databricks Runtime 10.5 inclui o Apache Spark 3.2.1. Esta versão inclui todas as correções e melhorias do Spark incluídas no Databricks Runtime 10.4 LTS (EoS), bem como as seguintes correções de bugs adicionais e melhorias feitas no Spark:

  • [FAÍSCA-38354] [SC-97886] Reverter "[SQL] Adicionar métrica de testes de hash para associação de hash embaralhada"
  • [SPARK-38484] [SAS-103][sas-111][SAS-113][sc-98102][Cherry-Pick] Instrumento Módulo SQL PySpark com registrador de uso geral
  • [FAÍSCA-38333] [SQL] A expressão PlanExpression deve ignorar a função addExprTree no Executor
  • [FAÍSCA-38646] [PYTHON][10.x] Puxe uma característica para fora para funções Python
  • [FAÍSCA-38674] [FÓTON] Adicionar uma métrica a PhotonSubqueryBroadcastExec
  • [FAÍSCA-38787] [SS] Substitua o valor encontrado pelo elemento não nulo na lista restante da chave e remova os elementos nulos restantes dos valores no armazenamento keyWithIndexToValue para junções de fluxo de fluxo
  • [FAÍSCA-38446] [Núcleo] Corrigir impasse entre ExecutorClassLoader e FileDownloadCallback causado por Log4j
  • [FAÍSCA-38705] [SQL] Usar identificador de função no comando create and drop function
  • [FAÍSCA-38684] [SS] Corrija o problema de correção na junção externa de fluxo de fluxo com o provedor de armazenamento de estado RocksDB
  • [FAÍSCA-38655] [SQL] OffsetWindowFunctionFrameBase não é possível localizar a linha de deslocamento cuja entrada não é nula
  • [FAÍSCA-38204] [SS] Use StatefulOpClusteredDistribution para operadores com monitoração de estado respeitando a compatibilidade com versões anteriores
  • [FAÍSCA-38616] [SQL] Acompanhe o texto da consulta SQL no Catalyst TreeNode
  • [FAÍSCA-38600] [SQL] Incluir unit na cadeia de caracteres sql de TIMESTAMPADD/DIFF
  • [FAÍSCA-34805] [SQL] Propagar metadados de colunas aninhadas no Alias
  • [FAÍSCA-38535] [SQL] Adicione o datetimeUnit enum e use-o em TIMESTAMPADD/DIFF
  • [FAÍSCA-38415] [SQL] Atualize o tipo de resultado histogram_numeric (x, y) para tornar x == o tipo de entrada
  • [FAÍSCA-38148] [SQL] Não adicione remoção de partição dinâmica se existir remoção de partição estática
  • [FAÍSCA-37527] [SQL] Compilar COVAR_POP, COVAR_SAMP e CORR em H2Dialet
  • [FAÍSCA-38510] [SQL] Tente novamente ClassSymbol.selfType para contornar referências cíclicas
  • [FAÍSCA-38509] [SQL] Cancele o registro das TIMESTAMPADD/DIFF funções e remova DATE_ADD/DIFF
  • [FAÍSCA-38504] [SQL] Não é possível ler TimestampNTZ como TimestampLTZ
  • [FAÍSCA-38526] [SQL] Corrigir nome de alias de função enganoso para RuntimeReplaceable
  • [FAÍSCA-38335] [SQL] Implementar suporte ao analisador para valores de coluna DEFAULT
  • [FAÍSCA-38593] [SS] Transfira a métrica do número de eventos atrasados descartados para SessionWindowStateStoreSaveExec
  • [FAÍSCA-38549] [SS] Adicionar numRowsDroppedByWatermark a SessionWindowStateStoreRestoreExec
  • [FAÍSCA-38583] [SQL] Restaurar o comportamento de to_timestamp que permite tipos numéricos
  • [FAÍSCA-38481] [SQL] Substitua a exceção de estouro de Java pela TIMESTAMPADD exceção Spark
  • [FAÍSCA-37753] [SQL] Ajuste a lógica para rebaixar a junção de hash de transmissão no DynamicJoinSelection
  • [SPARK-37582] [SPARK-37583][sql] CONTÉM, STARTSWITH, ENDSWITH deve suportar os tipos string e binário
  • [FAÍSCA-38345] [SQL] Introduzir a função SQL ARRAY_SIZE
  • [FAÍSCA-38385] [SQL] Melhorar mensagens de erro de instrução vazia e <EOF> em ParseException
  • [FAÍSCA-37614] [SQL] Suporte ANSI Aggregate Função: regr_avgx & regr_avgy
  • [FAÍSCA-38560] [SQL] Se Sum, Count, Any acompanhar com distinto, não pode fazer agg parcial empurrar para baixo.
  • [SPARK-38360] [SQL][ss][PYTHON] Introduza uma exists função para TreeNode eliminar padrões de código duplicados
  • [SPARK-38385] [SQL] Melhorar mensagens de erro de casos de 'entrada incompatível' da ANTLR
  • [FAÍSCA-38240] [SQL] Improve RuntimeReplaceable e adicione uma diretriz para adicionar novas funções
  • [FAÍSCA-38542] [SQL]UnsafeHashedRelation deve serializar numKeys para fora
  • [FAÍSCA-38521] [SQL] Alterar partitionOverwriteMode de string para variável no Scala
  • [FAÍSCA-38558] [SQL] Remover conversões desnecessárias entre IntegerType e IntDecimal
  • [FAÍSCA-38489] [SQL] Aggregate.groupOnly suporta expressões dobráveis
  • [FAÍSCA-38410] [SQL] Suporte especificar o número de partição inicial para rebalanceamento
  • [FAÍSCA-38107] [SQL] Use classes de erro nos erros de compilação de python/pandas UDFs
  • [FAÍSCA-38354] [SQL] Adicionar métrica de testes de hash para junção de hash embaralhada
  • [FAÍSCA-38112] [SQL] Usar classes de erro nos erros de execução da manipulação de carimbo de data/hora
  • [FAÍSCA-38361] [SQL] Adicione o método getConnection de fábrica ao JDBCDialect.
  • [FAÍSCA-37865] [SQL] Corrigir bug de correção de desduplicação de união
  • [SPARK-38298] [SQL][testes] Corrigir DataExpressionSuite, NullExpressionsSuite, StringExpressionsSuite, complexTypesSuite, CastSuite no modo ANSI
  • [FAÍSCA-38407] [SQL] ANSI Cast: afrouxar a limitação da fundição de tipos complexos não nulos
  • [FAÍSCA-38352] [SQL] Corrija DataFrameAggregateSuite/DataFrameSetOperationsSuite/DataFrameWindowFunctionsSuite no modo ANSI
  • [FAÍSCA-38054] [SQL] Suporta namespaces de lista no dialeto MySQL JDBC v2
  • [FAÍSCA-37960] [SQL] Uma nova estrutura para representar expressões de catalisador em APIs do DS v2
  • [FAÍSCA-38103] [SQL] Migrar erros de análise de transformação para a nova estrutura de erro
  • [FAÍSCA-38519] [SQL] A exceção de lançamento de AQE deve respeitar SparkFatalException
  • [FAÍSCA-38528] [SQL] Itere ansiosamente sobre a sequência agregada ao criar a lista de projetos em ExtractGenerator
  • [FAÍSCA-38320] [SS] Corrigir o tempo limite de flatMapGroupsWithState em lote com dados para chave
  • [FAÍSCA-38442] [SQL] Corrija ConstantFoldingSuite/ColumnExpressionSuite/DataFrameSuite/AdaptiveQueryExecSuite no modo ANSI
  • [FAÍSCA-38268] [SQL] Ocultar o campo "failOnError" no método toString de Abs/CheckOverflow
  • [FAÍSCA-37949] [SQL] Melhorar a estimativa das estatísticas de reequilíbrio
  • [FAÍSCA-38450] [SQL] Corrija HiveQuerySuite//PushFoldableIntoBranchesSuite/TransposeWindowSuite no modo ANSI
  • [FAÍSCA-38501] [SQL] Corrigir falhas de teste do thriftserver no modo ANSI
  • [FAÍSCA-37895] [SQL] Filtrar coluna empurrada para baixo com colunas entre aspas
  • [FAÍSCA-38449] [SQL] Evite chamar createTable quando ignoreIfExists=true e a tabela existir
  • [FAÍSCA-38406] [SQL] Melhorar o desempenho de ShufflePartitionsUtil createSkewPartitionSpecs
  • [FAÍSCA-37947] [SQL] Extrair gerador da expressão GeneratorOuter contida por um operador Gerar.
  • [FAÍSCA-38309] [CORE] Corrigir métricas de SHS shuffleTotalReads e shuffleTotalBlocks percentis
  • [FAÍSCA-38412] [SS] Corrigir a sequência trocada de de e para em StateSchemaCompatibilityChecker
  • [SPARK-38267] [CORE][sql][SS] Substitua correspondências de padrão em expressões booleanas por instruções condicionais
  • [FAÍSCA-38104] [SQL] Migrar erros de análise da janela para a nova estrutura de erros
  • [FAÍSCA-38434] [SQL] Semântica correta do método CheckAnalysis.getDataTypesAreCompatibleFn
  • [FAÍSCA-38033] [SS] O processamento SS não pode ser iniciado porque o com...
  • [FAÍSCA-38378] [SQL] Refatoração da definição gramatical ANTLR em arquivos Parser e Lexer separados
  • [FAÍSCA-37475] [SQL] Adicionar parâmetro de escala às funções de piso e ceil
  • [FAÍSCA-38411] [CORE] Usar UTF-8 ao doMergeApplicationListingInternal ler logs de eventos
  • [FAÍSCA-36553] [ML] KMeans evitam computar estatísticas auxiliares para K grande
  • [FAÍSCA-38393] [SQL] Limpar o uso preterido de GenSeq/GenMap
  • [FAÍSCA-38389] [SQL] Adicione o DATEDIFF() e DATE_DIFF() aliases para TIMESTAMPDIFF()
  • [FAÍSCA-33206] [CORE][3.2] Corrigir cálculo de peso de cache de índice aleatório para pequenos arquivos de índice
  • [FAÍSCA-38353] [PYTHON] Métodos mágicos de entrada e saída de instrumentos para a API Pandas no Spark
  • [SPARK-38323] [SQL][streaming] Suporta os metadados de ficheiros ocultos no Streaming
  • [FAÍSCA-38138] [SQL] Materializar subconsultas do QueryPlan
  • [FAÍSCA-38094] Habilitar nomes de colunas de esquema correspondentes por IDs de campo
  • [FAÍSCA-37923] [SQL] Gerar transformações de partição para o analisador interno do BucketSpec
  • [FAÍSCA-38363] [SQL] Evite erro de tempo de execução em Dataset.summary()/Dataset.describe() quando o modo ANSI estiver ativado
  • [FAÍSCA-38284] [SQL] Adicionar a TIMESTAMPDIFF() função
  • [FAÍSCA-38251] [SQL] Altere Cast.toString como "cast" em vez de "ansi_cast" no modo ANSI
  • [FAÍSCA-38314] [SQL] Correção de falha ao ler arquivos parquet depois de gravar os metadados do arquivo oculto em

Consulte Atualizações de manutenção do Databricks Runtime 10.5.

Ambiente do sistema

  • Sistema Operacional: Ubuntu 20.04.4 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Escala: 2.12.14
  • Píton: 3.8.10
  • R: 4.1.3
  • Lago Delta: 1.2.1

Bibliotecas Python instaladas

Biblioteca Versão Biblioteca Versão Biblioteca Versão
Antergos Linux 2015.10 (Laminação ISO) Appdirs 1.4.4 Argônio2-CFFI 20.1.0
gerador assíncrono 1.10 ATRs 20.3.0 Backcall 0.2.0
Bidico 0.21.4 lixívia 3.3.0 Boto3 1.16.7
Botocore 1.19.7 certifi 2020.12.5 CFFI 1.14.5
Chardet 4.0.0 ciclista 0.10.0 Quisto 0.29.23
dbus-python 1.2.16 decorador 5.0.6 DeUsedXML 0.7.1
Distlib 0.3.4 distro-info 0,23ubuntu1 pontos de entrada 0,3
facetas-visão geral 1.0.0 bloqueio de arquivo 3.6.0 IDNA 2.10
Ipykernel 5.3.4 IPython 7.22.0 ipython-genutils 0.2.0
ipywidgets 7.6.3 Jedi 0.17.2 Jinja2 2.11.3
JmesPath 0.10.0 Joblib 1.0.1 jsonschema 3.2.0
jupyter-cliente 6.1.12 Jupyter-core 4.7.1 Jupyterlab-Pygments 0.1.2
jupyterlab-widgets 1.0.0 Kiwisolver 1.3.1 coalas 1.8.2
Marcação Segura 2.0.1 Matplotlib 3.4.2 Mistune 0.8.4
nbclient 0.5.3 nbconvert 6.0.7 nbformat 5.1.3
Ninho-Asyncio 1.5.1 bloco de notas 6.3.0 dormência 1.20.1
embalagem 20.9 pandas 1.2.4 PandocFilters 1.4.3
Parso 0.7.0 vítima 0.5.1 Espere 4.8.0
pickleshare 0.7.5 Travesseiro 8.2.0 pip (o gestor de pacotes do Python) 21.0.1
enredo 5.6.0 Prometheus-cliente 0.10.1 kit de ferramentas de prompt 3.0.17
Protobuf 3.17.2 PSYCOPG2 2.8.5 ptyprocess 0.7.0
Pyarrow 4.0.0 Pycparser 2,20 Pigmentos 2.8.1
PyGObject 3.36.0 Pyparsing 2.4.7 pirsistent 0.17.3
python-apt 2.0.0+ubuntu0.20.4.7 python-dateutil (uma biblioteca de software para manipulação de datas em Python) 2.8.1 Python-Engineio 4.3.0
python-socketio 5.4.1 Pytz 2020.5 Pyzmq 20.0.0
pedidos 2.25.1 pedidos-unixsocket 0.2.0 s3transferir 0.3.7
scikit-learn (biblioteca de aprendizado de máquina em Python) 0.24.1 SciPy 1.6.2 nascido no mar 0.11.1
Enviar2Lixo 1.5.0 Ferramentas de configuração 52.0.0 seis 1.15.0
ssh-import-id 5.10 statsmodels (uma biblioteca de Python para modelos estatísticos) 0.12.2 tenacidade 8.0.1
terminado 0.9.4 caminho de teste 0.4.4 ThreadPoolCtl 2.1.0
tornado 6.1 traços 5.0.5 Upgrades autônomos 0.1
urllib3 1.25.11 virtualenv 20.4.1 largura de wc 0.2.5
WebEncodings 0.5.1 wheel 0.36.2 widgetsnbextension 3.5.1

Bibliotecas R instaladas

As bibliotecas R são instaladas a partir do instantâneo da CRAN da Microsoft em 2022-03-28.

Biblioteca Versão Biblioteca Versão Biblioteca Versão
AskPass 1.1 asserçãoat 0.2.1 Retroportagens 1.4.1
base 4.1.3 base64enc 0.1-3 pouco 4.0.4
bit64 4.0.5 blob 1.2.2 arranque 1.3-28
fabricação de cerveja 1.0-7 Brio 1.1.3 vassoura 0.7.12
BSLIB 0.3.1 cachemira 1.0.6 Chamador 3.7.0
acento circunflexo 6.0-91 Cellranger 1.1.0 crono 2.3-56
classe 7.3-20 CLI 3.2.0 Clipr 0.8.0
cluster 2.1.3 CodeTools 0.2-18 espaço em cores 2.0-3
marca comum 1.8.0 compilador 4.1.3 configuração 0.3.1
CPP11 0.4.2 lápis de cor 1.5.1 credenciais 1.3.2
encaracolar 4.3.2 tabela de dados 1.14.2 conjuntos de dados 4.1.3
DBI 1.1.2 DBPlyr 2.1.1 descrição 1.4.1
DevTools 2.4.3 diffobj 0.3.5 resumo 0.6.29
DPLYR 1.0.8 DTPlyr 1.2.1 E1071 1.7-9
reticências 0.3.2 avaliar 0,15 Fãsi 1.0.3
Farver 2.1.0 mapa rápido 1.1.0 fontawesome 0.2.2
FORCATS 0.5.1 para cada 1.5.2 externa 0.8-82
forjar 0.2.0 FS 1.5.2 Futuro 1.24.0
futuro.apply 1.8.1 gargarejo 1.2.0 genérico 0.1.2
Gert 1.5.0 GGPLOT2 3.3.5 GH 1.3.0
gitcreds 0.1.1 GLMNET 4.1-3 Globais 0.14.0
colar 1.6.2 GoogleDrive 2.0.0 googlesheets4 1.0.0
Gower 1.0.0 gráficos 4.1.3 grDispositivos 4.1.3
grelha 4.1.3 gridExtra 2.3 GSUBFN 0,7
tabela g 0.3.0 capacete 0.2.0 Refúgio 2.4.3
mais alto 0,9 HMS 1.1.1 htmltools 0.5.2
htmlwidgets (componentes HTML interativos) 1.5.4 httpuv 1.6.5 HTTR 1.4.2
Hwriter 1.3.2 hwriterPlus 1.0-3 IDs 1.0.1
ini 0.3.1 ipred 0.9-12 Isoband 0.2.5
iteradores 1.0.14 jquerylib 0.1.4 jsonlite 1.8.0
KernSmooth 2.23-20 Knitr 1,38 etiquetagem 0.4.2
mais tarde 1.3.0 treliça 0.20-45 lave 1.6.10
ciclo de vida 1.0.1 ouvirv 0.8.0 lubridato 1.8.0
Magrittr 2.0.2 Marcação 1.1 MASSA 7.3-56
Matriz 1.4-1 memorização 2.0.1 métodos 4.1.3
MGCV 1.8-40 mímica 0,12 ModelMetrics 1.2.2.2
Modelador 0.1.8 Munsell 0.5.0 NLME 3.1-157
NNET 7.3-17 numDeriv 2016.8 a 1.1 openssl (conjunto de ferramentas para criptografia) 2.0.0
paralelo 4.1.3 Paralelamente 1.30.0 pilar 1.7.0
pkgbuild 1.3.1 pkgconfig 2.0.3 pkgload 1.2.4
plogr 0.2.0 Plyr 1.8.7 elogiar 1.0.0
unidades bonitas 1.1.1 pROC 1.18.0 processx 3.5.3
Prodlim 2019.11.13 Progresso 1.2.2 progressor 0.10.0
promessas 1.2.0.1 prototipo 1.0.0 proxy 0.4-26
PS 1.6.0 ronronar 0.3.4 r2d3 0.2.6
R6 2.5.1 Floresta Aleatória 4.7-1 rappdirs 0.3.3
rcmdcheck 1.4.0 RColorBrewer 1.1-2 Rcpp 1.0.8.3
RcppEigen 0.3.3.9.1 Leitor 2.1.2 ReadXL 1.3.1
receitas 0.2.0 revanche 1.0.1 revanche2 2.1.2
Controles remotos 2.4.2 Reprex 2.0.1 remodelar2 1.4.4
Rlang 1.0.2 rmarkdown 2.13 RODBC 1.3-19
oxigénio2 7.1.2 rpart (função de partição recursiva em R) 4.1.16 rprojroot 2.0.2
Reserva 1.8-10 RSQLite 2.2.11 rstudioapi 0,13
rversões 2.1.1 Rvest 1.0.2 Sass 0.4.1
escalas 1.1.1 seletor 0.4-2 Informação da sessão 1.2.2
forma 1.4.6 brilhante 1.7.1 ferramentas de origem 0.1.7
Brilho 1.7.5 Faísca 3.2.0 espacial 7.3-11
estrias 4.1.3 sqldf 0.4-11 QUADRADO 2021.1
estatísticas 4.1.3 estatísticas4 4.1.3 string 1.7.6
stringr 1.4.0 sobrevivência 3.2-13 Sistema 3.4
tcltk (uma linguagem de programação) 4.1.3 Demonstrações de Ensino 2.10 testeatat 3.1.2
Tibble 3.1.6 Tidyr 1.2.0 arrumadoselecionar 1.1.2
Tidyverse 1.3.1 data e hora 3043.102 Tinytex 0,37
ferramentas 4.1.3 TZDB 0.2.0 usethis 2.1.5
UTF8 1.2.2 utilitários 4.1.3 Identificador Único Universal (UUID) 1.0-4
VCTRS 0.3.8 viridisLite 0.4.0 vruum 1.5.7
Waldo 0.4.0 vibrissas 0.4 murchar 2.5.0
xfun 0.30 XML2 1.3.3 xopen 1.0.0
xtable 1.8-4 yaml 2.3.5 ZIP 2.2.0

Bibliotecas Java e Scala instaladas (versão de cluster Scala 2.12)

ID do Grupo ID do Artefacto Versão
Antlr Antlr 2.7.7
com.amazonaws Amazon Kinesis Client 1.12.0
com.amazonaws aws-java-sdk-autoscaling (SDK de Java da AWS - escalonamento automático) 1.12.189
com.amazonaws AWS-Java-SDK-CloudFormation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws AWS Java SDK para CloudSearch 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config (configuração do AWS Java SDK) 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-diretório 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache (kit de desenvolvimento de software Java para Elasticache da AWS) 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk (SDK Java para Elastic Beanstalk da AWS) 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing (SDK Java para equilíbrio de carga elástico da AWS) 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws aws-java-sdk-glacier (Biblioteca de armazenamento Glacier da AWS) 1.12.189
com.amazonaws aws-java-sdk-glue 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-importexport 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws aws-java-sdk-aprendizado de máquina 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-rota53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws AWS Java SDK para SES 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway (SDK da AWS para Storage Gateway em Java) 1.12.189
com.amazonaws AWS-Java-SDK-STS 1.12.189
com.amazonaws aws-java-sdk-suporte 1.12.189
com.amazonaws aws-java-sdk-swf-bibliotecas 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics fluxo 2.9.6
com.databricks Reserva 1.8-3
com.databricks Jatos 3T 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2,12 0.4.15-10
com.esotericsoftware sombreado de kryo 4.0.2
com.esotericsoftware Minlog 1.3.0
com.fasterxml colega de turma 1.3.4
com.fasterxml.jackson.core jackson-anotações 2.12.3
com.fasterxml.jackson.core Jackson-Core 2.12.3
com.fasterxml.jackson.core jackson-databind 2.12.3
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.3
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.3
com.fasterxml.jackson.module módulo-jackson-paranamer 2.12.3
com.fasterxml.jackson.module jackson-módulo-scala_2.12 2.12.3
com.github.ben-manes.cafeína cafeína 2.3.4
com.github.fommil Jniloader 1.1
com.github.fommil.netlib núcleo 1.1.2
com.github.fommil.netlib native_ref-Java 1.1
com.github.fommil.netlib native_ref-java-nativos 1.1
com.github.fommil.netlib sistema_nativo-Java 1.1
com.github.fommil.netlib native_system-java-nativos 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-nativos 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-nativos 1.1
com.github.luben ZSTD-JNI 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs JSR305 3.0.0
com.google.code.gson Gson 2.8.6
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.goiaba Goiaba 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2banco de dados h2 2.1.210
com.helger gerador de perfis 1.1.1
com.jcraft JSCH 0.1.50
com.jolbox BoneCP 0.8.0.LANÇAMENTO
com.lihaoyi código-fonte_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk (SDK para Azure Data Lake Store) 2.3.9
com.ning compressa-lzf 1.0.3
com.sun.istack istack-commons-tempo de execução 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning Json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lentes_2.12 0.4.12
com.twitter Chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe configuração 1.2.1
com.typesafe.scala-logging Escala-logging_2.12 3.7.2
com.univocidade analisadores de univocidade 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.2
codec commons codec commons 1,15
Commons Collections Commons Collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload (upload de ficheiros comuns) commons-fileupload (upload de ficheiros comuns) 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
registo de comuns registo de comuns 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
dev.ludovic.netlib ARPACK 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib Lapack | 2.2.1
colmeia-2.3__hadoop-3.2 JETS3T-0,7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.ponte aérea compressor de ar 0.21
IO.Delta delta-compartilhamento-spark_2.12 0.4.0
io.dropwizard.metrics métricas-base 4.1.1
io.dropwizard.metrics métricas-grafite 4.1.1
io.dropwizard.metrics métricas e verificações de saúde 4.1.1
io.dropwizard.metrics métricas-jetty9 4.1.1
io.dropwizard.metrics métricas-jmx 4.1.1
io.dropwizard.metrics métricas-json 4.1.1
io.dropwizard.metrics métricas do JVM 4.1.1
io.dropwizard.metrics Métricas-Servlets 4.1.1
io.netty netty-tudo 4.1.68.Final
io.prometeu cliente simples 0.7.0
io.prometeu simpleclient_comum 0.7.0
io.prometeu simpleclient_dropwizard 0.7.0
io.prometeu simpleclient_pushgateway 0.7.0
io.prometeu simpleclient_servlet 0.7.0
io.prometheus.jmx recoletor 0.12.0
jacarta.anotação Jacarta.Anotação-API 1.3.5
jacarta.servlet jacarta.servlet-api 4.0.3
jacarta.validação Jacarta.validation-api 2.0.2
jakarta.ws.rs Jacarta.ws.rs-api 2.1.6
javax.ativação ativação 1.1.1
javax.anotação javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo JDO-API 3.0.1
javax.transaction JTA 1.1
javax.transaction API de transação 1.1
javax.xml.bind JAXB-API 2.2.2
javax.xml.stream Stax-API 1.0-2
Javolution Javolution 5.5.1
Jline Jline 2.14.6
Joda-Time Joda-Time 2.10.10
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
maven-árvores colmeia-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna JNA 5.8.0
net.razorvine pirolite 04:30
net.sf.jpam JPAM 1.1
net.sf.opencsv OpenCSV 2.3
net.sf.supercsv Super-CSV 2.2.0
net.floco de neve flocos de neve-ingestão-sdk 0.9.6
net.floco de neve Flocos de Neve-JDBC 3.13.3
net.floco de neve faísca-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combinado_tudo 0.1
org.acplt.remotetea Remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr ANTLR Runtime 3.5.2
org.antlr antlr4-tempo de execução 4.8
org.antlr StringTemplate 3.2.1
org.apache.ant formiga 1.9.2
org.apache.ant ANT-JSCH 1.9.2
org.apache.ant lançador de formigas 1.9.2
org.apache.arrow formato de seta 2.0.0
org.apache.arrow seta-memória-núcleo 2.0.0
org.apache.arrow seta-memória-netty 2.0.0
org.apache.arrow vetor de seta 2.0.0
org.apache.avro Avro 1.10.2
org.apache.avro AVRO-IPC 1.10.2
org.apache.avro avro-mapeado 1.10.2
org.apache.commons commons-comprimir 1.21
org.apache.commons commons-cripto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-matemática3 3.4.1
org.apache.commons commons-texto 1.6
org.apache.curador curador-cliente 2.13.0
org.apache.curador curador-framework 2.13.0
org.apache.curador curador-receitas 2.13.0
org.apache.derby Dérbi 10.14.2.0
org.apache.hadoop hadoop-client-api (API do cliente Hadoop) 3.3.2-Databricks
org.apache.hadoop tempo de execução do cliente Hadoop 3.3.2
org.apache.hive colmeia-abelha 2.3.9
org.apache.hive Hive-CLI 2.3.9
org.apache.hive Hive-JDBC 2.3.9
org.apache.hive hive-llap-cliente 2.3.9
org.apache.hive colmeia-lamp-comum 2.3.9
org.apache.hive Colmeia-Serde 2.3.9
org.apache.hive colmeias-calços 2.3.9
org.apache.hive API de armazenamento Hive 2.7.2
org.apache.hive.shims colmeia-calços-0,23 2.3.9
org.apache.hive.shims colmeia-calços-comum 2.3.9
org.apache.hive.shims colmeia-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents Núcleo Http 4.4.12
org.apache.ivy hera 2.5.0
org.apache.mesos mesos-sombreado-protobuf 1.4.0
org.apache.orc orc-núcleo 1.6.13
org.apache.orc orc-mapreduce 1.6.13
org.apache.orc Orc-calços 1.6.13
org.apache.parquet coluna de parquet 1.12.0-DATABRICKS-0004
org.apache.parquet parquet-comum 1.12.0-DATABRICKS-0004
org.apache.parquet codificação-parquet 1.12.0-DATABRICKS-0004
org.apache.parquet parquet-formato-estruturas 1.12.0-DATABRICKS-0004
org.apache.parquet Parquet-Hadoop 1.12.0-DATABRICKS-0004
org.apache.parquet Parquet-Jackson 1.12.0-DATABRICKS-0004
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-sombreado 4.20
org.apache.yetus anotações de audiência 0.5.0
org.apache.zookeeper cuidador de zoológico 3.6.2
org.apache.zookeeper zookeeper-juta 3.6.2
org.checkerframework verificador-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-ASL 1.9.13
org.codehaus.janino compilador comum 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus DataNucleus Core 4.1.17
org.datanucleus Datanucleus-RDBMS 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.píer Jetty-Cliente 9.4.43.v20210629
org.eclipse.píer jetty-continuation (componente de software do Jetty) 9.4.43.v20210629
org.eclipse.píer Jetty-HTTP 9.4.43.v20210629
org.eclipse.píer Molhe IO 9.4.43.v20210629
org.eclipse.píer Jetty-JNDI 9.4.43.v20210629
org.eclipse.píer Cais-Plus 9.4.43.v20210629
org.eclipse.píer Jetty-Proxy 9.4.43.v20210629
org.eclipse.píer Segurança do Jetty 9.4.43.v20210629
org.eclipse.píer servidor jetty 9.4.43.v20210629
org.eclipse.píer Jetty-servlet 9.4.43.v20210629
org.eclipse.píer Jetty-servlets 9.4.43.v20210629
org.eclipse.píer Jetty-util 9.4.43.v20210629
org.eclipse.píer cais-util-ajax 9.4.43.v20210629
org.eclipse.píer Aplicação web Jetty 9.4.43.v20210629
org.eclipse.píer Jetty-XML 9.4.43.v20210629
org.eclipse.jetty.websocket API WebSocket 9.4.43.v20210629
org.eclipse.jetty.websocket Websocket-cliente 9.4.43.v20210629
org.eclipse.jetty.websocket Websocket-Comum 9.4.43.v20210629
org.eclipse.jetty.websocket servidor websocket 9.4.43.v20210629
org.eclipse.jetty.websocket Websocket-servlet 9.4.43.v20210629
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 HK2-API 2.6.1
org.glassfish.hk2 localizador hk2 2.6.1
org.glassfish.hk2 HK2-Utils 2.6.1
org.glassfish.hk2 localizador de recursos OSGi 1.0.3
org.glassfish.hk2.externo aopalliance-reembalado 2.6.1
org.glassfish.hk2.externo jacarta.inject 2.6.1
org.glassfish.jaxb jaxb-tempo de execução 2.3.2
org.glassfish.jersey.containers jersey-container-servlet (serviço de contêiner Jersey) 2,34
org.glassfish.jersey.containers jersey-container-servlet-core 2,34
org.glassfish.jersey.core jersey-cliente 2,34
org.glassfish.jersey.core Jersey comum 2,34
org.glassfish.jersey.core servidor de jersey 2,34
org.glassfish.jersey.inject Jersey-HK2 2,34
org.hibernate.validator hibernate-validator (ferramenta de validação de dados de Java) 6.1.0.Final
org.javassist Javassist 3.25.0-GA
org.jboss.logging jboss-registro em log 3.3.2.Final
org.jdbi JDBI 2.63.1
org.jetbrains anotações 17.0.0
org.joda joda-converter 1.7
org.jodd JODD-CORE 3.5.2
org.json4s JSON4S-ast_2.12 3.7.0-M11
org.json4s JSON4S-core_2.12 3.7.0-M11
org.json4s JSON4S-jackson_2,12 3.7.0-M11
org.json4s JSON4S-scalap_2.12 3.7.0-M11
org.lz4 LZ4-Java 1.7.1
org.mariadb.jdbc mariadb-java-cliente 2.2.5
org.objenesis objenese 2.5.1
org.postgresql PostgreSQL 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap calços 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang Escala-compiler_2.12 2.12.14
org.scala-lang Escala-library_2.12 2.12.14
org.scala-lang Escala-reflect_2,12 2.12.14
org.scala-lang.modules scala-coleção-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules Escala-xml_2.12 1.2.0
org.scala-sbt interface de teste 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp Brisa-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-compatível-com-slf4j 1.7.30
org.slf4j jul-para-slf4j 1.7.30
org.slf4j SLF4J-API 1.7.30
org.slf4j SLF4J-Log4J12 1.7.30
org.spark-project.spark não utilizado 1.0.0
org.threeten trêsdez-extra 1.5.0
org.tukaani XZ 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel gatos-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel torre-macros_2.12 0.17.0
org.typelevel torre-platform_2.12 0.17.0
org.typelevel torre-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl mosca-selvagem-openssl 1.0.7.Final
org.xerial SQLITE-JDBC 3.8.11.2
org.xerial.snappy Snappy-java 1.1.8.4
org.yaml Snakeyaml 1,24
ouro ouro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion íon-java 1.0.2
Stax Stax-API 1.0.1
  • Last updated on