Databricks Runtime 10.0(不支持)

以下发布说明提供了有关Databricks Runtime 10.0和Databricks Runtime 10.0 Photon的信息，由Apache Spark 3.2.0提供支持。Databricks于2021年10月发布了这些图像。光子是在公共预览。

新功能和改进

Apache Spark的新版本

Databricks Runtime 10.0和Databricks Runtime 10.0 Photon包含Apache Spark 3.2.0。详细信息请参见Apache火花。

SELECT语句现在支持qualifier子句来过滤窗口函数的结果

的选择语句现在支持有资格条款。有资格可用于筛选窗口函数的结果。类中必须有一个或多个窗口函数选择列表或有资格条件。例如:

选择＊从t有资格总和(c2）在(分区通过c1）>0；

JDK 11的集群支持(公开预览)

Databricks现在为Java Development Kit (JDK) 11提供集群支持。

创建集群时，可以指定集群使用JDK 11(对于驱动程序和执行程序)。为此，将以下环境变量添加到高级选项> Spark >环境变量：

JNAME=zulu11-ca-amd64

自动加载器现在将模式视为可空

自动加载器现在默认将所有推断的和用户提供的模式视为空。这是为了避免在数据包含非空列的空字段时发生潜在的数据损坏。引入了一个新的配置来跟踪这种行为，spark.databricks.cloudFiles.schema.forceNullable。缺省情况下，此配置包含的设置spark.sql.streaming.fileSource.schema.forceNullable， Apache Spark中的FileStreamSource使用并设置为真正的默认情况下。

突发的变化

中断所有Spark SQL用户的更改

  • 新spark.databricks.behaviorChange.SC78546CorrelatedPredicate.enabled配置:设置为时真正的，允许在聚合子查询时使用相关相等谓词的子集。默认设置为真正的。

  • 新spark.databricks.behaviorChange.SC82201BlockAutoAlias.enabled配置:设置为时真正的，在创建视图时阻止自动生成别名。默认设置为真正的。

  • 新spark.databricks.behaviorChange.SC81078CTASWithLocation.enabled配置:设置为时真正的,不允许创建表格作为选择使用非空位置。默认设置为真正的。注意当spark.sql.legacy.allowNonEmptyLocationInCTAS也设置为真正的，此配置无效，且创建表格作为选择使用非空位置总是允许的。

对启用ANSI模式的Spark SQL用户的破坏更改

有关ANSI模式的信息，请参见ANSI合规。

  • 新spark.databricks.behaviorChange.SC83587NextDayDOW.enabled配置:设置为时真正的，无效的dayOfWeek的参数next_day函数抛出IllegalArgumentException在ANSI模式;否则它会返回零。默认设置为真正的。

  • 新spark.databricks.behaviorChange.SC83796CanCast.enabled配置:设置为时真正的，在ANSI模式下启用新的显式强制转换语法规则。默认设置为真正的。

  • 新spark.databricks.behaviorChange.SC79099CastStringToBoolean.enabled配置:设置为时真正的，将字符串转换为布尔类型时抛出解析错误异常;否则,返回零。默认设置为真正的。

  • 新spark.databricks.behaviorChange.SC79064AbsOutsideRange.enabled配置:设置为时真正的,腹肌函数在输入超出范围时抛出异常。默认设置为真正的。

对所有Python用户的突破性更改

  • Python APIdelta.tables.DeltaTable.convertToDelta现在返回正确的DeltaTablePython对象，可用于运行Delta Lake命令。以前它返回一个不能直接调用的内部对象。

库升级

Apache Hadoop 3升级

  • Databricks Runtime 10.0将Hadoop依赖从Hadoop 2.7.4升级到Hadoop 3.3.1。

行为变化

  • Hadoop 3使用hadoop-client-api和hadoop-client-runtime而不是hadoop-common库，它掩盖了某些可能在Hadoop公共api或扩展中使用的第三方依赖关系。

  • 从Hadoop 2开始，Hadoop 3的配置选项已经发生了变化。有关Hadoop 3.3.1选项，请参见core-default.xml。

  • Databricks已经更新了Hadoop 3的一些默认配置，以与Hadoop 2保持一致，以确保存储连接器具有相同的默认身份验证设置和性能级别:

    • fs.azure.authorization.caching.enable=假

    • fs.s3a.attempts.maximum=10

    • fs.s3a.block.size=67108864

    • fs.s3a.connection.timeout=50000

    • fs.s3a.max.total.tasks=1000

    • fs.s3a.retry.limit=20.

    • fs.s3a.retry.throttle.interval=500毫秒

    • fs.s3a.assumed.role.credentials.provider=com.amazonaws.auth.InstanceProfileCredentialsProvider

    • fs.s3a.aws.credentials.provider=BasicAWSCredentialsProvider,DatabricksInstanceProfileCredentialsProvider,EnvironmentVariableCredentialsProvider,AnonymousAWSCredentialsProvider

  • 谷歌GCS连接器从2.1.6升级到2.2.2。

  • Amazon红移连接器现在使用s3a: / /计划。的s3n: / /方案已弃用。

  • 处理Amazon S3元数据存储API的OSS类名以及阴影类。这样就可以处理OSS配置，而不需要阴影类名。

    • 例如，可以指定org.apache.hadoop.fs.s3a.s3guard.NullMetadataStore类在Hadoop配置中。

  • 使新配置()和sparkContext.hadoopConfiguration一致的。

    • 现在，每次创建新的Hadoop配置时，它都将与中预定义的Hadoop配置保持一致sparkContext.hadoopConfiguration，包括文件系统方案及其默认配置。

  • 尽管Databricks Runtime中包含的Hadoop存储连接器与Hadoop 3.3.1完全兼容，但它们并不保证与OSS Hadoop 3.3.1连接器同步，并且可能具有不同的行为。

    • Amazon S3连接器仍然允许(尽管带有警告)在S3 url中进行user:秘密身份验证hadoop - 14833这样就把它去掉了。

  • globStatus现在总是返回排序结果(hadoop - 10798）

  • fs.s3a补充道。端点如果未设置和fs.s3a。端点区域为空(火星- 35878）

    • 由于正在设置全局端点，Databricks提供的Amazon S3区域自动解析在某些情况下可能不会触发。这不是问题，因为AWS SDK将正确地解析区域。

  • 添加fs.s3a.downgrade.syncable。如未设置例外情况(火星- 35868）

  • LZ4和Snappy编解码器不依赖于原生Hadoop库(hadoop - 17125）

已知的问题

Apache火花

Databricks Runtime 10.0包含Apache Spark 3.2.0。

突出了

Core和Spark SQL

ANSI SQL兼容性增强

性能增强

连接器的增强

功能增强

其他显著变化

  • 监控

  • 将count_distinct作为选项添加到数据集#summary(火星- 34165）

  • 在sql/core中实现ScriptTransform火星- 31936）

  • 使BlockManagerMaster驱动程序心跳超时可配置(火星- 34278）

  • 使shuffle服务名在客户端可配置，并允许在服务器端基于类路径的配置重写(火星- 34828）

  • ExecutorMetricsPoller应该在stageTCMP中保留阶段条目，直到心跳发生(火星- 34779）

  • 用rewritedistincttotals中的筛选子句替换if (火星- 34882）

  • 修复在自连接上应用CostBasedJoinReorder时失败的问题火星- 34354）

  • 创建表LIKE应尊重保留表属性(火星- 34935）

  • 在YARN集群模式下将ivySettings文件发送到驱动程序(火星- 34472）

  • 解析USING/NATURAL JOIN中的重复公共列(火星- 34527）

  • 隐藏描述表cmd的内部视图属性火星- 35318）

  • 支持解决分发/集群/重分区提示丢失的attrs (火星- 35331）

  • 检查FileStreamSink.hasMetadata中的路径时忽略错误。火星- 34526）

  • 通过推断缺失的配置来改进s3a魔术提交器支持(火星- 35383）

  • 允许省略:在STRUCT类型字符串(火星- 35706）

  • 添加一个新的操作符来区分AQE是否可以安全优化(火星- 35786）

  • 附加新的嵌套结构字段，而不是为unionByName用空填充排序(火星- 35290）

  • ArraysZip应该保留字段名称，以避免被分析器/优化器重写(火星- 35876）

  • 使用Void作为NullType的类型名(火星- 36224）

  • 引入新的API FileCommitProtocol允许灵活的文件命名(火星- 33298）

行为的改变

请参阅每个组件的迁移指南:火花的核心和火花SQL。

结构化流

主要功能

  • 基于EventTime的会话(会话窗口)(火星- 10816）

  • Kafka客户端升级至2.8.0(火星- 33913）

  • 触发器。AvailableNow用于运行像Trigger这样的流查询。在Scala中的多个批次中(火星- 36533）

其他显著变化

  • 在Kafka源代码中引入了一个新的选项，以指定每个触发器读取的最小记录数(火星- 35312）

  • 向源进度添加最新偏移量(火星- 33955）

PySpark

项目禅

其他显著变化

行为的改变

看到迁移向导。

MLlib

性能改进

模型训练改进

布拉斯特区的改进

其他显著变化

弃用和删除

维护更新

看到Databricks Runtime 10.0维护更新。

系统环境

  • 操作系统: Ubuntu 20.04.3 LTS

  • Java: Zulu 8.56.0.21-CA-linux64

  • Scala: 2.12.14

  • Python: 3.8.10

  • R:以下4.4.1

  • 三角洲湖: 1.0.0

已安装的Python库

图书馆

版本

图书馆

版本

图书馆

版本

Antergos Linux

2015.10 (ISO-Rolling)

appdirs

1.4.4

backcall

0.2.0

boto3

1.16.7

botocore

1.19.7

certifi

2020.12.5

chardet

4.0.0

周期计

0.10.0

Cython

0.29.23

dbus-python

1.2.16

装饰

5.0.6

distlib

0.3.3

distro-info

0.23 ubuntu1

facets-overview

1.0.0

filelock

3.0.12

idna

2.10

ipykernel

5.3.4

ipython

7.22.0

ipython-genutils

0.2.0

绝地武士

0.17.2

jmespath

0.10.0

joblib

1.0.1

jupyter-client

6.1.12

jupyter-core

4.7.1

kiwisolver

1.3.1

考拉

1.8.1

matplotlib

3.4.2

numpy

1.19.2

熊猫

1.2.4

parso

0.7.0

容易受骗的人

0.5.1

pexpect

4.8.0

pickleshare

0.7.5

枕头

8.2.0

皮普

21.0.1

情节

5.1.0

prompt-toolkit

3.0.17

protobuf

3.17.2

psycopg2

2.8.5

ptyprocess

0.7.0

pyarrow

4.0.0

Pygments

2.8.1发布

PyGObject

3.36.0

pyparsing

2.4.7

python-apt

2.0.0 + ubuntu0.20.4.6

python-dateutil

2.8.1发布

pytz

2020.5

pyzmq

20.0.0

请求

2.25.1

requests-unixsocket

0.2.0

s3transfer

0.3.7

scikit-learn

0.24.1

scipy

1.6.2

seaborn

0.11.1

setuptools

52.0.0

六个

1.15.0

ssh-import-id

5.10

statsmodels

0.12.2

韧性

8.0.1

threadpoolctl

魅惑

龙卷风

6.1

traitlets

5.0.5

unattended-upgrades

0.1

urllib3

1.25.11

virtualenv

20.4.1

wcwidth

0.2.5

轮

0.36.2

已安装的R库

R库从微软CRAN快照在2021-09-21。

图书馆

版本

图书馆

版本

图书馆

版本

askpass

1．1

为了

0.2.1

补丁

1.2.1 "

基地

以下4.4.1

base64enc

0.1 - 3

位

4.0.4

bit64

你

团

1.2.2

引导

-28 - 1.3

酿造

1.0 6

生动

1.1.2

扫帚

0.7.9

bslib

0.3.0

cachem

1.0.6

callr

3.7.0

脱字符号

-88 - 6.0

cellranger

1.1.0

时间

-56 - 2.3

类

-19 - 7.3

cli

3.0.1

clipr

是0.7.1

集群

2.1.2

codetools

-18 - 0.2

色彩

2.0 - 2

commonmark

1.7

编译器

以下4.4.1

配置

0.3.1

cpp11

0.3.1

蜡笔

1.4.1

凭证

1.3.1

旋度

4.3.2

data.table

1.14.0

数据集

以下4.4.1

DBI

1.1.1

dbplyr

2.1.1

desc

1.3.0

devtools

2.4.2

diffobj

0.3.4

消化

0.6.27

dplyr

1.0.7

dtplyr

1.1.0

省略

0.3.2

评估

0．14

fansi

0.5.0

farver

魅惑

fastmap

1.1.0

forcats

0.5.1

foreach

1.5.1

外国

-81 - 0.8

打造

0.2.0

fs

1.5.0

未来

1.22.1

future.apply

1.8.1

含漱剂

1.2.0

泛型

0.1.0

哥特

1.4.1

ggplot2

3.3.5

“大酒店”

1.3.0

gitcreds

0.1.1

glmnet

4.1 - 2

全局变量

0.14.0

胶水

1.4.2

googledrive

2.0.0

googlesheets4

1.0.0

高尔

0.2.2

图形

以下4.4.1

grDevices

以下4.4.1

网格

以下4.4.1

gridExtra

2.3

gsubfn

0．7

gtable

0.3.0

还

2.4.3

highr

0.9

hms

1.1.0

htmltools

0.5.2

htmlwidgets

1.5.4

httpuv

1.6.3

httr

1.4.2

hwriter

1.3.2

hwriterPlus

1.0 - 3

id

1.0.1

ini

0.3.1

不小

-12 - 0.9

isoband

0.2.5

迭代器

1.0.13

jquerylib

0.1.4

jsonlite

1.7.2

KernSmooth

-20 - 2.23

knitr

1.34

标签

0.4.2

晚些时候

1.3.0

晶格

-44 - 0.20

熔岩

1.6.10

生命周期

1.0.0

listenv

0.8.0

lubridate

1.7.10

magrittr

2.0.1

减价

1．1

质量

-54 - 7.3

矩阵

1.3 - 4

memoise

2.0.0

方法

以下4.4.1

mgcv

-37 - 1.8

mime

0.11

ModelMetrics

1.2.2.2

modelr

0.1.8

孟塞尔

0.5.0

nlme

-152 - 3.1

nnet

-16 - 7.3

numDeriv

2016.8 - -1.1

openssl

1.4.5

平行

以下4.4.1

平行

1.28.1

支柱

1.6.2

pkgbuild

1.2.0

pkgconfig

2.0.3

pkgload

1.2.2

plogr

0.2.0

plyr

1.8.6

赞美

1.0.0

prettyunits

1.1.1

pROC

1.18.0

processx

3.5.2

prodlim

2019.11.13

进步

1.2.2

progressr

0.8.0

承诺

1.2.0.1

原型

1.0.0

ps

1.6.0

purrr

0.3.4

r2d3

0.2.5

R6

2.5.1

randomForest

-14 - 4.6

rappdirs

0.3.3

rcmdcheck

1.3.3

RColorBrewer

1.1 - 2

Rcpp

1.0.7

readr

2.0.1

readxl

1.3.1

食谱

0.1.16

复赛

1.0.1

rematch2

2.1.2

遥控器

测试盒框

reprex

2.0.1

reshape2

1.4.4

rlang

0.4.11

rmarkdown

2.11

RODBC

-19 - 1.3

roxygen2

7.1.2

rpart

-15 - 4.1

rprojroot

2.0.2

Rserve

1.8 8

RSQLite

2.2.8

rstudioapi

0．13

rversions

2.1.1

房车

1.0.1

萨斯

0.4.0

尺度

1.1.1

selectr

0.4 - 2

sessioninfo

1.1.1

形状

1.4.6

闪亮的

1.6.0

sourcetools

0.1.7

sparklyr

1.7.2

SparkR

3.2.0

空间

-11 - 7.3

样条函数

以下4.4.1

sqldf

-11 - 0.4

SQUAREM

2021.1

统计数据

以下4.4.1

stats4

以下4.4.1

stringi

1.7.4

stringr

1.4.0

生存

-13 - 3.2

sys

3.4

tcltk

以下4.4.1

TeachingDemos

2.10

testthat

3.0.4

宠物猫

3.1.4

tidyr

1.1.3

tidyselect

1.1.1

tidyverse

1.3.1

timeDate

3043.102

tinytex

0.33

工具

以下4.4.1

tzdb

0.1.2

usethis

2.0.1

use utf8

1.2.2

跑龙套

以下4.4.1

uuid

0.1 - 4

vctrs

0.3.8

viridisLite

0.4.0

发呜呜声

1.5.5

沃尔多

0.3.1

晶须

0.4

withr

2.4.2

xfun

0.26

xml2

1.3.2

xopen

1.0.0

xtable

1.8 - 4

yaml

2.2.1

邮政编码

2.2.0

安装Java和Scala库(Scala 2.12集群版本)

组ID

工件ID

版本

antlr

antlr

2.7.7

com.amazonaws

amazon-kinesis-client

1.12.0

com.amazonaws

aws-java-sdk-autoscaling

1.11.655

com.amazonaws

aws-java-sdk-cloudformation

1.11.655

com.amazonaws

aws-java-sdk-cloudfront

1.11.655

com.amazonaws

aws-java-sdk-cloudhsm

1.11.655

com.amazonaws

aws-java-sdk-cloudsearch

1.11.655

com.amazonaws

aws-java-sdk-cloudtrail

1.11.655

com.amazonaws

aws-java-sdk-cloudwatch

1.11.655

com.amazonaws

aws-java-sdk-cloudwatchmetrics

1.11.655

com.amazonaws

aws-java-sdk-codedeploy

1.11.655

com.amazonaws

aws-java-sdk-cognitoidentity

1.11.655

com.amazonaws

aws-java-sdk-cognitosync

1.11.655

com.amazonaws

aws-java-sdk-config

1.11.655

com.amazonaws

aws-java-sdk-core

1.11.655

com.amazonaws

aws-java-sdk-datapipeline

1.11.655

com.amazonaws

aws-java-sdk-directconnect

1.11.655

com.amazonaws

aws-java-sdk-directory

1.11.655

com.amazonaws

aws-java-sdk-dynamodb

1.11.655

com.amazonaws

aws-java-sdk-ec2

1.11.655

com.amazonaws

aws-java-sdk-ecs

1.11.655

com.amazonaws

aws-java-sdk-efs

1.11.655

com.amazonaws

aws-java-sdk-elasticache

1.11.655

com.amazonaws

aws-java-sdk-elasticbeanstalk

1.11.655

com.amazonaws

aws-java-sdk-elasticloadbalancing

1.11.655

com.amazonaws

aws-java-sdk-elastictranscoder

1.11.655

com.amazonaws

aws-java-sdk-emr

1.11.655

com.amazonaws

aws-java-sdk-glacier

1.11.655

com.amazonaws

aws-java-sdk-glue

1.11.655

com.amazonaws

aws-java-sdk-iam

1.11.655

com.amazonaws

aws-java-sdk-importexport

1.11.655

com.amazonaws

aws-java-sdk-kinesis

1.11.655

com.amazonaws

aws-java-sdk-kms

1.11.655

com.amazonaws

aws-java-sdk-lambda

1.11.655

com.amazonaws

aws-java-sdk-logs

1.11.655

com.amazonaws

aws-java-sdk-machinelearning

1.11.655

com.amazonaws

aws-java-sdk-opsworks

1.11.655

com.amazonaws

aws-java-sdk-rds

1.11.655

com.amazonaws

aws-java-sdk-redshift

1.11.655

com.amazonaws

aws-java-sdk-route53

1.11.655

com.amazonaws

aws-java-sdk-s3

1.11.655

com.amazonaws

aws-java-sdk-ses

1.11.655

com.amazonaws

aws-java-sdk-simpledb

1.11.655

com.amazonaws

aws-java-sdk-simpleworkflow

1.11.655

com.amazonaws

aws-java-sdk-sns

1.11.655

com.amazonaws

aws-java-sdk-sqs

1.11.655

com.amazonaws

aws-java-sdk-ssm

1.11.655

com.amazonaws

aws-java-sdk-storagegateway

1.11.655

com.amazonaws

aws-java-sdk-sts

1.11.655

com.amazonaws

aws-java-sdk-support

1.11.655

com.amazonaws

aws-java-sdk-swf-libraries

1.11.22

com.amazonaws

aws-java-sdk-workspaces

1.11.655

com.amazonaws

jmespath-java

1.11.655

com.chuusai

shapeless_2.12

2.3.3

com.clearspring.analytics

流

2.9.6

com.databricks

Rserve

1.8 - 3

com.databricks

jets3t

0.7.1-0

com.databricks.scalapb

compilerplugin_2.12

0.4.15-10

com.databricks.scalapb

scalapb-runtime_2.12

0.4.15-10

com.esotericsoftware

kryo-shaded

4.0.2

com.esotericsoftware

minlog

1.3.0

com.fasterxml

同学

1.3.4

com.fasterxml.jackson.core

jackson-annotations

2.12.2

com.fasterxml.jackson.core

jackson-core

2.12.2

com.fasterxml.jackson.core

jackson-databind

2.12.2

com.fasterxml.jackson.dataformat

jackson-dataformat-cbor

2.12.2

com.fasterxml.jackson.datatype

jackson-datatype-joda

2.12.2

com.fasterxml.jackson.module

jackson-module-paranamer

2.12.2

com.fasterxml.jackson.module

jackson-module-scala_2.12

2.12.2

com.github.ben-manes.caffeine

咖啡因

2.3.4

com.github.fommil

jniloader

1．1

com.github.fommil.netlib

核心

1.1.2

com.github.fommil.netlib

native_ref-java

1．1

com.github.fommil.netlib

native_ref-java-natives

1．1

com.github.fommil.netlib

native_system-java

1．1

com.github.fommil.netlib

native_system-java-natives

1．1

com.github.fommil.netlib

netlib-native_ref-linux-x86_64-natives

1．1

com.github.fommil.netlib

netlib-native_system-linux-x86_64-natives

1．1

com.github.luben

zstd-jni

1.5.0-4

com.github.wendykierp

JTransforms

3.1

com.google.code.findbugs

jsr305

3.0.0

com.google.code.gson

gson

2.8.6

com.google.crypto.tink

叮叮铃

1.6.0

com.google.flatbuffers

flatbuffers-java

1.9.0

com.google.guava

番石榴

15.0

com.google.protobuf

protobuf-java

2.6.1

com.h2database

h2

1.4.195

com.helger

分析器

1.1.1

com.jcraft

jsch

0.1.50

com.jolbox

bonecp

0.8.0.RELEASE

com.lihaoyi

sourcecode_2.12

0.1.9

com.microsoft.sqlserver

mssql-jdbc

9.2.1.jre8

com.microsoft.azure

azure-data-lake-store-sdk

2.3.9

com.ning

compress-lzf

1.0.3

com.sun.istack

istack-commons-runtime

3.0.8

com.sun.mail

javax.mail

1.5.2

com.tdunning

json

1．8

com.thoughtworks.paranamer

paranamer

2.8

com.trueaccord.lenses

lenses_2.12

0.4.12

com.twitter

chill-java

0.10.0

com.twitter

chill_2.12

0.10.0

com.twitter

util-app_2.12

7.1.0

com.twitter

util-core_2.12

7.1.0

com.twitter

util-function_2.12

7.1.0

com.twitter

util-jvm_2.12

7.1.0

com.twitter

util-lint_2.12

7.1.0

com.twitter

util-registry_2.12

7.1.0

com.twitter

util-stats_2.12

7.1.0

com.typesafe

配置

1.2.1 "

com.typesafe.scala-logging

scala-logging_2.12

3.7.2章

com.univocity

univocity-parsers

2.9.1

com.zaxxer

HikariCP

3.1.0

commons-cli

commons-cli

1．2

commons-codec

commons-codec

1.15

commons-collections

commons-collections

3.2.2

commons-dbcp

commons-dbcp

1．4

commons-fileupload

commons-fileupload

1.3.3

commons-httpclient

commons-httpclient

3.1

commons-io

commons-io

2.8.0

commons lang

commons lang

2.6

通用日志

通用日志

1.1.3

commons net

commons net

3.1

commons-pool

commons-pool

1.5.4

dev.ludovic.netlib

arpack

1.3.2

dev.ludovic.netlib

布拉斯特区

1.3.2

dev.ludovic.netlib

lapack

1.3.2

蜂巢3.2 - 2.3 - __hadoop -

jets3t - 0.7

liball_deps_2.12

info.ganglia.gmetric4j

gmetric4j

1.0.10

io.airlift

aircompressor

0.19

io.delta

delta-sharing-spark_2.12

0.1.0

io.dropwizard.metrics

metrics-core

以下4.4.1

io.dropwizard.metrics

metrics-graphite

以下4.4.1

io.dropwizard.metrics

metrics-healthchecks

以下4.4.1

io.dropwizard.metrics

metrics-jetty9

以下4.4.1

io.dropwizard.metrics

metrics-jmx

以下4.4.1

io.dropwizard.metrics

metrics-json

以下4.4.1

io.dropwizard.metrics

metrics-jvm

以下4.4.1

io.dropwizard.metrics

metrics-servlets

以下4.4.1

io.netty

netty-all

4.1.63.Final

io.prometheus

simpleclient

0.7.0

io.prometheus

simpleclient_common

0.7.0

io.prometheus

simpleclient_dropwizard

0.7.0

io.prometheus

simpleclient_pushgateway

0.7.0

io.prometheus

simpleclient_servlet

0.7.0

io.prometheus.jmx

收集器

0.12.0

jakarta.annotation

jakarta.annotation-api

1.3.5

jakarta.servlet

jakarta.servlet-api

4.0.3

jakarta.validation

jakarta.validation-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.activation

激活

1.1.1

javax.annotation

javax.annotation-api

1.3.2

javax.el

javax.el-api

2.2.4

javax.jdo

jdo api

3.0.1

javax.transaction

jta

1．1

javax.transaction

事务api

1．1

javax.xml.bind

jaxb-api

2.2.2

javax.xml.stream

stax-api

1.0 - 2

javolution

javolution

5.5.1

jline

jline

2.14.6

joda-time

joda-time

2.10.5

log4j

apache-log4j-extras

1.2.17

log4j

log4j

1.2.17

maven-trees

蜂巢3.2 - 2.3 - __hadoop -

liball_deps_2.12

net.java.dev.jna

jna

5.8.0

net.razorvine

地幔岩

4.30

net.sf.jpam

jpam

1．1

net.sf.opencsv

opencsv

2.3

net.sf.supercsv

super-csv

2.2.0

net.snowflake

snowflake-ingest-sdk

0.9.6

net.snowflake

snowflake-jdbc

3.13.3

net.snowflake

spark-snowflake_2.12

2.9.0-spark_3.1

net.sourceforge.f2j

arpack_combined_all

0.1

org.acplt.remotetea

remotetea-oncrpc

1.1.2

org.antlr

ST4

4.0.4

org.antlr

antlr-runtime

3.5.2

org.antlr

antlr4-runtime

4.8

org.antlr

stringtemplate

3.2.1之上

org.apache.ant

蚂蚁

1.9.2

org.apache.ant

ant-jsch

1.9.2

org.apache.ant

ant-launcher

1.9.2

org.apache.arrow

arrow-format

2.0.0

org.apache.arrow

arrow-memory-core

2.0.0

org.apache.arrow

arrow-memory-netty

2.0.0

org.apache.arrow

arrow-vector

2.0.0

org.apache.avro

avro

1.10.2

org.apache.avro

avro-ipc

1.10.2

org.apache.avro

avro-mapred

1.10.2

org.apache.commons

commons-compress

1.20

org.apache.commons

commons-crypto

1.1.0

org.apache.commons

commons-lang3

3.12.0

org.apache.commons

commons-math3

3.4.1

org.apache.commons

commons-text

1．6

org.apache.curator

curator-client

2.13.0

org.apache.curator

curator-framework

2.13.0

org.apache.curator

curator-recipes

2.13.0

org.apache.derby

德比

10.14.2.0

org.apache.hadoop

hadoop-client-runtime

3.3.1

org.apache.hive

hive-beeline

2.3.9

org.apache.hive

hive-cli

2.3.9

org.apache.hive

hive-jdbc

2.3.9

org.apache.hive

hive-llap-client

2.3.9

org.apache.hive

hive-llap-common

2.3.9

org.apache.hive

hive-serde

2.3.9

org.apache.hive

hive-shims

2.3.9

org.apache.hive

hive-storage-api

2.7.2

org.apache.hive.shims

蜂巢0.23 -垫片

2.3.9

org.apache.hive.shims

hive-shims-common

2.3.9

org.apache.hive.shims

hive-shims-scheduler

2.3.9

org.apache.htrace

htrace-core4

4.1.0-incubating

org.apache.httpcomponents

httpclient

4.5.13

org.apache.httpcomponents

httpcore

4.4.12

org.apache.ivy

艾薇

2.5.0

org.apache.mesos

mesos-shaded-protobuf

1.4.0

org.apache.orc

orc-core

1.6.10

org.apache.orc

orc-mapreduce

1.6.10

org.apache.orc

orc-shims

1.6.10

org.apache.parquet

parquet-column

1.12.0-databricks-0003

org.apache.parquet

parquet-common

1.12.0-databricks-0003

org.apache.parquet

parquet-encoding

1.12.0-databricks-0003

org.apache.parquet

parquet-format-structures

1.12.0-databricks-0003

org.apache.parquet

parquet-hadoop

1.12.0-databricks-0003

org.apache.parquet

parquet-jackson

1.12.0-databricks-0003

org.apache.thrift

libfb303

0.9.3

org.apache.thrift

libthrift

0.12.0

org.apache.xbean

xbean-asm9-shaded

4.20

org.apache.yetus

audience-annotations

0.5.0

org.apache.zookeeper

动物园管理员

操作

org.apache.zookeeper

zookeeper-jute

操作

org.checkerframework

checker-qual

3.5.0

org.codehaus.jackson

jackson-core-asl

1.9.13

org.codehaus.jackson

jackson-mapper-asl

1.9.13

org.codehaus.janino

commons-compiler

3.0.16

org.codehaus.janino

janino

3.0.16

org.datanucleus

datanucleus-api-jdo

4.2.4

org.datanucleus

datanucleus-core

4.1.17

org.datanucleus

datanucleus-rdbms

4.1.19

org.datanucleus

javax.jdo

3.2.0-m3

org.eclipse.jetty

jetty-client

9.4.40.v20210413

org.eclipse.jetty

jetty-continuation

9.4.40.v20210413

org.eclipse.jetty

jetty-http

9.4.40.v20210413

org.eclipse.jetty

jetty-io

9.4.40.v20210413

org.eclipse.jetty

jetty-jndi

9.4.40.v20210413

org.eclipse.jetty

jetty-plus

9.4.40.v20210413

org.eclipse.jetty

jetty-proxy

9.4.40.v20210413

org.eclipse.jetty

jetty-security

9.4.40.v20210413

org.eclipse.jetty

jetty服务器

9.4.40.v20210413

org.eclipse.jetty

jetty servlet

9.4.40.v20210413

org.eclipse.jetty

jetty-servlets

9.4.40.v20210413

org.eclipse.jetty

jetty-util

9.4.40.v20210413

org.eclipse.jetty

jetty-util-ajax

9.4.40.v20210413

org.eclipse.jetty

jetty-webapp

9.4.40.v20210413

org.eclipse.jetty

jetty-xml

9.4.40.v20210413

org.eclipse.jetty.websocket

websocket-api

9.4.40.v20210413

org.eclipse.jetty.websocket

websocket-client

9.4.40.v20210413

org.eclipse.jetty.websocket

websocket-common

9.4.40.v20210413

org.eclipse.jetty.websocket

websocket服务器

9.4.40.v20210413

org.eclipse.jetty.websocket

websocket-servlet

9.4.40.v20210413

org.fusesource.leveldbjni

leveldbjni-all

1．8

org.glassfish.hk2

hk2-api

2.6.1

org.glassfish.hk2

hk2-locator

2.6.1

org.glassfish.hk2

hk2-utils

2.6.1

org.glassfish.hk2

osgi-resource-locator

1.0.3

org.glassfish.hk2.external

aopalliance-repackaged

2.6.1

org.glassfish.hk2.external

jakarta.inject

2.6.1

org.glassfish.jaxb

jaxb运行时

2.3.2

org.glassfish.jersey.containers

jersey-container-servlet

2.34

org.glassfish.jersey.containers

jersey-container-servlet-core

2.34

org.glassfish.jersey.core

jersey客户端

2.34

org.glassfish.jersey.core

jersey-common

2.34

org.glassfish.jersey.core

jersey-server

2.34

org.glassfish.jersey.inject

jersey-hk2

2.34

org.hibernate.validator

hibernate验证框架

6.1.0.Final

org.javassist

javassist

3.25.0-GA

org.jboss.logging

jboss-logging

3.3.2.Final

org.jdbi

jdbi

2.63.1

org.jetbrains

注释

17.0.0

org.joda

joda-convert

1.7

org.jodd

jodd-core

3.5.2

org.json4s

json4s-ast_2.12

3.7.0-M11

org.json4s

json4s-core_2.12

3.7.0-M11

org.json4s

json4s-jackson_2.12

3.7.0-M11

org.json4s

json4s-scalap_2.12

3.7.0-M11

org.lz4

lz4-java

1.7.1上

org.mariadb.jdbc

mariadb-java-client

2.2.5

org.objenesis

objenesis

2.5.1

org.postgresql

postgresql

42.2.19

org.roaringbitmap

RoaringBitmap

0.9.14

org.roaringbitmap

垫片

0.9.14

org.rocksdb

rocksdbjni

6.20.3

org.rosuda.REngine

REngine

魅惑

org.scala-lang

scala-compiler_2.12

2.12.14

org.scala-lang

scala-library_2.12

2.12.14

org.scala-lang

scala-reflect_2.12

2.12.14

org.scala-lang.modules

scala-collection-compat_2.12

2.4.3

org.scala-lang.modules

scala-parser-combinators_2.12

1.1.2

org.scala-lang.modules

scala-xml_2.12

1.2.0

org.scala-sbt

测试界面

1．0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.0.8

org.scalanlp

breeze-macros_2.12

1．0

org.scalanlp

breeze_2.12

1．0

org.scalatest

scalatest_2.12

3.0.8

org.slf4j

jcl-over-slf4j

1.7.30

org.slf4j

jul-to-slf4j

1.7.30

org.slf4j

slf4j-api

1.7.30

org.slf4j

slf4j-log4j12

1.7.30

org.spark-project.spark

未使用的

1.0.0

org.springframework

spring核心

4.1.4.RELEASE

org.springframework

spring测试

4.1.4.RELEASE

org.threeten

threeten-extra

1.5.0

org.tukaani

xz

1．8

org.typelevel

algebra_2.12

2.0.0-M2

org.typelevel

cats-kernel_2.12

2.0.0-M4

org.typelevel

machinist_2.12

0.6.8

org.typelevel

macro-compat_2.12

1.1.1

org.typelevel

spire-macros_2.12

0.17.0-M1

org.typelevel

spire-bob体育客户端下载platform_2.12

0.17.0-M1

org.typelevel

spire-util_2.12

0.17.0-M1

org.typelevel

spire_2.12

0.17.0-M1

org.wildfly.openssl

wildfly-openssl

1.0.7.Final

org.xerial

sqlite-jdbc

3.8.11.2

org.xerial.snappy

snappy-java

1.1.8.4

org.yaml

snakeyaml

1．24

奥罗

奥罗

2.0.8

pl.edu.icm

JLargeArrays

1．5

software.amazon.ion

ion-java

1.0.2中

stax

stax-api

1.0.1