注意
对此 Databricks Runtime 版本的支持已结束。 有关终止支持日期，请参阅终止支持历史记录。 有关所有受支持的 Databricks Runtime 版本，请参阅 Databricks Runtime 发行说明版本和兼容性。
Databricks 于 2017 年 12 月发布此版本。 2018 年 1 月为其声明了长期支持 (LTS)。 支持已于 2020 年 1 月 2 日结束。
以下发行说明提供了由 Apache Spark 支持的 Databricks Runtime 3.5 的相关信息。
更改和改进
向数据集 API 添加了
repartitionByRange。为驱动和执行器在 Spark UI 的执行器页添加了“堆直方图”。 堆直方图显示堆中每个类的总大小和实例计数，这使得用户可以轻松了解不同种类的类对驱动程序或执行程序的堆内存的消耗情况。
- 提高了窗口函数性能。
- 已将 Python 库设置工具从 36.6.0 升级到 38.2.3。
- 升级了多个预安装的 R 库。 有关详细信息，请参阅预安装的 R 库。
- Bug 修复和稳定性改进。
Apache Spark
Databricks Runtime 3.5 包括 Apache Spark 2.2.1。 此版本包括 Databricks Runtime 3.4 (EoS) 中包含的所有修复和改进，以及对 Spark 进行的以下其他缺陷修复和改进：
- [SPARK-20557][SQL] 对于 Oracle 方言，仅支持 TIMESTAMP WITH TIME ZONE
- [SPARK-21652][SQL] 修复 InferFiltersFromConstraints 与其他筛选器约简规则之间的规则冲突
- [SPARK-22721] BytesToBytesMap 峰值内存未更新。
- [SPARK-22431][SQL] 确保表/视图元数据的架构中的数据类型在保存前可由 Spark 分析。
- " [SPARK-22686][SQL] DROP TABLE IF EXISTS 不应产生 AnalysisException
- [SPARK-21652][SQL] 修复 InferFiltersFromConstraints 与 ConstantPropagation 之间的规则冲突
- [SPARK-22162] 执行程序和驱动程序在 RDD 提交协议中应使用一致的 JobID
- [SPARK-22635][SQL] [ORC] 读取包含特殊字符的 ORC 文件时出现 FileNotFoundException
- [SPARK-22601][SQL] 提供了不存在的非本地文件路径时，数据加载显示为成功
- [SPARK-22653] 在 CoarseGrainedSchedulerBac 中注册了 executorAddress…
- [SPARK-22373] 升级 Janino 依赖项版本以修复线程安全问题…
- [SPARK-22637][SQL] 仅刷新逻辑计划一次。
- [SPARK-22603][SQL] 修复 FormatString 的 64KB JVM 字节码限制问题
- [SPARK-22595][SQL] 修复不可靠的测试：CastSuite.SPARK-22500：结构的强制转换不应生成超过 64KB 的代码
- [SPARK-22591][SQL] GenerateOrdering 不应更改CodegenContext.INPUT_ROW
- [SPARK-17920][SPARK-19580][SPARK-19878][SQL] 支持写入使用 Avro 架构 URL 'avro.schema.url' 的 Hive 表
- [SPARK-22548][SQL] 向下推送到 JDBC 数据源的嵌套 AND 表达式不正确
- [SPARK-22500][SQL] 修复 cast 的 64KB JVM 字节码限制问题
- [SPARK-22550][SQL] 修复 elt 的 64KB JVM 字节码限制问题
- [SPARK-22508][SQL] 修复 GenerateUnsafeRowJoiner.create() 的 64KB JVM 字节码限制问题
- [SPARK-22549][SQL] 修复 concat_ws 的 64KB JVM 字节码限制问题
- [SPARK-22498][SQL] 修复 concat 的 64KB JVM 字节码限制问题
- [SPARK-22544][SS] FileStreamSource 应使用其自己的 hadoop conf 来调用 globPathIfNecessary
- [SPARK-22538][ML] SQLTransformer 不应取消保存可能已缓存的输入数据集
- [SPARK-22540][SQL] 确保 HighlyCompressedMapStatus 计算正确的 avgSize
- [SPARK-22535][PYSPARK] 在终止 PythRunner.MonitorThread 中的 python 辅助角色之前睡眠 (branch-2.2)
- [SPARK-22501][SQL] 修复 in 的 64KB JVM 字节码限制问题
- [SPARK-22494][SQL] 修复 Coalesce 和 AtleastNNonNulls 的 64KB 限制异常
- [SPARK-22499][SQL] 修复 least 和 greatest 的 64KB JVM 字节码限制问题
- [SPARK-22479][SQL] 从 SaveintoDataSourceCommand.simpleString 中排除凭据
- [SPARK-22469][SQL] 与字符串和数值进行比较时的准确性问题
- [SPARK-22721] 在执行 reset() 后，BytesToBytesMap 峰值内存使用量不准确
- [SPARK-22614] 数据集 API：repartitionByRange(…)
- [SPARK-22471][SQL] SQLListener 消耗大量内存，导致 OutOfMemoryError
- [SPARK-22442][SQL] ScalaReflection 应为特殊字符生成正确的字段名称
- [SPARK-21694][R][ML] 减小 R 中线性 SVM 测试中的最大迭代次数，以加快 AppVeyor 生成速度
- [SPARK-22464][SQL] 对于包含 null 安全等式的 Hive 元存储分区谓词，不向下推送
- [SPARK-22488][SQL] 修复 SparkSession 内部 table() API 中的视图解析问题
- [SPARK-21720][SQL] 修复 AND 或 OR 的 64KB JVM 字节码限制问题
- [SPARK-21667][STREAMING] ConsoleSink 不应通过 checkpointLocation 选项来使流式处理查询失败
- [SPARK-19644][SQL] 创建编码器后清理 Scala 反射垃圾 (branch-2.2)
- [SPARK-22284][SQL] 修复在计算嵌套结构的哈希时出现的 64KB JVM 字节码限制问题
- [SPARK-22243][DSTREAM] spark.yarn.jars 在检查点恢复时应从配置重载
- [SPARK-22344][SPARKR] 如果将测试作为源包运行，请清理安装目录
- [SPARK-22472][SQL] 针对顶级基元值添加 null 检查
- [SPARK-22403][SS] 向 StructuredKafkaWordCount 示例添加可选 checkpointLocation 参数
- [SPARK-22281][SPARKR] 处理 R 方法的中断性签名变更
- [SPARK-22417][PYTHON] 修复带时间戳的 pandas.DataFrame 中的 createDataFrame
- [SPARK-22315][SPARKR] 如果 SparkR 包版本与 SparkContext 不匹配，则发出警告
- [SPARK-22429][STREAMING] 流式处理检查点代码在失败后不重试
- [SPARK-22211][SQL] 删除不正确的 FOJ 限制下推
- [SPARK-22306][SQL] alter table schema 不应清除 hive 端的 Bucket 存储元数据
- [SPARK-22333][SQL] timeFunctionCall(CURRENT_DATE, CURRENT_TIMESTAMP) 与 columnReference 冲突
- [SPARK-19611][SQL] 在 HiveMetastoreCatalog.convertToLogicalRelation 中正确地设置 dataSchema
- [SPARK-22291][SQL] 在 PostgreSQL 中将 uuid、inet 和 cidr 数组类型转换为 StingType 时出现转换错误
- [SPARK-22344][SPARKR] 为 SparkR 测试设置 java.io.tmpdir
- [SPARK-19727][SQL] 修复对原始列进行修改的 round 函数
- [SPARK-22445][SQL] 在 BroadcastHashJoin 中尊重流端子节点的 needCopyResult 设置
- [SPARK-22542][SQL] 删除 ColumnarBatch 中未使用的功能
- [SPARK-17310] 添加在 Parquet 端禁用记录级筛选器的选项
- [SPARK-22514][SQL] 将 ColumnVector.Array 和 ColumnarBatch.Row 移动到各个文件
- [SPARK-22222][SPARK-22033] 修复 BufferHolder 中的 ARRAY_MAX 并添加测试
- [SPARK-10365][SQL] 支持 Parquet 逻辑类型 TIMESTAMP_MICROS
- [SPARK-22356][SQL] 数据源表应支持数据和分区架构之间的重叠列
- [SPARK-22355][SQL] Dataset.collect 不是线程安全的
- [SPARK-22328][CORE] ClosureCleaner 不应缺失引用的超类字段
- [SPARK-17902][R] 在 SparkR 中恢复 collect() 的 stringsAsFactors 选项
- [SPARK-22227][CORE] DiskBlockManager.getAllBlocks 现在容许临时文件
- [SPARK-22319][CORE] 在访问 hdfs 之前调用 loginUserFromKeytab
- [SPARK-21551][PYTHON] 增大 PythonRDD.serveIterator 的超时
- [SPARK-22249][SQL] 在优化器中检查 IN 的值列表是否为空
- [SPARK-22271][SQL] 平均值溢出并为某些十进制变量返回 null
- [SPARK-22249][SQL] 包含空列表的 isin 在缓存的数据帧上引发异常
- [SPARK-22223][SQL] ObjectHashAggregate 不应引入不必要的混排
- [SPARK-21549][CORE] 遵守未提供输出目录/提供了无效输出目录的 OutputFormats
- [SPARK-22273][SQL] 修复 HashMapGenerators 中的键/值架构字段名称。
- [SPARK-14387][SPARK-16628][SPARK-18355][SQL] 使用 Spark 架构读取 ORC 表而非 ORC 文件架构
- [SPARK-22252][SQL] FileFormatWriter 应遵守输入查询架构
- [SPARK-22217][SQL] ParquetFileFormat 支持任意 OutputCommitters
- [SPARK-21907][CORE] 溢出期间内存不足
- [SPARK-22218] SPARK 混排服务无法在应用重新尝试时更新机密
- [SPARK-21549][CORE] 遵守未提供输出目录的 OutputFormats
- [SPARK-22445][SQL] 将 CodegenContext.copyResult 移动到 CodegenSupport
- [SPARK-22408][SQL] RelationalGroupedDataset 的唯一透视值计算启动了不必要的阶段
- [SPARK-17788][SPARK-21033][SQL] 修复 UnsafeExternalSorter 和 ShuffleExternalSorter 中潜在的内存不足问题
- [SPARK-22385][SQL] MapObjects 不应通过索引访问列表元素
- [SPARK-22355][SQL] Dataset.collect 不是线程安全的
- [SPARK-21055][SQL] 将 grouping__id 替换为 grouping_id()
- [SPARK-21762][SQL] 如果新文件尚不可见，FileFormatWriter/BasicWriteTaskStatsTracker 指标集合将失败
维护更新
请参阅 Databricks Runtime 3.5 维护更新。
系统环境
- 操作系统：Ubuntu 16.04.3 LTS
- Java：1.8.0_151
- Scala：2.10.6（cala 2.10 群集版本）/2.11.8（Scala 2.11 群集版本）
- Python：2.7.12（如果使用 Python 3，则为 3.5.2）
- R：R 版本 3.4.2 (2017-09-28)
- GPU 群集：安装了以下 NVIDIA GPU 库：
- Tesla 驱动程序 375.66
- CUDA 8.0
- CUDNN 6.0
预安装的 Python 库
| 库 | 版本 | 库 | 版本 | 库 | 版本 |
|---|---|---|---|---|---|
| ansi2html | 1.1.1 | argparse | 1.2.1 | backports-abc | 0.5 |
| 博托 | 2.42.0 | boto3 | 1.4.1 | botocore | 1.4.70 |
| brewer2mpl | 1.4.1 | certifi | 2016.2.28 | cffi | 1.7.0 |
| chardet | 2.3.0 | colorama | 0.3.7 | configobj | 5.0.6 |
| 密码系统 | 1.5 | 骑行者 | 0.10.0 | Cython | 0.24.1 |
| 装饰师 | 4.0.10 | docutils | 0.14 | enum34 | 1.1.6 |
| ET-XML文件 | 1.0.1 | freetype-py | 1.0.2 | funcsigs | 1.0.2 |
| fusepy | 2.0.4 | 期货 | 3.1.1 | ggplot | 0.6.8 |
| html5lib | 0.999 | IDNA | 2.1 | IP地址 | 1.0.16 |
| ipython | 2.2.0 | ipython-genutils（IPython通用工具） | 0.1.0 | jdcal | 1.2 |
| Jinja2 | 2.8 | jmespath | 0.9.0 | LLVMlite | 0.13.0 |
| lxml | 3.6.4 | MarkupSafe | 0.23 | matplotlib | 1.5.3 |
| mpld3 | 0.2 | msgpack-python | 0.4.7 | ndg-httpsclient | 0.3.3 |
| 麻木 | 0.28.1 | numpy | 1.11.1 | openpyxl | 2.3.2 |
| 熊猫 | 0.18.1 | pathlib2 | 2.1.0 | 替罪羊 | 0.4.1 |
| pexpect | 4.0.1 | pickleshare | 0.7.4 | 枕头 | 3.3.1 |
| 果仁 | 9.0.1 | 层数 | 3.9 | prompt-toolkit | 1.0.7 |
| psycopg2 | 2.6.2 | ptyprocess | 0.5.1 | py4j | 0.10.3 |
| pyarrow | 0.4.1 | pyasn1 | 0.1.9 | Python代码解析器 | 2.14 |
| Pygments | 2.1.3 | PyGObject | 3.20.0 | pyOpenSSL | 16.0.0 |
| pyparsing | 2.2.0 | pypng | 0.0.18 | Python语言 | 2.7.12 |
| python-dateutil | 2.5.3 | python-geohash (Python的地理哈希库) | 0.8.5 | pytz | 2016年6月1日 |
| 请求 | 2.11.1 | s3transfer | 0.1.9 | scikit-learn | 0.18.1 |
| scipy | 0.18.1 | 搜寻 | 0.32 | seaborn | 0.7.1 |
| setuptools | 38.2.3 | simplejson | 3.8.2 | simples3 | 1.0 |
| singledispatch（单一派发） | 3.4.0.3 | 6 | 1.10.0 | statsmodels | 0.6.1 |
| 龙卷风 | 4.5.2 | Traitlets | 4.3.0 | urllib3 | 1.19.1 |
| virtualenv | 15.0.1 | wcwidth | 0.1.7 | 轮子 | 0.30.0 |
| wsgiref | 0.1.2 |
预安装的 R 库
| 库 | 版本 | 库 | 版本 | 库 | 版本 |
|---|---|---|---|---|---|
| abind | 1.4-5 | assertthat | 0.2.0 | 回移补丁 | 1.1.1 |
| 基础 | 3.4.2 | BH | 1.65.0-1 | bindr | 0.1 |
| bindrcpp | 0.2 | 位 | 1.1-12 | bit64 | 0.9-7 |
| bitops | 1.0-6 | 团状物 | 1.1.0 | 启动 | 1.3-20 |
| 酿造/冲泡 | 1.0-6 | 扫帚 | 0.4.3 | 汽车 | 2.1-6 |
| 插入符号 | 6.0-77 | chron | 2.3-51 | 班级 | 7.3-14 |
| 集群 | 2.0.6 | codetools | 0.2-15 | 色彩空间 | 1.3-2 |
| commonmark | 1.4 | 编译器 | 3.4.2 | 蜡笔 | 1.3.4 |
| 卷曲 | 3.0 | CVST（脑静脉窦血栓形成） | 0.2-1 | 数据表 (data.table) | 1.10.4-3 |
| 数据集 | 3.4.2 | DBI | 0.7 | ddalpha | 1.3.1 |
| DEoptimR | 1.0-8 | desc | 1.1.1 | devtools | 1.13.4 |
| dichromat | 2.0-0 | 摘要 | 0.6.12 | dimRed | 0.1.0 |
| doMC | 1.3.4 | dplyr | 0.7.4 | DRR | 0.0.2 |
| foreach | 1.4.3 | 外国 | 0.8-69 | gbm | 2.1.3 |
| ggplot2 | 2.2.1 | git2r | 0.19.0 | glmnet | 2.0-13 |
| 胶水 | 1.2.0 | gower | 0.1.2 | 图形 | 3.4.2 |
| grDevices | 3.4.2 | “业务流程参数” 网格 | 3.4.2 | gsubfn | 0.6-6 |
| gtable | 0.2.0 | H₂O | 3.16.0.1 | httr | 1.3.1 |
| hwriter | 1.3.2 | hwriterPlus | 1.0-3 | ipred | 0.9-6 |
| 迭代器 | 1.0.8 | jsonlite | 1.5 | kernlab | 0.9-25 |
| KernSmooth | 2.23-15 | 标记 | 0.3 | 格子 | 0.20-35 |
| 熔岩 | 1.5.1 | lazyeval | 0.2.1 | 更小 | 0.3.2 |
| lme4 | 1.1-14 | lubridate | 1.7.1 | magrittr | 1.5 |
| mapproj | 1.2-5 | 地图 | 3.2.0 | 质量 | 7.3-47 |
| 矩阵 | 1.2-11 | MatrixModels | 0.4-1 | 缓存 | 1.1.0 |
| 方法 | 3.4.2 | mgcv | 1.8-22 | 默剧 | 0.5 |
| 明卡 | 1.2.4 | mnormt | 1.5-5 | ModelMetrics | 1.1.0 |
| 蒙塞尔 | 0.4.3 | mvtnorm | 1.0-6 | nlme | 3.1-131 |
| nloptr | 1.0.4 | nnet | 7.3-12 | numDeriv | 2016.8-1 |
| openssl（开放SSL） | 0.9.9 | 平行 | 3.4.2 | pbkrtest | 0.4-7 |
| pkgconfig | 2.0.1 | pkgKitten | 0.1.4 | 普洛格 | 0.1-1 |
| 普莱尔 | 1.8.4 | 赞美 | 1.0.0 | pROC | 1.10.0 |
| prodlim | 1.6.1 | 原型 (proto) | 1.0.0 | 心理 | 1.7.8 |
| purrr | 0.2.4 | quantreg | 5.34 | R.methodsS3 | 1.7.1 |
| R.oo | 1.21.0 | R.utils | 2.6.0 | R6 | 2.2.2 |
| 随机森林 (randomForest) | 4.6-12 | RColorBrewer | 1.1-2 | Rcpp | 0.12.14 |
| RcppEigen | 0.3.3.3.1 | RcppRoll | 0.2.2 | RCurl | 1.95-4.8 |
| 食谱 | 0.1.1 | reshape2 | 1.4.2 | rlang | 0.1.4 |
| robustbase | 0.92-8 | RODBC | 1.3-15 | roxygen2 | 6.0.1 |
| rpart | 4.1-11 | rprojroot | 1.2 | Rserve | 1.7-3 |
| RSQLite | 2.0 | rstudioapi | 0.7 | 磅秤 | 0.5.0 |
| sfsmisc | 1.1-1 | sp | 1.2-5 | SparkR | 2.2.1 |
| 稀疏M | 1.77 | 空间 | 7.3-11 | 样 条 | 3.4.2 |
| sqldf（R环境中的数据库操作软件包） | 0.4-11 | statmod | 1.4.30 | 统计数据 | 3.4.2 |
| 统计数据4 | 3.4.2 | 字符串 | 1.1.6 | stringr | 1.2.0 |
| 生存 | 2.41-3 | tcltk | 3.4.2 | 教学演示 | 2.10 |
| testthat | 1.0.2 | tibble | 1.3.4 | tidyr | 0.7.2 |
| tidyselect | 0.2.3 | 时间日期 | 3042.101 | 工具 | 3.4.2 |
| 实用工具 | 3.4.2 | viridisLite | 0.2.0 | 晶 须 | 0.3-2 |
| 无改动（具体含义和背景需要更多信息） | 2.1.0 | xml2 | 1.1.1 |
预安装的 Java 和 Scala 库（Scala 2.10 群集版本）
| 组 ID | 项目 ID | 版本 |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | Amazon Kinesis 客户端 | 1.7.3 |
| com.amazonaws | AWS Java SDK 自动扩展 | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.126 |
| com.amazonaws | AWS Java SDK CloudFront | 1.11.126 |
| com.amazonaws | AWS-Java-SDK-云HSM | 1.11.126 |
| com.amazonaws | AWS Java SDK 云搜索 | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.126 |
| com.amazonaws | AWS Java SDK CodeDeploy（AWS Java 软件开发工具包 CodeDeploy） | 1.11.126 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.126 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.126 |
| com.amazonaws | aws-java-sdk-config（AWS Java SDK 配置） | 1.11.126 |
| com.amazonaws | aws-java-sdk-core (AWS Java软件开发工具包核心) | 1.11.126 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.126 |
| com.amazonaws | AWS Java SDK Direct Connect（直连） | 1.11.126 |
| com.amazonaws | aws-java-sdk-directory | 1.11.126 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.126 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.126 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.126 |
| com.amazonaws | aws-java-sdk-efs | 1.11.126 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.126 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk（AWS Java 开发工具包 - Elastic Beanstalk） | 1.11.126 |
| com.amazonaws | aws-java-sdk-弹性负载均衡 | 1.11.126 |
| com.amazonaws | aws-java-sdk-elastictranscoder（AWS Java SDK弹性转码器） | 1.11.126 |
| com.amazonaws | aws-java-sdk-emr | 1.11.126 |
| com.amazonaws | AWS Java SDK Glacier | 1.11.126 |
| com.amazonaws | aws-java-sdk-iam | 1.11.126 |
| com.amazonaws | AWS Java SDK 导入导出 (aws-java-sdk-importexport) | 1.11.126 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.126 |
| com.amazonaws | AWS Java 软件开发工具包 - KMS | 1.11.126 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.126 |
| com.amazonaws | aws-java-sdk-logs（AWS Java开发包日志） | 1.11.126 |
| com.amazonaws | AWS-Java-SDK-机器学习 | 1.11.126 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.126 |
| com.amazonaws | aws-java-sdk-rds | 1.11.126 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.126 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.126 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.126 |
| com.amazonaws | aws-java-sdk-ses | 1.11.126 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.126 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.126 |
| com.amazonaws | aws-java-sdk-sns | 1.11.126 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.126 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.126 |
| com.amazonaws | AWS Java SDK 存储网关 | 1.11.126 |
| com.amazonaws | aws-java-sdk-sts | 1.11.126 |
| com.amazonaws | AWS Java SDK支持 | 1.11.126 |
| com.amazonaws | AWS-Java-SDK-SWF-库 | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.126 |
| com.amazonaws | jmespath-java | 1.11.126 |
| com.carrotsearch | hppc | 0.7.1 |
| com.chuusai | shapeless_2.10 | 2.3.2 |
| com.clearspring.analytics | 流 (stream) | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.10 | 0.2.2-db2-spark2.2 |
| com.databricks | dbml-local_2.10-tests | 0.2.2-db2-spark2.2 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.10 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.10 | 0.4.15-9 |
| com.esotericsoftware | kryo-shaded | 3.0.3 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | 同学 | 1.0.0 |
| com.fasterxml.jackson.core | Jackson注解 | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor（Jackson的CBOR数据格式） | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda（杰克逊数据类型-Joda） | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.10 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | 核心 | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | 原生系统-Java | 1.1 |
| com.github.fommil.netlib | native_system-Java原生代码 | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | 番石榴 | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jamesmurty.utils | java-xmlbuilder | 1.0 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.mchange | c3p0 | 0.9.5.1 |
| com.mchange | mchange-commons-java | 0.2.10 |
| com.microsoft.azure | Azure 数据湖存储 SDK | 2.0.11 |
| com.microsoft.sqlserver | mssql-jdbc | 6.1.0.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.6 |
| com.trueaccord.lenses | lenses_2.10 | 0.3 |
| com.twitter | chill-java | 0.8.0 |
| com.twitter | chill_2.10 | 0.8.0 |
| com.twitter | Parquet-Hadoop数据包 | 1.6.0 |
| com.twitter | util-app_2.10 | 6.23.0 |
| com.twitter | util-core_2.10 | 6.23.0 |
| com.twitter | util-jvm_2.10 | 6.23.0 |
| com.typesafe | 配置 | 1.2.1 |
| com.typesafe | scalalogging-slf4j_2.10 | 1.1.0 |
| com.univocity | univocity-parsers解析器 | 2.2.1 |
| com.vlkan | FlatBuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 2.4.1 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec（公共编解码器） | commons-codec（公共编解码器） | 1.10 |
| commons-collections (通用集合库) | commons-collections (通用集合库) | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging（日志库） | commons-logging（日志库） | 1.1.3 |
| commons-net | commons-net | 2.2 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.dropwizard.metrics | metrics-core | 3.1.2 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.2 |
| io.dropwizard.metrics | metrics-graphite | 3.1.2 |
| io.dropwizard.metrics | 指标-健康检查 | 3.1.2 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.2 |
| io.dropwizard.metrics | metrics-json | 3.1.2 |
| io.dropwizard.metrics | 指标-JVM | 3.1.2 |
| io.dropwizard.metrics | metrics-log4j | 3.1.2 |
| io.dropwizard.metrics | 指标-Servlets | 3.1.2 |
| io.netty | netty | 3.9.9.Final |
| io.netty | netty-all | 4.0.43.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | 简单客户端通用 | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | 收集器 | 0.7 |
| javax.activation | 激活 | 1.1.1 |
| javax.annotation | javax.annotation-api (Java中的注解API) | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.11 |
| joda-time | joda-time | 2.9.3 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| mx4j | mx4j | 3.0.2 |
| net.hydromatic | eigenbase-属性 | 1.1.5 |
| net.iharder | base64 | 2.3.8 |
| net.java.dev.jets3t | jets3t | 0.9.3 |
| net.jpountz.lz4 | lz4 | 1.3.0 |
| net.razorvine | 辉岩 | 4.13 |
| net.sf.jpam | 杰潘 | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.5.3 |
| org.antlr | stringtemplate (字符串模板) | 3.2.1 |
| org.apache.ant | 蚂蚁 | 1.9.2 |
| org.apache.ant | ant-jsch（Java的SSH库） | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | arrow-format | 0.4.0 |
| org.apache.arrow | 箭头内存 | 0.4.0 |
| org.apache.arrow | 箭头向量 | 0.4.0 |
| org.apache.avro | avro | 1.7.7 |
| org.apache.avro | avro-ipc | 1.7.7 |
| org.apache.avro | avro-ipc-tests | 1.7.7 |
| org.apache.avro | avro-mapred-hadoop2 | 1.7.7 |
| org.apache.calcite | calcite-avatica | 1.2.0（孵化中） |
| org.apache.calcite | 如果没有标准的中文翻译且是专有名称，“calcite-core”可以保持不变。根据具体情况和语境决定是否需要翻译该术语。 | 1.2.0（孵化中） |
| org.apache.calcite | calcite-linq4j | 1.2.0（孵化中） |
| org.apache.commons | commons-compress | 1.4.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | 策展人与客户 | 2.6.0 |
| org.apache.curator | curator-framework | 2.6.0 |
| org.apache.curator | 策展人食谱 | 2.6.0 |
| org.apache.derby | 德比 | 10.10.2.0 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | Hadoop客户端 | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | Hadoop 分布式文件系统 (Hadoop-HDFS) | 2.7.3 |
| org.apache.hadoop | Hadoop MapReduce 客户端应用 | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-客户端-通用 | 2.7.3 |
| org.apache.hadoop | Hadoop-MapReduce-客户端-核心 | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | Hadoop-YARN客户端 | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0 孵化 |
| org.apache.httpcomponents | httpclient | 4.5.2 |
| org.apache.httpcomponents | httpcore | 4.4.4 |
| org.apache.ivy | 常春藤 | 2.4.0 |
| org.apache.parquet | parquet-column | 1.8.2-databricks1 |
| org.apache.parquet | parquet-common | 1.8.2-databricks1 |
| org.apache.parquet | Parquet 编码 | 1.8.2-databricks1 |
| org.apache.parquet | Parquet格式 | 2.3.1 |
| org.apache.parquet | parquet-hadoop | 1.8.2-databricks1 |
| org.apache.parquet | parquet-jackson | 1.8.2-databricks1 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm5-shaded | 4.4 |
| org.apache.zookeeper | 动物园管理员 | 3.4.6 |
| org.bouncycastle | bcprov-jdk15on | 1.51 |
| org.codehaus.jackson | jackson-core-asl (Jackson核心库 - ASL) | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | 杰克逊映射器-ASL | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler（通用编译器） | 3.0.0 |
| org.codehaus.janino | 雅尼诺 | 3.0.0 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-continuation | 9.3.11.v20160721 |
| org.eclipse.jetty | Jetty-HTTP | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-io | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-jndi | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-plus | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-proxy | 9.3.11.v20160721 |
| org.eclipse.jetty | 码头安全 | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-server（Jetty服务器） | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-servlet | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-servlets | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-util（Jetty工具库） | 9.3.11.v20160721 |
| org.eclipse.jetty | Jetty 网页应用 | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-xml | 9.3.11.v20160721 |
| org.fusesource.jansi | jansi | 1.4 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-定位器 | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator (OSGi 资源定位器) | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | Jersey容器Servlet核心 | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | jersey-common | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb (Jersey 媒体库 - JAXB) | 2.22.2 |
| org.hibernate | Hibernate验证器 | 5.1.1.Final |
| org.iq80.snappy | 活泼 | 0.2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss 日志 | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.jpmml | PMML模型 | 1.2.15 |
| org.jpmml | pmml-schema | 1.2.15 |
| org.json4s | json4s-ast_2.10 | 3.2.11 |
| org.json4s | json4s-core_2.10 | 3.2.11 |
| org.json4s | json4s-jackson_2.10 | 3.2.11 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.1 |
| org.postgresql | postgresql | 9.4-1204-jdbc41 |
| org.roaringbitmap | RoaringBitmap | 0.5.11 |
| .rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | jline | 2.10.6 |
| org.scala-lang | scala-compiler_2.10 | 2.10.6 |
| org.scala-lang | scala-library_2.10 | 2.10.6 |
| org.scala-lang | scala-reflect_2.10 | 2.10.6 |
| org.scala-lang | scalap_2.10 | 2.10.6 |
| org.scala-sbt | 测试界面 | 1.0 |
| org.scalacheck | scalacheck_2.10 | 1.12.5 |
| org.scalamacros | quasiquotes_2.10 | 2.0.0 |
| org.scalanlp | breeze-macros_2.10 | 0.13.2 |
| org.scalanlp | breeze_2.10 | 0.13.2 |
| org.scalatest | scalatest_2.10 | 2.2.6 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-exec | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | Hive 元数据存储器 | 1.2.1.spark2 |
| org.spark-project.spark | 未使用 | 1.0.0 |
| org.spire-math | spire-macros_2.10 | 0.13.0 |
| org.spire-math | spire_2.10 | 0.13.0 |
| org.springframework | spring-core (Spring核心模块) | 4.1.4.RELEASE |
| org.springframework | 春季测试 | 4.1.4.RELEASE |
| org.tukaani | xz | 1.0 |
| org.typelevel | 机械师_2.10 | 0.6.1 |
| org.typelevel | macro-compat_2.10 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.2.6 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| 斯塔克斯 | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0.52 |
预安装的 Java 和 Scala 库（Scala 2.11 群集版本）
| 组 ID | 项目 ID | 版本 |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | Amazon Kinesis 客户端 | 1.7.3 |
| com.amazonaws | AWS Java SDK 自动扩展 | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.126 |
| com.amazonaws | AWS Java SDK CloudFront | 1.11.126 |
| com.amazonaws | AWS-Java-SDK-云HSM | 1.11.126 |
| com.amazonaws | AWS Java SDK 云搜索 | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.126 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.126 |
| com.amazonaws | AWS Java SDK CodeDeploy（AWS Java 软件开发工具包 CodeDeploy） | 1.11.126 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.126 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.126 |
| com.amazonaws | aws-java-sdk-config（AWS Java SDK 配置） | 1.11.126 |
| com.amazonaws | aws-java-sdk-core (AWS Java软件开发工具包核心) | 1.11.126 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.126 |
| com.amazonaws | AWS Java SDK Direct Connect（直连） | 1.11.126 |
| com.amazonaws | aws-java-sdk-directory | 1.11.126 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.126 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.126 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.126 |
| com.amazonaws | aws-java-sdk-efs | 1.11.126 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.126 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk（AWS Java 开发工具包 - Elastic Beanstalk） | 1.11.126 |
| com.amazonaws | aws-java-sdk-弹性负载均衡 | 1.11.126 |
| com.amazonaws | aws-java-sdk-elastictranscoder（AWS Java SDK弹性转码器） | 1.11.126 |
| com.amazonaws | aws-java-sdk-emr | 1.11.126 |
| com.amazonaws | AWS Java SDK Glacier | 1.11.126 |
| com.amazonaws | aws-java-sdk-iam | 1.11.126 |
| com.amazonaws | AWS Java SDK 导入导出 (aws-java-sdk-importexport) | 1.11.126 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.126 |
| com.amazonaws | AWS Java 软件开发工具包 - KMS | 1.11.126 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.126 |
| com.amazonaws | aws-java-sdk-logs（AWS Java开发包日志） | 1.11.126 |
| com.amazonaws | AWS-Java-SDK-机器学习 | 1.11.126 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.126 |
| com.amazonaws | aws-java-sdk-rds | 1.11.126 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.126 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.126 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.126 |
| com.amazonaws | aws-java-sdk-ses | 1.11.126 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.126 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.126 |
| com.amazonaws | aws-java-sdk-sns | 1.11.126 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.126 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.126 |
| com.amazonaws | AWS Java SDK 存储网关 | 1.11.126 |
| com.amazonaws | aws-java-sdk-sts | 1.11.126 |
| com.amazonaws | AWS Java SDK支持 | 1.11.126 |
| com.amazonaws | AWS-Java-SDK-SWF-库 | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.126 |
| com.amazonaws | jmespath-java | 1.11.126 |
| com.carrotsearch | hppc | 0.7.1 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | 流 (stream) | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.2.2-db2-spark2.2 |
| com.databricks | dbml-local_2.11-tests | 0.2.2-db2-spark2.2 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-shaded | 3.0.3 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | 同学 | 1.0.0 |
| com.fasterxml.jackson.core | Jackson注解 | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor（Jackson的CBOR数据格式） | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda（杰克逊数据类型-Joda） | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | 核心 | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | 原生系统-Java | 1.1 |
| com.github.fommil.netlib | native_system-Java原生代码 | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | 番石榴 | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jamesmurty.utils | java-xmlbuilder | 1.0 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.mchange | c3p0 | 0.9.5.1 |
| com.mchange | mchange-commons-java | 0.2.10 |
| com.microsoft.azure | Azure 数据湖存储 SDK | 2.0.11 |
| com.microsoft.sqlserver | mssql-jdbc | 6.1.0.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.6 |
| com.trueaccord.lenses | 镜片_2.11 | 0.3 |
| com.twitter | chill-java | 0.8.0 |
| com.twitter | chill_2.11 | 0.8.0 |
| com.twitter | Parquet-Hadoop数据包 | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | 配置 | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11（Scala日志库） | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-parsers解析器 | 2.2.1 |
| com.vlkan | FlatBuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 2.4.1 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec（公共编解码器） | commons-codec（公共编解码器） | 1.10 |
| commons-collections (通用集合库) | commons-collections (通用集合库) | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging（日志库） | commons-logging（日志库） | 1.1.3 |
| commons-net | commons-net | 2.2 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.dropwizard.metrics | metrics-core | 3.1.2 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.2 |
| io.dropwizard.metrics | metrics-graphite | 3.1.2 |
| io.dropwizard.metrics | 指标-健康检查 | 3.1.2 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.2 |
| io.dropwizard.metrics | metrics-json | 3.1.2 |
| io.dropwizard.metrics | 指标-JVM | 3.1.2 |
| io.dropwizard.metrics | metrics-log4j | 3.1.2 |
| io.dropwizard.metrics | 指标-Servlets | 3.1.2 |
| io.netty | netty | 3.9.9.Final |
| io.netty | netty-all | 4.0.43.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | 简单客户端通用 | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | 收集器 | 0.7 |
| javax.activation | 激活 | 1.1.1 |
| javax.annotation | javax.annotation-api (Java中的注解API) | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.11 |
| joda-time | joda-time | 2.9.3 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| mx4j | mx4j | 3.0.2 |
| net.hydromatic | eigenbase-属性 | 1.1.5 |
| net.iharder | base64 | 2.3.8 |
| net.java.dev.jets3t | jets3t | 0.9.3 |
| net.jpountz.lz4 | lz4 | 1.3.0 |
| net.razorvine | 辉岩 | 4.13 |
| net.sf.jpam | 杰潘 | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.5.3 |
| org.antlr | stringtemplate (字符串模板) | 3.2.1 |
| org.apache.ant | 蚂蚁 | 1.9.2 |
| org.apache.ant | ant-jsch（Java的SSH库） | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | arrow-format | 0.4.0 |
| org.apache.arrow | 箭头内存 | 0.4.0 |
| org.apache.arrow | 箭头向量 | 0.4.0 |
| org.apache.avro | avro | 1.7.7 |
| org.apache.avro | avro-ipc | 1.7.7 |
| org.apache.avro | avro-ipc-tests | 1.7.7 |
| org.apache.avro | avro-mapred-hadoop2 | 1.7.7 |
| org.apache.calcite | calcite-avatica | 1.2.0（孵化中） |
| org.apache.calcite | 如果没有标准的中文翻译且是专有名称，“calcite-core”可以保持不变。根据具体情况和语境决定是否需要翻译该术语。 | 1.2.0（孵化中） |
| org.apache.calcite | calcite-linq4j | 1.2.0（孵化中） |
| org.apache.commons | commons-compress | 1.4.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | 策展人与客户 | 2.6.0 |
| org.apache.curator | curator-framework | 2.6.0 |
| org.apache.curator | 策展人食谱 | 2.6.0 |
| org.apache.derby | 德比 | 10.10.2.0 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | Hadoop客户端 | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | Hadoop 分布式文件系统 (Hadoop-HDFS) | 2.7.3 |
| org.apache.hadoop | Hadoop MapReduce 客户端应用 | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-客户端-通用 | 2.7.3 |
| org.apache.hadoop | Hadoop-MapReduce-客户端-核心 | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | Hadoop-YARN客户端 | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0 孵化 |
| org.apache.httpcomponents | httpclient | 4.5.2 |
| org.apache.httpcomponents | httpcore | 4.4.4 |
| org.apache.ivy | 常春藤 | 2.4.0 |
| org.apache.parquet | parquet-column | 1.8.2-databricks1 |
| org.apache.parquet | parquet-common | 1.8.2-databricks1 |
| org.apache.parquet | Parquet 编码 | 1.8.2-databricks1 |
| org.apache.parquet | Parquet格式 | 2.3.1 |
| org.apache.parquet | parquet-hadoop | 1.8.2-databricks1 |
| org.apache.parquet | parquet-jackson | 1.8.2-databricks1 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm5-shaded | 4.4 |
| org.apache.zookeeper | 动物园管理员 | 3.4.6 |
| org.bouncycastle | bcprov-jdk15on | 1.51 |
| org.codehaus.jackson | jackson-core-asl (Jackson核心库 - ASL) | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | 杰克逊映射器-ASL | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler（通用编译器） | 3.0.0 |
| org.codehaus.janino | 雅尼诺 | 3.0.0 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-continuation | 9.3.11.v20160721 |
| org.eclipse.jetty | Jetty-HTTP | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-io | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-jndi | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-plus | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-proxy | 9.3.11.v20160721 |
| org.eclipse.jetty | 码头安全 | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-server（Jetty服务器） | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-servlet | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-servlets | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-util（Jetty工具库） | 9.3.11.v20160721 |
| org.eclipse.jetty | Jetty 网页应用 | 9.3.11.v20160721 |
| org.eclipse.jetty | jetty-xml | 9.3.11.v20160721 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-定位器 | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator (OSGi 资源定位器) | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | jersey-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | Jersey容器Servlet核心 | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | jersey-common | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb (Jersey 媒体库 - JAXB) | 2.22.2 |
| org.hibernate | Hibernate验证器 | 5.1.1.Final |
| org.iq80.snappy | 活泼 | 0.2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss 日志 | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.jpmml | PMML模型 | 1.2.15 |
| org.jpmml | pmml-schema | 1.2.15 |
| org.json4s | json4s-ast_2.11 | 3.2.11 |
| org.json4s | json4s-core_2.11 | 3.2.11 |
| org.json4s | json4s-jackson_2.11 | 3.2.11 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.1 |
| org.postgresql | postgresql | 9.4-1204-jdbc41 |
| org.roaringbitmap | RoaringBitmap | 0.5.11 |
| .rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.8 |
| org.scala-lang | scala-library_2.11 | 2.11.8 |
| org.scala-lang | scala-reflect_2.11 | 2.11.8 |
| org.scala-lang | scalap_2.11 | 2.11.8 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.0.2 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.2 |
| org.scala-sbt | 测试界面 | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 2.2.6 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-exec | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | Hive 元数据存储器 | 1.2.1.spark2 |
| org.spark-project.spark | 未使用 | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core (Spring核心模块) | 4.1.4.RELEASE |
| org.springframework | 春季测试 | 4.1.4.RELEASE |
| org.tukaani | xz | 1.0 |
| org.typelevel | 机械师_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.2.6 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| 斯塔克斯 | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0.52 |