适用于:SQL Server 2019 (15.x)
以下发行说明适用于 SQL Server 2019 大数据群集 累积更新 12 (CU12)。
已测试 CU12 的配置
SQL Server 大数据群集 CU12 在以下环境组合中进行了测试:
| 容器操作系统 | Kubernetes API | 运行时 | 数据存储 | 日志存储 |
|---|---|---|---|---|
| Ubuntu 20.04 LTS | 1.20 | containerd 1.4.3 docker 20.10.2 CRI-O 1.20.0 |
仅块 | 仅块 |
可在以下页面找到 SQL Server 大数据群集 的参考体系结构白皮书:
系统环境
- 操作系统:Ubuntu 20.04.2 LTS
-
SQL Server:15.0.4153.13
- Java:Azul Zulu JRE 11.0.9.1
- Python:3.7.2 (miniconda 4.5.12)
- R:Microsoft R 3.5.2
-
Spark:2.4
- Java:Azul Zulu JRE 1.8.0_275
- Scala:2.11
- Python:3.7.2 (miniconda 4.5.12)
- R:Microsoft R 3.5.2
- Spark SQL Connector:1.0.2
嵌入式 OSS 组件版本
| 组件 | 版本 |
|---|---|
| collectd | 5.12 |
| InfluxDB | 1.8.3 |
| Elasticsearch | 7.9.1 |
| opendistro-elasticsearch-security | 1.10.1.0 |
| Fluent Bit | 1.6.3 |
| Grafana | 7.3.6 |
| Hadoop HDFS DataNode HDFS NameNode |
3.1 |
| Hive(元存储) | 2.3 |
| Kibana | 7.9.1 |
| 诺克斯 | 1.4.0 |
| 利维 | 0.6 |
| Openresty (Nginx) | 1.17.8-2 |
| 火花 | 2.4 |
| Telegraf | 1.16.1 |
| ZooKeeper | 3.5.8 |
已安装的 Python 库
| 图书馆 | 版本 | 图书馆 | 版本 | 图书馆 | 版本 |
|---|---|---|---|---|---|
| revoscalepy | 9.4.7 | pycurl | 7.43.0.2 | Jupyter客户端 | 5.2.4 |
| microsoftml | 9.4.7 | pycrypto | 2.6.1 | jsonschema | 2.6.0 |
| 齐普 | 0.5.2 | Python代码解析器 | 2.19 | Jinja2 | 2.10.1 |
| zict | 1.0.0 | pycosat | 0.6.3 | jedi | 0.15.1 |
| xlwt | 1.3.0 | Python | 1.8.0 | jdcal | 1.4 |
| XlsxWriter软件 | 1.1.2 | ptyprocess | 0.6.0 | 它很危险 | 1.1.0 |
| xlrd | 1.2.0 | psutil | 5.4.8 | ipywidgets | 7.4.2 |
| 裹住 | 1.11.2 | prompt-toolkit | 2.0.7 | ipython | 7.2.0 |
| widgetsnbextension | 3.4.2 | prometheus-client | 0.7.1 | ipython-genutils(IPython通用工具) | 0.2.0 |
| 轮子 | 0.33.4 | Pluggy (Python库) | 0.12.0 | ipykernel | 4.9.0 |
| Werkzeug | 0.15.5 | plotly | 4.0.0 | importlib-metadata | 0.19 |
| Web编码 | 0.5.1 | pkginfo | 1.5.0.1 | imagesize | 1.1.0 |
| wcwidth | 0.1.7 | 果仁 | 18.1 | ImageIO | 2.5.0 |
| urllib3 | 1.24.2 | 枕头 | 6.1.0 | IDNA | 2.8 |
| unicodecsv | 0.14.1 | pickleshare | 0.7.5 | heapdict | 1.0.0 |
| Traitlets | 4.3.2 | pexpect | 4.7.0 | hdijupyterutils | 0.12.9 |
| 龙卷风 | 6.0.3 | 替罪羊 | 0.5.1 | h5py | 2.9.0 |
| toolz | 0.9.0 | pathlib2 | 2.3.3 | gmpy2 | 2.0.8 |
| 测试路径 | 0.4.2 | path.py | 11.5.0 | 烧瓶 | 1.1.1 |
| 完成 | 0.8.2 | partd | 0.3.9 | Flask-Cors | 3.0.8 |
| tblib | 1.4.0 | 帕尔索 | 0.5.1 | 快速缓存 | 1.1.0 |
| 表格 | 3.5.2 | pandocfilters | 1.4.2 | et-xmlfile | 1.0.1 |
| sympy | 1.3 | pandasql | 0.7.3 | 入口点 | 0.3 |
| statsmodels | 0.9.0 | 熊猫 | 0.23.4 | docutils | 0.15.2 |
| sqlparse | 0.2.4 | pandas-datareader (一个用于数据读取的模块) | 0.7.0 | 分散式 | 1.28.1 |
| SQLAlchemy | 1.2.15 | 包装 | 19.1 | 莳萝 | 0.2.8.2 |
| sphinxcontrib-websupport | 1.1.2 | openpyxl | 2.5.12 | defusedxml | 0.6.0 |
| 狮身人面像 | 1.8.2 | olefile | 0.46 | 装饰师 | 4.4.0 |
| sparkmagic | 0.12.6 | odo | 0.5.1 | 数据结构 | 0.5.4 |
| 排序容器 | 2.1.0 | numpydoc | 0.8.0 | dask | 1.2.2 |
| 雪球图腾器 | 1.9.0 | numpy | 1.15.4 | cytoolz | 0.9.0.1 |
| 6 | 1.12.0 | numexpr | 2.6.9 | Cython | 0.29.2 |
| setuptools | 41.0.1 | 麻木 | 0.42.0 | 骑行者 | 0.10.0 |
| Send2Trash | 1.5.0 | 笔记本 | 5.7.8 | 密码学 | 2.5 |
| seaborn | 0.9.0 | nltk | 3.4 | configobj | 5.0.6 |
| scipy | 1.1.0 | NetworkX | 2.2 | conda | 4.5.12 |
| scikit-learn | 0.20.2 | nbformat | 4.4.0 | cloudpickle | 0.6.1 |
| scikit-image | 0.14.1 | nbconvert | 5.5.0 | 点击 | 7.0 |
| ruamel-yaml | 0.15.46 | 多重调度 | 0.6.0 | 胸 | 0.2.3 |
| 重试 | 1.3.3 | msgpack | 0.6.1 | chardet | 3.0.4 |
| 请求 | 2.21.0 | mpmath | 1.1.0 | cffi | 1.12.3 |
| requests-kerberos | 0.12.0 | more-itertools | 7.2.0 | certifi | 2019.6.16 |
| qtconsole | 4.5.3 | 嘲笑 | 3.0.5 | 瓶颈 | 1.2.1 |
| pyzmq | 18.1.0 | mkl-random | 1.0.2 | 散景 | 1.0.3 |
| PyYAML | 5.1.2 | mkl-fft | 1.0.10 | 漂白剂 | 3.1.0 |
| PyWavelets | 1.0.3 | mistune | 0.8.4 | 大火 | 0.11.3 |
| pytz | 2019.2 | matplotlib | 3.0.2 | backports.os | 0.1.1 |
| python-dateutil | 2.8.0 | MarkupSafe | 1.1.0 | 回调 | 0.1.0 |
| pytest(Python 测试框架) | 4.0.2 | lxml | 4.3.0 | 巴别塔 | 2.7.0 |
| PySocks | 1.7.0 | 项链盒 | 0.2.0 | Azureml模型管理SDK | 1.0.1b10 |
| pyparsing | 2.4.2 | LLVMlite | 0.27.0 | autovizwidget | 0.12.9 |
| pyOpenSSL | 19.0.0 | liac-arff | 2.4.0 | 属性 | 19.1.0 |
| pyodbc | 4.0.25 | kiwisolver | 1.1.0 | atomicwrites | 1.3.0 |
| pykerberos | 1.2.1 | jupyter | 1.0.0 | asn1crypto | 0.24.0 |
| PyJWT | 1.7.1 | jupyter-core | 4.5.0 | 雪花石膏 | 0.7.12 |
| Pygments | 2.4.2 | jupyter控制台 | 6.0.0 | 阿达尔 | 1.2.2 |
已安装的 R 库
| 图书馆 | 版本 | 图书馆 | 版本 | 图书馆 | 版本 |
|---|---|---|---|---|---|
| CompatibilityAPI | 1.1.0 | 蜡笔 | 1.3.4 | 普洛格 | 0.2.0 |
| MicrosoftML | 9.4.7 | 卷曲 | 3.3 | 普莱尔 | 1.8.4 |
| RevoPemaR | 10.0.0 | 数据集 | 3.5.2 | png | 0.1-7 |
| RevoScaleR | 9.4.7 | dbplyr | 1.2.2 | 承诺 | 1.0.1 |
| RevoTreeView | 10.0.0 | deployrRserve | 9.0.0 | 心理 | 1.8.10 |
| doRSR | 10.0.0 | 摘要 | 0.6.18 | purrr | 0.2.5 |
| mrsdeploy | 1.1.3 | doParallel | 1.0.14 | r2d3 | 0.2.3 |
| sqlrutils | 1.0.0 | dplyr | 0.7.8 | rappdirs | 0.3.1 |
| BH | 1.69.0-1 | fansi | 0.4.0 | readr | 1.3.1 |
| DBI | 1.0.0 | foreach | 1.5.1 | reshape2 | 1.4.3 |
| KernSmooth | 2.23-15 | 外国 | 0.8-71 | rlang | 0.3.1 |
| 质量 | 7.3-51.1 | 锻造 | 0.1.0 | rpart | 4.1-13 |
| 矩阵 | 1.2-15 | 泛 型 | 0.0.2 | rprojroot | 1.3-2 |
| MicrosoftR | 3.5.2 | 胶水 | 1.3.0 | rstudioapi | 0.9.0 |
| R6 | 2.3.0 | grDevices | 3.5.2 | 光亮 | 1.2.0 |
| RUnit | 0.4.26 | 图形 | 3.5.2 | sourcetools | 0.1.7 |
| Rcpp | 1.0.0 | “业务流程参数” 网格 | 3.5.2 | sparklyr | 0.9.4 |
| RevoIOQ | 10.0.1 | 赫姆斯 | 0.4.2 | 空间 | 7.3-11 |
| RevoMods | 11.0.1 | HTML工具 | 0.3.6 | 样 条 | 3.5.2 |
| RevoUtils | 11.0.2 | HTML小插件 | 1.3 | 统计数据 | 3.5.2 |
| RevoUtilsMath | 11.0.0 | httpuv | 1.4.5.1 | 统计数据4 | 3.5.2 |
| askpass | 1.1 | httr | 1.4.0 | 字符串 | 1.2.4 |
| assertthat | 0.2.0 | 迭代器 | 1.0.11 | stringr | 1.3.1 |
| 回移补丁 | 1.1.3 | jsonlite | 1.5 | 生存 | 2.43-3 |
| 基础 | 3.5.2 | 稍后 | 0.7.5 | sys | 2.1 |
| base64enc | 0.1-3 | 格子 | 0.20-38 | tcltk | 3.5.2 |
| bindr | 0.1.1 | lazyeval | 0.2.1 | tibble | 2.0.1 |
| bindrcpp | 0.2.2 | magrittr | 1.5 | tidyr | 0.8.2 |
| 靴子 | 1.3-20 | 方法 | 3.5.2 | tidyselect | 0.2.5 |
| 扫帚 | 0.5.1 | mgcv | 1.8-26 | 工具 | 3.5.2 |
| 检查点 | 0.4.4 | 默剧 | 0.6 | utf8 | 1.1.4 |
| 班级 | 7.3-14 | mnormt | 1.5-5 | 实用工具 | 3.5.2 |
| cli | 1.0.1 | nlme | 3.1-137 | 无改动(具体含义和背景需要更多信息) | 2.1.2 |
| 剪辑器 | 0.5.0 | nnet | 7.3-12 | xml2 | 1.2.0 |
| 集群 | 2.0.7-1 | openssl(开放SSL) | 1.2.1 | xtable | 1.8-3 |
| codetools | 0.2-15 | 平行 | 3.5.2 | yaml | 2.2.0 |
| 编译器 | 3.5.2 | 柱子 | 1.3.1 | ||
| 配置 | 0.3 | pkgconfig | 2.0.2 |
后续步骤
有关 SQL Server 大数据群集的详细信息,请参阅 SQL Server 2019 大数据群集简介