有关Databricks统一分析平台的问题
在databricks集群配置UI中，我尝试添加一个init脚本。我已将脚本存储在 DBFS 中，但是初始化脚本 UI 没有下拉菜单或明显的方式来选择该文件。 ...
我正在努力在列表中列出Python中的笔记本内容，我能够列出工作区中的所有笔记本路径，我需要每个NB的内容，我必须检查哪个挂载点在
上下文：我正在尝试制作一份报告来监视 DataBricks 环境中构建的所有进程。因此，我需要获取笔记本和工作流程数据（附加的集群、创建
Databricks - 如何获取 delta 表 parquet 文件的当前版本
假设我有一个名为数据的表，它是一些时间序列。它的存储方式如下： /数据 /日期=2022-11-30 /地区=美国 零件-000001.镶木地板 零件-000002.镶木地板 我在哪里...
我需要将标题附加到 azure databricks 中的 csv/文本文件。我正在尝试将文件内容读入字符串，附加标题并重写。 文件内容 = dbutils.fs.head(文件路径)
我想从数据块中的另一个笔记本调用一个笔记本。 假设我有notebook_main 和notebook_variable。 我想从notebook_main运行notebook_variable并从
（Spark 和）Databricks 中的下推查询不适用于“with 语句”？
我是 Azure databricks 的新手，所以希望我的问题不会太离题。我正在尝试在 Azure databricks 笔记本中运行 sql 下推查询，但使用“with 语句”，但它不起作用。我...
当作业在 Databricks 中运行时，如何获取作业名称。这不是基于笔记本的工作
我正在尝试获取正在运行的作业的名称。我想获取姓名并发送消息。示例：我将作业部署到 databricks 并运行它。我希望这项工作在 slac 启动时发送消息...
在Databricks上 我有一个目标表，如下所示 data = [("0", "null", "女性", "美国", True,"插入"), ("1", "1", &...
通过 terraform 将 Azure Databricks 集群的运行时版本更改为 13.3 LTS
我使用 terraform 在 Azure Databricks 工作区中创建了一个 Databricks 集群。我正在使用 terraform azurerm 和 databricks 提供程序。我的集群的运行时版本是 11.3 LTS。现在我...
我正在从 PostgresSQL 创建一个 parquet 文件，它的所有内容都标记为 varchar 列。一旦我们在 ADLS 中获得了文件，我们想要根据数据（如日期、整数、
解压缩：尝试安装 Databricks CLI 时未找到错误
我正在尝试通过 WSL2 从本文档下载 Databricks CLI。我通过命令提示符连接到 WSL2。当我跑步时 sudo curl -fsSL https://raw.githubusercontent.com/databri...
我有一个用例，其中我有一个包含“company_id”和“date”的文件路径。 有另一个 s3 文件，我需要根据“company_id&
我在dlt的文档中读到“由于Delta Live Tables管理集群自动终止和重用逻辑，因此集群自动终止时间无法被覆盖。” 有没有哇...
我在我们的 ETL 管道之一中使用 dlt python，并且有要使用 delta live 表处理的 kafka 主题。由于运行 DLT 管道时，我们无法打印任何日志/状态消息，我...
Databricks SQL 不支持 DECLARE 关键字
在SQL中我们可以使用DECLARE来初始化一个值 声明 @StartDate DATETIME = '01/01/2013' 声明 @EndDate DATETIME = '01/01/2015' 由于DATABRICKS SQL不支持DECLARE，我们如何编写...
我有许多从 SQL 服务器加载的表。 SQL Server 中的时间戳存储方式类似于 2003-11-24T09:02:32 我将这些作为 parquet 文件放在我们的原始存储位置中并选择 t...
我正在使用 Databricks 在 Pytorch 中训练/测试模型，但我不断遇到没有意义的内存错误。在 Databricks 作业的配置中，我指定了 node_type_id 和
尝试创建 Databricks 密钥时，Windows Git Bash 中出现“错误：^D”
我正在尝试在 Git Bash 的 Databricks 中创建一个秘密。我创建了一个范围，但是当我尝试输入秘密值时，我得到： $ databricks 秘密 put-secret $SCOPE $KEYNAME v 请输入您的秘密
我是 Databricks 的新手，正在阅读一本关于它的书，做示例等等，但我遇到了一个我似乎无法解决的错误，我正在尝试将文件从驱动程序移动到使用