scala 相关问题

Scala是一种通用编程语言,主要针对Java虚拟机。旨在以简洁,优雅和类型安全的方式表达通用编程模式,它融合了命令式和函数式编程风格。其主要特点是:具有类型推断的高级静态类型系统;功能类型;模式匹配;隐含参数和转换;运算符重载;与Java的完全互操作性;并发

EMR 上的 Spark 日志在哪里?

在 EMR 中的 Spark 上运行作业时,我无法从 Scala 中的 println 调用中找到错误日志或消息。 我可以在哪里访问这些内容? 我正在使用

回答 6 投票 0

如何使用 Spark 数据框架的架构创建 Hive 表?

我想使用 Spark 数据帧的架构创建一个配置单元表。我怎样才能做到这一点? 对于固定列,我可以使用: val CreateTable_query = "创建表我的表(a string, b string, c double)"

回答 6 投票 0

无法在 Scala 3 中执行上下文函数的扩展方法

我在 Scala 3 中定义了上下文函数的扩展方法: 对象范围{ 扩展名 [E, A](a: List[E] ?=> A) def extFoo: A = foo(a) 私人 def foo[E, A](a: 列表[E] ?=> A) = { ...

回答 1 投票 0

无法在 Scala 3 中执行上下文函数的扩展方法

我在 Scala 3 中定义了上下文函数的扩展方法: 对象范围{ 扩展名 [E, A](a: List[E] ?=> A) def extFoo: A = foo(a) 私人 def foo[E, A](a: 列表[E] ?=> A) = { ...

回答 1 投票 0

使用 Boxfuse 将 Play 框架应用程序部署到 Amazon AWS 时出现“主机不允许”错误

我正在尝试将一个使用 Scala 中的 Play Framework 编写的简单 Web 应用程序部署到 Amazon Web 服务。 Web 应用程序在我本地的开发模式和生产模式下运行正常...

回答 3 投票 0

sbt 任务来增加项目版本

是否有SBT任务来增加项目的版本? 给定类似于以下 build.sbt 的初始配置 名称 := '我的项目' 组织 := 'org.example' 版本 := '0....

回答 2 投票 0

Spark UDF 不会在 DataFrame 上计算最终值,但会在测试 DataFrame 上计算最终值

我有一个数据框,它是 hive_metastore 中的 Delta 表列表。 对于每个表,我想获取增量日志以提取一些信息。我可以通过在 A 中收集 DataFrame 来做到这一点...

回答 1 投票 0

如何处理相同符号的重复导出?

以下代码导入相同的符号两次,因为它导入了两个不同的对象,并且都导出了它: 对象分机: def backs(s: String): String = s.reverse 对象A: 导出分机* ...

回答 1 投票 0

转换 Tapir 模式的构造函数名称

JSON 库“Circe”有一个配置参数,transformConstructorNames: String => String,它允许您转换任何类的名称。 貘有类似的东西吗? 原因...

回答 1 投票 0

如何在通用案例类上进行.copy而不直接扩展它们?

如何使用 case class .copy 方法返回通用 case 类的副本? 我正在努力实现以下目标: def 修改编号[T <: { def number: Int }](objectWithNumber: T, numberToRep...

回答 1 投票 0

使用 OpenAPIDocsInterpreter 为 ZIO ZServerEndpoints 生成 Tapir 文档

问题:OpenAPIDocsInterpreter 是用 AnyEndpoint 编写的: 类型 AnyEndpoint = 端点[_, _, _, _, _] 当然,我们的 tapir-zio 应用程序由 ZServerEndpoints 组成 - ZServerEndpoint...

回答 1 投票 0

如何在 Scala 中的 Microsoft Fabric Spark 上使用 Apache POI 从模板创建 PowerPoint 演示文稿?

我想使用 Apache POI 读取 PowerPoint POTX 文件,并在笔记本运行过程中填充模板,并将生成的 PPTX 文件写入 Azure Blob 存储。这是在 Spark in Mic 上执行的...

回答 1 投票 0

无法通过提前 TestClock 来测试具有指数重试的 ZIO HTTP 客户端

我正在使用 ZIO HTTP 3.0.0-RC6(传递性地拉取 ZIO 2.0.21,但我通过指定 ZIO 版本手动驱逐它)、ZIO 和 ZIO-test 2.1-RC1 以及 Scala 2.13。我的套房看起来像这样(

回答 2 投票 0

从 CSV Gadling feeder 获取值以构建请求

我有一个简单的场景,当我想从循环中的csv文件读取端点时。该请求将根据端点和我需要传递给函数的相同端点构建

回答 1 投票 0

在java 8中将列表拆分为多个具有固定元素数量的列表

我想要类似于scala分组函数的东西。基本上,一次选择 2 个元素并处理它们。这是相同的参考: 使用 fi 将列表拆分为多个列表...

回答 6 投票 0

如何在 scala 3 中为元组定义 scala.ValueOf?

ValueOf 类型函数可以在方法的上下文参数列表中使用,以选择单例类型的单个居民,如果类型参数不是单例,则会引发编译错误...

回答 1 投票 0

LocalDate问题的map和序列的DataSet编码

我正在基于 Spark 3.5 在 Scala 中编写一个解决方案,该解决方案具有复杂的日期映射/序列数据结构,我需要用 null 或 None 表示缺失的日期。因为这是 scala,所以我的偏好是“无”,

回答 1 投票 0

Scala 中第 n 个模式匹配的索引

我有一个程序,我试图找到字母“e”第n次出现的索引。我猜到了类似这样的事情... def findE(line: String, 忽略: Int) : Int = { val 模式 = "...

回答 2 投票 0

将 Spark DataFrame 转换为稍微不同的案例类?

我在 HDFS 中有一些数据位于 parquet-protobuf 中。 由于一些项目限制,我想使用 Spark DataFrame 读取该数据(简单),然后转换为略有不同的案例类...

回答 1 投票 0

在 Scala 中使用 Java 枚举时如何解决“非法循环继承”编译错误?

看起来 Scala 编译器无法处理使用静态方法实现接口的枚举,该静态方法捕获枚举类型作为方法参数。 考虑以下接口: //识别...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.