scala

英文: Exploding Nested Struct In Spark Dataframe having Different Schema 问题 我有一个 JSON，其具有以下模式： |-- Poo...

英文: Debugging SCollection contents when running tests 问题 有没有办法在运行单元测试（PipelineSpec）时查看 SCollection 的...

英文: Spark code takes too much time to run on cluster 问题 我已经编写了一个Spark应用程序。我的代码对较小规模的数据集工作得很好，但对于较大规模...

英文: How to iterate Big Query TableResult correctly? 问题 我有一个在Big Query中的复杂联接查询，并需要在一个Spark作业中运行。这是当前的...

英文: Server side pagination in Graphql Scala 问题 以下是您提供的内容的翻译： 我需要在Scala中的GraphQL中实现服务器端分页。我有七份报告，已经使用...

英文: Using map() and filter() in Spark instead of spark.sql 问题 I have two datasets that I want to INN...

英文: Exact 1 year previous date in Scala 问题 我有一个日期字符串，格式如下 - 190515(YYMMDD)。如何从中获取并填充一个确切的一年前的日期？即，预期...

英文: How schema is Inferring in spark? 问题 以下是翻译好的部分： 我有一个包含以下数据的CSV文件： DEST_COUNTRY_NAME,ORIGIN_COUNT...

英文: Is there a way to add a descriptive Assert message in a Boolean ZIO Test 问题 我有一些要测试的布尔值，如下： asse...

英文: Spark properties file read 问题 我尝试在Spark中读取属性文件，其中我的文件位置在运行作业时可用，但出现以下错误 代码如下： object runEmpJob {...