apache-spark-sql

英文: Aggregate ArrayType column to get another ArrayType column without UDF 问题 我想做的是找到lis列的中位数值，但是要按某...

英文: Condense spark dataframe by selecting latest value and removing the nulls 问题 我想将给定的稀疏数据框压缩为单个记录，...

英文: Extract Column value into integer 问题 我有一个函数，看起来像这样： static Column getFormattedData(Column name, ...

英文: Multiple sources found for parquet 问题 我正在尝试在Google Dataproc Spark集群上提交一个Spark应用程序。我收到以下错误： Cause...

英文: How to Join tables flat with fixed params with Spark SQL 问题 我有一个在Spark中的数据集，其中有一些列。我想要通过保留一些列作为参...

英文: How to get index/position of column in dataframe (Spark sql Java) 问题 使用Spark Java（不是Scala或Python...

英文: How to trim the column values using Spark Dataframe 问题 **我有一个类似下面的数据框，我需要使用Spark数据框修剪SCHDULE列中的值...

英文: Executors not seem to be created or scaling up on Spark Application on AWS EMR Serverless 问题 I'm...

英文: spark complaining column not found even though error message show its there 问题 以下是您提供的代码中的已翻译部分：...

英文: Azure Synapse, Data Duplication Issue in PySpark When Reading and Writing to Delta Lake 问题 我正在开发...