英文: do we need to install spark on yarn to read data from HDFS into Py Spark? 问题 我有一个Hadoop 3.1.1多节点...
没有找到字段异常,在使用构建器创建Spark会话时发生
英文: NoSuchFieldException while creating a spark session using builder 问题 以下是您提供的代码的翻译部分: 我正在尝试使用以下代码...
指定 `mapreduce.map.java.opts` 而不覆盖内存设置怎么办?
英文: Specifying mapreduce.map.java.opts without overriding memory settings? 问题 我正在使用一个运行 mapr 5.2 的 H...
JAVA_HOME 设置不正确 – 在 Windows 10 上安装 Hadoop
英文: JAVA_HOME is set incorrectly -- Hadoop on Windows 10 问题 Context: 我正在尝试在我的 Windows 10 机器上安装 Hadoo...
凤凰表选择连接返回失败,尝试次数为11次。
英文: phoenix table select join return Failed after attempts=11 问题 我在执行以下语句时遇到了错误: SELECT r.*, l.produ...
HDFS文件编码转换器
英文: HDFS File Encoding Converter 问题 我正在尝试将一个HDFS文件从UTF-8转换为ISO-8859-1。 我编写了一个小的Java程序: String theInp...
Hadoop setfacl via Scala/Java
英文: Hadoop setfacl via Scala/Java 问题 有没有办法通过Scala/Java执行hdfs dfs -setfacl命令?通过hdfs shell执行速度很慢。 例如,我...
spark-3.0.1-bin-hadoop2.7启动失败,java:没有该文件或目录
英文: spark-3.0.1-bin-hadoop2.7 failed to launch, java: No such file or directory 问题 在接触Java时,我遇到了一些问题...
spark的SAVEASTEXTfile操作花费了很多时间 – 1.6.3
英文: spark SAVEASTEXTfile is taking lot of time - 1.6.3 问题 从Mongo中提取数据。处理数据,然后将数据存储在HDFS中。 提取和处理100万条...
使用Java进行Spark文件流检查点。
英文: Checkpoint with spark file streaming in java 问题 我想在Spark文件流应用程序中实现检查点,以便在任何情况下停止/终止我的Spark流应用程序时...
6