开发者交流平台
开发者交流平台

通过集体智慧和协作来改善编程学习和解决问题的方式。致力于成为全球开发者共同参与的知识库,让每个人都能够通过互相帮助和分享经验来进步。

bj
登录
  • 友情链接
站内
hadoop

hadoop

go

需要在YARN上安装Spark才能从HDFS读取数据到PySpark吗?

英文: do we need to install spark on yarn to read data from HDFS into Py Spark? 问题 我有一个Hadoop 3.1.1多节点...
huangapple 2023年1月6日149评论apache-spark pyspark
go

没有找到字段异常,在使用构建器创建Spark会话时发生

英文: NoSuchFieldException while creating a spark session using builder 问题 以下是您提供的代码的翻译部分: 我正在尝试使用以下代码...
huangapple 2020年10月28日148评论apache-spark java
go

指定 `mapreduce.map.java.opts` 而不覆盖内存设置怎么办?

英文: Specifying mapreduce.map.java.opts without overriding memory settings? 问题 我正在使用一个运行 mapr 5.2 的 H...
huangapple 2020年10月23日139评论java memory
go

JAVA_HOME 设置不正确 – 在 Windows 10 上安装 Hadoop

英文: JAVA_HOME is set incorrectly -- Hadoop on Windows 10 问题 Context: 我正在尝试在我的 Windows 10 机器上安装 Hadoo...
huangapple 2020年10月20日136评论environment-variables java
go

凤凰表选择连接返回失败,尝试次数为11次。

英文: phoenix table select join return Failed after attempts=11 问题 我在执行以下语句时遇到了错误: SELECT r.*, l.produ...
huangapple 2020年10月18日137评论hadoop java
go

HDFS文件编码转换器

英文: HDFS File Encoding Converter 问题 我正在尝试将一个HDFS文件从UTF-8转换为ISO-8859-1。 我编写了一个小的Java程序: String theInp...
huangapple 2020年10月6日140评论apache-spark java
go

Hadoop setfacl via Scala/Java

英文: Hadoop setfacl via Scala/Java 问题 有没有办法通过Scala/Java执行hdfs dfs -setfacl命令?通过hdfs shell执行速度很慢。 例如,我...
huangapple 2020年10月2日146评论java scala
go

spark-3.0.1-bin-hadoop2.7启动失败,java:没有该文件或目录

英文: spark-3.0.1-bin-hadoop2.7 failed to launch, java: No such file or directory 问题 在接触Java时,我遇到了一些问题...
huangapple 2020年9月30日134评论apache-spark java
go

spark的SAVEASTEXTfile操作花费了很多时间 – 1.6.3

英文: spark SAVEASTEXTfile is taking lot of time - 1.6.3 问题 从Mongo中提取数据。处理数据,然后将数据存储在HDFS中。 提取和处理100万条...
huangapple 2020年9月25日188评论apache-spark java
go

使用Java进行Spark文件流检查点。

英文: Checkpoint with spark file streaming in java 问题 我想在Spark文件流应用程序中实现检查点,以便在任何情况下停止/终止我的Spark流应用程序时...
huangapple 2020年9月21日140评论hadoop java
6

文章导航

1 2 3 4 5 6
name
开发者交流平台
通过集体智慧和协作来改善编程学习和解决问题的方式。致力于成为全球开发者共同参与的知识库,让每个人都能够通过互相帮助和分享经验来进步。
文章117266 留言 4 访客17030159

热门标签

python javascript pandas flutter c# arrays typescript c++ java sql json spring-boot android html reactjs go node.js r spring css

悟已往之不谏,知来者之可追!

今日
00%
已00小时
本周
00%
已过00天
本月
00%
已过00天
今年
00%
已是00月

Copyright ©  开发者交流平台 版权所有.

闽 ICP 备 2022019110 号 - 1
  • 开发者交流平台

    本页二维码