rdd
-
使用 sc.textFile (“s3n://...”) 从 S3 生成读取文件 尝试使用 spark-shell 读取位于 S3 中的文件: IOException: No FileSystem for scheme: s3n 错误发生在: 开发机器上的 Spark 1.31 或 1.40(无 Hadoop 库) 从 所暗示的那样。我将尝试Spark for Hadoop 2.40,看看
-
-
如何在 Spark RDD (Java) 中按索引获取元素 我知道rdd.firstwfirst()的方法,它给了我RDD中的第一个元素。 还有rdd.take(num)方法,它给了我第一个“num”元素。 但是,难道没有按索引获取元素的可能性吗? 谢谢
-
Apache Spark 中的矩阵乘法 [已关闭] 我正在尝试使用Apache Spark和Java执行矩阵乘法。 我有2个主要问题: 如何创建可以在Apache Spark中表示矩阵的RDD? 如何将两个这样的RDD相乘?
-
标签