海汼部落
  • 首页
  • 课程
  • 实战
  • 云平台
  • 部落
  • 公告
  • 分享
  • 问答
    登 录 注册

NEMOlv

第 8977 位会员

0 关注者
14 评论
8 话题

  • Ta 发布的话题
  • Ta 发表的回复
  • Ta 关注的用户
  • Ta 赞过的话题
  1. 个人中心
  2. Ta 发表的回复(14)
  • [下载] Flink 教程

    NB

  • RDD 编程第三问代码存在问题?

    @青牛 对,我就是跟您说一下有这个问题。我贴出了B站上面的代码,您可以直接复制过去修改。再次感谢您的耐心解答qvq

  • RDD 编程第三问代码存在问题?

    @青牛B站上的是对的,网页上的是错的

  • RDD 编程第三问代码存在问题?

    @青牛 教程里面第三问的代码和第一问的代码是一模一样的。

  • 请问 XFCE 桌面环境的 Hadoop 安装在哪个目录下?

    @青牛 原来如此,其实学习RDD编程不需要搭建集群。我一直以为需要搭建好集群才能允许RDD编程。也就说说在工作中,如果想使用集群的话只需要把IDEA的MasterURI换成集群对应的URI即可。

  • 请问 XFCE 桌面环境的 Hadoop 安装在哪个目录下?

    @青牛 请问Spark的安装目录呢?如果没有安装Spark的话,为什么我可以使用local模式进行RDD编程。local模式不依赖于Spark吗?

  • 如何删除已安装软件的压缩包?

    @青牛 了解,谢谢您

  • spark 使用的是 local 模式,在临时桌面上内存不足,请问应该如何修改?

    @青牛

    file

    file

    正式桌面的网络好像不太行,scala组件一直无法搜索出来

  • spark 使用的是 local 模式,在临时桌面上内存不足,请问应该如何修改?

    @青牛

    file如图所示集群运行的很慢,10分钟都没有出结果。正式桌面要达到视频中的速度需要多少CPU+多少内存呀

  • spark 使用的是 local 模式,在临时桌面上内存不足,请问应该如何修改?

    @青牛 正式桌面的配置和之前临时桌面的配置一样吗?如果一样的话,我能不能直接使用正式桌面来学习spark的RDD编程,在集群上运行电影表这个任务很慢。

  • spark 使用的是 local 模式,在临时桌面上内存不足,请问应该如何修改?

    @青牛 我把local模式换成spark集群就可以运行了(我发现RDD编程部分的教程都是用local模式讲的,没有设置过集群模式)。
    另外就是,在B站上看教程任务运行的很快,是因为B站演示用的临时桌面性能高吗?电影表练习的rating.txt大概有10万条原始记录,这个量级感觉不是很大,为什么算的这么慢呀

  • spark-submit 提交无法连接 master?

    感谢已成功解决。

  • [下载] Spark 教程

    nb

  • [下载] Hadoop3 教程

    nb

为技术学习者提供一个动手实战、分享创造、结识伙伴、协同互助的平台。    

  京公网安备 11011402010672号        京ICP备17041118号-2