spark 基于内存的分布式计算框架

教程 ⋅ 海牛博士 ⋅ 于 2017-09-29 17:21:06 ⋅ 最后回复由 江南一叶 于 2022-08-01 13:36:37 ⋅ 33489 阅读

大数据的处理怎么能变快一点，答案是请用spark，因为它是基于内存的，可以有效减少数据的落地次数。

  1. spark 介绍、RDD 原理、spark 开发环境搭建

  2. RDD 编程基础使用

  3. RDD 编程二次排序、mapjoin

  4. spark-sql

  5. spark-sql 编程

  6. spark-hbase

  7. spark-hbase_bulkload、spark 程序集群运行、spark-streaming

  8. Spark 的 updateStateByKey、Windows、checkpoint、updateStateByKey_last_update、SparkStreamingFile

  9. kafka 介绍与安装、kafka-java-API、spark-streaming-kafka、cogroup
版权声明:原创作品,允许转载，转载时务必以超链接的形式表明出处和作者信息。否则将追究法律责任。来自海汼部落－海牛博士,http://hainiubl.com/topics/202
本帖由 青牛 于 2年前 取消置顶
点赞
回复数量: 31
暂无评论~~
  • 请注意单词拼写，以及中英文排版，参考此页
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`, 更多语法请见这里 Markdown 语法
  • 支持表情，可用Emoji的自动补全, 在输入的时候只需要 ":" 就可以自动提示了 :metal: :point_right: 表情列表 :star: :sparkles:
  • 上传图片, 支持拖拽和剪切板黏贴上传, 格式限制 - jpg, png, gif，教程
  • 发布框支持本地存储功能，会在内容变更时保存，「提交」按钮点击时清空
Ctrl+Enter
新 建 话 题

作者：海牛博士

创始人
做最棒的技术学习社区

海牛博士 的其他话题

分类下其他主题

随机推荐话题

QQ群1：551936262 海汼部落QQ群1

关注海汼部落技术社区