Toggle navigation
首页
社区
公告
教程
下载
分享
问答
JD
灌水
云平台
登 录
注册
请问公司一般跑数据是增量数据还是全量数据?
问答
⋅
ling775000
⋅ 于
2018-03-30 00:02:01
⋅ 最后回复由
青牛
于
2018-03-30 00:21:59
⋅ 4178 阅读
如题
×
添加附言
附加内容, 使用此功能的话, 会给所有参加过讨论的人发送提醒.
点赞
成为第一个点赞的人吧
回复数量:
1
青牛
国内首批大数据从业者,就职于金山,担任大数据团队核心研发工程师
#1
⋅
2018-03-30 00:21:59
etl增量跑,业务数据指定范围跑,全量跑会大量占用集群资源容易挨揍,所以hive一般开启严格检验模式sql不指定分区会报错。
暂无评论~~
请注意单词拼写,以及中英文排版,
参考此页
支持 Markdown 格式,
**粗体**
、~~删除线~~、
`单行代码`
, 更多语法请见这里
Markdown 语法
支持表情,可用Emoji的自动补全, 在输入的时候只需要 ":" 就可以自动提示了 :metal: :point_right:
表情列表
:star: :sparkles:
上传图片, 支持拖拽和剪切板黏贴上传, 格式限制 - jpg, png, gif,
教程
发布框支持本地存储功能,会在内容变更时保存,「提交」按钮点击时清空
登 录
注册
Ctrl+Enter
请问公司一般跑数据是增量数据还是全量数据? - 海汼部落 #大数据# @海汼部落
新 建 话 题
作者:ling775000
ling775000 的其他话题
spark 底层是 rdd,flink 底层是怎样的数据结构来维护运算?
flink 消费 kafka,保证数据不丢失且只消费一次语义,也要像 sparkstreaming 一样手动管理 offset 吗?
请问 flume client 是一定要有的角色吗?
threadlocal 和线程局部变量区别是什么?
请问 Linux 里全选的快捷键是什么呢?
请问如何去理解 MPP 架构呢?
请问 BI 开发工程师是做什么的?
毕业两年,在深圳做大数据开发能拿多少呢?
分类下其他主题
sqoop 镜像下连接数据库应该注意什么呢,我是打开了 hive,MySQL,sqoop 三个镜像,在 sqoop 中也启动了 MySQL,但还是连接失败,是还有什么没打开吗?
为什么 MySQL 登录会出错?
为什么 Spark 教程网课中使用的 hadoop 的配置镜像中 s2 结点连接不上?
使用问题请教?
安装 CDH 到初始化 CM 元数据库步骤报错?
请问在 Spark 里先对字段一分组,再对字段二分组应该如何实现?
Spark local 模式是否需要安装 Spark 集群?
RDD 编程第三问代码存在问题?
随机推荐话题
公开课回放
[公告] 海牛部落新人必看帖
[公告] 海汼部落云平台使用教程
[公告] 海汼部落云平台如何保存实操进度(镜像功能)
[公告] 海汼部落云平台资源价格
QQ群1:551936262
关注海牛部落大数据技术社区