整套大数据学习资料(视频+笔记)百度网盘无门槛下载:http://www.edu360.cn/news/content?id=3377

15.5.1. 导入控制

hadoop 花牛 8℃ 0评论

Sqoop不需要每次都导入整张表。例如,可以指定仅导入表的部分列。用户也可以在查询中加入WHERE子句,以此来限定需要导入的记录。例如, 如果上个月已经将id0~99,999的记录导入,而本月供应商的产品目录中增加了1000种新部件,那么导入时在查询中加入子句WHERE id >= 100000,就可以实现只导入所有新增的记录。

用户提供的WHERE子句会在任务分解之前执行,并且被下推至每个任务所执行的査询中。

转载请注明:全栈大数据 » 15.5.1. 导入控制

喜欢 (0)or分享 (0)
发表我的评论
取消评论

表情

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址