实验 1
使用 Flume 收集数据
知识点: 1.Flume核心概念agent 2.agent里面包含3个核心组件:source、channel、sink。 3.sink组件是用于把数据发送到目的地的组件,目的地包括hdfs、logger、avro、thrift、ipc、file、null、hbase、solr、自定义。
Flume 可以从多个数据源获取数据,把这些数据传给远程主机(可能是一对多或流水线模型 中的多个目标),再把它们传给多个目的端。尽管 Flume 提供了开发自定义数据源和数据目的端的编程 API,但它原本就支持许多常见的场景。本课程源自图灵教育的《Hadoop基础教程》第10章,感谢图灵教育授权实验楼发布。
知识点: 1.Flume核心概念agent 2.agent里面包含3个核心组件:source、channel、sink。 3.sink组件是用于把数据发送到目的地的组件,目的地包括hdfs、logger、avro、thrift、ipc、file、null、hbase、solr、自定义。
免费
很好
总结很棒,加油哦 ❤
本次调试试验耗时将近四个小时,前面困难一些,百度查找之后轻松了,中间部分与前面大致相同没花费多久,最后两个调试案例花费的时间久一些,由于初接触,不懂,出现问题就是一遍遍地调试,不断地修改,最终自己是独立地把所有的调试案例都调试了一遍。过程枯燥但是收获很多。之后编程就是要不断地调试,遇到问题分析问题,上网搜索自己所缺少的那部分知识。
Ok
hao
学到了 感觉熟练了一些
很有收获
一步步来,思路清晰很明确
很好
实验步骤很详细,环境也很不错,就是不知道步骤中的内容能不能复制到虚拟机中
666
有点傻瓜式编程的感觉, 不错啊 .
不错的网站
hdfs拒绝访问。
很不错的环境,就是有点儿卡顿