821 人学过 4 次评价 作者: yoCat 难度: 初级
本节课主要介绍 Spark 的算子,通过演示黑名单实时过滤案例来加深您对 Spark RDD 的理解, 适合刚有 Spark 基础 的人学习。
知识点: 1.nc 2.SparkStreaming 3.SparkRDD
yoCat 共发布过 9 门课程
看完后有个问题想咨询个问题 demo 是通过初始化数组的方式,来指定黑名单的。如果是真是生产环境,黑名单该如何获取?比如黑名单是在mysql数据中且会持续增长。那么spark streaming 如何能够获取这样的黑名单数据与socket 的数据进行left join 呢?
冒然闯入,不这流程描述得很清楚,能理解实验的意图与主要关键。
不错
课程邀请码是多少
会员免费
看完后有个问题想咨询个问题 demo 是通过初始化数组的方式,来指定黑名单的。如果是真是生产环境,黑名单该如何获取?比如黑名单是在mysql数据中且会持续增长。那么spark streaming 如何能够获取这样的黑名单数据与socket 的数据进行left join 呢?
冒然闯入,不这流程描述得很清楚,能理解实验的意图与主要关键。
不错
课程邀请码是多少