Spark从零开始:SparkStreaming
体系课

Spark从零开始:SparkStreaming

  • 大数据系统

SparkStreaming实战演练,解锁数据流处理新技能

¥149.9
本课程包括
  • 5小时13分钟的视频随时观看
  • 课程包含 5 道测试题
  • 可在APP随时观看
  • 结业证书
你将收获
  • 深入理解SparkStreaming:学员将全面理解SparkStreaming的工作原理、架构以及核心组件,为后续的深入学习打下坚实的基础。
  • 掌握实时数据流处理技能:通过学习SparkStreaming的实战应用,学员将掌握实时数据流处理的关键技术和方法,提升数据处理能力。
  • 解决工作中的实际问题:课程中的案例分析和项目实践将帮助学员将所学知识应用于实际工作中,解决实时数据处理方面的难题。
  • 增强职业竞争力:掌握SparkStreaming这一热门技术将大大提升学员在大数据领域的职业竞争力,为他们未来的职业发展打开更广阔的空间。

数千家企业正在使用三节课企业版学习

无限制学习5000+门课程,200+精选学习专题

免费申请体验>
课程介绍

随着数据量的不断增长,传统的数据处理方式已难以满足实时性要求。SparkStreaming以其高效、可靠的数据流处理能力,成为了大数据处理领域的热门技术。然而,如何有效利用SparkStreaming进行实时数据流处理,是许多从业者面临的挑战。

为此,三节课特别邀请了经验丰富的赵渝强老师带来本次课程。

本课程将带领学员深入了解SparkStreaming的核心技术和实战应用,通过案例分析和项目实践,帮助学员掌握数据流处理的新技能,提升工作效率和竞争力。

适合人群
  • 大数据初学者:对于刚刚接触大数据领域的初学者来说,SparkStreaming是一个重要的技术方向。本课程为这些学员提供了从基础到进阶的全面学习路径。
  • 数据工程师和数据分析师:数据工程师和数据分析师经常需要处理实时数据流,SparkStreaming的掌握将极大地提升他们的工作效率。
  • 软件开发人员:对于想要将大数据技术融入自己应用开发的软件开发人员来说,学习SparkStreaming将帮助他们构建更加高效、实时的数据处理系统。
  • 对实时数据处理感兴趣的人士:无论是学术研究还是商业应用,实时数据处理都是一个热门话题。这门课程将为对实时数据处理感兴趣的人士提供一个深入学习和实践的平台。
讲师介绍
曾任京东大学大数据学院院长 曾任Oracle中国有限公司高级技术顾问
擅长领域:
  • 大数据系统
  • 数据库
  • 数据挖掘与分析
  • 数据可视化
  • Java
  • Docker
  • K8S
擅长领域:大数据、数据库、云原生、容器技术
课程大纲
共0节 时长0分钟 全部收起
课程概述
9分钟
第一章 Spark Streaming基础
共3节 | 49分钟
  • 第一节 Spark Streaming简介
    14分钟
  • 第二节 Demo-NetworkWordCount
    14分钟
  • 第三节 开发自己的NetworkWordCount程序
    21分钟
第二章 如何在Spark SQL使用数据源
共9节 | 2小时30分钟
  • 第一节 StreamingContext对象详解
    14分钟
  • 第二节 什么是DStream
    12分钟
  • 第三节 DStream中的转换操作
    28分钟
  • 第四节 窗口操作
    13分钟
  • 第五节 DStream的输入流
    25分钟
  • 第六节 DStream的输出操作和foreachRDD的设计模式
    26分钟
  • 第七节 使用DataFrame和SQL操作
    9分钟
  • 第八节 缓存与持久化机制
    2分钟
  • 第九节 使用检查点1
    19分钟
第三章 Spark SQL的性能优化
共6节 | 1小时38分钟
  • 第一节 Flume简介和体系结构
    12分钟
  • 第二节 使用Push模式接收Flume数据
    21分钟
  • 第三节 使用Pull模式接收Flume数据
    12分钟
  • 第四节 Kafka简介与安装配置
    29分钟
  • 第五节 基于Receiver接收Kafka的数据
    12分钟
  • 第六节 基于直接读取方式接收Kafka的数据
    12分钟
第四章 开发Spark SQL程序
6分钟
测试
共5题
购课须知

课程有效期:

自购买课程之日起 365 天,部分参与营销活动产品以活动规则为准,请同学在有效期内学习、观看课程。

上课模式:

课程采取录播模式,请注意自学课无班级微信群、班主任带班及助教批改服务。

注:自学课不支持退款,确保你是真的需要再进行报名,报完名之后还请认真学习。