PySpark实战:PySpark+Kafka介绍

来自CloudWiki
跳转至: 导航搜索

介绍

当前大数据处理应用中,

不少应用对实时的数据处理需求越来越高

本章将利用PySpark和Kafka来构建一个简单的实时项目。

具体步骤

  • Kafka环境搭建
  • Kafka消息基本处理
  • Web Socket:从服务器主动推送数据到客户端
  • Flask: 使用Flask构建一个简单Web应用