• 设为首页
  • 点击收藏
  • 手机版
    手机扫一扫访问
    迪恩网络手机版
  • 关注官方公众号
    微信扫一扫关注
    迪恩网络公众号

TweetMap: 基于 kafka, Angular, Spring Boot, Flink, Elasticsearch, Kibana, Docker ...

原作者: [db:作者] 来自: 网络 收藏 邀请

开源软件名称:

TweetMap

开源软件地址:

https://gitee.com/ZmyZheng/TweetMap

开源软件介绍:

在线实时全球推特话题热度趋势图

  1. 通过集成Twitter Streaming API,用java构建实时推特收集程序
  2. 将获取到的实时推文发送到Kafka集群中
  3. 利用Apache Flink进行实时推文流处理(解析、过滤、格式转换)
  4. 将处理过的推文存储到Elasticsearch以便数据持久化和索引
  5. 利用SpringBoot开发RESTful API并从Elasticsearch中获取推文
  6. 搭建一个基于Angular的前端应用程序可视化实时推特热度话题分布图
  7. 使用Kibana显示推特地理热度图
  8. 构建Docker image并部署各微服务组件到Kubernetes集群

Build

./gradlew :tweet-collector:clean :tweet-collector:build :tweet-collector:dockerPush

java -jar tweet-collector/build/libs/tweet-collector-1.1-SNAPSHOT.jar

./gradlew :flink-processor:clean :flink-processor:build

Tweet Map with Trends

  1. Build a java Tweet Collector to collect real-time tweets with Twitter Streaming API
  2. Push collected tweets to Kafka cluster
  3. Utilize Apache Flink Streaming to process (parse, filter and tranform) tweets
  4. Ingest processed tweets to Elasticsearch for data persistance and index
  5. Develop SpringBoot RESTful API server to query tweets from Elasticsearch
  6. Visualize real time tweet trends with Frontend Angular web application
  7. Show Geographical Tweet Heat Map with Kibana
  8. Create Docker image and deploy microservices to Kubernetes cluster

鲜花

握手

雷人

路过

鸡蛋
该文章已有0人参与评论

请发表评论

全部评论

专题导读
热门推荐
热门话题
阅读排行榜

扫描微信二维码

查看手机版网站

随时了解更新最新资讯

139-2527-9053

在线客服(服务时间 9:00~18:00)

在线QQ客服
地址:深圳市南山区西丽大学城创智工业园
电邮:jeky_zhao#qq.com
移动电话:139-2527-9053

Powered by 互联科技 X3.4© 2001-2213 极客世界.|Sitemap