开源软件名称:profile-tags
开源软件地址:https://gitee.com/chbHome/profile-tags
开源软件介绍:
欢迎大家加入用户画像持续更新。。。介绍软件架构整个项目大致分为五个Module模块: - 1)、数据迁移
- tags-etl
- 编写代码将MySQL数据库表的数据迁移到HBase表中
- 2)、标签模型调度
- tags-scheduler
- Oozie Java Client API如何调度执行Workflow和Coordinator
- Azkaban Java Api 调度
- 3)、工具类
- tags-up
- 实现模型调度,主要HDFS文件系统操作和Oozie Java Client API使用工具类封装
- 4)、tags-web
- 用户画像标签系统WEB 平台
- 原版使用SSM实现,基于SpringBoot实现(结合Vue.js)
- 5)、tags-model
- 模型开发,给用户打标签,每个业务标签就开发SparkApplication程序,调度执行
技术架构项目的总体架构图:项目功能架构图:标签体系流程图:安装教程建议安装 scala-2.11.8 - tag-etl部署
- complie后, install一下,其他Module依赖
- tag-web部署
- tag-web中的前端是编译的静态文件,所有后端配置文件端口最好别改
使用说明参与贡献有擅长前端的同学,也可以帮忙优化下界面,感谢参与- Fork 本仓库
- 新建分支
- 提交代码
- 新建 Pull Request
问题hbaseLoadIncrementalHFiles 的包变化
- hbase1.2.0: hbase-server.jar org.apache.hadoop.hbase.mapreduce.LoadIncrementalHFiles
- hbase2.0.2: hbase-server.jar org.apache.hadoop.hbase.tool.LoadIncrementalHFiles
·HFileOutputFormat2· 的包变化 - hbase1.2.0: hbase-server.jar org.apache.hadoop.hbase.mapreduce.HFileOutputFormat2
- hbase2.0.2: hbase-mapreduce.jar org.apache.hadoop.hbase.mapreduce.HFileOutputFormat2
Base64 资源最原始的虚拟机和资源,以及视频链接:https://pan.baidu.com/s/1j8J316yyyL4-vukdh6L2rg 提取码:dsxu 也可以在doc/tags.zip下载 用户数据链接:https://pan.baidu.com/s/1TgwqFqcYcTM8XjdZO9JIvA提取码:731v |
请发表评论