您当前的位置：需求库 > 全域旅游大数据中心
580
2020/04/23
咨询需求
发布需求基本信息
- 需求标题 全域旅游大数据中心
- 需求主体 企业用户
- 行业领域 软件
-
需求介绍
一、项目名称：
全域旅游大数据中心
二、项目内容：
1.对多源异构的旅游数据进行采集、维护、查询、分析
基于消息队列流式数据采集，分布式处理
对旅游数据进行清洗、整理、转换，提供数据可视化转换和脚本转换方式
对数据源个数据字段的质量、内容分布、统计、概貌、密度等信息进行探索提取，并支持不同数据的血缘关系
2.数据共享需求
基于数据资源目录发布数据资源实现共享，根据资源类型和内容确定共享方式
共享门户：基于信息资源目前查看、浏览、共享申请等功能
三、技术需求：
cloudera Manager:集群管理
cloudera Manager service:集群监控
HDFS：文件存储
Yarn资源调度
Zookeeper :集群
kafka:消息对了
Hive：数据仓库
Spark：计算引擎
Sqoop：数据查询工具
Impala：查询工具
四、技术指标（预期目标）：
希望做成2套系统：
数据集成处理子系统
数据共享系统
交易信息
- 项目总投资 面议
- 交易方式 其他
- 截止日期 2021/04/23
- 使用区域 江苏省-南京市-玄武区
- 联系人姓名 王小刚
- 联系人电话 15802954800
