# 电信客服大数据项目

**Repository Path**: sky_blue_gl/ct-fang-project

## Basic Information

- **Project Name**: 电信客服大数据项目
- **Description**: 😃本项目采用，Flume作为日志采集工具，Kafka作为消息队列缓存，使用Hadoop作为数据存储并使用Mapreduce作为数据计算，使用Redis作为数据缓存，使用SSM和ECharts作为数据展示工具，适合完成基本大数据技术栈学习的大数据学习者。
- **Primary Language**: Unknown
- **License**: MulanPSL-2.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 11
- **Forks**: 2
- **Created**: 2022-08-12
- **Last Updated**: 2025-06-04

## Categories & Tags

**Categories**: Uncategorized

**Tags**: Java, 大数据

## README

# 电信客服大数据项目

公网访问：http://47.94.139.13/

测试数据：19565082510 2018

## 1.1项目背景

​		**通信运营商每时每刻会产生大量的通信数据，例如通话记录，短信记录，彩信记录，第三方服务资费等等繁多信息。数据量如此巨大，除了要满足用户的实时查询和展示之外，还需要定时定期的对已有数据进行离线的分析处理。例如，当日话单，月度话单，季度话单，年度话单，通话详情，通话记录等等。我们以此为背景，寻找一个切入点，学习其中的方法论。当前我们的需求是：统计每天、每月以及每年的每个人的通话次数及时长。**

## **1.2项目流程**
架构图云文档链接：https://kdocs.cn/l/cncMMlq3Z6rA
![输入图片说明](ct-web/src/main/webapp/static/ima555.png)
![输入图片说明](ct-web/src/main/webapp/static/image564536.png)
![输入图片说明](ct-web/src/main/webapp/static/image%E7%A5%9E%E9%BC%8E%E9%A3%9E%E4%B8%B9%E7%A0%82.png)
![输入图片说明](ct-web/src/main/webapp/static/image%E7%9A%84%E8%90%A8%E8%BE%BE%E6%98%AF.png)
![输入图片说明](ct-web/src/main/webapp/static/image4444333.png)

## 1.3项目环境

**1.工具**

| 工具     | 版本   |
| -------- | ------ |
| IDEA     | 2020.2 |
| Maven    | 3.3.9  |
| JDK      | 1.8+   |
| Navicat  | 15     |
| Tomcat   | 8.5.75 |
| CenertOS | 7.0    |
| Xshell   | 7      |

**2.框架信息**

| 框架      | 版本        |
| --------- | ----------- |
| Hadoop    | 2.7.2       |
| Zookeeper | 3.5.7       |
| Hbase     | 1.3.1       |
| Flume     | 1.9.0       |
| Kafka     | 2.1.2-3.0.0 |
| Redis     | 3.0.0       |

**3.集群环境**

|      | hadoop102 | hadoop103 | hadoop104 |
| ---- | --------- | --------- | --------- |
| 内存 | 4G        | 4G        | 4G        |
| CPU  | 2核       | 2核       | 2核       |
| 硬盘 | 50G       | 50G       | 50G       |

|       进程       |    hadoop102     |    hadoop103    |     hadoop104     |
| :--------------: | :--------------: | :-------------: | :---------------: |
|   Hadoop  HDFS   |     NameNode     |                 | SecondaryNameNode |
|                  |     DataNode     |    DataNode     |     DataNode      |
|   Hadoop  YARN   |                  | ResourceManager |                   |
|                  |   NodeManager    |   NodeManager   |    NodeManager    |
| Hadoop历史服务器 | JobHistoryServer |                 |                   |
|    Zookeeper     |  QuorumPeerMain  | QuorumPeerMain  |  QuorumPeerMain   |
|      Kafka       |      Kafka       |      Kafka      |       Kafka       |
|      HBase       |     HMaster      |                 |                   |
|                  |  HRegionServer   |  HRegionServer  |   HRegionServer   |
|                  |       jsp        |       jsp       |        jsp        |

## 1.4项目运行图

**1.查询界面**
![输入图片说明](ct-web/src/main/webapp/static/image8888.png)
**2.统计界面**
![输入图片说明](ct-web/src/main/webapp/static/ima.png)
![输入图片说明](ct-web/src/main/webapp/static/im.png)
![输入图片说明](ct-web/src/main/webapp/static/image122.png)