Refactor to reduce memory usage of metric record · Pull Request !1123 · openEuler/gala-gopher

## 内存优化方案
用户态内存free后不会实际从内核中释放，解释见https://stackoverflow.com/questions/5994543/problem-usage-memory-in-c/5994981#5994981 ，因此需要尽量减少处理指标数据过程中的缓存。
### 优化每条数据缓存内存大小
#### 技术分析
对于探针上报上来的每条数据，框架都会在imdb中创建如下一个IMDB_Record，每个指标创建一个IMDB_Metric
```
typedef struct {
    char description[MAX_IMDB_METRIC_DESC_LEN];
    // MetricType type;
    char type[MAX_IMDB_METRIC_TYPE_LEN];
    char name[MAX_IMDB_METRIC_NAME_LEN];
    char val[MAX_IMDB_METRIC_VAL_LEN];
} IMDB_Metric;

typedef struct {
    uint32_t keySize;
    char *key;
    time_t updateTime;     // Unit: second
    uint32_t metricsCapacity;       // Capability for metrics count in one record
    uint32_t metricsNum;
    IMDB_Metric **metrics;
    UT_hash_handle hh;
} IMDB_Record;
```
基于之前的优化补丁：https://gitee.com/openeuler/gala-gopher/commit/2614efa15e9d121bc0ba4e8b810070b19722fa7b， 每条record中的metric数量必须和meta文件保持一致
因此IMDB_Metric中的description、type、name以及IMDB_Record中的keySize、metricsCapacity、metricsNum在加载meta文件时就已确定，不需要在每个record或者指标中保存

#### 优化方案 
table中的meta优化为如下，只保存table中每个指标项的描述、名字、类型

```
typedef struct {
    uint32_t metricsCapacity;       // Capability for metrics count in one record
    IMDB_Metric **metrics;
} IMDB_Meta;
```

record和metric结构体优化为如下，删除的成员通过record中table以及table->meta来获取
```
typedef struct {
    char val[MAX_IMDB_METRIC_VAL_LEN];
} IMDB_MetricValue;

typedef struct {
    char *key;
    time_t updateTime;     // Unit: second
    IMDB_MetricValue **value;
    const IMDB_Table *table;     // table that this record belongs to
    UT_hash_handle hh;
} IMDB_Record;
```

### 优化fifo队列中数据缓存大小
#### 技术分析
每次收到探针上报的原始数据，都会申请8192字节大小的缓存放入fifo队列等待ingress线程消费，但实际原始数据长度远小于8192
```
static void sendOutputToIngresss(struct probe_s *probe, char *buffer, uint32_t bufferSize)
{
    int ret = 0;
    char *dataStr = NULL;
    uint32_t index = 0;

for (int i = 0; i < bufferSize; i++) {
        if (dataStr == NULL) {
            dataStr = (char *)malloc(MAX_DATA_STR_LEN);
            if (dataStr == NULL) {
                break;
            }
            // memset(dataStr, 0, sizeof(MAX_DATA_STR_LEN));
            index = 0;
        }
```
#### 优化方案
简化sendOutputToIngresss函数流程，由于前文fgets的特性，可以保证此处的buffer一定是\n结尾的字符串，直接通过如下方式申请内存

```
    buffer[bufferSize - 1] = '\0';
    dataStr = strdup(buffer);
```

## 优化效果评估与验证
imdb中对于每条探针上报的数据可以节省（ 8 + 1088 * table内指标数量）字节的内存， fifo中每条探针上报的数据平均可以节省4K + 的内存

模拟tcpprobe探针每秒上报1w条tcp_abn 数据（每条数据16条指标），优化前框架测内存345MB
![输入图片说明](https://foruda.gitee.com/images/1736496185678422467/70c6ff17_6572822.png "屏幕截图")

优化后内存框架测内存34MB 左右
![输入图片说明](https://foruda.gitee.com/images/1736497228133823986/08037b81_6572822.png "屏幕截图")

## 功能验证
### 普罗格式
![输入图片说明](https://foruda.gitee.com/images/1736498544653521247/51e662b3_6572822.png "屏幕截图")

### json格式
![输入图片说明](https://foruda.gitee.com/images/1736498630962116475/2e7c0491_6572822.png "屏幕截图")

openEuler/gala-gopher .gitee-modal { width: 500px !important; }

搜索帮助

openEuler/gala-gopher