wuyang6
75 lines
3.0 KiB
Markdown
75 lines
3.0 KiB
Markdown
# 数据源字段说明
|
||
|
||
## main：`arch-flat-nlp-log-f-*`
|
||
|
||
适合拿最终线上请求结果。
|
||
|
||
常用字段：
|
||
|
||
| 字段 | 含义 |
|
||
| --- | --- |
|
||
| `request_id` | 请求 id，和 product-data 的 `request_id` 对齐。 |
|
||
| `timestamp` | 请求时间戳。 |
|
||
| `query` | 当前 query。 |
|
||
| `domain` | 最终 domain。 |
|
||
| `func` / `func_name` | 最终 function 或函数名。 |
|
||
| `session_id` | 会话 id，可用于后续重建多轮。 |
|
||
| `device_id` | 设备 id。 |
|
||
| `device` | 设备 JSON，包含设备类型、经纬度等。 |
|
||
| `text` / `display_text` / `to_speak` | 小爱回复文本，可作为上一轮 tts。 |
|
||
| `intention` | 传统意图结果。 |
|
||
| `intention.intent_arbitrator_info` | 中控仲裁信息，含 `llm_agent_info`、`score_domains`、`hit_rules` 等。 |
|
||
| `llm_*` | 大模型分类相关字段，覆盖情况取决于链路。 |
|
||
|
||
适合筛选：
|
||
|
||
- `query` 包含/正则。
|
||
- `domain`、`func`、`func_name`。
|
||
- `session_id`、`device_id`、设备类型。
|
||
- `intention.intent_arbitrator_info.llm_agent_info.agentType`。
|
||
|
||
## pre_processing：`pre-processing-info*`
|
||
|
||
适合拿前处理和规划模型判断过程。
|
||
|
||
常用字段：
|
||
|
||
| 路径 | 含义 |
|
||
| --- | --- |
|
||
| `requestId` | 请求 id。 |
|
||
| `timestamp` | 前处理日志时间戳。 |
|
||
| `responseBoby.nodes.0.core.query.query` | 当前 query。注意字段名是 `responseBoby`。 |
|
||
| `responseBoby.nodes.0.core.dispatch_large_model_result.code` | 前处理最终 code。 |
|
||
| `responseBoby.nodes.0.core.dispatch_large_model_result.dispatchLargeModelInput.promptModel` | planning 模型 prompt。 |
|
||
| `responseBoby.nodes.0.core.dispatch_large_model_result.dispatchLargeModelInput.hitRuleList` | 触发规则。 |
|
||
| `responseBoby.nodes.0.core.dispatch_large_model_result.planningDebugInfo.planningOriginalResult` | planning 模型原始输出。 |
|
||
| `responseBoby.nodes.0.core.excellent_domains_result` | 候选 domain 及旧意图结果。 |
|
||
| `responseBoby.nodes.0.properties.0.debug.domain_infos` | 前处理召回 domain 列表。 |
|
||
| `responseBoby.nodes.0.properties.0.debug.promptString` | agent LLM prompt。 |
|
||
| `responseBoby.nodes.0.properties.0.debug.planningPrompt` | planning prompt。 |
|
||
| `responseBoby.nodes.0.properties.0.agentLLMIntent` | agent LLM 判定。 |
|
||
|
||
适合筛选：
|
||
|
||
- `query` 包含/正则。
|
||
- `planningOriginalResult` 包含某标签或 function。
|
||
- `promptModel` 包含某上下文、历史或 query 结构。
|
||
- `excellent_domains_result[*].domain` 包含某候选 domain。
|
||
- `domain_infos[*].domain` 包含某召回 domain。
|
||
|
||
## join 规则
|
||
|
||
两张表通过：
|
||
|
||
```text
|
||
main.request_id == pre_processing.requestId
|
||
```
|
||
|
||
join 后优先使用：
|
||
|
||
- query：优先 `pre_processing` 的 query，缺失时用 `main.query`。
|
||
- timestamp：优先 `main.timestamp`，缺失时用 `pre_processing.timestamp`。
|
||
- tts：优先 `main.to_speak`，再 `main.text` 或 `display_text`。
|
||
- label 参考：模型输出用 `pre_processing.planning_result`，线上最终结果用 `main.domain` / `main.func`。
|
||
|