work/agent
1
1
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

Фиксируем состояние

Browse Source
This commit is contained in:
zosimovaa
2026-03-12 20:40:29 +03:00
parent 095d354112
commit b1f825e6b9
220 changed files with 23993 additions and 92568 deletions
Download Patch File Download Diff File Expand all files Collapse all files

BIN
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339.zip Normal file
View File

Binary file not shown.

432
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-architecture-runtime-manager.json → tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-architecture-runtime-manager.json
View File

@@ -1,6 +1,6 @@
{
"case_id": "plba-v2-architecture-runtime-manager",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"case_id": "plba-v3-architecture-runtime-manager",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Какие компоненты участвуют в RuntimeManager?",
@@ -10,7 +10,7 @@
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "### Компоненты, участвующие в RuntimeManager\n\n#### Подтвержденные связи\n1. **RuntimeManager**\n - Role: Pipeline Stage\n - Responsibilities:\n - Manager responsibilities\n - Orchestration of role-like calls\n - State attribute reading/writing\n - Participation in dataflow slices\n\n2. **ControlPlaneService**\n - Role: Pipeline Stage\n - Responsibilities:\n - Service responsibilities\n - State attribute reading/writing\n - Participation in dataflow slices\n\n3. **UvicornThreadRunner**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n4. **HttpControlChannel**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n5. **WorkflowPersistence**\n - Role: Pipeline Stage\n - Responsibilities:\n - Orchestration of role-like calls\n - State attribute reading/writing\n - Participation in dataflow slices\n\n6. **InMemoryTaskQueue**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n7. **ConfigFileLoader**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n8. **TraceContextStore**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n9. **WorkerSupervisor**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n### Ограничения найденного контекста\n- Все перечисленные компоненты являются участниками данных потоков выполнения (dataflow slices).\n- Каждый компонент выполняет операции чтения и записи состояния атрибутов.\n- Некоторые из них выполняют дополнительные обязанности, такие как участие в оркестрации или инициировании ролей.\n\nТаким образом, участники RuntimeManager включают перечисленные выше компоненты.",
"llm_answer": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_async** (src/app_runtime/control/service.py:14-47)\n- **RuntimeManager.start** (src/app_runtime/core/runtime.py:32-59)\n- **ControlPlaneService.start** (src/app_runtime/control/service.py:14-20)\n- **ControlPlaneService.stop** (src/app_runtime/control/service.py:14-25)\n- **ControlPlaneService._stop_async** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.add_config_file** (src/app_runtime/core/runtime.py:32-52)\n- **ControlPlaneService.register_channel** (src/app_runtime/control/service.py:14-17)\n\nСвязи между компонентами:\n\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService._start_async**\n- **RuntimeManager.__init__ dataflow_slice RuntimeManager.start**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService.start**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService.stop**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService._stop_async**\n- **RuntimeManager.__init__ dataflow_slice RuntimeManager.add_config_file**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService.register_channel**\n- **RuntimeManager.__init__ dataflow_slice RuntimeManager._register_core_services**\n\nОтветственность подсистемы заключается в управлении жизненным циклом приложения, загрузке конфигурационных файлов и регистрации каналов управления через ControlPlaneService.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
@@ -120,12 +120,16 @@
}
},
"symbol_resolution": {
"status": "pending",
"resolved_symbol": null,
"status": "resolved",
"resolved_symbol": "RuntimeManager",
"alternatives": [
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager"
],
"confidence": 0.0
"confidence": 0.99
},
"evidence_policy": {
"require_def": true,
@@ -1306,6 +1310,11 @@
"relations": [
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 47,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._start_async",
"metadata": {
"edge_id": "e8e2ddef7499bed745cce7a83d5130d145e9787ca9ddc73f5898372a8da2be06",
"edge_type": "dataflow_slice",
@@ -1346,6 +1355,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 59,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager.start",
"metadata": {
"edge_id": "98312ace7fc62b1c7194c5aa1732b6ef736eae1668a3a120dd1ecd5ab1d64f7a",
"edge_type": "dataflow_slice",
@@ -1386,6 +1400,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 20,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.start",
"metadata": {
"edge_id": "dc85f1ea8fe46c5223a32b4623a249512af7ea30f3af0d890c2fbe842c74d3c2",
"edge_type": "dataflow_slice",
@@ -1426,6 +1445,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 25,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.stop",
"metadata": {
"edge_id": "d5433e2950fb6f913453de2694d697f2c5c5b0e759501aa31c37125d4d29c118",
"edge_type": "dataflow_slice",
@@ -1466,6 +1490,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 51,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._stop_async",
"metadata": {
"edge_id": "991ae894d11340626f4d9361e176c5009c2f33d95ce1a8864740bc85306accc3",
"edge_type": "dataflow_slice",
@@ -1506,6 +1535,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 52,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager.add_config_file",
"metadata": {
"edge_id": "a23b8a11ebdb12708b60c96ea12a69f7f042082f1adfddd572444e246d81d167",
"edge_type": "dataflow_slice",
@@ -1546,6 +1580,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 17,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.register_channel",
"metadata": {
"edge_id": "e21fe35e6cd37bb929561a316c9b5156bd379de768b11d96c989a75a4a9330f2",
"edge_type": "dataflow_slice",
@@ -1586,6 +1625,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 127,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager._register_core_services",
"metadata": {
"edge_id": "3e5811f3b511fa0cabe363f5d01f2ac5fa039bc8b93f7ee108323e1f5f45a293",
"edge_type": "dataflow_slice",
@@ -1625,37 +1669,115 @@
"content": "RuntimeManager.__init__\n -> RuntimeManager.configuration\n -> RuntimeManager._register_core_services"
}
],
"entrypoints": [
"semantic_hints": [
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
"path": "src/app_runtime/core/runtime.py",
"title": "RuntimeManager",
"symbol": "RuntimeManager",
"role": "pipeline_stage",
"confidence": 0.67,
"content": "RuntimeManager\nrole: pipeline_stage\n\nResponsibilities:\n- name suffix suggests manager\n- orchestrates role-like calls (4)\n- reads and writes state attributes\n- participates in dataflow slices (50)"
},
{
"path": "src/app_runtime/control/base.py",
"title": "ControlActionSet",
"symbol": "ControlActionSet",
"role": "model",
"confidence": 0.99,
"content": "ControlActionSet\nrole: model\n\nResponsibilities:\n- default model role"
},
{
"path": "src/app_runtime/control/base.py",
"title": "ControlChannel",
"symbol": "ControlChannel",
"role": "model",
"confidence": 0.99,
"content": "ControlChannel\nrole: model\n\nResponsibilities:\n- default model role"
},
{
"path": "src/app_runtime/control/service.py",
"title": "ControlPlaneService",
"symbol": "ControlPlaneService",
"role": "pipeline_stage",
"confidence": 0.57,
"content": "ControlPlaneService\nrole: pipeline_stage\n\nResponsibilities:\n- name suffix suggests service\n- reads and writes state attributes\n- participates in dataflow slices (5)"
},
{
"path": "src/app_runtime/control/http_runner.py",
"title": "UvicornThreadRunner",
"symbol": "UvicornThreadRunner",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "UvicornThreadRunner\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (24)"
},
{
"path": "src/app_runtime/control/http_channel.py",
"title": "HttpControlChannel",
"symbol": "HttpControlChannel",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "HttpControlChannel\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (10)"
},
{
"path": "src/app_runtime/control/http_app.py",
"title": "HttpControlAppFactory",
"symbol": "HttpControlAppFactory",
"role": "factory",
"confidence": 0.99,
"content": "HttpControlAppFactory\nrole: factory\n\nResponsibilities:\n- name suffix suggests factory"
},
{
"path": "src/app_runtime/workflow/persistence/workflow_persistence.py",
"title": "WorkflowPersistence",
"symbol": "WorkflowPersistence",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "WorkflowPersistence\nrole: pipeline_stage\n\nResponsibilities:\n- orchestrates role-like calls (2)\n- reads and writes state attributes\n- participates in dataflow slices (16)"
},
{
"path": "src/app_runtime/queue/in_memory.py",
"title": "InMemoryTaskQueue",
"symbol": "InMemoryTaskQueue",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "InMemoryTaskQueue\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (9)"
},
{
"path": "src/app_runtime/config/file_loader.py",
"title": "ConfigFileLoader",
"symbol": "ConfigFileLoader",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "ConfigFileLoader\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (8)"
},
{
"path": "src/app_runtime/tracing/store.py",
"title": "TraceContextStore",
"symbol": "TraceContextStore",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "TraceContextStore\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (6)"
},
{
"path": "src/app_runtime/workers/supervisor.py",
"title": "WorkerSupervisor",
"symbol": "WorkerSupervisor",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "WorkerSupervisor\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (6)"
}
],
"entrypoints": [
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 31,
"end_line": 34,
"http_method": "GET",
"route_path": "/health",
"handler_symbol": "health",
"handler_symbol_id": "ab49f8d604dfed17bd83972a4158047a7c773c20ff58fbabc7963f4a1ec96834",
"route_or_command": "app.get",
"metadata": {
"entry_id": "5377b9336800b5d63cc3b67a58730d18a409b245650dd9449325d87c64e24f62",
"entry_type": "http",
@@ -1683,6 +1805,13 @@
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 38,
"end_line": 42,
"http_method": "GET",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.get",
"metadata": {
"entry_id": "06e2f03cced7c1146b2d29f81951f2a2839140484eae22b2d6a63075d903ca4a",
"entry_type": "http",
@@ -1706,6 +1835,40 @@
"last_modified": null,
"staleness_score": null
}
},
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"start_line": 38,
"end_line": 42,
"http_method": "POST",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.post",
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"test_candidates": [],
@@ -3025,11 +3188,11 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C4_SEMANTIC_ROLES": 36,
"C3_ENTRYPOINTS": 15,
"C2_DEPENDENCY_GRAPH": 59,
"C1_SYMBOL_CATALOG": 27,
"C0_SOURCE_CHUNKS": 17
"C4_SEMANTIC_ROLES": 43,
"C3_ENTRYPOINTS": 25,
"C2_DEPENDENCY_GRAPH": 64,
"C1_SYMBOL_CATALOG": 34,
"C0_SOURCE_CHUNKS": 27
}
}
},
@@ -3045,6 +3208,9 @@
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
@@ -3059,7 +3225,7 @@
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "pending"
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
@@ -3112,8 +3278,42 @@
"failure_reasons": [],
"evidence_count": 33
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "ARCHITECTURE",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 8,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn"
}
},
"failure_reasons": [],
"timings_ms": {}
"timings_ms": {
"router": 1,
"retrieval": 196,
"pre_evidence_gate": 1,
"llm": 9911,
"post_evidence_gate": 1
}
},
"rag_rows": [
{
@@ -4358,6 +4558,158 @@
"passed": true,
"action": "return",
"reasons": []
}
},
"token_usage": {
"prompt_name": "code_qa_architecture_answer",
"tokens_in_estimate": 4061
},
"steps": [
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 1
},
"output": {
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 196
},
"output": {
"rag_count": 33,
"answer_path_rag_count": 33,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
},
"diagnostics": {
"executed_layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C4_SEMANTIC_ROLES": "vector",
"C3_ENTRYPOINTS": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector"
},
"top_k_by_layer": {
"C4_SEMANTIC_ROLES": 12,
"C3_ENTRYPOINTS": 8,
"C2_DEPENDENCY_GRAPH": 8,
"C1_SYMBOL_CATALOG": 6,
"C0_SOURCE_CHUNKS": 4
},
"filters_by_layer": {
"C4_SEMANTIC_ROLES": {
"path_scope": []
},
"C3_ENTRYPOINTS": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C4_SEMANTIC_ROLES": 43,
"C3_ENTRYPOINTS": 25,
"C2_DEPENDENCY_GRAPH": 64,
"C1_SYMBOL_CATALOG": 34,
"C0_SOURCE_CHUNKS": 27
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "ARCHITECTURE",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 8,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 33
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 9911
},
"output": {
"prompt_name": "code_qa_architecture_answer",
"answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn"
}
}
]
}
}

305
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-architecture-runtime-manager.md Normal file
View File

@@ -0,0 +1,305 @@
# plba-v3-architecture-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Какие компоненты участвуют в RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_async** (src/app_runtime/control/service.py:14-47)\n- **RuntimeManager.start** (src/app_runtime/core/runtime.py:32-59)\n- **ControlPlaneService.start** (src/app_runtime/control/service.py:14-20)\n- **ControlPlaneService.stop** (src/app_runtime/control/service.py:14-25)\n- **ControlPlaneService._stop_async** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.add_config_file** (src/app_runtime/core/runtime.py:32-52)\n- **ControlPlaneService.register_channel** (src/app_runtime/control/service.py:14-17)\n\nСвязи между компонентами:\n\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService._start_async**\n- **RuntimeManager.__init__ dataflow_slice RuntimeManager.start**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService.start**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService.stop**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService._stop_async**\n- **RuntimeManager.__init__ dataflow_slice RuntimeManager.add_config_file**\n- **ControlPlaneService.__init__ dataflow_slice ControlPlaneService.register_channel**\n- **RuntimeManager.__init__ dataflow_slice RuntimeManager._register_core_services**\n\nОтветственность подсистемы заключается в управлении жизненным циклом приложения, загрузке конфигурационных файлов и регистрации каналов управления через ControlPlaneService.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
}
## Steps
[
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 1
},
"output": {
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 196
},
"output": {
"rag_count": 33,
"answer_path_rag_count": 33,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
},
"diagnostics": {
"executed_layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C4_SEMANTIC_ROLES": "vector",
"C3_ENTRYPOINTS": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector"
},
"top_k_by_layer": {
"C4_SEMANTIC_ROLES": 12,
"C3_ENTRYPOINTS": 8,
"C2_DEPENDENCY_GRAPH": 8,
"C1_SYMBOL_CATALOG": 6,
"C0_SOURCE_CHUNKS": 4
},
"filters_by_layer": {
"C4_SEMANTIC_ROLES": {
"path_scope": []
},
"C3_ENTRYPOINTS": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C4_SEMANTIC_ROLES": 43,
"C3_ENTRYPOINTS": 25,
"C2_DEPENDENCY_GRAPH": 64,
"C1_SYMBOL_CATALOG": 34,
"C0_SOURCE_CHUNKS": 27
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "ARCHITECTURE",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 8,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 33
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 9911
},
"output": {
"prompt_name": "code_qa_architecture_answer",
"answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn"
}
}
]
## Diagnostics
{
"intent_correct": null,
"target_found": true,
"layers_used": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "ARCHITECTURE",
"path_scope": [],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Какие компоненты участвуют в RuntimeManager?",
"sub_intent": "ARCHITECTURE",
"path_scope": [],
"requested_layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
},
"per_layer_outcome": [
{
"layer_id": "C4_SEMANTIC_ROLES",
"hit_count": 12,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C3_ENTRYPOINTS",
"hit_count": 3,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C2_DEPENDENCY_GRAPH",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C1_SYMBOL_CATALOG",
"hit_count": 6,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 4,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 33
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "ARCHITECTURE",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 8,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Компоненты, участвующие в подсистеме RuntimeManager:\n\n- **RuntimeManager** (src/app_runtime/core/runtime.py:18-179)\n- **ControlPlaneService.__init__** (src/app_runtime/control/service.py:14-51)\n- **RuntimeManager.__init__** (src/app_runtime/core/runtime.py:32-127)\n- **ControlPlaneService._start_asyn"
}
},
"failure_reasons": [],
"timings_ms": {
"router": 1,
"retrieval": 196,
"pre_evidence_gate": 1,
"llm": 9911,
"post_evidence_gate": 1
}
}
## Mismatches
- none

232
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-local-http-channel.json → tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-explain-local-http-channel.json
View File

@@ -1,6 +1,6 @@
{
"case_id": "plba-v2-explain-local-http-channel",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"case_id": "plba-v3-explain-local-http-channel",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?",
@@ -10,7 +10,7 @@
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 13,
"llm_answer": "Класс `HttpControlChannel` в файле `src/app_runtime/control/http_channel.py` реализует механизм управления HTTP-каналом для взаимодействия с внешними сервисами или компонентами.\n\n**Ключевые шаги его реализации:**\n1. Инициализация класса:\n - При создании экземпляра устанавливается таймаут (`_timeout`), запускается сервер через объект `UvicornThreadRunner`, создается фабрика приложений `HttpControlAppFactory`.\n \n2. Запуск канала:\n - Метод `start` инициализирует набор действий (`actions`) и создает приложение для работы с ними. Затем запускает сервер через ранее созданный объект `UvicornThreadRunner`.\n \n3. Остановка канала:\n - Метод `stop` останавливает запущенный сервер.\n\nОпорные файлы:\n- `src/app_runtime/control/http_channel.py`: определение и реализация класса `HttpControlChannel`.",
"llm_answer": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с переданным набором действий (ControlActionSet), а метод stop останавливает его. Свойство port возвращает текущий порт runner.\n\nВнутри класса определены два обработчика: _health_response проверяет здоровье канала, возвращая статус \"unhealthy\" если действия не установлены; \n_action_response предположительно обрабатывает запросы на выполнение действий, но его реализация в данном фрагменте не показана.",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/control/http_channel.py"
@@ -151,12 +151,16 @@
}
},
"symbol_resolution": {
"status": "pending",
"resolved_symbol": null,
"status": "resolved",
"resolved_symbol": "HttpControlChannel",
"alternatives": [
"HttpControlChannel"
"ControlChannel",
"ControlActionSet",
"JSONResponse",
"HttpControlAppFactory",
"UvicornThreadRunner"
],
"confidence": 0.0
"confidence": 0.99
},
"evidence_policy": {
"require_def": true,
@@ -738,6 +742,11 @@
"relations": [
{
"path": "src/app_runtime/control/http_channel.py",
"start_line": 14,
"end_line": 47,
"edge_type": "dataflow_slice",
"source": "HttpControlChannel.__init__",
"target": "HttpControlChannel._action_response",
"metadata": {
"edge_id": "c3ef21fcae96c82c00be74b3ab827d4af2085d89cb3fa5521c19a174aad84dbb",
"edge_type": "dataflow_slice",
@@ -778,6 +787,11 @@
},
{
"path": "src/app_runtime/control/http_channel.py",
"start_line": 15,
"end_line": 22,
"edge_type": "dataflow_slice",
"source": "HttpControlChannel.__init__",
"target": "HttpControlChannel.start",
"metadata": {
"edge_id": "51d73913df709152258ed1b9a8c8f4eb3c575eccfe6b982aef0b28e0789a29da",
"edge_type": "dataflow_slice",
@@ -818,6 +832,11 @@
},
{
"path": "src/app_runtime/control/http_channel.py",
"start_line": 14,
"end_line": 34,
"edge_type": "dataflow_slice",
"source": "HttpControlChannel.__init__",
"target": "HttpControlChannel._health_response",
"metadata": {
"edge_id": "f858f5c9e575f6c4cdfe3853571b7ee21d1f628a443541d2037c3dc9d0790bef",
"edge_type": "dataflow_slice",
@@ -858,6 +877,11 @@
},
{
"path": "src/app_runtime/control/http_channel.py",
"start_line": 15,
"end_line": 25,
"edge_type": "dataflow_slice",
"source": "HttpControlChannel.__init__",
"target": "HttpControlChannel.stop",
"metadata": {
"edge_id": "0f827ef81a990258a8a74381c8564a8361afa6712dba3200592659c939adcb9d",
"edge_type": "dataflow_slice",
@@ -897,6 +921,7 @@
"content": "HttpControlChannel.__init__\n -> HttpControlChannel._runner\n -> HttpControlChannel.stop"
}
],
"semantic_hints": [],
"entrypoints": [],
"test_candidates": [],
"layer_outcomes": [
@@ -1454,8 +1479,8 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 31,
"C0_SOURCE_CHUNKS": 15,
"C1_SYMBOL_CATALOG": 26,
"C0_SOURCE_CHUNKS": 16,
"C2_DEPENDENCY_GRAPH": 17
}
}
@@ -1470,6 +1495,9 @@
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "HttpControlChannel",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
@@ -1484,7 +1512,7 @@
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
],
"symbol_resolution_status": "pending"
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
@@ -1525,8 +1553,44 @@
"failure_reasons": [],
"evidence_count": 13
},
"evidence_gate_input": {
"resolved_target": "HttpControlChannel",
"sub_intent": "EXPLAIN_LOCAL",
"target_type": "symbol",
"evidence_count": 13,
"code_chunk_count": 13,
"entrypoint_count": 0,
"relation_count": 4,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "HttpControlChannel",
"draft_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер"
}
},
"failure_reasons": [],
"timings_ms": {}
"timings_ms": {
"router": 2,
"retrieval": 60,
"pre_evidence_gate": 1,
"llm": 3231,
"post_evidence_gate": 1
}
},
"rag_rows": [
{
@@ -2028,6 +2092,150 @@
"passed": true,
"action": "return",
"reasons": []
}
},
"token_usage": {
"prompt_name": "code_qa_explain_local_answer",
"tokens_in_estimate": 2071
},
"steps": [
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 2
},
"output": {
"intent": "CODE_QA",
"sub_intent": "EXPLAIN_LOCAL",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 60
},
"output": {
"rag_count": 13,
"answer_path_rag_count": 13,
"resolved_symbol_status": "resolved",
"resolved_symbol": "HttpControlChannel",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector",
"C2_DEPENDENCY_GRAPH": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C0_SOURCE_CHUNKS": 12,
"C2_DEPENDENCY_GRAPH": 4
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 26,
"C0_SOURCE_CHUNKS": 16,
"C2_DEPENDENCY_GRAPH": 17
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "HttpControlChannel",
"sub_intent": "EXPLAIN_LOCAL",
"target_type": "symbol",
"evidence_count": 13,
"code_chunk_count": 13,
"entrypoint_count": 0,
"relation_count": 4,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 13
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 3231
},
"output": {
"prompt_name": "code_qa_explain_local_answer",
"answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер",
"resolved_target": "HttpControlChannel",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "HttpControlChannel",
"draft_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер"
}
}
]
}
}

285
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-explain-local-http-channel.md Normal file
View File

@@ -0,0 +1,285 @@
# plba-v3-explain-local-http-channel
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN_LOCAL",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 13,
"llm_answer": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с переданным набором действий (ControlActionSet), а метод stop останавливает его. Свойство port возвращает текущий порт runner.\n\nВнутри класса определены два обработчика: _health_response проверяет здоровье канала, возвращая статус \"unhealthy\" если действия не установлены; \n_action_response предположительно обрабатывает запросы на выполнение действий, но его реализация в данном фрагменте не показана.",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/control/http_channel.py"
],
"symbol_candidates": [
"HttpControlChannel"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
]
}
## Steps
[
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 2
},
"output": {
"intent": "CODE_QA",
"sub_intent": "EXPLAIN_LOCAL",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 60
},
"output": {
"rag_count": 13,
"answer_path_rag_count": 13,
"resolved_symbol_status": "resolved",
"resolved_symbol": "HttpControlChannel",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector",
"C2_DEPENDENCY_GRAPH": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C0_SOURCE_CHUNKS": 12,
"C2_DEPENDENCY_GRAPH": 4
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 26,
"C0_SOURCE_CHUNKS": 16,
"C2_DEPENDENCY_GRAPH": 17
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "HttpControlChannel",
"sub_intent": "EXPLAIN_LOCAL",
"target_type": "symbol",
"evidence_count": 13,
"code_chunk_count": 13,
"entrypoint_count": 0,
"relation_count": 4,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 13
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 3231
},
"output": {
"prompt_name": "code_qa_explain_local_answer",
"answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер",
"resolved_target": "HttpControlChannel",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "HttpControlChannel",
"draft_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер"
}
}
]
## Diagnostics
{
"intent_correct": null,
"target_found": true,
"layers_used": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "HttpControlChannel",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "EXPLAIN_LOCAL",
"path_scope": [
"src/app_runtime/control/http_channel.py"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
],
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?",
"sub_intent": "EXPLAIN_LOCAL",
"path_scope": [
"src/app_runtime/control/http_channel.py"
],
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
]
},
"per_layer_outcome": [
{
"layer_id": "C1_SYMBOL_CATALOG",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 1,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C2_DEPENDENCY_GRAPH",
"hit_count": 4,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 13
},
"evidence_gate_input": {
"resolved_target": "HttpControlChannel",
"sub_intent": "EXPLAIN_LOCAL",
"target_type": "symbol",
"evidence_count": 13,
"code_chunk_count": 13,
"entrypoint_count": 0,
"relation_count": 4,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": [
"src/app_runtime/control/http_channel.py"
]
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "HttpControlChannel",
"draft_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Класс HttpControlChannel наследует ControlChannel и реализует HTTP-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI-приложения. \n\nМетод start запускает сервер с пер"
}
},
"failure_reasons": [],
"timings_ms": {
"router": 2,
"retrieval": 60,
"pre_evidence_gate": 1,
"llm": 3231,
"post_evidence_gate": 1
}
}
## Mismatches
- none

406
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-runtime-manager.json → tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-explain-runtime-manager.json
View File

@@ -1,6 +1,6 @@
{
"case_id": "plba-v2-explain-runtime-manager",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"case_id": "plba-v3-explain-runtime-manager",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Объясни как работает класс RuntimeManager",
@@ -10,8 +10,8 @@
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `RuntimeManager` играет ключевую роль в управлении выполнением приложений и координации различных компонентов системы. Его основная функция заключается в оркестрации действий, связанных с жизненным циклом приложения, включая инициализацию, запуск и остановку сервисов и модулей.\n\n**Ключевые шаги работы класса:**\n1. Инициализация конфигурации и состояния (`__init__`).\n2. Добавление конфигурационных файлов и настроек (`add_config_file`).\n3. Управление состоянием выполнения через чтение и запись атрибутов состояния (`configuration`, `_state`).\n4. Оркестровка вызова методов запуска и остановки для различных компонентов (`start`, `stop`).\n5. Участие в обработке данных потока и управлении потоками задач (`participates in dataflow slices`).\n\n**Опорные файлы:**\n- `src/app_runtime/core/runtime.py:18-179`\n- `src/app_runtime/control/service.py:12-52`\n- `src/app_runtime/control/base.py:21-28`\n- `src/app_runtime/control/base.py:14-18`",
"answer_mode": "answered",
"llm_answer": "Недостаточно подтверждённых данных для уверенного ответа по RuntimeManager.",
"answer_mode": "degraded",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
@@ -131,12 +131,16 @@
}
},
"symbol_resolution": {
"status": "pending",
"resolved_symbol": null,
"status": "resolved",
"resolved_symbol": "RuntimeManager",
"alternatives": [
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager"
],
"confidence": 0.0
"confidence": 0.99
},
"evidence_policy": {
"require_def": true,
@@ -1277,6 +1281,11 @@
"relations": [
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 25,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.stop",
"metadata": {
"edge_id": "d5433e2950fb6f913453de2694d697f2c5c5b0e759501aa31c37125d4d29c118",
"edge_type": "dataflow_slice",
@@ -1317,6 +1326,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 51,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._stop_async",
"metadata": {
"edge_id": "991ae894d11340626f4d9361e176c5009c2f33d95ce1a8864740bc85306accc3",
"edge_type": "dataflow_slice",
@@ -1357,6 +1371,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 17,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.register_channel",
"metadata": {
"edge_id": "e21fe35e6cd37bb929561a316c9b5156bd379de768b11d96c989a75a4a9330f2",
"edge_type": "dataflow_slice",
@@ -1397,6 +1416,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 20,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.start",
"metadata": {
"edge_id": "dc85f1ea8fe46c5223a32b4623a249512af7ea30f3af0d890c2fbe842c74d3c2",
"edge_type": "dataflow_slice",
@@ -1437,6 +1461,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 47,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._start_async",
"metadata": {
"edge_id": "e8e2ddef7499bed745cce7a83d5130d145e9787ca9ddc73f5898372a8da2be06",
"edge_type": "dataflow_slice",
@@ -1477,6 +1506,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 52,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager.add_config_file",
"metadata": {
"edge_id": "a23b8a11ebdb12708b60c96ea12a69f7f042082f1adfddd572444e246d81d167",
"edge_type": "dataflow_slice",
@@ -1516,37 +1550,83 @@
"content": "RuntimeManager.__init__\n -> RuntimeManager.configuration\n -> RuntimeManager.add_config_file"
}
],
"entrypoints": [
"semantic_hints": [
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
"path": "src/app_runtime/core/runtime.py",
"title": "RuntimeManager",
"symbol": "RuntimeManager",
"role": "pipeline_stage",
"confidence": 0.67,
"content": "RuntimeManager\nrole: pipeline_stage\n\nResponsibilities:\n- name suffix suggests manager\n- orchestrates role-like calls (4)\n- reads and writes state attributes\n- participates in dataflow slices (50)"
},
{
"path": "src/app_runtime/control/base.py",
"title": "ControlChannel",
"symbol": "ControlChannel",
"role": "model",
"confidence": 0.99,
"content": "ControlChannel\nrole: model\n\nResponsibilities:\n- default model role"
},
{
"path": "src/app_runtime/control/base.py",
"title": "ControlActionSet",
"symbol": "ControlActionSet",
"role": "model",
"confidence": 0.99,
"content": "ControlActionSet\nrole: model\n\nResponsibilities:\n- default model role"
},
{
"path": "src/app_runtime/control/service.py",
"title": "ControlPlaneService",
"symbol": "ControlPlaneService",
"role": "pipeline_stage",
"confidence": 0.57,
"content": "ControlPlaneService\nrole: pipeline_stage\n\nResponsibilities:\n- name suffix suggests service\n- reads and writes state attributes\n- participates in dataflow slices (5)"
},
{
"path": "src/app_runtime/control/http_runner.py",
"title": "UvicornThreadRunner",
"symbol": "UvicornThreadRunner",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "UvicornThreadRunner\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (24)"
},
{
"path": "src/app_runtime/control/http_channel.py",
"title": "HttpControlChannel",
"symbol": "HttpControlChannel",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "HttpControlChannel\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (10)"
},
{
"path": "src/app_runtime/control/http_app.py",
"title": "HttpControlAppFactory",
"symbol": "HttpControlAppFactory",
"role": "factory",
"confidence": 0.99,
"content": "HttpControlAppFactory\nrole: factory\n\nResponsibilities:\n- name suffix suggests factory"
},
{
"path": "src/app_runtime/workflow/persistence/workflow_persistence.py",
"title": "WorkflowPersistence",
"symbol": "WorkflowPersistence",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "WorkflowPersistence\nrole: pipeline_stage\n\nResponsibilities:\n- orchestrates role-like calls (2)\n- reads and writes state attributes\n- participates in dataflow slices (16)"
}
],
"entrypoints": [
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 31,
"end_line": 34,
"http_method": "GET",
"route_path": "/health",
"handler_symbol": "health",
"handler_symbol_id": "ab49f8d604dfed17bd83972a4158047a7c773c20ff58fbabc7963f4a1ec96834",
"route_or_command": "app.get",
"metadata": {
"entry_id": "5377b9336800b5d63cc3b67a58730d18a409b245650dd9449325d87c64e24f62",
"entry_type": "http",
@@ -1574,6 +1654,13 @@
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 38,
"end_line": 42,
"http_method": "GET",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.get",
"metadata": {
"entry_id": "06e2f03cced7c1146b2d29f81951f2a2839140484eae22b2d6a63075d903ca4a",
"entry_type": "http",
@@ -1597,6 +1684,40 @@
"last_modified": null,
"staleness_score": null
}
},
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"start_line": 38,
"end_line": 42,
"http_method": "POST",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.post",
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"test_candidates": [],
@@ -2866,11 +2987,11 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 51,
"C0_SOURCE_CHUNKS": 16,
"C1_SYMBOL_CATALOG": 494,
"C0_SOURCE_CHUNKS": 17,
"C4_SEMANTIC_ROLES": 14,
"C2_DEPENDENCY_GRAPH": 54,
"C3_ENTRYPOINTS": 11
"C2_DEPENDENCY_GRAPH": 55,
"C3_ENTRYPOINTS": 14
}
}
},
@@ -2885,7 +3006,10 @@
"C3_ENTRYPOINTS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"answer_mode": "degraded",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
@@ -2900,7 +3024,7 @@
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"symbol_resolution_status": "pending"
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
@@ -2953,8 +3077,46 @@
"failure_reasons": [],
"evidence_count": 33
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "EXPLAIN",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 6,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Класс `RuntimeManager` определён в файле `src/app_runtime/core/runtime.py`. Он является основным компонентом для управления жизненным циклом приложения и конфигурациями.\n\nМетоды:\n- Конструктор `__init__`: инициализирует объект RuntimeManager и принимает конфигурацию.\n- `add_config_file`: добавляет ф",
"repair_candidate": true
},
"output": {
"passed": false,
"action": "repair",
"reasons": [
"missing_concrete_methods"
],
"repair_used": true,
"final_answer_preview": "Недостаточно подтверждённых данных для уверенного ответа по RuntimeManager."
}
},
"failure_reasons": [],
"timings_ms": {}
"timings_ms": {
"router": 2,
"retrieval": 597,
"pre_evidence_gate": 1,
"llm": 5865,
"post_evidence_gate": 2,
"repair": 4529,
"post_evidence_gate_recheck": 2
}
},
"rag_rows": [
{
@@ -4146,9 +4308,165 @@
}
],
"validation": {
"passed": true,
"action": "return",
"reasons": []
}
"passed": false,
"action": "repair",
"reasons": [
"missing_concrete_methods"
]
},
"token_usage": {
"prompt_name": "code_qa_explain_answer",
"tokens_in_estimate": 4504
},
"steps": [
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 2
},
"output": {
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 597
},
"output": {
"rag_count": 33,
"answer_path_rag_count": 33,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector",
"C4_SEMANTIC_ROLES": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C3_ENTRYPOINTS": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C0_SOURCE_CHUNKS": 8,
"C4_SEMANTIC_ROLES": 8,
"C2_DEPENDENCY_GRAPH": 6,
"C3_ENTRYPOINTS": 6
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
},
"C4_SEMANTIC_ROLES": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C3_ENTRYPOINTS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 494,
"C0_SOURCE_CHUNKS": 17,
"C4_SEMANTIC_ROLES": 14,
"C2_DEPENDENCY_GRAPH": 55,
"C3_ENTRYPOINTS": 14
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "EXPLAIN",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 6,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 33
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 5865
},
"output": {
"prompt_name": "code_qa_explain_answer",
"answer_preview": "Класс `RuntimeManager` определён в файле `src/app_runtime/core/runtime.py`. Он является основным компонентом для управления жизненным циклом приложения и конфигурациями.\n\nМетоды:\n- Конструктор `__init__`: инициализирует объект RuntimeManager и принимает конфигурацию.\n- `add_config_file`: добавляет ф",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "failed",
"timings_ms": {
"post_evidence_gate": 2,
"post_evidence_gate_recheck": 2,
"repair": 4529
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Класс `RuntimeManager` определён в файле `src/app_runtime/core/runtime.py`. Он является основным компонентом для управления жизненным циклом приложения и конфигурациями.\n\nМетоды:\n- Конструктор `__init__`: инициализирует объект RuntimeManager и принимает конфигурацию.\n- `add_config_file`: добавляет ф",
"repair_candidate": true
},
"output": {
"passed": false,
"action": "repair",
"reasons": [
"missing_concrete_methods"
],
"repair_used": true,
"final_answer_preview": "Недостаточно подтверждённых данных для уверенного ответа по RuntimeManager."
}
}
]
}
}

311
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-explain-runtime-manager.md Normal file
View File

@@ -0,0 +1,311 @@
# plba-v3-explain-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Объясни как работает класс RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Недостаточно подтверждённых данных для уверенного ответа по RuntimeManager.",
"answer_mode": "degraded",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Steps
[
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 2
},
"output": {
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 597
},
"output": {
"rag_count": 33,
"answer_path_rag_count": 33,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector",
"C4_SEMANTIC_ROLES": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C3_ENTRYPOINTS": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C0_SOURCE_CHUNKS": 8,
"C4_SEMANTIC_ROLES": 8,
"C2_DEPENDENCY_GRAPH": 6,
"C3_ENTRYPOINTS": 6
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
},
"C4_SEMANTIC_ROLES": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C3_ENTRYPOINTS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 494,
"C0_SOURCE_CHUNKS": 17,
"C4_SEMANTIC_ROLES": 14,
"C2_DEPENDENCY_GRAPH": 55,
"C3_ENTRYPOINTS": 14
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "EXPLAIN",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 6,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 33
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 5865
},
"output": {
"prompt_name": "code_qa_explain_answer",
"answer_preview": "Класс `RuntimeManager` определён в файле `src/app_runtime/core/runtime.py`. Он является основным компонентом для управления жизненным циклом приложения и конфигурациями.\n\nМетоды:\n- Конструктор `__init__`: инициализирует объект RuntimeManager и принимает конфигурацию.\n- `add_config_file`: добавляет ф",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "failed",
"timings_ms": {
"post_evidence_gate": 2,
"post_evidence_gate_recheck": 2,
"repair": 4529
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Класс `RuntimeManager` определён в файле `src/app_runtime/core/runtime.py`. Он является основным компонентом для управления жизненным циклом приложения и конфигурациями.\n\nМетоды:\n- Конструктор `__init__`: инициализирует объект RuntimeManager и принимает конфигурацию.\n- `add_config_file`: добавляет ф",
"repair_candidate": true
},
"output": {
"passed": false,
"action": "repair",
"reasons": [
"missing_concrete_methods"
],
"repair_used": true,
"final_answer_preview": "Недостаточно подтверждённых данных для уверенного ответа по RuntimeManager."
}
}
]
## Diagnostics
{
"intent_correct": null,
"target_found": true,
"layers_used": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"retrieval_sufficient": true,
"answer_mode": "degraded",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "EXPLAIN",
"path_scope": [],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Объясни как работает класс RuntimeManager",
"sub_intent": "EXPLAIN",
"path_scope": [],
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
},
"per_layer_outcome": [
{
"layer_id": "C1_SYMBOL_CATALOG",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C4_SEMANTIC_ROLES",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C2_DEPENDENCY_GRAPH",
"hit_count": 6,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C3_ENTRYPOINTS",
"hit_count": 3,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 33
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "EXPLAIN",
"target_type": "symbol",
"evidence_count": 33,
"code_chunk_count": 33,
"entrypoint_count": 3,
"relation_count": 6,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Класс `RuntimeManager` определён в файле `src/app_runtime/core/runtime.py`. Он является основным компонентом для управления жизненным циклом приложения и конфигурациями.\n\nМетоды:\n- Конструктор `__init__`: инициализирует объект RuntimeManager и принимает конфигурацию.\n- `add_config_file`: добавляет ф",
"repair_candidate": true
},
"output": {
"passed": false,
"action": "repair",
"reasons": [
"missing_concrete_methods"
],
"repair_used": true,
"final_answer_preview": "Недостаточно подтверждённых данных для уверенного ответа по RuntimeManager."
}
},
"failure_reasons": [],
"timings_ms": {
"router": 2,
"retrieval": 597,
"pre_evidence_gate": 1,
"llm": 5865,
"post_evidence_gate": 2,
"repair": 4529,
"post_evidence_gate_recheck": 2
}
}
## Mismatches
- none

368
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-health-endpoint.json → tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-find-entrypoints-health-endpoint.json
View File

@@ -1,6 +1,6 @@
{
"case_id": "plba-v2-find-entrypoints-health-endpoint",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"case_id": "plba-v3-find-entrypoints-health-endpoint",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Где health endpoint?",
@@ -9,8 +9,8 @@
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 9,
"llm_answer": "health endpoint: \n- src/app_runtime/control/http_app.py:38-42 (app.post)\n- src/app_runtime/control/http_app.py:31-34 (app.get)",
"rag_count": 10,
"llm_answer": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
@@ -22,10 +22,8 @@
"C0_SOURCE_CHUNKS"
]
},
"passed": false,
"mismatches": [
"llm: expected answer to contain 'GET /health'"
],
"passed": true,
"mismatches": [],
"details": {
"query": "Где health endpoint?",
"router_result": {
@@ -122,12 +120,9 @@
}
},
"symbol_resolution": {
"status": "pending",
"status": "not_found",
"resolved_symbol": null,
"alternatives": [
"health",
"endpoint"
],
"alternatives": [],
"confidence": 0.0
},
"evidence_policy": {
@@ -491,28 +486,22 @@
"last_modified": null,
"staleness_score": null
}
}
],
"relations": [],
"entrypoints": [
},
{
"layer": "C0_SOURCE_CHUNKS",
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"title": "src/app_runtime/control/http_app.py:HttpControlAppFactory",
"content": "class HttpControlAppFactory:\n def create(\n self,\n health_provider: Callable[[], Awaitable[HealthPayload]],\n action_provider: Callable[[str, str], Awaitable[JSONResponse]],\n ) -> FastAPI:\n app = FastAPI(title=\"PLBA Control API\")\n\n @app.middleware(\"http\")\n async def log_api_call(request: Request, call_next): # type: ignore[no-untyped-def]\n started = time.monotonic()\n response = await call_next(request)\n response.headers[\"X-Response-Time-Ms\"] = str(int((time.monotonic() - started) * 1000))\n return response\n\n @app.get(\"/health\")\n async def health() -> JSONResponse:\n payload = await health_provider()\n status_code = 200 if payload.get(\"status\") == \"ok\" else 503\n return JSONResponse(content=payload, status_code=status_code)\n\n @app.get(\"/actions/{action}\")\n @app.post(\"/actions/{action}\")\n async def action(action: str, request: Request) -> JSONResponse:\n client_source = self._client_source(request)\n if action in {\"start\", \"stop\"}:\n LOGGER.warning(\"Control action requested: /actions/%s client=%s\", action, client_source)\n return await action_provider(action, client_source)\n\n return app\n\n def _client_source(self, request: Request) -> str:\n explicit_header = request.headers.get(\"X-Client-Source\", \"\").strip()\n if explicit_header:\n return explicit_header\n user_agent = request.headers.get(\"User-Agent\", \"\").strip()\n if user_agent:\n return f\"user-agent:{user_agent}\"\n return \"unknown\"",
"start_line": 15,
"end_line": 53,
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"chunk_index": 0,
"chunk_type": "symbol_block",
"module_or_unit": "src.app_runtime.control.http_app",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
@@ -521,10 +510,21 @@
"last_modified": null,
"staleness_score": null
}
},
}
],
"relations": [],
"semantic_hints": [],
"entrypoints": [
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 31,
"end_line": 34,
"http_method": "GET",
"route_path": "/health",
"handler_symbol": "health",
"handler_symbol_id": "ab49f8d604dfed17bd83972a4158047a7c773c20ff58fbabc7963f4a1ec96834",
"route_or_command": "app.get",
"metadata": {
"entry_id": "5377b9336800b5d63cc3b67a58730d18a409b245650dd9449325d87c64e24f62",
"entry_type": "http",
@@ -552,6 +552,13 @@
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 38,
"end_line": 42,
"http_method": "GET",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.get",
"metadata": {
"entry_id": "06e2f03cced7c1146b2d29f81951f2a2839140484eae22b2d6a63075d903ca4a",
"entry_type": "http",
@@ -575,6 +582,40 @@
"last_modified": null,
"staleness_score": null
}
},
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"start_line": 38,
"end_line": 42,
"http_method": "POST",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.post",
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"test_candidates": [],
@@ -587,7 +628,7 @@
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 6,
"hit_count": 7,
"empty": false,
"fallback_used": false
}
@@ -884,6 +925,36 @@
"last_modified": null,
"staleness_score": null
}
},
{
"path": "src/app_runtime/control/http_app.py",
"content": "class HttpControlAppFactory:\n def create(\n self,\n health_provider: Callable[[], Awaitable[HealthPayload]],\n action_provider: Callable[[str, str], Awaitable[JSONResponse]],\n ) -> FastAPI:\n app = FastAPI(title=\"PLBA Control API\")\n\n @app.middleware(\"http\")\n async def log_api_call(request: Request, call_next): # type: ignore[no-untyped-def]\n started = time.monotonic()\n response = await call_next(request)\n response.headers[\"X-Response-Time-Ms\"] = str(int((time.monotonic() - started) * 1000))\n return response\n\n @app.get(\"/health\")\n async def health() -> JSONResponse:\n payload = await health_provider()\n status_code = 200 if payload.get(\"status\") == \"ok\" else 503\n return JSONResponse(content=payload, status_code=status_code)\n\n @app.get(\"/actions/{action}\")\n @app.post(\"/actions/{action}\")\n async def action(action: str, request: Request) -> JSONResponse:\n client_source = self._client_source(request)\n if action in {\"start\", \"stop\"}:\n LOGGER.warning(\"Control action requested: /actions/%s client=%s\", action, client_source)\n return await action_provider(action, client_source)\n\n return app\n\n def _client_source(self, request: Request) -> str:\n explicit_header = request.headers.get(\"X-Client-Source\", \"\").strip()\n if explicit_header:\n return explicit_header\n user_agent = request.headers.get(\"User-Agent\", \"\").strip()\n if user_agent:\n return f\"user-agent:{user_agent}\"\n return \"unknown\"",
"layer": "C0_SOURCE_CHUNKS",
"title": "src/app_runtime/control/http_app.py:HttpControlAppFactory",
"span_start": 15,
"span_end": 53,
"lexical_rank": 0,
"prefer_bonus": 0,
"test_penalty": 0,
"structural_rank": 0,
"layer_rank": 0,
"distance": 0,
"metadata": {
"chunk_index": 0,
"chunk_type": "symbol_block",
"module_or_unit": "src.app_runtime.control.http_app",
"is_test": false,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"retrieval_report": {
@@ -893,18 +964,20 @@
],
"retrieval_mode_by_layer": {
"C3_ENTRYPOINTS": "vector",
"C0_SOURCE_CHUNKS": "vector"
"C0_SOURCE_CHUNKS": "exact_path_fetch"
},
"top_k_by_layer": {
"C3_ENTRYPOINTS": 12,
"C0_SOURCE_CHUNKS": 6
"C0_SOURCE_CHUNKS": 24
},
"filters_by_layer": {
"C3_ENTRYPOINTS": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
"path_scope": [
"src/app_runtime/control/http_app.py"
]
}
},
"fallback": {
@@ -912,9 +985,16 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C3_ENTRYPOINTS": 22,
"C0_SOURCE_CHUNKS": 20
}
"C3_ENTRYPOINTS": 34,
"C0_SOURCE_CHUNKS": 15
},
"supplemental_requests": [
{
"layer": "C0_SOURCE_CHUNKS",
"query": "Где health endpoint?",
"ranking_profile": "entrypoint_source_hydration"
}
]
}
},
"diagnostics": {
@@ -926,6 +1006,9 @@
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "src/app_runtime/control/http_app.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
@@ -937,7 +1020,7 @@
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "pending"
"symbol_resolution_status": "not_found"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
@@ -958,7 +1041,7 @@
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 6,
"hit_count": 7,
"empty": false,
"fallback_used": false
}
@@ -967,10 +1050,44 @@
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 9
"evidence_count": 10
},
"evidence_gate_input": {
"resolved_target": "src/app_runtime/control/http_app.py",
"sub_intent": "FIND_ENTRYPOINTS",
"target_type": "file",
"evidence_count": 10,
"code_chunk_count": 10,
"entrypoint_count": 3,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_found",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/control/http_app.py",
"draft_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'."
}
},
"failure_reasons": [],
"timings_ms": {}
"timings_ms": {
"router": 1,
"retrieval": 64,
"pre_evidence_gate": 1,
"llm": 1406,
"post_evidence_gate": 1
}
},
"rag_rows": [
{
@@ -1263,12 +1380,179 @@
"last_modified": null,
"staleness_score": null
}
},
{
"path": "src/app_runtime/control/http_app.py",
"content": "class HttpControlAppFactory:\n def create(\n self,\n health_provider: Callable[[], Awaitable[HealthPayload]],\n action_provider: Callable[[str, str], Awaitable[JSONResponse]],\n ) -> FastAPI:\n app = FastAPI(title=\"PLBA Control API\")\n\n @app.middleware(\"http\")\n async def log_api_call(request: Request, call_next): # type: ignore[no-untyped-def]\n started = time.monotonic()\n response = await call_next(request)\n response.headers[\"X-Response-Time-Ms\"] = str(int((time.monotonic() - started) * 1000))\n return response\n\n @app.get(\"/health\")\n async def health() -> JSONResponse:\n payload = await health_provider()\n status_code = 200 if payload.get(\"status\") == \"ok\" else 503\n return JSONResponse(content=payload, status_code=status_code)\n\n @app.get(\"/actions/{action}\")\n @app.post(\"/actions/{action}\")\n async def action(action: str, request: Request) -> JSONResponse:\n client_source = self._client_source(request)\n if action in {\"start\", \"stop\"}:\n LOGGER.warning(\"Control action requested: /actions/%s client=%s\", action, client_source)\n return await action_provider(action, client_source)\n\n return app\n\n def _client_source(self, request: Request) -> str:\n explicit_header = request.headers.get(\"X-Client-Source\", \"\").strip()\n if explicit_header:\n return explicit_header\n user_agent = request.headers.get(\"User-Agent\", \"\").strip()\n if user_agent:\n return f\"user-agent:{user_agent}\"\n return \"unknown\"",
"layer": "C0_SOURCE_CHUNKS",
"title": "src/app_runtime/control/http_app.py:HttpControlAppFactory",
"span_start": 15,
"span_end": 53,
"lexical_rank": 0,
"prefer_bonus": 0,
"test_penalty": 0,
"structural_rank": 0,
"layer_rank": 0,
"distance": 0,
"metadata": {
"chunk_index": 0,
"chunk_type": "symbol_block",
"module_or_unit": "src.app_runtime.control.http_app",
"is_test": false,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"validation": {
"passed": true,
"action": "return",
"reasons": []
}
},
"token_usage": {
"prompt_name": "code_qa_find_entrypoints_answer",
"tokens_in_estimate": 2531
},
"steps": [
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 1
},
"output": {
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 64
},
"output": {
"rag_count": 10,
"answer_path_rag_count": 10,
"resolved_symbol_status": "not_found",
"resolved_symbol": null,
"requested_layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
},
"diagnostics": {
"executed_layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C3_ENTRYPOINTS": "vector",
"C0_SOURCE_CHUNKS": "exact_path_fetch"
},
"top_k_by_layer": {
"C3_ENTRYPOINTS": 12,
"C0_SOURCE_CHUNKS": 24
},
"filters_by_layer": {
"C3_ENTRYPOINTS": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/app_runtime/control/http_app.py"
]
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C3_ENTRYPOINTS": 34,
"C0_SOURCE_CHUNKS": 15
},
"supplemental_requests": [
{
"layer": "C0_SOURCE_CHUNKS",
"query": "Где health endpoint?",
"ranking_profile": "entrypoint_source_hydration"
}
]
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "src/app_runtime/control/http_app.py",
"sub_intent": "FIND_ENTRYPOINTS",
"target_type": "file",
"evidence_count": 10,
"code_chunk_count": 10,
"entrypoint_count": 3,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_found",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 10
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 1406
},
"output": {
"prompt_name": "code_qa_find_entrypoints_answer",
"answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"resolved_target": "src/app_runtime/control/http_app.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/control/http_app.py",
"draft_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'."
}
}
]
}
}

261
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-find-entrypoints-health-endpoint.md Normal file
View File

@@ -0,0 +1,261 @@
# plba-v3-find-entrypoints-health-endpoint
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где health endpoint?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 10,
"llm_answer": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"health",
"endpoint"
],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
}
## Steps
[
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 1
},
"output": {
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 64
},
"output": {
"rag_count": 10,
"answer_path_rag_count": 10,
"resolved_symbol_status": "not_found",
"resolved_symbol": null,
"requested_layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
},
"diagnostics": {
"executed_layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C3_ENTRYPOINTS": "vector",
"C0_SOURCE_CHUNKS": "exact_path_fetch"
},
"top_k_by_layer": {
"C3_ENTRYPOINTS": 12,
"C0_SOURCE_CHUNKS": 24
},
"filters_by_layer": {
"C3_ENTRYPOINTS": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/app_runtime/control/http_app.py"
]
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C3_ENTRYPOINTS": 34,
"C0_SOURCE_CHUNKS": 15
},
"supplemental_requests": [
{
"layer": "C0_SOURCE_CHUNKS",
"query": "Где health endpoint?",
"ranking_profile": "entrypoint_source_hydration"
}
]
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "src/app_runtime/control/http_app.py",
"sub_intent": "FIND_ENTRYPOINTS",
"target_type": "file",
"evidence_count": 10,
"code_chunk_count": 10,
"entrypoint_count": 3,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_found",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 10
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 1406
},
"output": {
"prompt_name": "code_qa_find_entrypoints_answer",
"answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"resolved_target": "src/app_runtime/control/http_app.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/control/http_app.py",
"draft_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'."
}
}
]
## Diagnostics
{
"intent_correct": null,
"target_found": true,
"layers_used": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "src/app_runtime/control/http_app.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "FIND_ENTRYPOINTS",
"path_scope": [],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "not_found"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Где health endpoint?",
"sub_intent": "FIND_ENTRYPOINTS",
"path_scope": [],
"requested_layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
},
"per_layer_outcome": [
{
"layer_id": "C3_ENTRYPOINTS",
"hit_count": 3,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 7,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 10
},
"evidence_gate_input": {
"resolved_target": "src/app_runtime/control/http_app.py",
"sub_intent": "FIND_ENTRYPOINTS",
"target_type": "file",
"evidence_count": 10,
"code_chunk_count": 10,
"entrypoint_count": 3,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_found",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/control/http_app.py",
"draft_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Подтверждённая точка входа для health endpoint:\nGET /health, declared in src/app_runtime/control/http_app.py, lines 31-34, handler function named 'health'."
}
},
"failure_reasons": [],
"timings_ms": {
"router": 1,
"retrieval": 64,
"pre_evidence_gate": 1,
"llm": 1406,
"post_evidence_gate": 1
}
}
## Mismatches
- none

232
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-tests-runtime-manager.json → tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-find-tests-runtime-manager.json
View File

@@ -1,6 +1,6 @@
{
"case_id": "plba-v2-find-tests-runtime-manager",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"case_id": "plba-v3-find-tests-runtime-manager",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Где тесты для RuntimeManager?",
@@ -10,7 +10,7 @@
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "- tests/test_runtime.py:12-12\n- tests/test_business_control_actions.py:14-14",
"llm_answer": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
@@ -136,12 +136,16 @@
}
},
"symbol_resolution": {
"status": "pending",
"resolved_symbol": null,
"status": "resolved",
"resolved_symbol": "RuntimeManager",
"alternatives": [
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager"
],
"confidence": 0.0
"confidence": 0.99
},
"evidence_policy": {
"require_def": true,
@@ -1017,6 +1021,11 @@
"relations": [
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 25,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.stop",
"metadata": {
"edge_id": "d5433e2950fb6f913453de2694d697f2c5c5b0e759501aa31c37125d4d29c118",
"edge_type": "dataflow_slice",
@@ -1057,6 +1066,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 51,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._stop_async",
"metadata": {
"edge_id": "991ae894d11340626f4d9361e176c5009c2f33d95ce1a8864740bc85306accc3",
"edge_type": "dataflow_slice",
@@ -1097,6 +1111,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 17,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.register_channel",
"metadata": {
"edge_id": "e21fe35e6cd37bb929561a316c9b5156bd379de768b11d96c989a75a4a9330f2",
"edge_type": "dataflow_slice",
@@ -1137,6 +1156,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 20,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.start",
"metadata": {
"edge_id": "dc85f1ea8fe46c5223a32b4623a249512af7ea30f3af0d890c2fbe842c74d3c2",
"edge_type": "dataflow_slice",
@@ -1177,6 +1201,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 47,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._start_async",
"metadata": {
"edge_id": "e8e2ddef7499bed745cce7a83d5130d145e9787ca9ddc73f5898372a8da2be06",
"edge_type": "dataflow_slice",
@@ -1217,6 +1246,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 52,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager.add_config_file",
"metadata": {
"edge_id": "a23b8a11ebdb12708b60c96ea12a69f7f042082f1adfddd572444e246d81d167",
"edge_type": "dataflow_slice",
@@ -1256,6 +1290,7 @@
"content": "RuntimeManager.__init__\n -> RuntimeManager.configuration\n -> RuntimeManager.add_config_file"
}
],
"semantic_hints": [],
"entrypoints": [],
"test_candidates": [
{
@@ -2188,9 +2223,9 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 45,
"C2_DEPENDENCY_GRAPH": 53,
"C0_SOURCE_CHUNKS": 17
"C1_SYMBOL_CATALOG": 50,
"C2_DEPENDENCY_GRAPH": 59,
"C0_SOURCE_CHUNKS": 22
}
}
},
@@ -2204,6 +2239,9 @@
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
@@ -2216,7 +2254,7 @@
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "pending"
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
@@ -2255,8 +2293,42 @@
"failure_reasons": [],
"evidence_count": 24
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "FIND_TESTS",
"target_type": "symbol",
"evidence_count": 24,
"code_chunk_count": 24,
"entrypoint_count": 0,
"relation_count": 6,
"test_evidence_count": 2,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`."
}
},
"failure_reasons": [],
"timings_ms": {}
"timings_ms": {
"router": 1,
"retrieval": 132,
"pre_evidence_gate": 1,
"llm": 1662,
"post_evidence_gate": 1
}
},
"rag_rows": [
{
@@ -3128,6 +3200,142 @@
"passed": true,
"action": "return",
"reasons": []
}
},
"token_usage": {
"prompt_name": "code_qa_find_tests_answer",
"tokens_in_estimate": 3660
},
"steps": [
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 1
},
"output": {
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 132
},
"output": {
"rag_count": 24,
"answer_path_rag_count": 24,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C0_SOURCE_CHUNKS": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C2_DEPENDENCY_GRAPH": 6,
"C0_SOURCE_CHUNKS": 10
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 50,
"C2_DEPENDENCY_GRAPH": 59,
"C0_SOURCE_CHUNKS": 22
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "FIND_TESTS",
"target_type": "symbol",
"evidence_count": 24,
"code_chunk_count": 24,
"entrypoint_count": 0,
"relation_count": 6,
"test_evidence_count": 2,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 24
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 1662
},
"output": {
"prompt_name": "code_qa_find_tests_answer",
"answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`."
}
}
]
}
}

269
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-find-tests-runtime-manager.md Normal file
View File

@@ -0,0 +1,269 @@
# plba-v3-find-tests-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Steps
[
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 1
},
"output": {
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 132
},
"output": {
"rag_count": 24,
"answer_path_rag_count": 24,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C0_SOURCE_CHUNKS": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C2_DEPENDENCY_GRAPH": 6,
"C0_SOURCE_CHUNKS": 10
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 50,
"C2_DEPENDENCY_GRAPH": 59,
"C0_SOURCE_CHUNKS": 22
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "FIND_TESTS",
"target_type": "symbol",
"evidence_count": 24,
"code_chunk_count": 24,
"entrypoint_count": 0,
"relation_count": 6,
"test_evidence_count": 2,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 24
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 1662
},
"output": {
"prompt_name": "code_qa_find_tests_answer",
"answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`."
}
}
]
## Diagnostics
{
"intent_correct": null,
"target_found": true,
"layers_used": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "FIND_TESTS",
"path_scope": [],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Где тесты для RuntimeManager?",
"sub_intent": "FIND_TESTS",
"path_scope": [],
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
},
"per_layer_outcome": [
{
"layer_id": "C1_SYMBOL_CATALOG",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C2_DEPENDENCY_GRAPH",
"hit_count": 6,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 10,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 24
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "FIND_TESTS",
"target_type": "symbol",
"evidence_count": 24,
"code_chunk_count": 24,
"entrypoint_count": 0,
"relation_count": 6,
"test_evidence_count": 2,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`.",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "Прямые тесты для `RuntimeManager` находятся в файле `tests/test_runtime.py`.\n\nКосвенные тесты:\n- В файле `tests/test_business_control_actions.py` есть тесты, использующие сущности контроля, которые взаимодействуют с `RuntimeManager`."
}
},
"failure_reasons": [],
"timings_ms": {
"router": 1,
"retrieval": 132,
"pre_evidence_gate": 1,
"llm": 1662,
"post_evidence_gate": 1
}
}
## Mismatches
- none

101
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_164751/full_chain_plba_code_subintents_v2_plba-v2-open-file-runtime.json → tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-open-file-runtime.json
View File

@@ -1,6 +1,6 @@
{
"case_id": "plba-v2-open-file-runtime",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"case_id": "plba-v3-open-file-runtime",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Открой файл src/app_runtime/core/runtime.py",
@@ -10,7 +10,7 @@
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Виден класс `RuntimeManager` с методом `__init__`, принимающим несколько параметров. Фиксированы также константы `ACTION_TIMEOUT_SECONDS` и `ACTION_POLL_INTERVAL_SECONDS`.",
"llm_answer": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип `LogManager`\n- `workers`: тип `WorkerSupervisor`\n- `control_plane`: тип `ControlPlaneService`\n\nТакже определены константы таймаутов:\n- `ACTION_TIMEOUT_SECONDS = 10.0`\n- `ACTION_POLL_INTERVAL_SECONDS = 0.05`",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/core/runtime.py"
@@ -250,6 +250,7 @@
}
],
"relations": [],
"semantic_hints": [],
"entrypoints": [],
"test_candidates": [],
"layer_outcomes": [
@@ -322,7 +323,7 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C0_SOURCE_CHUNKS": 221
"C0_SOURCE_CHUNKS": 132
}
}
},
@@ -334,6 +335,9 @@
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "src/app_runtime/core/runtime.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
@@ -373,12 +377,43 @@
"failure_reasons": [],
"evidence_count": 1
},
"evidence_gate_input": {
"resolved_target": "src/app_runtime/core/runtime.py",
"sub_intent": "OPEN_FILE",
"target_type": "file",
"evidence_count": 1,
"code_chunk_count": 1,
"entrypoint_count": 0,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_requested",
"path_scope": [
"src/app_runtime/core/runtime.py"
]
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/core/runtime.py",
"draft_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип"
}
},
"failure_reasons": [],
"timings_ms": {
"router": 0,
"retrieval": 221,
"pre_evidence_gate": 0,
"llm": 578
"router": 1,
"retrieval": 132,
"pre_evidence_gate": 1,
"llm": 3550,
"post_evidence_gate": 2
}
},
"rag_rows": [
@@ -418,12 +453,16 @@
"action": "return",
"reasons": []
},
"token_usage": {
"prompt_name": "code_qa_open_file_answer",
"tokens_in_estimate": 1128
},
"steps": [
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 0
"router": 1
},
"output": {
"intent": "CODE_QA",
@@ -436,7 +475,7 @@
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 221
"retrieval": 132
},
"output": {
"rag_count": 1,
@@ -476,7 +515,7 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C0_SOURCE_CHUNKS": 221
"C0_SOURCE_CHUNKS": 132
}
}
},
@@ -484,36 +523,64 @@
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 0
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "src/app_runtime/core/runtime.py",
"sub_intent": "OPEN_FILE",
"target_type": "file",
"evidence_count": 1,
"code_chunk_count": 1,
"entrypoint_count": 0,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_requested",
"path_scope": [
"src/app_runtime/core/runtime.py"
]
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": ""
"degraded_message": "",
"evidence_count": 1
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 578
"llm": 3550
},
"output": {
"prompt_name": "code_qa_open_file_answer",
"answer_preview": "Виден класс `RuntimeManager` с методом `__init__`, принимающим несколько параметров. Фиксированы также константы `ACTION_TIMEOUT_SECONDS` и `ACTION_POLL_INTERVAL_SECONDS`."
"answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип",
"resolved_target": "src/app_runtime/core/runtime.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 0,
"post_evidence_gate": 2,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/core/runtime.py",
"draft_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false
"repair_used": false,
"final_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип"
}
}
]

250
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-open-file-runtime.md Normal file
View File

@@ -0,0 +1,250 @@
# plba-v3-open-file-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Открой файл src/app_runtime/core/runtime.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип `LogManager`\n- `workers`: тип `WorkerSupervisor`\n- `control_plane`: тип `ControlPlaneService`\n\nТакже определены константы таймаутов:\n- `ACTION_TIMEOUT_SECONDS = 10.0`\n- `ACTION_POLL_INTERVAL_SECONDS = 0.05`",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/core/runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Steps
[
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 1
},
"output": {
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 132
},
"output": {
"rag_count": 1,
"answer_path_rag_count": 1,
"resolved_symbol_status": "not_requested",
"resolved_symbol": null,
"requested_layers": [
"C0_SOURCE_CHUNKS"
]
},
"diagnostics": {
"executed_layers": [
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C0_SOURCE_CHUNKS": "exact_path_fetch"
},
"top_k_by_layer": {
"C0_SOURCE_CHUNKS": 200
},
"filters_by_layer": {
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/app_runtime/core/runtime.py"
]
}
},
"requests": [
{
"layer": "C0_SOURCE_CHUNKS",
"query": "Открой файл src/app_runtime/core/runtime.py",
"ranking_profile": "code"
}
],
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C0_SOURCE_CHUNKS": 132
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "src/app_runtime/core/runtime.py",
"sub_intent": "OPEN_FILE",
"target_type": "file",
"evidence_count": 1,
"code_chunk_count": 1,
"entrypoint_count": 0,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_requested",
"path_scope": [
"src/app_runtime/core/runtime.py"
]
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 1
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 3550
},
"output": {
"prompt_name": "code_qa_open_file_answer",
"answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип",
"resolved_target": "src/app_runtime/core/runtime.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 2,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/core/runtime.py",
"draft_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип"
}
}
]
## Diagnostics
{
"intent_correct": null,
"target_found": true,
"layers_used": [
"C0_SOURCE_CHUNKS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "src/app_runtime/core/runtime.py",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/app_runtime/core/runtime.py"
],
"layers": [
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "not_requested"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Открой файл src/app_runtime/core/runtime.py",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/app_runtime/core/runtime.py"
],
"requested_layers": [
"C0_SOURCE_CHUNKS"
]
},
"per_layer_outcome": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 1,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 1
},
"evidence_gate_input": {
"resolved_target": "src/app_runtime/core/runtime.py",
"sub_intent": "OPEN_FILE",
"target_type": "file",
"evidence_count": 1,
"code_chunk_count": 1,
"entrypoint_count": 0,
"relation_count": 0,
"test_evidence_count": 0,
"symbol_resolution_status": "not_requested",
"path_scope": [
"src/app_runtime/core/runtime.py"
]
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "src/app_runtime/core/runtime.py",
"draft_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "В файле `src/app_runtime/core/runtime.py` определён класс `RuntimeManager`.\nУ него есть несколько классов полей с умолчательными сервисами:\n- `configuration`: тип `ConfigurationManager`\n- `services`: тип `ServiceContainer`\n- `traces`: тип `TraceService`\n- `health`: тип `HealthRegistry`\n- `logs`: тип"
}
},
"failure_reasons": [],
"timings_ms": {
"router": 1,
"retrieval": 132,
"pre_evidence_gate": 1,
"llm": 3550,
"post_evidence_gate": 2
}
}
## Mismatches
- none

410
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-runtime-start.json → tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-trace-flow-runtime-start.json
View File

@@ -1,6 +1,6 @@
{
"case_id": "plba-v2-trace-flow-runtime-start",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"case_id": "plba-v3-trace-flow-runtime-start",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Покажи поток выполнения при запуске RuntimeManager",
@@ -10,7 +10,7 @@
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "1. Запускается `RuntimeManager` через импорт в `bootstrap.py` (`src/plba/bootstrap.py:4`).\n2. Далее, в `control/service.py`, происходит повторный импорт и переопределение переменной `RuntimeManager` как `app_runtime.core.runtime.RuntimeManager` (`src/app_runtime/control/service.py:9`).\n3. В файле `core/runtime.py` начинается определение класса `RuntimeManager`. Этот класс управляет состоянием приложения и участвует в управлении жизненным циклом различных сервисов и модулей (`src/app_runtime/core/runtime.py:18-179`).\n4. Из `__init__.py` модуля `plba` (`src/plba/__init__.py:16`) импортируется другой экземпляр `RuntimeManager`.\n5. Затем идет обращение к инициализации объекта `ControlPlaneService` в модуле `control/service.py` (`src/app_runtime/control/service.py:12-52`), который регистрирует каналы управления.\n6. Контроллер канала управления определяется в `base.py` файла `control` и имеет методы для запуска и остановки каналов (`src/app_runtime/control/base.py:21-28`).\n7. В `control/http_channel.py` создается объект `HttpControlChannel`, управляющий HTTP-запросами с использованием библиотеки uvicorn (`src/app_runtime/control/http_channel.py:12-57`).\n8. Модуль `control/http_app.py` создает фабрику приложений для обработки HTTP-запросов, связанных с управлением состоянием системы (`src/app_runtime/control/http_app.py:15-53`).\n9. Инициализация конфигурации и параметров происходит в методах `_register_core_services` и `_start_async` внутри класса `RuntimeManager` (`src/app_runtime/core/runtime.py:32-127`).\n\nПолный путь вызова:\n\n1. `src/plba/bootstrap.py`\n2. `src/app_runtime/control/service.py`\n3. `src/app_runtime/core/runtime.py`\n4. `src/plba/__init__.py`\n5. `src/app_runtime/control/service.py`\n6. `src/app_runtime/control/base.py`\n7. `src/app_runtime/control/http_channel.py`\n8. `src/app_runtime/control/http_app.py`\n9. `src/app_runtime/core/runtime.py`",
"llm_answer": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связях внутри класса `RuntimeManager`. \nКонкретные реализации логики запуска находятся в файле `src/app_runtime/core/runtime.py`, строки 32–127.\n\nПоток выполнения полностью восстанавливается по данным контекстного фрагмента.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
@@ -120,12 +120,16 @@
}
},
"symbol_resolution": {
"status": "pending",
"resolved_symbol": null,
"status": "resolved",
"resolved_symbol": "RuntimeManager",
"alternatives": [
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager",
"RuntimeManager"
],
"confidence": 0.0
"confidence": 0.99
},
"evidence_policy": {
"require_def": true,
@@ -1431,6 +1435,11 @@
"relations": [
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 52,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager.add_config_file",
"metadata": {
"edge_id": "a23b8a11ebdb12708b60c96ea12a69f7f042082f1adfddd572444e246d81d167",
"edge_type": "dataflow_slice",
@@ -1471,6 +1480,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 33,
"end_line": 39,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager.__init__",
"metadata": {
"edge_id": "d43af85989222ee6d788ce418cdcb217c7ff044cfb915e3bdbd184417dc7bd61",
"edge_type": "dataflow_slice",
@@ -1511,6 +1525,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 25,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.stop",
"metadata": {
"edge_id": "d5433e2950fb6f913453de2694d697f2c5c5b0e759501aa31c37125d4d29c118",
"edge_type": "dataflow_slice",
@@ -1551,6 +1570,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 51,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._stop_async",
"metadata": {
"edge_id": "991ae894d11340626f4d9361e176c5009c2f33d95ce1a8864740bc85306accc3",
"edge_type": "dataflow_slice",
@@ -1591,6 +1615,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 59,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager.start",
"metadata": {
"edge_id": "98312ace7fc62b1c7194c5aa1732b6ef736eae1668a3a120dd1ecd5ab1d64f7a",
"edge_type": "dataflow_slice",
@@ -1631,6 +1660,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 32,
"end_line": 127,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager._register_core_services",
"metadata": {
"edge_id": "3e5811f3b511fa0cabe363f5d01f2ac5fa039bc8b93f7ee108323e1f5f45a293",
"edge_type": "dataflow_slice",
@@ -1671,6 +1705,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 17,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.register_channel",
"metadata": {
"edge_id": "e21fe35e6cd37bb929561a316c9b5156bd379de768b11d96c989a75a4a9330f2",
"edge_type": "dataflow_slice",
@@ -1711,6 +1750,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 20,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService.start",
"metadata": {
"edge_id": "dc85f1ea8fe46c5223a32b4623a249512af7ea30f3af0d890c2fbe842c74d3c2",
"edge_type": "dataflow_slice",
@@ -1751,6 +1795,11 @@
},
{
"path": "src/app_runtime/control/service.py",
"start_line": 14,
"end_line": 47,
"edge_type": "dataflow_slice",
"source": "ControlPlaneService.__init__",
"target": "ControlPlaneService._start_async",
"metadata": {
"edge_id": "e8e2ddef7499bed745cce7a83d5130d145e9787ca9ddc73f5898372a8da2be06",
"edge_type": "dataflow_slice",
@@ -1791,6 +1840,11 @@
},
{
"path": "src/app_runtime/core/runtime.py",
"start_line": 33,
"end_line": 127,
"edge_type": "dataflow_slice",
"source": "RuntimeManager.__init__",
"target": "RuntimeManager._register_core_services",
"metadata": {
"edge_id": "aac6f9dda73963b977083a892bee39a48eca4fbd7404787e022ecf4ebedec65d",
"edge_type": "dataflow_slice",
@@ -1830,37 +1884,83 @@
"content": "RuntimeManager.__init__\n -> RuntimeManager.services\n -> RuntimeManager._register_core_services"
}
],
"entrypoints": [
"semantic_hints": [
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
"path": "src/app_runtime/core/runtime.py",
"title": "RuntimeManager",
"symbol": "RuntimeManager",
"role": "pipeline_stage",
"confidence": 0.67,
"content": "RuntimeManager\nrole: pipeline_stage\n\nResponsibilities:\n- name suffix suggests manager\n- orchestrates role-like calls (4)\n- reads and writes state attributes\n- participates in dataflow slices (50)"
},
{
"path": "src/app_runtime/control/base.py",
"title": "ControlChannel",
"symbol": "ControlChannel",
"role": "model",
"confidence": 0.99,
"content": "ControlChannel\nrole: model\n\nResponsibilities:\n- default model role"
},
{
"path": "src/app_runtime/control/base.py",
"title": "ControlActionSet",
"symbol": "ControlActionSet",
"role": "model",
"confidence": 0.99,
"content": "ControlActionSet\nrole: model\n\nResponsibilities:\n- default model role"
},
{
"path": "src/app_runtime/control/service.py",
"title": "ControlPlaneService",
"symbol": "ControlPlaneService",
"role": "pipeline_stage",
"confidence": 0.57,
"content": "ControlPlaneService\nrole: pipeline_stage\n\nResponsibilities:\n- name suffix suggests service\n- reads and writes state attributes\n- participates in dataflow slices (5)"
},
{
"path": "src/app_runtime/control/http_runner.py",
"title": "UvicornThreadRunner",
"symbol": "UvicornThreadRunner",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "UvicornThreadRunner\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (24)"
},
{
"path": "src/app_runtime/control/http_channel.py",
"title": "HttpControlChannel",
"symbol": "HttpControlChannel",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "HttpControlChannel\nrole: pipeline_stage\n\nResponsibilities:\n- reads and writes state attributes\n- participates in dataflow slices (10)"
},
{
"path": "src/app_runtime/control/http_app.py",
"title": "HttpControlAppFactory",
"symbol": "HttpControlAppFactory",
"role": "factory",
"confidence": 0.99,
"content": "HttpControlAppFactory\nrole: factory\n\nResponsibilities:\n- name suffix suggests factory"
},
{
"path": "src/app_runtime/workflow/persistence/workflow_persistence.py",
"title": "WorkflowPersistence",
"symbol": "WorkflowPersistence",
"role": "pipeline_stage",
"confidence": 0.99,
"content": "WorkflowPersistence\nrole: pipeline_stage\n\nResponsibilities:\n- orchestrates role-like calls (2)\n- reads and writes state attributes\n- participates in dataflow slices (16)"
}
],
"entrypoints": [
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 31,
"end_line": 34,
"http_method": "GET",
"route_path": "/health",
"handler_symbol": "health",
"handler_symbol_id": "ab49f8d604dfed17bd83972a4158047a7c773c20ff58fbabc7963f4a1ec96834",
"route_or_command": "app.get",
"metadata": {
"entry_id": "5377b9336800b5d63cc3b67a58730d18a409b245650dd9449325d87c64e24f62",
"entry_type": "http",
@@ -1888,6 +1988,13 @@
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.get",
"start_line": 38,
"end_line": 42,
"http_method": "GET",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.get",
"metadata": {
"entry_id": "06e2f03cced7c1146b2d29f81951f2a2839140484eae22b2d6a63075d903ca4a",
"entry_type": "http",
@@ -1911,6 +2018,40 @@
"last_modified": null,
"staleness_score": null
}
},
{
"path": "src/app_runtime/control/http_app.py",
"title": "app.post",
"start_line": 38,
"end_line": 42,
"http_method": "POST",
"route_path": "/actions/{action}",
"handler_symbol": "action",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"route_or_command": "app.post",
"metadata": {
"entry_id": "56ed4b3229229e985cbf949d567b742b156412c7280eba9b5b54668f61bf0305",
"entry_type": "http",
"framework": "fastapi",
"route_or_command": "app.post",
"handler_symbol_id": "4da634384f08efb2d4cc12ac58ce1e667a780481392b4e715ae963e8e8a37fab",
"is_test": false,
"lang_payload": {
"methods": [
"POST"
]
},
"artifact_type": null,
"blob_sha": "1cebc374b1999638635b2f2c2ccf1dcf11c465914c22dd9490b1531278846919",
"repo_id": "plba",
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"test_candidates": [],
@@ -3380,11 +3521,11 @@
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 50,
"C0_SOURCE_CHUNKS": 69,
"C4_SEMANTIC_ROLES": 82,
"C2_DEPENDENCY_GRAPH": 78,
"C3_ENTRYPOINTS": 11
"C1_SYMBOL_CATALOG": 59,
"C0_SOURCE_CHUNKS": 45,
"C4_SEMANTIC_ROLES": 21,
"C2_DEPENDENCY_GRAPH": 62,
"C3_ENTRYPOINTS": 21
}
}
},
@@ -3400,6 +3541,9 @@
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
@@ -3414,7 +3558,7 @@
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"symbol_resolution_status": "pending"
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
@@ -3467,8 +3611,42 @@
"failure_reasons": [],
"evidence_count": 37
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "TRACE_FLOW",
"target_type": "symbol",
"evidence_count": 37,
"code_chunk_count": 37,
"entrypoint_count": 3,
"relation_count": 10,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ"
}
},
"failure_reasons": [],
"timings_ms": {}
"timings_ms": {
"router": 2,
"retrieval": 211,
"pre_evidence_gate": 1,
"llm": 3158,
"post_evidence_gate": 1
}
},
"rag_rows": [
{
@@ -4863,6 +5041,158 @@
"passed": true,
"action": "return",
"reasons": []
}
},
"token_usage": {
"prompt_name": "code_qa_trace_flow_answer",
"tokens_in_estimate": 4310
},
"steps": [
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 2
},
"output": {
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 211
},
"output": {
"rag_count": 37,
"answer_path_rag_count": 37,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector",
"C4_SEMANTIC_ROLES": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C3_ENTRYPOINTS": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C0_SOURCE_CHUNKS": 8,
"C4_SEMANTIC_ROLES": 8,
"C2_DEPENDENCY_GRAPH": 10,
"C3_ENTRYPOINTS": 10
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
},
"C4_SEMANTIC_ROLES": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C3_ENTRYPOINTS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 59,
"C0_SOURCE_CHUNKS": 45,
"C4_SEMANTIC_ROLES": 21,
"C2_DEPENDENCY_GRAPH": 62,
"C3_ENTRYPOINTS": 21
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "TRACE_FLOW",
"target_type": "symbol",
"evidence_count": 37,
"code_chunk_count": 37,
"entrypoint_count": 3,
"relation_count": 10,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 37
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 3158
},
"output": {
"prompt_name": "code_qa_trace_flow_answer",
"answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ"
}
}
]
}
}

305
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/full_chain_plba_code_subintents_one_per_subintent_plba-v3-trace-flow-runtime-start.md Normal file
View File

@@ -0,0 +1,305 @@
# plba-v3-trace-flow-runtime-start
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v3/cases/suite_02_pipeline/full_chain_plba_code_subintents_one_per_subintent.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Покажи поток выполнения при запуске RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связях внутри класса `RuntimeManager`. \nКонкретные реализации логики запуска находятся в файле `src/app_runtime/core/runtime.py`, строки 32–127.\n\nПоток выполнения полностью восстанавливается по данным контекстного фрагмента.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Steps
[
{
"step": "router",
"status": "completed",
"timings_ms": {
"router": 2
},
"output": {
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START"
}
},
{
"step": "retrieval",
"status": "completed",
"timings_ms": {
"retrieval": 211
},
"output": {
"rag_count": 37,
"answer_path_rag_count": 37,
"resolved_symbol_status": "resolved",
"resolved_symbol": "RuntimeManager",
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
},
"diagnostics": {
"executed_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"retrieval_mode_by_layer": {
"C1_SYMBOL_CATALOG": "vector",
"C0_SOURCE_CHUNKS": "vector",
"C4_SEMANTIC_ROLES": "vector",
"C2_DEPENDENCY_GRAPH": "vector",
"C3_ENTRYPOINTS": "vector"
},
"top_k_by_layer": {
"C1_SYMBOL_CATALOG": 8,
"C0_SOURCE_CHUNKS": 8,
"C4_SEMANTIC_ROLES": 8,
"C2_DEPENDENCY_GRAPH": 10,
"C3_ENTRYPOINTS": 10
},
"filters_by_layer": {
"C1_SYMBOL_CATALOG": {
"path_scope": []
},
"C0_SOURCE_CHUNKS": {
"path_scope": []
},
"C4_SEMANTIC_ROLES": {
"path_scope": []
},
"C2_DEPENDENCY_GRAPH": {
"path_scope": []
},
"C3_ENTRYPOINTS": {
"path_scope": []
}
},
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C1_SYMBOL_CATALOG": 59,
"C0_SOURCE_CHUNKS": 45,
"C4_SEMANTIC_ROLES": 21,
"C2_DEPENDENCY_GRAPH": 62,
"C3_ENTRYPOINTS": 21
}
}
},
{
"step": "pre_evidence_gate",
"status": "passed",
"timings_ms": {
"pre_evidence_gate": 1
},
"input": {
"resolved_target": "RuntimeManager",
"sub_intent": "TRACE_FLOW",
"target_type": "symbol",
"evidence_count": 37,
"code_chunk_count": 37,
"entrypoint_count": 3,
"relation_count": 10,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"output": {
"passed": true,
"failure_reasons": [],
"degraded_message": "",
"evidence_count": 37
}
},
{
"step": "llm",
"status": "completed",
"timings_ms": {
"llm": 3158
},
"output": {
"prompt_name": "code_qa_trace_flow_answer",
"answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient"
}
},
{
"step": "post_evidence_gate",
"status": "passed",
"timings_ms": {
"post_evidence_gate": 1,
"post_evidence_gate_recheck": 0,
"repair": 0
},
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ"
}
}
]
## Diagnostics
{
"intent_correct": null,
"target_found": true,
"layers_used": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"resolved_target": "RuntimeManager",
"answer_policy_branch": "normal_answer",
"decision_reason": "evidence_sufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "TRACE_FLOW",
"path_scope": [],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
],
"symbol_resolution_status": "resolved"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Покажи поток выполнения при запуске RuntimeManager",
"sub_intent": "TRACE_FLOW",
"path_scope": [],
"requested_layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
},
"per_layer_outcome": [
{
"layer_id": "C1_SYMBOL_CATALOG",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C4_SEMANTIC_ROLES",
"hit_count": 8,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C2_DEPENDENCY_GRAPH",
"hit_count": 10,
"empty": false,
"fallback_used": false
},
{
"layer_id": "C3_ENTRYPOINTS",
"hit_count": 3,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 37
},
"evidence_gate_input": {
"resolved_target": "RuntimeManager",
"sub_intent": "TRACE_FLOW",
"target_type": "symbol",
"evidence_count": 37,
"code_chunk_count": 37,
"entrypoint_count": 3,
"relation_count": 10,
"test_evidence_count": 0,
"symbol_resolution_status": "resolved",
"path_scope": []
},
"post_evidence_gate": {
"input": {
"answer_mode": "normal",
"degraded_message": "",
"resolved_target": "RuntimeManager",
"draft_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ",
"repair_candidate": true
},
"output": {
"passed": true,
"action": "return",
"reasons": [],
"repair_used": false,
"final_answer_preview": "При запуске `RuntimeManager` выполняются следующие шаги:\n\n1. Инициализация конфигурации через `add_config_file`.\n2. Инициализация сервисов.\n3. Регистрация основных служб через `_register_core_services`.\n4. Запуск менеджера с помощью метода `start`.\n\nЭти этапы основаны на сигнатурах методов и их связ"
}
},
"failure_reasons": [],
"timings_ms": {
"router": 2,
"retrieval": 211,
"pre_evidence_gate": 1,
"llm": 3158,
"post_evidence_gate": 1
}
}
## Mismatches
- none

36
tests/pipeline_setup_v3/test_results/manual_run/20260312_193339/summary.md Normal file
View File

@@ -0,0 +1,36 @@
# pipeline_setup_v3 summary
Passed: 7/7
| File | Case | Mode | Query | Actual sub-intent | RAG layers | Tokens | Pass |
|------|------|------|-------|-------------------|------------|--------|------|
| full_chain_plba_code_subintents_one_per_subintent.yaml | plba-v3-open-file-runtime | full_chain | Открой файл src/app_runtime/core/runtime.py | OPEN_FILE | C0_SOURCE_CHUNKS:1 | 1128 | ✓ |
| full_chain_plba_code_subintents_one_per_subintent.yaml | plba-v3-explain-runtime-manager | full_chain | Объясни как работает класс RuntimeManager | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | 4504 | ✓ |
| full_chain_plba_code_subintents_one_per_subintent.yaml | plba-v3-explain-local-http-channel | full_chain | Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так? | EXPLAIN_LOCAL | C0_SOURCE_CHUNKS:1, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:4 | 2071 | ✓ |
| full_chain_plba_code_subintents_one_per_subintent.yaml | plba-v3-find-tests-runtime-manager | full_chain | Где тесты для RuntimeManager? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | 3660 | ✓ |
| full_chain_plba_code_subintents_one_per_subintent.yaml | plba-v3-find-entrypoints-health-endpoint | full_chain | Где health endpoint? | FIND_ENTRYPOINTS | C0_SOURCE_CHUNKS:7, C3_ENTRYPOINTS:3 | 2531 | ✓ |
| full_chain_plba_code_subintents_one_per_subintent.yaml | plba-v3-trace-flow-runtime-start | full_chain | Покажи поток выполнения при запуске RuntimeManager | TRACE_FLOW | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:10, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | 4310 | ✓ |
| full_chain_plba_code_subintents_one_per_subintent.yaml | plba-v3-architecture-runtime-manager | full_chain | Какие компоненты участвуют в RuntimeManager? | ARCHITECTURE | C0_SOURCE_CHUNKS:4, C1_SYMBOL_CATALOG:6, C2_DEPENDENCY_GRAPH:8, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:12 | 4061 | ✓ |
## LLM Answers
- **plba-v3-open-file-runtime**
Query: Открой файл src/app_runtime/core/runtime.py
> В файле \`src/app\_runtime/core/runtime.py\` определён класс \`RuntimeManager\`. У него есть несколько классов полей с умолчательными сервисами: \- \`configuration\`: тип \`ConfigurationManager\` \- \`services\`: тип \`ServiceContainer\` \- \`traces\`: тип \`TraceService\` \- \`health\`: тип \`HealthRegistry\` \- \`logs\`: тип \`LogManager\` \- \`workers\`: тип \`WorkerSupervisor\` \- \`control\_plane\`: тип \`ControlPlaneService\` Также определены константы таймаутов: \- \`ACTION\_TIMEOUT\_SECONDS = 10.0\` \- \`ACTION\_POLL\_INTERVAL\_SECONDS = 0.05\`
- **plba-v3-explain-runtime-manager**
Query: Объясни как работает класс RuntimeManager
> Недостаточно подтверждённых данных для уверенного ответа по RuntimeManager.
- **plba-v3-explain-local-http-channel**
Query: Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?
> Класс HttpControlChannel наследует ControlChannel и реализует HTTP\-канал управления. Он принимает хост, порт и таймаут при инициализации, создаёт экземпляр UvicornThreadRunner для запуска сервера и использует HttpControlAppFactory для создания FastAPI\-приложения. Метод start запускает сервер с переданным набором действий \(ControlActionSet\), а метод stop останавливает его. Свойство port возвращает текущий порт runner. Внутри класса определены два обработчика: \_health\_response проверяет здоровье канала, возвращая статус "unhealthy" если действия не установлены; \_action\_response предположительно обрабатывает запросы на выполнение действий, но его реализация в данном фрагменте не показана.
- **plba-v3-find-tests-runtime-manager**
Query: Где тесты для RuntimeManager?
> Прямые тесты для \`RuntimeManager\` находятся в файле \`tests/test\_runtime.py\`. Косвенные тесты: \- В файле \`tests/test\_business\_control\_actions.py\` есть тесты, использующие сущности контроля, которые взаимодействуют с \`RuntimeManager\`.
- **plba-v3-find-entrypoints-health-endpoint**
Query: Где health endpoint?
> Подтверждённая точка входа для health endpoint: GET /health, declared in src/app\_runtime/control/http\_app.py, lines 31\-34, handler function named 'health'.
- **plba-v3-trace-flow-runtime-start**
Query: Покажи поток выполнения при запуске RuntimeManager
> При запуске \`RuntimeManager\` выполняются следующие шаги: 1. Инициализация конфигурации через \`add\_config\_file\`. 2. Инициализация сервисов. 3. Регистрация основных служб через \`\_register\_core\_services\`. 4. Запуск менеджера с помощью метода \`start\`. Эти этапы основаны на сигнатурах методов и их связях внутри класса \`RuntimeManager\`. Конкретные реализации логики запуска находятся в файле \`src/app\_runtime/core/runtime.py\`, строки 32–127. Поток выполнения полностью восстанавливается по данным контекстного фрагмента.
- **plba-v3-architecture-runtime-manager**
Query: Какие компоненты участвуют в RuntimeManager?
> Компоненты, участвующие в подсистеме RuntimeManager: \- \*\*RuntimeManager\*\* \(src/app\_runtime/core/runtime.py:18\-179\) \- \*\*ControlPlaneService.\_\_init\_\_\*\* \(src/app\_runtime/control/service.py:14\-51\) \- \*\*RuntimeManager.\_\_init\_\_\*\* \(src/app\_runtime/core/runtime.py:32\-127\) \- \*\*ControlPlaneService.\_start\_async\*\* \(src/app\_runtime/control/service.py:14\-47\) \- \*\*RuntimeManager.start\*\* \(src/app\_runtime/core/runtime.py:32\-59\) \- \*\*ControlPlaneService.start\*\* \(src/app\_runtime/control/service.py:14\-20\) \- \*\*ControlPlaneService.stop\*\* \(src/app\_runtime/control/service.py:14\-25\) \- \*\*ControlPlaneService.\_stop\_async\*\* \(src/app\_runtime/control/service.py:14\-51\) \- \*\*RuntimeManager.add\_config\_file\*\* \(src/app\_runtime/core/runtime.py:32\-52\) \- \*\*ControlPlaneService.register\_channel\*\* \(src/app\_runtime/control/service.py:14\-17\) Связи между компонентами: \- \*\*ControlPlaneService.\_\_init\_\_ dataflow\_slice…

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-architecture-control-plane.md
View File

@@ -1,34 +0,0 @@
# plba-v2-architecture-control-plane
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Какие компоненты участвуют в ControlPlaneService?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Подтвержденные связи и роли компонентов в контексте ControlPlaneService:\n\n### Компоненты и их роли\n\n1. **ControlPlaneService**\n - Роль: pipeline_stage\n - Описание: Инициализирует каналы управления и управляет ими.\n \n2. **ControlChannel**\n - Роль: model\n - Описание: Абстрактный класс для каналов управления с методами старта и остановки.\n\n3. **ControlActionSet**\n - Роль: model\n - Описание: Представляет набор действий контроля.\n\n4. **UvicornThreadRunner**\n - Роль: pipeline_stage\n - Описание: Управляет uvicorn сервером и участвует в потоках данных.\n\n5. **HttpControlChannel**\n - Роль: pipeline_stage\n - Описание: Канал управления HTTP-соединениями, участвующий в потоках данных.\n\n6. **HttpControlAppFactory**\n - Роль: factory\n - Описание: Фабрика для создания fastAPI приложений.\n\n7. **WorkflowPersistence**\n - Роль: pipeline_stage\n - Описание: Хранит информацию о процессах и взаимодействует с ними.\n\n8. **InMemoryTaskQueue**\n - Роль: pipeline_stage\n - Описание: Очередь задач, используемая для хранения промежуточных результатов.\n\n9. **ConfigFileLoader**\n - Роль: pipeline_stage\n - Описание: Загружает конфигурационные файлы и участвует в управлении состоянием приложения.\n\n10. **TraceContextStore**\n - Роль: pipeline_stage\n - Описание: Сохраняет контекст трассировки и управляет им.\n\n11. **WorkerSupervisor**\n - Роль: pipeline_stage\n - Описание: Наблюдает за рабочими процессами и обеспечивает их корректное выполнение.\n\n12. **WorkflowEngine**\n - Роль: pipeline_stage\n - Описание: Координирует выполнение рабочих процессов и управление ими.\n\n### Ограничения и замечания\n\nВсе перечисленные компоненты прямо или косвенно связаны с ControlPlaneService через зависимости или вызовы методов внутри ControlPlaneService. Они активно участвуют в его работе и обеспечивают функциональность и инфраструктуру, необходимую для выполнения его обязанностей.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"ControlPlaneService"
],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-architecture-runtime-manager.md
View File

@@ -1,34 +0,0 @@
# plba-v2-architecture-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Какие компоненты участвуют в RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "### Компоненты, участвующие в RuntimeManager\n\n#### Подтвержденные связи\n1. **RuntimeManager**\n - Role: Pipeline Stage\n - Responsibilities:\n - Manager responsibilities\n - Orchestration of role-like calls\n - State attribute reading/writing\n - Participation in dataflow slices\n\n2. **ControlPlaneService**\n - Role: Pipeline Stage\n - Responsibilities:\n - Service responsibilities\n - State attribute reading/writing\n - Participation in dataflow slices\n\n3. **UvicornThreadRunner**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n4. **HttpControlChannel**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n5. **WorkflowPersistence**\n - Role: Pipeline Stage\n - Responsibilities:\n - Orchestration of role-like calls\n - State attribute reading/writing\n - Participation in dataflow slices\n\n6. **InMemoryTaskQueue**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n7. **ConfigFileLoader**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n8. **TraceContextStore**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n9. **WorkerSupervisor**\n - Role: Pipeline Stage\n - Responsibilities:\n - State attribute reading/writing\n - Participation in dataflow slices\n\n### Ограничения найденного контекста\n- Все перечисленные компоненты являются участниками данных потоков выполнения (dataflow slices).\n- Каждый компонент выполняет операции чтения и записи состояния атрибутов.\n- Некоторые из них выполняют дополнительные обязанности, такие как участие в оркестрации или инициировании ролей.\n\nТаким образом, участники RuntimeManager включают перечисленные выше компоненты.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-create-runtime.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-create-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Что делает функция create_runtime?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Функция `create_runtime` инициализирует и настраивает менеджер выполнения приложения.\n\n**Ключевые шаги:**\n1. Инициализация менеджера выполнения (`RuntimeManager()`).\n2. Добавление конфигурационного файла, если указан путь (`add_config_file`).\n3. Регистрация HTTP-канала управления, если включен режим управления (`register_channel`).\n4. Регистрация модуля приложения в менеджере выполнения (`register_module`).\n\n**Опорные файлы:**\n- `src/plba/bootstrap.py:8-29`\n\nЭтот процесс позволяет настроить и запустить приложение с учетом заданных конфигураций и режимов управления.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"create_runtime"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

2033
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-local-http-channel.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-local-http-channel.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-local-http-channel
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN_LOCAL",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 13,
"llm_answer": "Класс `HttpControlChannel` предназначен для управления HTTP каналом контроля в приложении.\n\n**Ключевые шаги его реализации:**\n1. Инициализация (`__init__`) – принимает параметры хоста, порта и тайм-аута, создаёт внутренние объекты управления и инициализирует состояние канала.\n2. Запуск (`start`) – запускает сервер с заданными действиями контроля, создавая приложение и вызывая runner для запуска сервера.\n3. Остановка (`stop`) – останавливает запущенный сервер.\n4. Свойство `port` – возвращает порт, используемый сервером.\n5. Метод `_health_response` – генерирует ответ о состоянии здоровья системы (здоров или нет).\n\nОпорные файлы:\n- `src/app_runtime/control/http_channel.py:12-57` (определение класса и методов)\n- `src/app_runtime/control/http_channel.py:13-17` (инициализация)\n- `src/app_runtime/control/http_channel.py:19-22` (запуск)",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/control/http_channel.py"
],
"symbol_candidates": [
"HttpControlChannel"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
]
}
## Mismatches
- none

4092
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-nonexistent-symbol.json
View File

File diff suppressed because it is too large Load Diff

36
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-nonexistent-symbol.md
View File

@@ -1,36 +0,0 @@
# plba-v2-explain-nonexistent-symbol
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Объясни класс RuntimeFactoryManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `RuntimeFactoryManager` не указан напрямую в предоставленном коде. Однако, судя по контексту и взаимосвязям между классами:\n\n**Назначение класса:**\n- Управление фабрикой для создания экземпляров классов, связанных с управлением рабочим состоянием приложения.\n\n**Ключевые шаги:**\n1. Инициализация фабрики.\n2. Создание экземпляра соответствующего класса управления каналом (`ControlChannel`) или другого необходимого класса.\n3. Регистрация созданных каналов в сервисе управления каналами.\n\n**Опорные файлы:**\n- `src/app_runtime/control/base.py`: Объявление абстрактного базового класса `ControlChannel`.\n- `src/app_runtime/control/service.py`: Реализация сервиса управления каналами, который регистрирует созданные каналы.\n- `src/app_runtime/control/http_channel.py`: Определение канала HTTP, используемого для взаимодействия через HTTP-протокол.\n\nОбратите внимание, что прямое определение класса `RuntimeFactoryManager` отсутствует в представленном коде, поэтому информация о его назначении основана на логическом выводе и контексте использования других классов.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeFactoryManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- answer_mode: expected degraded, got answered
- retrieval: expected empty rag, got 33 rows
- llm: expected answer to contain 'не найдена'

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-runtime-manager.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Объясни как работает класс RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "**Класс `RuntimeManager`** отвечает за управление жизненным циклом приложения и координацию различных компонентов системы.\n\n### Ключевые шаги работы класса:\n1. **Инициализация конфигурации:** \n Класс инициализирует начальные настройки приложения, включая загрузку конфигурационных файлов.\n \n2. **Регистрация каналов управления:**\n Метод `register_channel` позволяет зарегистрировать каналы управления, которые будут использоваться для взаимодействия с различными компонентами системы.\n\n3. **Запуск и остановка системы:**\n Методы `start` и `stop` инициируют запуск и остановку всех зарегистрированных каналов управления, обеспечивая корректное завершение работы системы.\n\n4. **Сохранение состояния:**\n Метод `snapshot` создает снимок текущего состояния системы, который может быть использован для восстановления или анализа состояния в будущем.\n\n### Опорные файлы:\n- `src/app_runtime/core/runtime.py`: Определение и реализация класса `RuntimeManager`.\n- `src/app_runtime/control/service.py`: Реализация методов регистрации и запуска каналов управления.\n- `src/app_runtime/control/http_channel.py`: Управление HTTP-каналом для взаимодействия с внешним миром.\n\nЭтот класс играет центральную роль в управлении потоком выполнения и состоянием приложения, координируя работу различных компонентов и обеспечивая их синхронность и согласованность.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

4157
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-trace-service.json
View File

File diff suppressed because one or more lines are too long

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-explain-trace-service.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-trace-service
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Объясни как работает класс TraceService
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "**Класс `TraceService`** предназначен для управления контекстом трассировки в приложении. Его основные функции включают создание нового контекста трассировки, получение текущего идентификатора трассировки и закрытие контекста.\n\n**Ключевые шаги работы класса:**\n1. **Инициализация:** При создании экземпляра `TraceService` задаются транспорт и хранилище контекста трассировки (по умолчанию используются заглушки).\n2. **Создание контекста:** Метод `create_context` создает новый контекст трассировки с заданными параметрами (идентификатор, родительский идентификатор, тип и атрибуты). Контекст сохраняется в хранилище.\n3. **Получение текущего идентификатора:** Метод `current_trace_id` возвращает текущий идентификатор трассировки.\n4. **Открытие контекста:** Метод `open_context` открывает новый контекст трассировки.\n5. **Закрытие контекста:** Метод `close_context` завершает текущую трассировку.\n\n**Опорные файлы:**\n- `src/app_runtime/tracing/service.py`: определение и реализация класса `TraceService`.\n- Другие файлы содержат декларации и зависимости, относящиеся к классу.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"TraceService"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

1303
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-control-plane.json
View File

File diff suppressed because it is too large Load Diff

33
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-control-plane.md
View File

@@ -1,33 +0,0 @@
# plba-v2-find-entrypoints-control-plane
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Найди точки входа HTTP control plane
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 9,
"llm_answer": "confirmed_entrypoints:\n- src/app_runtime/control/http_app.py:app.post (line range: 38-42)\n- src/app_runtime/control/http_app.py:app.get (line range: 31-34)\n- src/app_runtime/control/http_app.py:app.get (line range: 38-42)",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"HTTP",
"control",
"plane"
],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-health-endpoint.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-entrypoints-health-endpoint
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Где health endpoint?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 9,
"llm_answer": "health endpoint: \n- src/app_runtime/control/http_app.py:38-42 (app.post)\n- src/app_runtime/control/http_app.py:31-34 (app.get)",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"health",
"endpoint"
],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- llm: expected answer to contain 'GET /health'

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-tests-create-runtime.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-create-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для create_runtime?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "- tests/test_runtime.py:342-405 (test_public_plba_package_exports_runtime_builder_and_worker_contract)",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"create_runtime"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-tests-runtime-manager.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "- tests/test_runtime.py:12-12\n- tests/test_business_control_actions.py:14-14",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

3134
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-tests-trace-service.json
View File

File diff suppressed because one or more lines are too long

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-tests-trace-service.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-trace-service
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для TraceService?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "tests/test_runtime.py:test_trace_service_allows_messages_without_status \ntests/test_runtime.py:test_trace_service_writes_contexts_and_messages \ntests/test_runtime.py:test_trace_service_supports_debug_warning_and_error_levels",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"TraceService"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-find-tests-workflow-runtime-factory-negative.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-workflow-runtime-factory-negative
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для WorkflowRuntimeFactory?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "Insufficient evidence for a confident answer. No test candidates found.",
"answer_mode": "degraded",
"path_scope": [],
"symbol_candidates": [
"WorkflowRuntimeFactory"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

31
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-open-file-nonexistent.md
View File

@@ -1,31 +0,0 @@
# plba-v2-open-file-nonexistent
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Открой файл src/app_runtime/core/missing_runtime.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 0,
"llm_answer": "Файл `src/app_runtime/core/missing_runtime.py` не найден.",
"answer_mode": "not_found",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- answer_mode: expected degraded, got not_found
- llm: expected answer to contain 'Файл src/app_runtime/core/missing_runtime.py не найден.'

419
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-open-file-public-api.json
View File

@@ -1,419 +0,0 @@
{
"case_id": "plba-v2-open-file-public-api",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Открой файл src/plba/__init__.py",
"actual": {
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Путь к файлу: src/plba/__init__.py\n\nВ этом файле находятся импортированные модули и классы из различных подпакетов библиотеки plba. Файл служит точкой входа для пользователей, предоставляя доступ к основным функциям и классам библиотеки. В частности, здесь импортируются:\n\n- Функции и классы для создания runtime (create_runtime)\n- Конфигурационные файлы и провайдеры (ConfigFileLoader, FileConfigProvider)\n- Контрольные каналы и службы (ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel)\n- Определения контрактов (ApplicationModule, ConfigProvider, HealthContributor и др.)\n- Менеджеры конфигурации и выполнения (ConfigurationManager, RuntimeManager, ServiceContainer)\n- Службы мониторинга здоровья (HealthRegistry)\n- Управление логированием (LogManager)\n- Очереди задач (InMemoryTaskQueue)\n- Транспортировка трассировки (MySqlTraceTransport, NoOpTraceTransport, TraceService)\n- Определение рабочих потоков и контекстов (StepResult, WorkflowContext, WorkflowDefinition, Workf)",
"answer_mode": "answered",
"path_scope": [
"src/plba/__init__.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
},
"passed": false,
"mismatches": [
"llm: expected answer to exclude 'из различных подпакетов'"
],
"details": {
"query": "Открой файл src/plba/__init__.py",
"router_result": {
"schema_version": "1.1",
"intent": "CODE_QA",
"retrieval_profile": "code",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"query_plan": {
"raw": "Открой файл src/plba/__init__.py",
"normalized": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"negations": [],
"expansions": [
"file"
],
"keyword_hints": [],
"path_hints": [
"src/plba/__init__.py"
],
"doc_scope_hints": [],
"symbol_candidates": [],
"symbol_kind_hint": "unknown",
"anchors": [
{
"type": "FILE_PATH",
"value": "src/plba/__init__.py",
"source": "user_text",
"subtype": null,
"span": {
"start": 12,
"end": 32
},
"confidence": 0.95
},
{
"type": "KEY_TERM",
"value": "файл",
"source": "user_text",
"subtype": null,
"span": {
"start": 7,
"end": 11
},
"confidence": 0.9
}
]
},
"retrieval_spec": {
"domains": [
"CODE"
],
"layer_queries": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"top_k": 12
}
],
"filters": {
"test_policy": "EXCLUDE",
"path_scope": [
"src/plba/__init__.py"
],
"language": [
"python"
]
},
"rerank_profile": "code"
},
"retrieval_constraints": {
"include_globs": [
"src/plba/__init__.py"
],
"exclude_globs": [
"tests/**",
"**/test_*.py",
"**/*_test.py"
],
"prefer_globs": [],
"test_file_globs": [],
"test_symbol_patterns": [],
"max_candidates": 20,
"fuzzy_symbol_search": {
"enabled": false,
"max_distance": 2,
"top_k": 5
}
},
"symbol_resolution": {
"status": "not_requested",
"resolved_symbol": null,
"alternatives": [],
"confidence": 0.0
},
"evidence_policy": {
"require_def": false,
"require_flow": false,
"require_spec": false,
"allow_answer_without_evidence": false
}
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/plba/__init__.py"
],
"keyword_hints": [],
"symbol_candidates": [],
"requested_layers": [
"C0_SOURCE_CHUNKS"
],
"retrieval_spec": {
"domains": [
"CODE"
],
"layer_queries": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"top_k": 12
}
],
"filters": {
"test_policy": "EXCLUDE",
"path_scope": [
"src/plba/__init__.py"
],
"language": [
"python"
]
},
"rerank_profile": "code"
},
"retrieval_constraints": {
"include_globs": [
"src/plba/__init__.py"
],
"exclude_globs": [
"tests/**",
"**/test_*.py",
"**/*_test.py"
],
"prefer_globs": [],
"test_file_globs": [],
"test_symbol_patterns": [],
"max_candidates": 20,
"fuzzy_symbol_search": {
"enabled": false,
"max_distance": 2,
"top_k": 5
}
},
"query_plan": {
"raw": "Открой файл src/plba/__init__.py",
"normalized": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"negations": [],
"expansions": [
"file"
],
"keyword_hints": [],
"path_hints": [
"src/plba/__init__.py"
],
"doc_scope_hints": [],
"symbol_candidates": [],
"symbol_kind_hint": "unknown",
"anchors": [
{
"type": "FILE_PATH",
"value": "src/plba/__init__.py",
"source": "user_text",
"subtype": null,
"span": {
"start": 12,
"end": 32
},
"confidence": 0.95
},
{
"type": "KEY_TERM",
"value": "файл",
"source": "user_text",
"subtype": null,
"span": {
"start": 7,
"end": 11
},
"confidence": 0.9
}
]
}
},
"retrieval_result": {
"target_symbol_candidates": [],
"resolved_symbol": null,
"symbol_resolution_status": "not_requested",
"file_candidates": [
"src/plba/__init__.py"
],
"code_chunks": [
{
"layer": "C0_SOURCE_CHUNKS",
"path": "src/plba/__init__.py",
"title": "src/plba/__init__.py:1-69",
"content": "from plba.bootstrap import create_runtime\nfrom plba.config import ConfigFileLoader, FileConfigProvider\nfrom plba.control import ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\nfrom plba.contracts import (\n ApplicationModule,\n ConfigProvider,\n HealthContributor,\n TraceContext,\n TraceContextRecord,\n TraceLogMessage,\n TraceTransport,\n Worker,\n WorkerHealth,\n WorkerStatus,\n)\nfrom plba.core import ConfigurationManager, RuntimeManager, ServiceContainer\nfrom plba.health import HealthRegistry\nfrom plba.logging import LogManager\nfrom plba.queue import InMemoryTaskQueue\nfrom plba.tracing import MySqlTraceTransport, NoOpTraceTransport, TraceService\nfrom plba.workflow import (\n StepResult,\n WorkflowContext,\n WorkflowDefinition,\n WorkflowEngine,\n WorkflowEngineHooks,\n WorkflowNode,\n WorkflowRuntimeFactory,\n WorkflowStep,\n)\nfrom plba.workers import WorkerSupervisor\n\n__all__ = [\n \"ApplicationModule\",\n \"ConfigFileLoader\",\n \"ConfigProvider\",\n \"ConfigurationManager\",\n \"ControlActionSet\",\n \"ControlChannel\",\n \"ControlPlaneService\",\n \"create_runtime\",\n \"FileConfigProvider\",\n \"HealthContributor\",\n \"HealthRegistry\",\n \"HttpControlChannel\",\n \"InMemoryTaskQueue\",\n \"LogManager\",\n \"MySqlTraceTransport\",\n \"NoOpTraceTransport\",\n \"RuntimeManager\",\n \"ServiceContainer\",\n \"TraceContext\",\n \"TraceContextRecord\",\n \"TraceLogMessage\",\n \"TraceService\",\n \"TraceTransport\",\n \"StepResult\",\n \"Worker\",\n \"WorkerHealth\",\n \"WorkerStatus\",\n \"WorkflowContext\",\n \"WorkflowDefinition\",\n \"WorkflowEngine\",\n \"WorkflowEngineHooks\",\n \"WorkflowNode\",\n \"WorkflowRuntimeFactory\",\n \"WorkflowStep\",\n \"WorkerSupervisor\",\n]",
"start_line": 1,
"end_line": 69,
"metadata": {
"chunk_index": 0,
"chunk_type": "window",
"module_or_unit": "src.plba.__init__",
"is_test": false,
"blob_sha": "24e755ec8c249d14fb0e675b5dbf2b71ab91afb9c849897eebfa9feb2499e19d",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"relations": [],
"entrypoints": [],
"test_candidates": [],
"layer_outcomes": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 1,
"empty": false,
"fallback_used": false
}
],
"missing_layers": [],
"raw_rows": [
{
"path": "src/plba/__init__.py",
"content": "from plba.bootstrap import create_runtime\nfrom plba.config import ConfigFileLoader, FileConfigProvider\nfrom plba.control import ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\nfrom plba.contracts import (\n ApplicationModule,\n ConfigProvider,\n HealthContributor,\n TraceContext,\n TraceContextRecord,\n TraceLogMessage,\n TraceTransport,\n Worker,\n WorkerHealth,\n WorkerStatus,\n)\nfrom plba.core import ConfigurationManager, RuntimeManager, ServiceContainer\nfrom plba.health import HealthRegistry\nfrom plba.logging import LogManager\nfrom plba.queue import InMemoryTaskQueue\nfrom plba.tracing import MySqlTraceTransport, NoOpTraceTransport, TraceService\nfrom plba.workflow import (\n StepResult,\n WorkflowContext,\n WorkflowDefinition,\n WorkflowEngine,\n WorkflowEngineHooks,\n WorkflowNode,\n WorkflowRuntimeFactory,\n WorkflowStep,\n)\nfrom plba.workers import WorkerSupervisor\n\n__all__ = [\n \"ApplicationModule\",\n \"ConfigFileLoader\",\n \"ConfigProvider\",\n \"ConfigurationManager\",\n \"ControlActionSet\",\n \"ControlChannel\",\n \"ControlPlaneService\",\n \"create_runtime\",\n \"FileConfigProvider\",\n \"HealthContributor\",\n \"HealthRegistry\",\n \"HttpControlChannel\",\n \"InMemoryTaskQueue\",\n \"LogManager\",\n \"MySqlTraceTransport\",\n \"NoOpTraceTransport\",\n \"RuntimeManager\",\n \"ServiceContainer\",\n \"TraceContext\",\n \"TraceContextRecord\",\n \"TraceLogMessage\",\n \"TraceService\",\n \"TraceTransport\",\n \"StepResult\",\n \"Worker\",\n \"WorkerHealth\",\n \"WorkerStatus\",\n \"WorkflowContext\",\n \"WorkflowDefinition\",\n \"WorkflowEngine\",\n \"WorkflowEngineHooks\",\n \"WorkflowNode\",\n \"WorkflowRuntimeFactory\",\n \"WorkflowStep\",\n \"WorkerSupervisor\",\n]",
"layer": "C0_SOURCE_CHUNKS",
"title": "src/plba/__init__.py:1-69",
"span_start": 1,
"span_end": 69,
"lexical_rank": 0,
"prefer_bonus": 0,
"test_penalty": 0,
"structural_rank": 0,
"layer_rank": 0,
"distance": 0,
"metadata": {
"chunk_index": 0,
"chunk_type": "window",
"module_or_unit": "src.plba.__init__",
"is_test": false,
"blob_sha": "24e755ec8c249d14fb0e675b5dbf2b71ab91afb9c849897eebfa9feb2499e19d",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"retrieval_report": {
"executed_layers": [
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C0_SOURCE_CHUNKS": "exact_path_fetch"
},
"top_k_by_layer": {
"C0_SOURCE_CHUNKS": 200
},
"filters_by_layer": {
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/plba/__init__.py"
]
}
},
"requests": [
{
"layer": "C0_SOURCE_CHUNKS",
"query": "Открой файл src/plba/__init__.py",
"ranking_profile": "code"
}
],
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C0_SOURCE_CHUNKS": 20
}
}
},
"diagnostics": {
"intent_correct": null,
"target_found": true,
"layers_used": [
"C0_SOURCE_CHUNKS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/plba/__init__.py"
],
"layers": [
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "not_requested"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/plba/__init__.py"
],
"requested_layers": [
"C0_SOURCE_CHUNKS"
]
},
"per_layer_outcome": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 1,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 1
},
"failure_reasons": [],
"timings_ms": {}
},
"rag_rows": [
{
"path": "src/plba/__init__.py",
"content": "from plba.bootstrap import create_runtime\nfrom plba.config import ConfigFileLoader, FileConfigProvider\nfrom plba.control import ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\nfrom plba.contracts import (\n ApplicationModule,\n ConfigProvider,\n HealthContributor,\n TraceContext,\n TraceContextRecord,\n TraceLogMessage,\n TraceTransport,\n Worker,\n WorkerHealth,\n WorkerStatus,\n)\nfrom plba.core import ConfigurationManager, RuntimeManager, ServiceContainer\nfrom plba.health import HealthRegistry\nfrom plba.logging import LogManager\nfrom plba.queue import InMemoryTaskQueue\nfrom plba.tracing import MySqlTraceTransport, NoOpTraceTransport, TraceService\nfrom plba.workflow import (\n StepResult,\n WorkflowContext,\n WorkflowDefinition,\n WorkflowEngine,\n WorkflowEngineHooks,\n WorkflowNode,\n WorkflowRuntimeFactory,\n WorkflowStep,\n)\nfrom plba.workers import WorkerSupervisor\n\n__all__ = [\n \"ApplicationModule\",\n \"ConfigFileLoader\",\n \"ConfigProvider\",\n \"ConfigurationManager\",\n \"ControlActionSet\",\n \"ControlChannel\",\n \"ControlPlaneService\",\n \"create_runtime\",\n \"FileConfigProvider\",\n \"HealthContributor\",\n \"HealthRegistry\",\n \"HttpControlChannel\",\n \"InMemoryTaskQueue\",\n \"LogManager\",\n \"MySqlTraceTransport\",\n \"NoOpTraceTransport\",\n \"RuntimeManager\",\n \"ServiceContainer\",\n \"TraceContext\",\n \"TraceContextRecord\",\n \"TraceLogMessage\",\n \"TraceService\",\n \"TraceTransport\",\n \"StepResult\",\n \"Worker\",\n \"WorkerHealth\",\n \"WorkerStatus\",\n \"WorkflowContext\",\n \"WorkflowDefinition\",\n \"WorkflowEngine\",\n \"WorkflowEngineHooks\",\n \"WorkflowNode\",\n \"WorkflowRuntimeFactory\",\n \"WorkflowStep\",\n \"WorkerSupervisor\",\n]",
"layer": "C0_SOURCE_CHUNKS",
"title": "src/plba/__init__.py:1-69",
"span_start": 1,
"span_end": 69,
"lexical_rank": 0,
"prefer_bonus": 0,
"test_penalty": 0,
"structural_rank": 0,
"layer_rank": 0,
"distance": 0,
"metadata": {
"chunk_index": 0,
"chunk_type": "window",
"module_or_unit": "src.plba.__init__",
"is_test": false,
"blob_sha": "24e755ec8c249d14fb0e675b5dbf2b71ab91afb9c849897eebfa9feb2499e19d",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"validation": {
"passed": true,
"action": "return",
"reasons": []
}
}
}

30
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-open-file-public-api.md
View File

@@ -1,30 +0,0 @@
# plba-v2-open-file-public-api
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Открой файл src/plba/__init__.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Путь к файлу: src/plba/__init__.py\n\nВ этом файле находятся импортированные модули и классы из различных подпакетов библиотеки plba. Файл служит точкой входа для пользователей, предоставляя доступ к основным функциям и классам библиотеки. В частности, здесь импортируются:\n\n- Функции и классы для создания runtime (create_runtime)\n- Конфигурационные файлы и провайдеры (ConfigFileLoader, FileConfigProvider)\n- Контрольные каналы и службы (ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel)\n- Определения контрактов (ApplicationModule, ConfigProvider, HealthContributor и др.)\n- Менеджеры конфигурации и выполнения (ConfigurationManager, RuntimeManager, ServiceContainer)\n- Службы мониторинга здоровья (HealthRegistry)\n- Управление логированием (LogManager)\n- Очереди задач (InMemoryTaskQueue)\n- Транспортировка трассировки (MySqlTraceTransport, NoOpTraceTransport, TraceService)\n- Определение рабочих потоков и контекстов (StepResult, WorkflowContext, WorkflowDefinition, Workf)",
"answer_mode": "answered",
"path_scope": [
"src/plba/__init__.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- llm: expected answer to exclude 'из различных подпакетов'

30
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-open-file-runtime.md
View File

@@ -1,30 +0,0 @@
# plba-v2-open-file-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Открой файл src/app_runtime/core/runtime.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Путь: src/app_runtime/core/runtime.py\n\nВ этом файле содержится определение класса `RuntimeManager`. В примере приведено начало класса с инициализатором (`__init__`) и некоторыми атрибутами и параметрами, такими как `ACTION_TIMEOUT_SECONDS`, `ACTION_POLL_INTERVAL_SECONDS`, а также параметрами конфигурации и сервисов, которые могут передаваться при создании экземпляра класса.",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/core/runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

4707
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-health-endpoint.json
View File

File diff suppressed because it is too large Load Diff

35
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-health-endpoint.md
View File

@@ -1,35 +0,0 @@
# plba-v2-trace-flow-health-endpoint
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Покажи как проходит запрос /health в HttpControlAppFactory
## Actual
{
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "1. HttpControlAppFactory.create(health_provider, action_provider)\n - Создает экземпляр FastAPI приложения.\n - Добавляет middleware для логирования времени ответа.\n - Определяет маршрут `/health`.\n \n2. HttpControlAppFactory.create().get(\"/health\")\n - Вызывает health_provider, чтобы получить состояние здоровья.\n - Устанавливает статус-код ответа:\n - 200, если состояние \"ok\".\n - 503, если состояние отличное от \"ok\".\n - Возвращает JSON с состоянием здоровья.\n\nЦепочка неполная, так как отсутствует детальная информация о вызове health_provider и его реализации.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"health",
"HttpControlAppFactory"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

4868
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-runtime-start.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-runtime-start.md
View File

@@ -1,34 +0,0 @@
# plba-v2-trace-flow-runtime-start
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Покажи поток выполнения при запуске RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "1. Запускается `RuntimeManager` через инициализацию переменной `RuntimeManager`.\n2. Инициализация `RuntimeManager` вызывает метод `RuntimeManager.__init__`.\n3. В методе `RuntimeManager.__init__` происходит регистрация основных сервисов с помощью метода `_register_core_services`.\n4. Метод `_register_core_services` вызывает регистрацию базовых сервисов, таких как конфигурация (`configuration`), сервисы (`services`) и другие компоненты системы.\n5. Далее выполняется метод `start`, который инициирует запуск различных каналов управления и контрольных служб.\n6. Вызывается метод `ControlPlaneService.start`, передавая экземпляр `RuntimeManager`.\n7. Внутри `ControlPlaneService.start` регистрируется канал управления и запускается асинхронный процесс старта с использованием `asyncio.run`.\n8. Контрольный канал (`ControlChannel`) начинает свою работу путем вызова метода `start` и регистрации действий (`ControlActionSet`).\n9. Затем управление передается в HTTP-контроллер, где создается экземпляр `HttpControlChannel`, запускающий веб-сервер с помощью библиотеки Uvicorn.\n10. Веб-сервер принимает запросы на стандартные действия, такие как проверка состояния здоровья (`health`), выполнение стартовых и остановочных операций, получение статусов активности.\n\nЦепочка неполная, так как отсутствует детальная информация о внутренних взаимодействиях между сервисами и модулями после запуска основного канала управления.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

86
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162307/summary.md
View File

@@ -1,86 +0,0 @@
# pipeline_setup_v3 summary
Passed: 14/18
| File | Case | Mode | Query | Actual sub-intent | RAG layers | Pass |
|------|------|------|-------|-------------------|------------|------|
| full_chain_plba_code_subintents_v2.yaml | plba-v2-architecture-control-plane | full_chain | Какие компоненты участвуют в ControlPlaneService? | ARCHITECTURE | C0_SOURCE_CHUNKS:4, C1_SYMBOL_CATALOG:6, C2_DEPENDENCY_GRAPH:8, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:12 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-architecture-runtime-manager | full_chain | Какие компоненты участвуют в RuntimeManager? | ARCHITECTURE | C0_SOURCE_CHUNKS:4, C1_SYMBOL_CATALOG:6, C2_DEPENDENCY_GRAPH:8, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:12 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-create-runtime | full_chain | Что делает функция create_runtime? | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-local-http-channel | full_chain | Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так? | EXPLAIN_LOCAL | C0_SOURCE_CHUNKS:1, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:4 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-nonexistent-symbol | full_chain | Объясни класс RuntimeFactoryManager | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✗ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-runtime-manager | full_chain | Объясни как работает класс RuntimeManager | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-trace-service | full_chain | Объясни как работает класс TraceService | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-entrypoints-control-plane | full_chain | Найди точки входа HTTP control plane | FIND_ENTRYPOINTS | C0_SOURCE_CHUNKS:6, C3_ENTRYPOINTS:3 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-entrypoints-health-endpoint | full_chain | Где health endpoint? | FIND_ENTRYPOINTS | C0_SOURCE_CHUNKS:6, C3_ENTRYPOINTS:3 | ✗ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-create-runtime | full_chain | Где тесты для create_runtime? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-runtime-manager | full_chain | Где тесты для RuntimeManager? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-trace-service | full_chain | Где тесты для TraceService? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-workflow-runtime-factory-negative | full_chain | Где тесты для WorkflowRuntimeFactory? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-open-file-nonexistent | full_chain | Открой файл src/app_runtime/core/missing_runtime.py | OPEN_FILE | — | ✗ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-open-file-public-api | full_chain | Открой файл src/plba/__init__.py | OPEN_FILE | C0_SOURCE_CHUNKS:1 | ✗ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-open-file-runtime | full_chain | Открой файл src/app_runtime/core/runtime.py | OPEN_FILE | C0_SOURCE_CHUNKS:1 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-trace-flow-health-endpoint | full_chain | Покажи как проходит запрос /health в HttpControlAppFactory | TRACE_FLOW | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:10, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-trace-flow-runtime-start | full_chain | Покажи поток выполнения при запуске RuntimeManager | TRACE_FLOW | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:10, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
## Failures
- **plba-v2-explain-nonexistent-symbol**: answer_mode: expected degraded, got answered; retrieval: expected empty rag, got 33 rows; llm: expected answer to contain 'не найдена'
- **plba-v2-find-entrypoints-health-endpoint**: llm: expected answer to contain 'GET /health'
- **plba-v2-open-file-nonexistent**: answer_mode: expected degraded, got not_found; llm: expected answer to contain 'Файл src/app_runtime/core/missing_runtime.py не найден.'
- **plba-v2-open-file-public-api**: llm: expected answer to exclude 'из различных подпакетов'
## LLM Answers
- **plba-v2-architecture-control-plane**
Query: Какие компоненты участвуют в ControlPlaneService?
> Подтвержденные связи и роли компонентов в контексте ControlPlaneService: \#\#\# Компоненты и их роли 1. \*\*ControlPlaneService\*\* \- Роль: pipeline\_stage \- Описание: Инициализирует каналы управления и управляет ими. 2. \*\*ControlChannel\*\* \- Роль: model \- Описание: Абстрактный класс для каналов управления с методами старта и остановки. 3. \*\*ControlActionSet\*\* \- Роль: model \- Описание: Представляет набор действий контроля. 4. \*\*UvicornThreadRunner\*\* \- Роль: pipeline\_stage \- Описание: Управляет uvicorn сервером и участвует в потоках данных. 5. \*\*HttpControlChannel\*\* \- Роль: pipeline\_stage \- Описание: Канал управления HTTP\-соединениями, участвующий в потоках данных. 6. \*\*HttpControlAppFactory\*\* \- Роль: factory \- Описание: Фабрика для создания fastAPI приложений. 7. \*\*WorkflowPersistence\*\* \- Роль: pipeline\_stage \- Описание: Хранит информацию о процессах и взаимодействует с ними.…
- **plba-v2-architecture-runtime-manager**
Query: Какие компоненты участвуют в RuntimeManager?
> \#\#\# Компоненты, участвующие в RuntimeManager \#\#\#\# Подтвержденные связи 1. \*\*RuntimeManager\*\* \- Role: Pipeline Stage \- Responsibilities: \- Manager responsibilities \- Orchestration of role\-like calls \- State attribute reading/writing \- Participation in dataflow slices 2. \*\*ControlPlaneService\*\* \- Role: Pipeline Stage \- Responsibilities: \- Service responsibilities \- State attribute reading/writing \- Participation in dataflow slices 3. \*\*UvicornThreadRunner\*\* \- Role: Pipeline Stage \- Responsibilities: \- State attribute reading/writing \- Participation in dataflow slices 4. \*\*HttpControlChannel\*\* \- Role: Pipeline Stage \- Responsibilities: \- State attribute reading/writing \- Participation in dataflow slices 5. \*\*WorkflowPersistence\*\* \- Role: Pipeline Stage \- Responsibilities: \- Orchestration of role\-like calls \- State attribute reading/writing \- Participation in dataflow sl…
- **plba-v2-explain-create-runtime**
Query: Что делает функция create_runtime?
> Функция \`create\_runtime\` инициализирует и настраивает менеджер выполнения приложения. \*\*Ключевые шаги:\*\* 1. Инициализация менеджера выполнения \(\`RuntimeManager\(\)\`\). 2. Добавление конфигурационного файла, если указан путь \(\`add\_config\_file\`\). 3. Регистрация HTTP\-канала управления, если включен режим управления \(\`register\_channel\`\). 4. Регистрация модуля приложения в менеджере выполнения \(\`register\_module\`\). \*\*Опорные файлы:\*\* \- \`src/plba/bootstrap.py:8\-29\` Этот процесс позволяет настроить и запустить приложение с учетом заданных конфигураций и режимов управления.
- **plba-v2-explain-local-http-channel**
Query: Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?
> Класс \`HttpControlChannel\` предназначен для управления HTTP каналом контроля в приложении. \*\*Ключевые шаги его реализации:\*\* 1. Инициализация \(\`\_\_init\_\_\`\) – принимает параметры хоста, порта и тайм\-аута, создаёт внутренние объекты управления и инициализирует состояние канала. 2. Запуск \(\`start\`\) – запускает сервер с заданными действиями контроля, создавая приложение и вызывая runner для запуска сервера. 3. Остановка \(\`stop\`\) – останавливает запущенный сервер. 4. Свойство \`port\` – возвращает порт, используемый сервером. 5. Метод \`\_health\_response\` – генерирует ответ о состоянии здоровья системы \(здоров или нет\). Опорные файлы: \- \`src/app\_runtime/control/http\_channel.py:12\-57\` \(определение класса и методов\) \- \`src/app\_runtime/control/http\_channel.py:13\-17\` \(инициализация\) \- \`src/app\_runtime/control/http\_channel.py:19\-22\` \(запуск\)
- **plba-v2-explain-nonexistent-symbol**
Query: Объясни класс RuntimeFactoryManager
> Класс \`RuntimeFactoryManager\` не указан напрямую в предоставленном коде. Однако, судя по контексту и взаимосвязям между классами: \*\*Назначение класса:\*\* \- Управление фабрикой для создания экземпляров классов, связанных с управлением рабочим состоянием приложения. \*\*Ключевые шаги:\*\* 1. Инициализация фабрики. 2. Создание экземпляра соответствующего класса управления каналом \(\`ControlChannel\`\) или другого необходимого класса. 3. Регистрация созданных каналов в сервисе управления каналами. \*\*Опорные файлы:\*\* \- \`src/app\_runtime/control/base.py\`: Объявление абстрактного базового класса \`ControlChannel\`. \- \`src/app\_runtime/control/service.py\`: Реализация сервиса управления каналами, который регистрирует созданные каналы. \- \`src/app\_runtime/control/http\_channel.py\`: Определение канала HTTP, используемого для взаимодействия через HTTP\-протокол. Обратите внимание, что прямое о…
- **plba-v2-explain-runtime-manager**
Query: Объясни как работает класс RuntimeManager
> \*\*Класс \`RuntimeManager\`\*\* отвечает за управление жизненным циклом приложения и координацию различных компонентов системы. \#\#\# Ключевые шаги работы класса: 1. \*\*Инициализация конфигурации:\*\* Класс инициализирует начальные настройки приложения, включая загрузку конфигурационных файлов. 2. \*\*Регистрация каналов управления:\*\* Метод \`register\_channel\` позволяет зарегистрировать каналы управления, которые будут использоваться для взаимодействия с различными компонентами системы. 3. \*\*Запуск и остановка системы:\*\* Методы \`start\` и \`stop\` инициируют запуск и остановку всех зарегистрированных каналов управления, обеспечивая корректное завершение работы системы. 4. \*\*Сохранение состояния:\*\* Метод \`snapshot\` создает снимок текущего состояния системы, который может быть использован для восстановления или анализа состояния в будущем. \#\#\# Опорные файлы: \- \`src/app\_runtime/core/ru…
- **plba-v2-explain-trace-service**
Query: Объясни как работает класс TraceService
> \*\*Класс \`TraceService\`\*\* предназначен для управления контекстом трассировки в приложении. Его основные функции включают создание нового контекста трассировки, получение текущего идентификатора трассировки и закрытие контекста. \*\*Ключевые шаги работы класса:\*\* 1. \*\*Инициализация:\*\* При создании экземпляра \`TraceService\` задаются транспорт и хранилище контекста трассировки \(по умолчанию используются заглушки\). 2. \*\*Создание контекста:\*\* Метод \`create\_context\` создает новый контекст трассировки с заданными параметрами \(идентификатор, родительский идентификатор, тип и атрибуты\). Контекст сохраняется в хранилище. 3. \*\*Получение текущего идентификатора:\*\* Метод \`current\_trace\_id\` возвращает текущий идентификатор трассировки. 4. \*\*Открытие контекста:\*\* Метод \`open\_context\` открывает новый контекст трассировки. 5. \*\*Закрытие контекста:\*\* Метод \`close\_context\` завершает текущ…
- **plba-v2-find-entrypoints-control-plane**
Query: Найди точки входа HTTP control plane
> confirmed\_entrypoints: \- src/app\_runtime/control/http\_app.py:app.post \(line range: 38\-42\) \- src/app\_runtime/control/http\_app.py:app.get \(line range: 31\-34\) \- src/app\_runtime/control/http\_app.py:app.get \(line range: 38\-42\)
- **plba-v2-find-entrypoints-health-endpoint**
Query: Где health endpoint?
> health endpoint: \- src/app\_runtime/control/http\_app.py:38\-42 \(app.post\) \- src/app\_runtime/control/http\_app.py:31\-34 \(app.get\)
- **plba-v2-find-tests-create-runtime**
Query: Где тесты для create_runtime?
> \- tests/test\_runtime.py:342\-405 \(test\_public\_plba\_package\_exports\_runtime\_builder\_and\_worker\_contract\)
- **plba-v2-find-tests-runtime-manager**
Query: Где тесты для RuntimeManager?
> \- tests/test\_runtime.py:12\-12 \- tests/test\_business\_control\_actions.py:14\-14
- **plba-v2-find-tests-trace-service**
Query: Где тесты для TraceService?
> tests/test\_runtime.py:test\_trace\_service\_allows\_messages\_without\_status tests/test\_runtime.py:test\_trace\_service\_writes\_contexts\_and\_messages tests/test\_runtime.py:test\_trace\_service\_supports\_debug\_warning\_and\_error\_levels
- **plba-v2-find-tests-workflow-runtime-factory-negative**
Query: Где тесты для WorkflowRuntimeFactory?
> Insufficient evidence for a confident answer. No test candidates found.
- **plba-v2-open-file-nonexistent**
Query: Открой файл src/app_runtime/core/missing_runtime.py
> Файл \`src/app\_runtime/core/missing\_runtime.py\` не найден.
- **plba-v2-open-file-public-api**
Query: Открой файл src/plba/__init__.py
> Путь к файлу: src/plba/\_\_init\_\_.py В этом файле находятся импортированные модули и классы из различных подпакетов библиотеки plba. Файл служит точкой входа для пользователей, предоставляя доступ к основным функциям и классам библиотеки. В частности, здесь импортируются: \- Функции и классы для создания runtime \(create\_runtime\) \- Конфигурационные файлы и провайдеры \(ConfigFileLoader, FileConfigProvider\) \- Контрольные каналы и службы \(ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\) \- Определения контрактов \(ApplicationModule, ConfigProvider, HealthContributor и др.\) \- Менеджеры конфигурации и выполнения \(ConfigurationManager, RuntimeManager, ServiceContainer\) \- Службы мониторинга здоровья \(HealthRegistry\) \- Управление логированием \(LogManager\) \- Очереди задач \(InMemoryTaskQueue\) \- Транспортировка трассировки \(MySqlTraceTransport, NoOpTraceTran…
- **plba-v2-open-file-runtime**
Query: Открой файл src/app_runtime/core/runtime.py
> Путь: src/app\_runtime/core/runtime.py В этом файле содержится определение класса \`RuntimeManager\`. В примере приведено начало класса с инициализатором \(\`\_\_init\_\_\`\) и некоторыми атрибутами и параметрами, такими как \`ACTION\_TIMEOUT\_SECONDS\`, \`ACTION\_POLL\_INTERVAL\_SECONDS\`, а также параметрами конфигурации и сервисов, которые могут передаваться при создании экземпляра класса.
- **plba-v2-trace-flow-health-endpoint**
Query: Покажи как проходит запрос /health в HttpControlAppFactory
> 1. HttpControlAppFactory.create\(health\_provider, action\_provider\) \- Создает экземпляр FastAPI приложения. \- Добавляет middleware для логирования времени ответа. \- Определяет маршрут \`/health\`. 2. HttpControlAppFactory.create\(\).get\("/health"\) \- Вызывает health\_provider, чтобы получить состояние здоровья. \- Устанавливает статус\-код ответа: \- 200, если состояние "ok". \- 503, если состояние отличное от "ok". \- Возвращает JSON с состоянием здоровья. Цепочка неполная, так как отсутствует детальная информация о вызове health\_provider и его реализации.
- **plba-v2-trace-flow-runtime-start**
Query: Покажи поток выполнения при запуске RuntimeManager
> 1. Запускается \`RuntimeManager\` через инициализацию переменной \`RuntimeManager\`. 2. Инициализация \`RuntimeManager\` вызывает метод \`RuntimeManager.\_\_init\_\_\`. 3. В методе \`RuntimeManager.\_\_init\_\_\` происходит регистрация основных сервисов с помощью метода \`\_register\_core\_services\`. 4. Метод \`\_register\_core\_services\` вызывает регистрацию базовых сервисов, таких как конфигурация \(\`configuration\`\), сервисы \(\`services\`\) и другие компоненты системы. 5. Далее выполняется метод \`start\`, который инициирует запуск различных каналов управления и контрольных служб. 6. Вызывается метод \`ControlPlaneService.start\`, передавая экземпляр \`RuntimeManager\`. 7. Внутри \`ControlPlaneService.start\` регистрируется канал управления и запускается асинхронный процесс старта с использованием \`asyncio.run\`. 8. Контрольный канал \(\`ControlChannel\`\) начинает свою работу путем вызова метода \`start\` и…

4171
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-architecture-control-plane.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-architecture-control-plane.md
View File

@@ -1,34 +0,0 @@
# plba-v2-architecture-control-plane
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Какие компоненты участвуют в ControlPlaneService?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "### Подтвержденные Связи\n\n1. **ControlPlaneService**:\n - Вызывает методы инициализации (`_channels`, `_start_async`, `register_channel`, `start`, `stop`, `_stop_async`) [evidence: 16-20].\n \n2. **ControlPlaneService** взаимодействует с другими компонентами через методы регистрации каналов и запуска:\n - Регистрация канала (`register_channel`) использует атрибут `_channels` для хранения списка зарегистрированных каналов [evidence: 22].\n - Запуск сервиса использует метод `start`, который также обращается к атрибуту `_channels` [evidence: 23].\n\n### Роли Компонентов\n\n1. **ControlPlaneService**:\n - Pipeline stage: отвечает за чтение и запись состояния атрибутов, участвует в данных срезах (dataflow slices).\n\n2. **ControlChannel**:\n - Model: выполняет функции модели управления каналами, включая запуск и остановку.\n\n3. **ControlActionSet**:\n - Default model role: обеспечивает стандартные действия для контроля.\n\n4. **UvicornThreadRunner**, **HttpControlChannel**, **HttpControlAppFactory**, **WorkflowPersistence**, **InMemoryTaskQueue**, **ConfigFileLoader**, **TraceContextStore**, **WorkerSupervisor**, **WorkflowEngine**:\n - Pipeline stages: отвечают за выполнение различных задач, связанных с обработкой данных и состоянием приложения.\n\n### Ограничения Контекста\n\nКонтекст ограничивается исключительно компонентами, связанными непосредственно с функциональностью ControlPlaneService и его методами. Другие компоненты и зависимости не рассматриваются в данном анализе.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"ControlPlaneService"
],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

4363
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-architecture-runtime-manager.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-architecture-runtime-manager.md
View File

@@ -1,34 +0,0 @@
# plba-v2-architecture-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Какие компоненты участвуют в RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "### Подтвержденные Связи\n\n1. **RuntimeManager**:\n - Является ключевым компонентом управления жизненным циклом приложения.\n - Инициализирует и управляет другими компонентами системы через метод `__init__`.\n \n2. **ControlPlaneService**:\n - Управляет каналами контроля.\n - Вызывается из метода инициализации `RuntimeManager` для регистрации каналов.\n\n3. **ControlChannel**:\n - Абстрактный класс для реализации конкретных каналов контроля.\n - Реализует методы `start` и `stop`, которые вызываются сервисами и менеджерами.\n\n4. **ConfigFileLoader**:\n - Загружает конфигурационные файлы и передает их в runtime-менеджер.\n\n5. **WorkflowPersistence**:\n - Обеспечивает сохранение информации о workflows.\n\n6. **InMemoryTaskQueue**:\n - Используется для хранения задач внутри памяти.\n\n7. **TraceContextStore**:\n - Хранит контекст трассировки.\n\n8. **WorkerSupervisor**:\n - Наблюдает за рабочими процессами и управляет ими.\n\n### Роли Компонентов\n\n1. **RuntimeManager**:\n - Координирует работу всех других компонентов.\n - Читает и записывает состояние атрибутов.\n - Участвует в управлении данными потока.\n\n2. **ControlPlaneService**:\n - Регистрирует каналы контроля.\n - Начинает и останавливает службы контроля.\n\n3. **ControlChannel**:\n - Осуществляет управление каналами взаимодействия между приложением и внешними системами.\n\n4. **ConfigFileLoader**:\n - Чтение конфигурации из файлов.\n\n5. **WorkflowPersistence**:\n - Сохраняет информацию о workflows.\n\n6. **InMemoryTaskQueue**:\n - Хранение данных задачи во временной памяти.\n\n7. **TraceContextStore**:\n - Управление контекстом трассировки.\n\n8. **WorkerSupervisor**:\n - Контроль рабочих процессов.\n\n### Ограничения Контекста\n\n1. **Dataflow Slices**:\n - Все перечисленные компоненты активно участвуют в обработке данных потоков.\n\n2. **State Attributes**:\n - Большинство компонентов читают или записывают состояние атрибутов системы.\n\nТаким образом, RuntimeManager является центральным управляющим элементом архитектуры, координирующим работу остальных компонентов.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

3779
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-create-runtime.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-create-runtime.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-create-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Что делает функция create_runtime?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Функция `create_runtime` инициализирует и настраивает менеджер выполнения приложения.\n\n**Ключевые шаги:**\n1. Создает экземпляр менеджера выполнения (`RuntimeManager`).\n2. При наличии указанного пути к конфигурационному файлу добавляет его в менеджер.\n3. Если включена опция HTTP-контроля, регистрирует канал управления с указанными параметрами хоста, порта и тайм-аута.\n4. Регистрирует указанный модуль приложения в менеджере.\n5. Возвращает созданный менеджер выполнения.\n\n**Опорные файлы:**\n- `src/plba/bootstrap.py:8-29`",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"create_runtime"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-local-http-channel.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-local-http-channel
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN_LOCAL",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 13,
"llm_answer": "Класс `HttpControlChannel` в файле `src/app_runtime/control/http_channel.py` реализует механизм управления HTTP-каналом для взаимодействия с внешними сервисами или компонентами.\n\n**Ключевые шаги его реализации:**\n1. Инициализация класса:\n - При создании экземпляра устанавливается таймаут (`_timeout`), запускается сервер через объект `UvicornThreadRunner`, создается фабрика приложений `HttpControlAppFactory`.\n \n2. Запуск канала:\n - Метод `start` инициализирует набор действий (`actions`) и создает приложение для работы с ними. Затем запускает сервер через ранее созданный объект `UvicornThreadRunner`.\n \n3. Остановка канала:\n - Метод `stop` останавливает запущенный сервер.\n\nОпорные файлы:\n- `src/app_runtime/control/http_channel.py`: определение и реализация класса `HttpControlChannel`.",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/control/http_channel.py"
],
"symbol_candidates": [
"HttpControlChannel"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
]
}
## Mismatches
- none

4092
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-nonexistent-symbol.json
View File

File diff suppressed because it is too large Load Diff

36
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-nonexistent-symbol.md
View File

@@ -1,36 +0,0 @@
# plba-v2-explain-nonexistent-symbol
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Объясни класс RuntimeFactoryManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `RuntimeFactoryManager` не найден в предоставленном коде или контекстной информации.\n\nКлючевые шаги и опорные файлы:\n1. Код и контекста относятся к управлению каналами управления («control channels») в приложении.\n2. Основные классы включают `ControlChannel`, `ControlActionSet`, и связанные с ними каналы и сервисы.\n3. Основной файл для рассмотрения — `base.py`.\n4. Ключевые обязанности и интерфейсы описаны через абстрактные методы (`start`, `stop`) в классе `ControlChannel`. \n\nПоскольку конкретный класс `RuntimeFactoryManager` отсутствует в данном контексте, невозможно предоставить его объяснение.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeFactoryManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- answer_mode: expected degraded, got answered
- retrieval: expected empty rag, got 33 rows
- llm: expected answer to contain 'не найдена'

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-runtime-manager.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Объясни как работает класс RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `RuntimeManager` играет ключевую роль в управлении выполнением приложений и координации различных компонентов системы. Его основная функция заключается в оркестрации действий, связанных с жизненным циклом приложения, включая инициализацию, запуск и остановку сервисов и модулей.\n\n**Ключевые шаги работы класса:**\n1. Инициализация конфигурации и состояния (`__init__`).\n2. Добавление конфигурационных файлов и настроек (`add_config_file`).\n3. Управление состоянием выполнения через чтение и запись атрибутов состояния (`configuration`, `_state`).\n4. Оркестровка вызова методов запуска и остановки для различных компонентов (`start`, `stop`).\n5. Участие в обработке данных потока и управлении потоками задач (`participates in dataflow slices`).\n\n**Опорные файлы:**\n- `src/app_runtime/core/runtime.py:18-179`\n- `src/app_runtime/control/service.py:12-52`\n- `src/app_runtime/control/base.py:21-28`\n- `src/app_runtime/control/base.py:14-18`",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

4157
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-trace-service.json
View File

File diff suppressed because one or more lines are too long

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-explain-trace-service.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-trace-service
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Объясни как работает класс TraceService
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `TraceService` является основным компонентом системы отслеживания трассировок в приложении. Его основная функция заключается в управлении контекстом трассировки и записи событий в журнал.\n\n**Ключевые шаги работы класса:**\n1. Инициализация с передачей транспорта (`transport`) и хранилища контекста (`store`), которые могут быть опциональными.\n2. Создание нового контекста трассировки через метод `create_context`, который генерирует уникальный идентификатор трассы и сохраняет запись о контексте в хранилище.\n3. Управление текущим контекстом трассировки через методы:\n - `current_trace_id`: возвращает текущий идентификатор трассировки.\n - `open_context`: открывает новый контекст трассировки.\n - `close_context`: закрывает текущий контекст трассировки.\n \n**Опорные файлы:**\n- `src/app_runtime/tracing/service.py:39-166`\n- `src/app_runtime/tracing/service.py:66-78`\n- `src/app_runtime/tracing/service.py:45-63`",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"TraceService"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

33
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-control-plane.md
View File

@@ -1,33 +0,0 @@
# plba-v2-find-entrypoints-control-plane
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Найди точки входа HTTP control plane
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 9,
"llm_answer": "Confirmed Entrypoints:\n1. src/app_runtime/control/http_app.py:app.post (lines 38-42)\n2. src/app_runtime/control/http_app.py:app.get (lines 31-34)\n3. src/app_runtime/control/http_app.py:app.get (lines 38-42)",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"HTTP",
"control",
"plane"
],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-health-endpoint.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-entrypoints-health-endpoint
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Где health endpoint?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 9,
"llm_answer": "health endpoint: \n- src/app_runtime/control/http_app.py:38-42 (app.post)\n- src/app_runtime/control/http_app.py:31-34 (app.get)",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"health",
"endpoint"
],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- llm: expected answer to contain 'GET /health'

2746
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-create-runtime.json
View File

File diff suppressed because it is too large Load Diff

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-create-runtime.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-create-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для create_runtime?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "- tests/test_runtime.py:342-405",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"create_runtime"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

3133
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-runtime-manager.json
View File

File diff suppressed because it is too large Load Diff

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-runtime-manager.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "- tests/test_runtime.py:12-12\n- tests/test_business_control_actions.py:14-14",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

3134
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-trace-service.json
View File

File diff suppressed because one or more lines are too long

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-trace-service.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-trace-service
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для TraceService?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "- tests/test_runtime.py:test_trace_service_allows_messages_without_status (line range: 279-293)\n- tests/test_runtime.py:test_trace_service_writes_contexts_and_messages (line range: 246-259)\n- tests/test_runtime.py:test_trace_service_supports_debug_warning_and_error_levels (line range: 262-276)",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"TraceService"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

3001
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-workflow-runtime-factory-negative.json
View File

File diff suppressed because it is too large Load Diff

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-find-tests-workflow-runtime-factory-negative.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-workflow-runtime-factory-negative
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для WorkflowRuntimeFactory?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "Insufficient evidence for a confident answer. No test candidates found.",
"answer_mode": "degraded",
"path_scope": [],
"symbol_candidates": [
"WorkflowRuntimeFactory"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

341
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-open-file-nonexistent.json
View File

@@ -1,341 +0,0 @@
{
"case_id": "plba-v2-open-file-nonexistent",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Открой файл src/app_runtime/core/missing_runtime.py",
"actual": {
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 0,
"llm_answer": "Файл `src/app_runtime/core/missing_runtime.py` не найден.",
"answer_mode": "not_found",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
},
"passed": false,
"mismatches": [
"answer_mode: expected degraded, got not_found",
"llm: expected answer to contain 'Файл src/app_runtime/core/missing_runtime.py не найден.'"
],
"details": {
"query": "Открой файл src/app_runtime/core/missing_runtime.py",
"router_result": {
"schema_version": "1.1",
"intent": "CODE_QA",
"retrieval_profile": "code",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"query_plan": {
"raw": "Открой файл src/app_runtime/core/missing_runtime.py",
"normalized": "Открой файл src/app_runtime/core/missing_runtime.py",
"sub_intent": "OPEN_FILE",
"negations": [],
"expansions": [
"file"
],
"keyword_hints": [],
"path_hints": [
"src/app_runtime/core/missing_runtime.py"
],
"doc_scope_hints": [],
"symbol_candidates": [],
"symbol_kind_hint": "unknown",
"anchors": [
{
"type": "FILE_PATH",
"value": "src/app_runtime/core/missing_runtime.py",
"source": "user_text",
"subtype": null,
"span": {
"start": 12,
"end": 51
},
"confidence": 0.95
},
{
"type": "KEY_TERM",
"value": "файл",
"source": "user_text",
"subtype": null,
"span": {
"start": 7,
"end": 11
},
"confidence": 0.9
}
]
},
"retrieval_spec": {
"domains": [
"CODE"
],
"layer_queries": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"top_k": 12
}
],
"filters": {
"test_policy": "EXCLUDE",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"language": [
"python"
]
},
"rerank_profile": "code"
},
"retrieval_constraints": {
"include_globs": [
"src/app_runtime/core/missing_runtime.py"
],
"exclude_globs": [
"tests/**",
"**/test_*.py",
"**/*_test.py"
],
"prefer_globs": [],
"test_file_globs": [],
"test_symbol_patterns": [],
"max_candidates": 20,
"fuzzy_symbol_search": {
"enabled": false,
"max_distance": 2,
"top_k": 5
}
},
"symbol_resolution": {
"status": "not_requested",
"resolved_symbol": null,
"alternatives": [],
"confidence": 0.0
},
"evidence_policy": {
"require_def": false,
"require_flow": false,
"require_spec": false,
"allow_answer_without_evidence": false
}
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Открой файл src/app_runtime/core/missing_runtime.py",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"keyword_hints": [],
"symbol_candidates": [],
"requested_layers": [
"C0_SOURCE_CHUNKS"
],
"retrieval_spec": {
"domains": [
"CODE"
],
"layer_queries": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"top_k": 12
}
],
"filters": {
"test_policy": "EXCLUDE",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"language": [
"python"
]
},
"rerank_profile": "code"
},
"retrieval_constraints": {
"include_globs": [
"src/app_runtime/core/missing_runtime.py"
],
"exclude_globs": [
"tests/**",
"**/test_*.py",
"**/*_test.py"
],
"prefer_globs": [],
"test_file_globs": [],
"test_symbol_patterns": [],
"max_candidates": 20,
"fuzzy_symbol_search": {
"enabled": false,
"max_distance": 2,
"top_k": 5
}
},
"query_plan": {
"raw": "Открой файл src/app_runtime/core/missing_runtime.py",
"normalized": "Открой файл src/app_runtime/core/missing_runtime.py",
"sub_intent": "OPEN_FILE",
"negations": [],
"expansions": [
"file"
],
"keyword_hints": [],
"path_hints": [
"src/app_runtime/core/missing_runtime.py"
],
"doc_scope_hints": [],
"symbol_candidates": [],
"symbol_kind_hint": "unknown",
"anchors": [
{
"type": "FILE_PATH",
"value": "src/app_runtime/core/missing_runtime.py",
"source": "user_text",
"subtype": null,
"span": {
"start": 12,
"end": 51
},
"confidence": 0.95
},
{
"type": "KEY_TERM",
"value": "файл",
"source": "user_text",
"subtype": null,
"span": {
"start": 7,
"end": 11
},
"confidence": 0.9
}
]
}
},
"retrieval_result": {
"target_symbol_candidates": [],
"resolved_symbol": null,
"symbol_resolution_status": "not_requested",
"file_candidates": [],
"code_chunks": [],
"relations": [],
"entrypoints": [],
"test_candidates": [],
"layer_outcomes": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 0,
"empty": true,
"fallback_used": false
}
],
"missing_layers": [
"C0_SOURCE_CHUNKS"
],
"raw_rows": [],
"retrieval_report": {
"executed_layers": [
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C0_SOURCE_CHUNKS": "exact_path_fetch"
},
"top_k_by_layer": {
"C0_SOURCE_CHUNKS": 200
},
"filters_by_layer": {
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
]
}
},
"requests": [
{
"layer": "C0_SOURCE_CHUNKS",
"query": "Открой файл src/app_runtime/core/missing_runtime.py",
"ranking_profile": "code"
}
],
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C0_SOURCE_CHUNKS": 18
}
}
},
"diagnostics": {
"intent_correct": null,
"target_found": false,
"layers_used": [
"C0_SOURCE_CHUNKS"
],
"retrieval_sufficient": false,
"answer_mode": "insufficient",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"layers": [
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "not_requested"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Открой файл src/app_runtime/core/missing_runtime.py",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"requested_layers": [
"C0_SOURCE_CHUNKS"
]
},
"per_layer_outcome": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 0,
"empty": true,
"fallback_used": false
}
],
"empty_layers": [
"C0_SOURCE_CHUNKS"
],
"evidence_gate_decision": {
"sufficient": false,
"failure_reasons": [
"path_scope_empty",
"layer_c0_empty"
],
"evidence_count": 0
},
"failure_reasons": [
"path_scope_empty",
"layer_c0_empty"
],
"timings_ms": {}
},
"rag_rows": [],
"validation": {
"passed": true,
"action": "return",
"reasons": []
}
}
}

31
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-open-file-nonexistent.md
View File

@@ -1,31 +0,0 @@
# plba-v2-open-file-nonexistent
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Открой файл src/app_runtime/core/missing_runtime.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 0,
"llm_answer": "Файл `src/app_runtime/core/missing_runtime.py` не найден.",
"answer_mode": "not_found",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- answer_mode: expected degraded, got not_found
- llm: expected answer to contain 'Файл src/app_runtime/core/missing_runtime.py не найден.'

417
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-open-file-public-api.json
View File

@@ -1,417 +0,0 @@
{
"case_id": "plba-v2-open-file-public-api",
"source_file": "/Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml",
"runner": "agent_runtime",
"mode": "full_chain",
"query": "Открой файл src/plba/__init__.py",
"actual": {
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Путь к файлу: src/plba/__init__.py\n\nВ этом файле находятся импорт различных модулей и классов из пакета plba. В частности, здесь можно найти:\n- Импорты для создания runtime с помощью `create_runtime`\n- Классы и интерфейсы конфигурации (`ConfigFileLoader`, `FileConfigProvider`)\n- Контроллеры и каналы управления (`ControlActionSet`, `ControlChannel`, `HttpControlChannel`)\n- Определения контрактов (`ApplicationModule`, `Worker`, etc.)\n- Менеджеры конфигурации и выполнения (`ConfigurationManager`, `RuntimeManager`, `ServiceContainer`)\n- Регистраторы здоровья и службы логирования\n- Обработчики очередей задач и транспортные средства трассировки (`InMemoryTaskQueue`, `MySqlTraceTransport`, `NoOpTraceTransport`)\n- Определение рабочего потока и контекста (`StepResult`, `WorkflowContext`, `WorkflowDefinition`)",
"answer_mode": "answered",
"path_scope": [
"src/plba/__init__.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
},
"passed": true,
"mismatches": [],
"details": {
"query": "Открой файл src/plba/__init__.py",
"router_result": {
"schema_version": "1.1",
"intent": "CODE_QA",
"retrieval_profile": "code",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"query_plan": {
"raw": "Открой файл src/plba/__init__.py",
"normalized": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"negations": [],
"expansions": [
"file"
],
"keyword_hints": [],
"path_hints": [
"src/plba/__init__.py"
],
"doc_scope_hints": [],
"symbol_candidates": [],
"symbol_kind_hint": "unknown",
"anchors": [
{
"type": "FILE_PATH",
"value": "src/plba/__init__.py",
"source": "user_text",
"subtype": null,
"span": {
"start": 12,
"end": 32
},
"confidence": 0.95
},
{
"type": "KEY_TERM",
"value": "файл",
"source": "user_text",
"subtype": null,
"span": {
"start": 7,
"end": 11
},
"confidence": 0.9
}
]
},
"retrieval_spec": {
"domains": [
"CODE"
],
"layer_queries": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"top_k": 12
}
],
"filters": {
"test_policy": "EXCLUDE",
"path_scope": [
"src/plba/__init__.py"
],
"language": [
"python"
]
},
"rerank_profile": "code"
},
"retrieval_constraints": {
"include_globs": [
"src/plba/__init__.py"
],
"exclude_globs": [
"tests/**",
"**/test_*.py",
"**/*_test.py"
],
"prefer_globs": [],
"test_file_globs": [],
"test_symbol_patterns": [],
"max_candidates": 20,
"fuzzy_symbol_search": {
"enabled": false,
"max_distance": 2,
"top_k": 5
}
},
"symbol_resolution": {
"status": "not_requested",
"resolved_symbol": null,
"alternatives": [],
"confidence": 0.0
},
"evidence_policy": {
"require_def": false,
"require_flow": false,
"require_spec": false,
"allow_answer_without_evidence": false
}
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/plba/__init__.py"
],
"keyword_hints": [],
"symbol_candidates": [],
"requested_layers": [
"C0_SOURCE_CHUNKS"
],
"retrieval_spec": {
"domains": [
"CODE"
],
"layer_queries": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"top_k": 12
}
],
"filters": {
"test_policy": "EXCLUDE",
"path_scope": [
"src/plba/__init__.py"
],
"language": [
"python"
]
},
"rerank_profile": "code"
},
"retrieval_constraints": {
"include_globs": [
"src/plba/__init__.py"
],
"exclude_globs": [
"tests/**",
"**/test_*.py",
"**/*_test.py"
],
"prefer_globs": [],
"test_file_globs": [],
"test_symbol_patterns": [],
"max_candidates": 20,
"fuzzy_symbol_search": {
"enabled": false,
"max_distance": 2,
"top_k": 5
}
},
"query_plan": {
"raw": "Открой файл src/plba/__init__.py",
"normalized": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"negations": [],
"expansions": [
"file"
],
"keyword_hints": [],
"path_hints": [
"src/plba/__init__.py"
],
"doc_scope_hints": [],
"symbol_candidates": [],
"symbol_kind_hint": "unknown",
"anchors": [
{
"type": "FILE_PATH",
"value": "src/plba/__init__.py",
"source": "user_text",
"subtype": null,
"span": {
"start": 12,
"end": 32
},
"confidence": 0.95
},
{
"type": "KEY_TERM",
"value": "файл",
"source": "user_text",
"subtype": null,
"span": {
"start": 7,
"end": 11
},
"confidence": 0.9
}
]
}
},
"retrieval_result": {
"target_symbol_candidates": [],
"resolved_symbol": null,
"symbol_resolution_status": "not_requested",
"file_candidates": [
"src/plba/__init__.py"
],
"code_chunks": [
{
"layer": "C0_SOURCE_CHUNKS",
"path": "src/plba/__init__.py",
"title": "src/plba/__init__.py:1-69",
"content": "from plba.bootstrap import create_runtime\nfrom plba.config import ConfigFileLoader, FileConfigProvider\nfrom plba.control import ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\nfrom plba.contracts import (\n ApplicationModule,\n ConfigProvider,\n HealthContributor,\n TraceContext,\n TraceContextRecord,\n TraceLogMessage,\n TraceTransport,\n Worker,\n WorkerHealth,\n WorkerStatus,\n)\nfrom plba.core import ConfigurationManager, RuntimeManager, ServiceContainer\nfrom plba.health import HealthRegistry\nfrom plba.logging import LogManager\nfrom plba.queue import InMemoryTaskQueue\nfrom plba.tracing import MySqlTraceTransport, NoOpTraceTransport, TraceService\nfrom plba.workflow import (\n StepResult,\n WorkflowContext,\n WorkflowDefinition,\n WorkflowEngine,\n WorkflowEngineHooks,\n WorkflowNode,\n WorkflowRuntimeFactory,\n WorkflowStep,\n)\nfrom plba.workers import WorkerSupervisor\n\n__all__ = [\n \"ApplicationModule\",\n \"ConfigFileLoader\",\n \"ConfigProvider\",\n \"ConfigurationManager\",\n \"ControlActionSet\",\n \"ControlChannel\",\n \"ControlPlaneService\",\n \"create_runtime\",\n \"FileConfigProvider\",\n \"HealthContributor\",\n \"HealthRegistry\",\n \"HttpControlChannel\",\n \"InMemoryTaskQueue\",\n \"LogManager\",\n \"MySqlTraceTransport\",\n \"NoOpTraceTransport\",\n \"RuntimeManager\",\n \"ServiceContainer\",\n \"TraceContext\",\n \"TraceContextRecord\",\n \"TraceLogMessage\",\n \"TraceService\",\n \"TraceTransport\",\n \"StepResult\",\n \"Worker\",\n \"WorkerHealth\",\n \"WorkerStatus\",\n \"WorkflowContext\",\n \"WorkflowDefinition\",\n \"WorkflowEngine\",\n \"WorkflowEngineHooks\",\n \"WorkflowNode\",\n \"WorkflowRuntimeFactory\",\n \"WorkflowStep\",\n \"WorkerSupervisor\",\n]",
"start_line": 1,
"end_line": 69,
"metadata": {
"chunk_index": 0,
"chunk_type": "window",
"module_or_unit": "src.plba.__init__",
"is_test": false,
"blob_sha": "24e755ec8c249d14fb0e675b5dbf2b71ab91afb9c849897eebfa9feb2499e19d",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"relations": [],
"entrypoints": [],
"test_candidates": [],
"layer_outcomes": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 1,
"empty": false,
"fallback_used": false
}
],
"missing_layers": [],
"raw_rows": [
{
"path": "src/plba/__init__.py",
"content": "from plba.bootstrap import create_runtime\nfrom plba.config import ConfigFileLoader, FileConfigProvider\nfrom plba.control import ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\nfrom plba.contracts import (\n ApplicationModule,\n ConfigProvider,\n HealthContributor,\n TraceContext,\n TraceContextRecord,\n TraceLogMessage,\n TraceTransport,\n Worker,\n WorkerHealth,\n WorkerStatus,\n)\nfrom plba.core import ConfigurationManager, RuntimeManager, ServiceContainer\nfrom plba.health import HealthRegistry\nfrom plba.logging import LogManager\nfrom plba.queue import InMemoryTaskQueue\nfrom plba.tracing import MySqlTraceTransport, NoOpTraceTransport, TraceService\nfrom plba.workflow import (\n StepResult,\n WorkflowContext,\n WorkflowDefinition,\n WorkflowEngine,\n WorkflowEngineHooks,\n WorkflowNode,\n WorkflowRuntimeFactory,\n WorkflowStep,\n)\nfrom plba.workers import WorkerSupervisor\n\n__all__ = [\n \"ApplicationModule\",\n \"ConfigFileLoader\",\n \"ConfigProvider\",\n \"ConfigurationManager\",\n \"ControlActionSet\",\n \"ControlChannel\",\n \"ControlPlaneService\",\n \"create_runtime\",\n \"FileConfigProvider\",\n \"HealthContributor\",\n \"HealthRegistry\",\n \"HttpControlChannel\",\n \"InMemoryTaskQueue\",\n \"LogManager\",\n \"MySqlTraceTransport\",\n \"NoOpTraceTransport\",\n \"RuntimeManager\",\n \"ServiceContainer\",\n \"TraceContext\",\n \"TraceContextRecord\",\n \"TraceLogMessage\",\n \"TraceService\",\n \"TraceTransport\",\n \"StepResult\",\n \"Worker\",\n \"WorkerHealth\",\n \"WorkerStatus\",\n \"WorkflowContext\",\n \"WorkflowDefinition\",\n \"WorkflowEngine\",\n \"WorkflowEngineHooks\",\n \"WorkflowNode\",\n \"WorkflowRuntimeFactory\",\n \"WorkflowStep\",\n \"WorkerSupervisor\",\n]",
"layer": "C0_SOURCE_CHUNKS",
"title": "src/plba/__init__.py:1-69",
"span_start": 1,
"span_end": 69,
"lexical_rank": 0,
"prefer_bonus": 0,
"test_penalty": 0,
"structural_rank": 0,
"layer_rank": 0,
"distance": 0,
"metadata": {
"chunk_index": 0,
"chunk_type": "window",
"module_or_unit": "src.plba.__init__",
"is_test": false,
"blob_sha": "24e755ec8c249d14fb0e675b5dbf2b71ab91afb9c849897eebfa9feb2499e19d",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"retrieval_report": {
"executed_layers": [
"C0_SOURCE_CHUNKS"
],
"retrieval_mode_by_layer": {
"C0_SOURCE_CHUNKS": "exact_path_fetch"
},
"top_k_by_layer": {
"C0_SOURCE_CHUNKS": 200
},
"filters_by_layer": {
"C0_SOURCE_CHUNKS": {
"path_scope": [
"src/plba/__init__.py"
]
}
},
"requests": [
{
"layer": "C0_SOURCE_CHUNKS",
"query": "Открой файл src/plba/__init__.py",
"ranking_profile": "code"
}
],
"fallback": {
"used": false,
"reason": null
},
"retrieval_by_layer_ms": {
"C0_SOURCE_CHUNKS": 21
}
}
},
"diagnostics": {
"intent_correct": null,
"target_found": true,
"layers_used": [
"C0_SOURCE_CHUNKS"
],
"retrieval_sufficient": true,
"answer_mode": "normal",
"router_result": {
"intent": "CODE_QA",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"retrieval_profile": "code",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/plba/__init__.py"
],
"layers": [
"C0_SOURCE_CHUNKS"
],
"symbol_resolution_status": "not_requested"
},
"retrieval_request": {
"rag_session_id": "7d11da21-faa0-4cea-aede-aeabe069164c",
"query": "Открой файл src/plba/__init__.py",
"sub_intent": "OPEN_FILE",
"path_scope": [
"src/plba/__init__.py"
],
"requested_layers": [
"C0_SOURCE_CHUNKS"
]
},
"per_layer_outcome": [
{
"layer_id": "C0_SOURCE_CHUNKS",
"hit_count": 1,
"empty": false,
"fallback_used": false
}
],
"empty_layers": [],
"evidence_gate_decision": {
"sufficient": true,
"failure_reasons": [],
"evidence_count": 1
},
"failure_reasons": [],
"timings_ms": {}
},
"rag_rows": [
{
"path": "src/plba/__init__.py",
"content": "from plba.bootstrap import create_runtime\nfrom plba.config import ConfigFileLoader, FileConfigProvider\nfrom plba.control import ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\nfrom plba.contracts import (\n ApplicationModule,\n ConfigProvider,\n HealthContributor,\n TraceContext,\n TraceContextRecord,\n TraceLogMessage,\n TraceTransport,\n Worker,\n WorkerHealth,\n WorkerStatus,\n)\nfrom plba.core import ConfigurationManager, RuntimeManager, ServiceContainer\nfrom plba.health import HealthRegistry\nfrom plba.logging import LogManager\nfrom plba.queue import InMemoryTaskQueue\nfrom plba.tracing import MySqlTraceTransport, NoOpTraceTransport, TraceService\nfrom plba.workflow import (\n StepResult,\n WorkflowContext,\n WorkflowDefinition,\n WorkflowEngine,\n WorkflowEngineHooks,\n WorkflowNode,\n WorkflowRuntimeFactory,\n WorkflowStep,\n)\nfrom plba.workers import WorkerSupervisor\n\n__all__ = [\n \"ApplicationModule\",\n \"ConfigFileLoader\",\n \"ConfigProvider\",\n \"ConfigurationManager\",\n \"ControlActionSet\",\n \"ControlChannel\",\n \"ControlPlaneService\",\n \"create_runtime\",\n \"FileConfigProvider\",\n \"HealthContributor\",\n \"HealthRegistry\",\n \"HttpControlChannel\",\n \"InMemoryTaskQueue\",\n \"LogManager\",\n \"MySqlTraceTransport\",\n \"NoOpTraceTransport\",\n \"RuntimeManager\",\n \"ServiceContainer\",\n \"TraceContext\",\n \"TraceContextRecord\",\n \"TraceLogMessage\",\n \"TraceService\",\n \"TraceTransport\",\n \"StepResult\",\n \"Worker\",\n \"WorkerHealth\",\n \"WorkerStatus\",\n \"WorkflowContext\",\n \"WorkflowDefinition\",\n \"WorkflowEngine\",\n \"WorkflowEngineHooks\",\n \"WorkflowNode\",\n \"WorkflowRuntimeFactory\",\n \"WorkflowStep\",\n \"WorkerSupervisor\",\n]",
"layer": "C0_SOURCE_CHUNKS",
"title": "src/plba/__init__.py:1-69",
"span_start": 1,
"span_end": 69,
"lexical_rank": 0,
"prefer_bonus": 0,
"test_penalty": 0,
"structural_rank": 0,
"layer_rank": 0,
"distance": 0,
"metadata": {
"chunk_index": 0,
"chunk_type": "window",
"module_or_unit": "src.plba.__init__",
"is_test": false,
"blob_sha": "24e755ec8c249d14fb0e675b5dbf2b71ab91afb9c849897eebfa9feb2499e19d",
"repo_id": "plba",
"artifact_type": null,
"section": null,
"doc_id": null,
"doc_version": null,
"owner": null,
"system_component": null,
"last_modified": null,
"staleness_score": null
}
}
],
"validation": {
"passed": true,
"action": "return",
"reasons": []
}
}
}

30
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-open-file-public-api.md
View File

@@ -1,30 +0,0 @@
# plba-v2-open-file-public-api
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Открой файл src/plba/__init__.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Путь к файлу: src/plba/__init__.py\n\nВ этом файле находятся импорт различных модулей и классов из пакета plba. В частности, здесь можно найти:\n- Импорты для создания runtime с помощью `create_runtime`\n- Классы и интерфейсы конфигурации (`ConfigFileLoader`, `FileConfigProvider`)\n- Контроллеры и каналы управления (`ControlActionSet`, `ControlChannel`, `HttpControlChannel`)\n- Определения контрактов (`ApplicationModule`, `Worker`, etc.)\n- Менеджеры конфигурации и выполнения (`ConfigurationManager`, `RuntimeManager`, `ServiceContainer`)\n- Регистраторы здоровья и службы логирования\n- Обработчики очередей задач и транспортные средства трассировки (`InMemoryTaskQueue`, `MySqlTraceTransport`, `NoOpTraceTransport`)\n- Определение рабочего потока и контекста (`StepResult`, `WorkflowContext`, `WorkflowDefinition`)",
"answer_mode": "answered",
"path_scope": [
"src/plba/__init__.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

417
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-open-file-runtime.json
View File

File diff suppressed because one or more lines are too long

30
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-open-file-runtime.md
View File

@@ -1,30 +0,0 @@
# plba-v2-open-file-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Открой файл src/app_runtime/core/runtime.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Путь: src/app_runtime/core/runtime.py\n\nВ этом файле содержится определение класса `RuntimeManager`. В классе инициализируются различные компоненты системы, такие как конфигурация, службы, трассировка, здоровье, журналы, рабочие процессы и контрольная плоскость. Класс предназначен для управления выполнением действий в системе с заданными тайм-аутами и интервалами опроса.",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/core/runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

4707
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-health-endpoint.json
View File

File diff suppressed because it is too large Load Diff

35
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-health-endpoint.md
View File

@@ -1,35 +0,0 @@
# plba-v2-trace-flow-health-endpoint
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Покажи как проходит запрос /health в HttpControlAppFactory
## Actual
{
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "1. HttpControlAppFactory.create(health_provider, action_provider)\n - Создает FastAPI приложение.\n - Добавляет middleware для логирования времени ответа.\n - Обрабатывает GET запрос к \"/health\".\n\n2. HttpControlAppFactory.create.health()\n - Вызывается при обработке запроса \"/health\".\n - Возвращает Awaitable объект типа HealthPayload.\n\n3. HttpControlAppFactory.create.action_provider()\n - Определяет поведение при запросе действий.\n\nПолный поток вызова от обработки запроса \"/health\" до получения HealthPayload отсутствует в предоставленных доказательствах.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"health",
"HttpControlAppFactory"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-runtime-start.md
View File

@@ -1,34 +0,0 @@
# plba-v2-trace-flow-runtime-start
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Покажи поток выполнения при запуске RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "1. Запускается `RuntimeManager` через импорт в `bootstrap.py` (`src/plba/bootstrap.py:4`).\n2. Далее, в `control/service.py`, происходит повторный импорт и переопределение переменной `RuntimeManager` как `app_runtime.core.runtime.RuntimeManager` (`src/app_runtime/control/service.py:9`).\n3. В файле `core/runtime.py` начинается определение класса `RuntimeManager`. Этот класс управляет состоянием приложения и участвует в управлении жизненным циклом различных сервисов и модулей (`src/app_runtime/core/runtime.py:18-179`).\n4. Из `__init__.py` модуля `plba` (`src/plba/__init__.py:16`) импортируется другой экземпляр `RuntimeManager`.\n5. Затем идет обращение к инициализации объекта `ControlPlaneService` в модуле `control/service.py` (`src/app_runtime/control/service.py:12-52`), который регистрирует каналы управления.\n6. Контроллер канала управления определяется в `base.py` файла `control` и имеет методы для запуска и остановки каналов (`src/app_runtime/control/base.py:21-28`).\n7. В `control/http_channel.py` создается объект `HttpControlChannel`, управляющий HTTP-запросами с использованием библиотеки uvicorn (`src/app_runtime/control/http_channel.py:12-57`).\n8. Модуль `control/http_app.py` создает фабрику приложений для обработки HTTP-запросов, связанных с управлением состоянием системы (`src/app_runtime/control/http_app.py:15-53`).\n9. Инициализация конфигурации и параметров происходит в методах `_register_core_services` и `_start_async` внутри класса `RuntimeManager` (`src/app_runtime/core/runtime.py:32-127`).\n\nПолный путь вызова:\n\n1. `src/plba/bootstrap.py`\n2. `src/app_runtime/control/service.py`\n3. `src/app_runtime/core/runtime.py`\n4. `src/plba/__init__.py`\n5. `src/app_runtime/control/service.py`\n6. `src/app_runtime/control/base.py`\n7. `src/app_runtime/control/http_channel.py`\n8. `src/app_runtime/control/http_app.py`\n9. `src/app_runtime/core/runtime.py`",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

85
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_162842/summary.md
View File

@@ -1,85 +0,0 @@
# pipeline_setup_v3 summary
Passed: 15/18
| File | Case | Mode | Query | Actual sub-intent | RAG layers | Pass |
|------|------|------|-------|-------------------|------------|------|
| full_chain_plba_code_subintents_v2.yaml | plba-v2-open-file-runtime | full_chain | Открой файл src/app_runtime/core/runtime.py | OPEN_FILE | C0_SOURCE_CHUNKS:1 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-open-file-public-api | full_chain | Открой файл src/plba/__init__.py | OPEN_FILE | C0_SOURCE_CHUNKS:1 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-runtime-manager | full_chain | Объясни как работает класс RuntimeManager | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-trace-service | full_chain | Объясни как работает класс TraceService | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-create-runtime | full_chain | Что делает функция create_runtime? | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-local-http-channel | full_chain | Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так? | EXPLAIN_LOCAL | C0_SOURCE_CHUNKS:1, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:4 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-runtime-manager | full_chain | Где тесты для RuntimeManager? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-trace-service | full_chain | Где тесты для TraceService? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-create-runtime | full_chain | Где тесты для create_runtime? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-tests-workflow-runtime-factory-negative | full_chain | Где тесты для WorkflowRuntimeFactory? | FIND_TESTS | C0_SOURCE_CHUNKS:10, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-entrypoints-control-plane | full_chain | Найди точки входа HTTP control plane | FIND_ENTRYPOINTS | C0_SOURCE_CHUNKS:6, C3_ENTRYPOINTS:3 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-find-entrypoints-health-endpoint | full_chain | Где health endpoint? | FIND_ENTRYPOINTS | C0_SOURCE_CHUNKS:6, C3_ENTRYPOINTS:3 | ✗ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-trace-flow-runtime-start | full_chain | Покажи поток выполнения при запуске RuntimeManager | TRACE_FLOW | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:10, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-trace-flow-health-endpoint | full_chain | Покажи как проходит запрос /health в HttpControlAppFactory | TRACE_FLOW | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:10, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-architecture-runtime-manager | full_chain | Какие компоненты участвуют в RuntimeManager? | ARCHITECTURE | C0_SOURCE_CHUNKS:4, C1_SYMBOL_CATALOG:6, C2_DEPENDENCY_GRAPH:8, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:12 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-architecture-control-plane | full_chain | Какие компоненты участвуют в ControlPlaneService? | ARCHITECTURE | C0_SOURCE_CHUNKS:4, C1_SYMBOL_CATALOG:6, C2_DEPENDENCY_GRAPH:8, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:12 | ✓ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-explain-nonexistent-symbol | full_chain | Объясни класс RuntimeFactoryManager | EXPLAIN | C0_SOURCE_CHUNKS:8, C1_SYMBOL_CATALOG:8, C2_DEPENDENCY_GRAPH:6, C3_ENTRYPOINTS:3, C4_SEMANTIC_ROLES:8 | ✗ |
| full_chain_plba_code_subintents_v2.yaml | plba-v2-open-file-nonexistent | full_chain | Открой файл src/app_runtime/core/missing_runtime.py | OPEN_FILE | — | ✗ |
## Failures
- **plba-v2-find-entrypoints-health-endpoint**: llm: expected answer to contain 'GET /health'
- **plba-v2-explain-nonexistent-symbol**: answer_mode: expected degraded, got answered; retrieval: expected empty rag, got 33 rows; llm: expected answer to contain 'не найдена'
- **plba-v2-open-file-nonexistent**: answer_mode: expected degraded, got not_found; llm: expected answer to contain 'Файл src/app_runtime/core/missing_runtime.py не найден.'
## LLM Answers
- **plba-v2-open-file-runtime**
Query: Открой файл src/app_runtime/core/runtime.py
> Путь: src/app\_runtime/core/runtime.py В этом файле содержится определение класса \`RuntimeManager\`. В классе инициализируются различные компоненты системы, такие как конфигурация, службы, трассировка, здоровье, журналы, рабочие процессы и контрольная плоскость. Класс предназначен для управления выполнением действий в системе с заданными тайм\-аутами и интервалами опроса.
- **plba-v2-open-file-public-api**
Query: Открой файл src/plba/__init__.py
> Путь к файлу: src/plba/\_\_init\_\_.py В этом файле находятся импорт различных модулей и классов из пакета plba. В частности, здесь можно найти: \- Импорты для создания runtime с помощью \`create\_runtime\` \- Классы и интерфейсы конфигурации \(\`ConfigFileLoader\`, \`FileConfigProvider\`\) \- Контроллеры и каналы управления \(\`ControlActionSet\`, \`ControlChannel\`, \`HttpControlChannel\`\) \- Определения контрактов \(\`ApplicationModule\`, \`Worker\`, etc.\) \- Менеджеры конфигурации и выполнения \(\`ConfigurationManager\`, \`RuntimeManager\`, \`ServiceContainer\`\) \- Регистраторы здоровья и службы логирования \- Обработчики очередей задач и транспортные средства трассировки \(\`InMemoryTaskQueue\`, \`MySqlTraceTransport\`, \`NoOpTraceTransport\`\) \- Определение рабочего потока и контекста \(\`StepResult\`, \`WorkflowContext\`, \`WorkflowDefinition\`\)
- **plba-v2-explain-runtime-manager**
Query: Объясни как работает класс RuntimeManager
> Класс \`RuntimeManager\` играет ключевую роль в управлении выполнением приложений и координации различных компонентов системы. Его основная функция заключается в оркестрации действий, связанных с жизненным циклом приложения, включая инициализацию, запуск и остановку сервисов и модулей. \*\*Ключевые шаги работы класса:\*\* 1. Инициализация конфигурации и состояния \(\`\_\_init\_\_\`\). 2. Добавление конфигурационных файлов и настроек \(\`add\_config\_file\`\). 3. Управление состоянием выполнения через чтение и запись атрибутов состояния \(\`configuration\`, \`\_state\`\). 4. Оркестровка вызова методов запуска и остановки для различных компонентов \(\`start\`, \`stop\`\). 5. Участие в обработке данных потока и управлении потоками задач \(\`participates in dataflow slices\`\). \*\*Опорные файлы:\*\* \- \`src/app\_runtime/core/runtime.py:18\-179\` \- \`src/app\_runtime/control/service.py:12\-52\` \- \`src/app\_runtime/contr…
- **plba-v2-explain-trace-service**
Query: Объясни как работает класс TraceService
> Класс \`TraceService\` является основным компонентом системы отслеживания трассировок в приложении. Его основная функция заключается в управлении контекстом трассировки и записи событий в журнал. \*\*Ключевые шаги работы класса:\*\* 1. Инициализация с передачей транспорта \(\`transport\`\) и хранилища контекста \(\`store\`\), которые могут быть опциональными. 2. Создание нового контекста трассировки через метод \`create\_context\`, который генерирует уникальный идентификатор трассы и сохраняет запись о контексте в хранилище. 3. Управление текущим контекстом трассировки через методы: \- \`current\_trace\_id\`: возвращает текущий идентификатор трассировки. \- \`open\_context\`: открывает новый контекст трассировки. \- \`close\_context\`: закрывает текущий контекст трассировки. \*\*Опорные файлы:\*\* \- \`src/app\_runtime/tracing/service.py:39\-166\` \- \`src/app\_runtime/tracing/service.py:66\-78\` \- \`src/app\_ru…
- **plba-v2-explain-create-runtime**
Query: Что делает функция create_runtime?
> Функция \`create\_runtime\` инициализирует и настраивает менеджер выполнения приложения. \*\*Ключевые шаги:\*\* 1. Создает экземпляр менеджера выполнения \(\`RuntimeManager\`\). 2. При наличии указанного пути к конфигурационному файлу добавляет его в менеджер. 3. Если включена опция HTTP\-контроля, регистрирует канал управления с указанными параметрами хоста, порта и тайм\-аута. 4. Регистрирует указанный модуль приложения в менеджере. 5. Возвращает созданный менеджер выполнения. \*\*Опорные файлы:\*\* \- \`src/plba/bootstrap.py:8\-29\`
- **plba-v2-explain-local-http-channel**
Query: Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?
> Класс \`HttpControlChannel\` в файле \`src/app\_runtime/control/http\_channel.py\` реализует механизм управления HTTP\-каналом для взаимодействия с внешними сервисами или компонентами. \*\*Ключевые шаги его реализации:\*\* 1. Инициализация класса: \- При создании экземпляра устанавливается таймаут \(\`\_timeout\`\), запускается сервер через объект \`UvicornThreadRunner\`, создается фабрика приложений \`HttpControlAppFactory\`. 2. Запуск канала: \- Метод \`start\` инициализирует набор действий \(\`actions\`\) и создает приложение для работы с ними. Затем запускает сервер через ранее созданный объект \`UvicornThreadRunner\`. 3. Остановка канала: \- Метод \`stop\` останавливает запущенный сервер. Опорные файлы: \- \`src/app\_runtime/control/http\_channel.py\`: определение и реализация класса \`HttpControlChannel\`.
- **plba-v2-find-tests-runtime-manager**
Query: Где тесты для RuntimeManager?
> \- tests/test\_runtime.py:12\-12 \- tests/test\_business\_control\_actions.py:14\-14
- **plba-v2-find-tests-trace-service**
Query: Где тесты для TraceService?
> \- tests/test\_runtime.py:test\_trace\_service\_allows\_messages\_without\_status \(line range: 279\-293\) \- tests/test\_runtime.py:test\_trace\_service\_writes\_contexts\_and\_messages \(line range: 246\-259\) \- tests/test\_runtime.py:test\_trace\_service\_supports\_debug\_warning\_and\_error\_levels \(line range: 262\-276\)
- **plba-v2-find-tests-create-runtime**
Query: Где тесты для create_runtime?
> \- tests/test\_runtime.py:342\-405
- **plba-v2-find-tests-workflow-runtime-factory-negative**
Query: Где тесты для WorkflowRuntimeFactory?
> Insufficient evidence for a confident answer. No test candidates found.
- **plba-v2-find-entrypoints-control-plane**
Query: Найди точки входа HTTP control plane
> Confirmed Entrypoints: 1. src/app\_runtime/control/http\_app.py:app.post \(lines 38\-42\) 2. src/app\_runtime/control/http\_app.py:app.get \(lines 31\-34\) 3. src/app\_runtime/control/http\_app.py:app.get \(lines 38\-42\)
- **plba-v2-find-entrypoints-health-endpoint**
Query: Где health endpoint?
> health endpoint: \- src/app\_runtime/control/http\_app.py:38\-42 \(app.post\) \- src/app\_runtime/control/http\_app.py:31\-34 \(app.get\)
- **plba-v2-trace-flow-runtime-start**
Query: Покажи поток выполнения при запуске RuntimeManager
> 1. Запускается \`RuntimeManager\` через импорт в \`bootstrap.py\` \(\`src/plba/bootstrap.py:4\`\). 2. Далее, в \`control/service.py\`, происходит повторный импорт и переопределение переменной \`RuntimeManager\` как \`app\_runtime.core.runtime.RuntimeManager\` \(\`src/app\_runtime/control/service.py:9\`\). 3. В файле \`core/runtime.py\` начинается определение класса \`RuntimeManager\`. Этот класс управляет состоянием приложения и участвует в управлении жизненным циклом различных сервисов и модулей \(\`src/app\_runtime/core/runtime.py:18\-179\`\). 4. Из \`\_\_init\_\_.py\` модуля \`plba\` \(\`src/plba/\_\_init\_\_.py:16\`\) импортируется другой экземпляр \`RuntimeManager\`. 5. Затем идет обращение к инициализации объекта \`ControlPlaneService\` в модуле \`control/service.py\` \(\`src/app\_runtime/control/service.py:12\-52\`\), который регистрирует каналы управления. 6. Контроллер канала управления определяется в \`base.py\` фай…
- **plba-v2-trace-flow-health-endpoint**
Query: Покажи как проходит запрос /health в HttpControlAppFactory
> 1. HttpControlAppFactory.create\(health\_provider, action\_provider\) \- Создает FastAPI приложение. \- Добавляет middleware для логирования времени ответа. \- Обрабатывает GET запрос к "/health". 2. HttpControlAppFactory.create.health\(\) \- Вызывается при обработке запроса "/health". \- Возвращает Awaitable объект типа HealthPayload. 3. HttpControlAppFactory.create.action\_provider\(\) \- Определяет поведение при запросе действий. Полный поток вызова от обработки запроса "/health" до получения HealthPayload отсутствует в предоставленных доказательствах.
- **plba-v2-architecture-runtime-manager**
Query: Какие компоненты участвуют в RuntimeManager?
> \#\#\# Подтвержденные Связи 1. \*\*RuntimeManager\*\*: \- Является ключевым компонентом управления жизненным циклом приложения. \- Инициализирует и управляет другими компонентами системы через метод \`\_\_init\_\_\`. 2. \*\*ControlPlaneService\*\*: \- Управляет каналами контроля. \- Вызывается из метода инициализации \`RuntimeManager\` для регистрации каналов. 3. \*\*ControlChannel\*\*: \- Абстрактный класс для реализации конкретных каналов контроля. \- Реализует методы \`start\` и \`stop\`, которые вызываются сервисами и менеджерами. 4. \*\*ConfigFileLoader\*\*: \- Загружает конфигурационные файлы и передает их в runtime\-менеджер. 5. \*\*WorkflowPersistence\*\*: \- Обеспечивает сохранение информации о workflows. 6. \*\*InMemoryTaskQueue\*\*: \- Используется для хранения задач внутри памяти. 7. \*\*TraceContextStore\*\*: \- Хранит контекст трассировки. 8. \*\*WorkerSupervisor\*\*: \- Наблюдает за рабочими процессами и управ…
- **plba-v2-architecture-control-plane**
Query: Какие компоненты участвуют в ControlPlaneService?
> \#\#\# Подтвержденные Связи 1. \*\*ControlPlaneService\*\*: \- Вызывает методы инициализации \(\`\_channels\`, \`\_start\_async\`, \`register\_channel\`, \`start\`, \`stop\`, \`\_stop\_async\`\) \[evidence: 16\-20\]. 2. \*\*ControlPlaneService\*\* взаимодействует с другими компонентами через методы регистрации каналов и запуска: \- Регистрация канала \(\`register\_channel\`\) использует атрибут \`\_channels\` для хранения списка зарегистрированных каналов \[evidence: 22\]. \- Запуск сервиса использует метод \`start\`, который также обращается к атрибуту \`\_channels\` \[evidence: 23\]. \#\#\# Роли Компонентов 1. \*\*ControlPlaneService\*\*: \- Pipeline stage: отвечает за чтение и запись состояния атрибутов, участвует в данных срезах \(dataflow slices\). 2. \*\*ControlChannel\*\*: \- Model: выполняет функции модели управления каналами, включая запуск и остановку. 3. \*\*ControlActionSet\*\*: \- Default model role: обеспечивает стандартные д…
- **plba-v2-explain-nonexistent-symbol**
Query: Объясни класс RuntimeFactoryManager
> Класс \`RuntimeFactoryManager\` не найден в предоставленном коде или контекстной информации. Ключевые шаги и опорные файлы: 1. Код и контекста относятся к управлению каналами управления \(«control channels»\) в приложении. 2. Основные классы включают \`ControlChannel\`, \`ControlActionSet\`, и связанные с ними каналы и сервисы. 3. Основной файл для рассмотрения — \`base.py\`. 4. Ключевые обязанности и интерфейсы описаны через абстрактные методы \(\`start\`, \`stop\`\) в классе \`ControlChannel\`. Поскольку конкретный класс \`RuntimeFactoryManager\` отсутствует в данном контексте, невозможно предоставить его объяснение.
- **plba-v2-open-file-nonexistent**
Query: Открой файл src/app_runtime/core/missing_runtime.py
> Файл \`src/app\_runtime/core/missing\_runtime.py\` не найден.

4171
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-architecture-control-plane.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-architecture-control-plane.md
View File

@@ -1,34 +0,0 @@
# plba-v2-architecture-control-plane
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Какие компоненты участвуют в ControlPlaneService?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "В архитектуре подсистемы ControlPlaneService участвуют следующие основные компоненты:\n\n1. **ControlPlaneService** – главный сервис, инициализирующий и управляющий каналами контроля. Он создает каналы, регистрирует их и управляет жизненным циклом через методы `register_channel`, `start` и `stop`.\n - Создаёт экземпляры каналов (`ControlChannel`) и сохраняет их в поле `_channels`.\n - Вызывает асинхронную инициализацию каналов с помощью методов `start` и `stop`.\n\n2. **ControlChannel** – абстрактный базовый класс для каналов управления, определяющий интерфейс для старта и остановки канала.\n - Описывает абстракции для начала работы канала и освобождения ресурсов при завершении.\n\n3. **ControlActionSet** – модель действий, используемых в канале управления.\n\nСвязи между компонентами реализованы следующим образом:\n- **ControlPlaneService** создаёт и регистрирует экземпляры каналов управления через метод `register_channel`.\n- Каналы управления (например, HttpControlChannel) используют общий интерфейс `ControlChannel` для реализации своих функций старта и завершения.\n\nГраницы ответственности включают управление жизненным циклом каналов и координацию взаимодействия различных компонентов через зарегистрированные каналы.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"ControlPlaneService"
],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-architecture-runtime-manager.md
View File

@@ -1,34 +0,0 @@
# plba-v2-architecture-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Какие компоненты участвуют в RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "ARCHITECTURE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "В подсистеме RuntimeManager участвуют следующие компоненты:\n\n1. **RuntimeManager** (src/app_runtime/core/runtime.py):\n - Инициализирует конфигурацию и управляет жизненным циклом runtime-пipeline.\n - Создаёт и регистрирует основные сервисы (ControlPlaneService, WorkflowPersistence, InMemoryTaskQueue, ConfigFileLoader, TraceContextStore, WorkerSupervisor).\n\n2. **ControlPlaneService** (src/app_runtime/control/service.py):\n - Служба управления каналами контроля и взаимодействия с внешними сущностями.\n - Регистрирует каналы и запускает асинхронные операции.\n\n3. **WorkflowPersistence** (src/app_runtime/workflow/persistence/workflow_persistence.py):\n - Обеспечивает долговременное хранение workflow-данных.\n\n4. **InMemoryTaskQueue** (src/app_runtime/queue/in_memory.py):\n - Хранит задачи в памяти для временного хранения и обработки.\n\n5. **ConfigFileLoader** (src/app_runtime/config/file_loader.py):\n - Загружает конфигурации из файлов.\n\n6. **TraceContextStore** (src/app_runtime/tracing/store.py):\n - Управляет контекстом трассировки.\n\n7. **WorkerSupervisor** (src/app_runtime/workers/supervisor.py):\n - Контролирует выполнение рабочих задач.\n\nЭти компоненты взаимодействуют через конструктор RuntimeManager, где регистрируются необходимые сервисы и каналы. Управление жизненным циклом и координация работы осуществляется через инициализацию и регистрацию сервисов.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C4_SEMANTIC_ROLES",
"C3_ENTRYPOINTS",
"C2_DEPENDENCY_GRAPH",
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

3779
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-create-runtime.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-create-runtime.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-create-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Что делает функция create_runtime?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Функция `create_runtime` находится в файле `src/plba/bootstrap.py`. Она принимает аргумент `module`, представляющий экземпляр интерфейса `ApplicationModule`.\n\nПодтвержденные действия функции:\n- Инициализирует объект типа `RuntimeManager`.\n- Если указан путь к конфигурационному файлу (`config_path`), добавляет этот файл в менеджер конфигурации.\n- При включённой опции HTTP-контроля регистрирует канал управления через класс `HttpControlChannel`.\n- Регистрирует переданный модуль в менеджере.\n\nТаким образом, основная задача функции – создать и настроить базовый runtime для приложения.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"create_runtime"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-local-http-channel.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-local-http-channel
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Почему в файле src/app_runtime/control/http_channel.py класс HttpControlChannel устроен так?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN_LOCAL",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 13,
"llm_answer": "Класс `HttpControlChannel` в файле `http_channel.py` реализует канал управления для HTTP-запросов. В конструкторе (`__init__`) создаются основные компоненты:\n\n- `_runner`: объект типа `UvicornThreadRunner`, управляющий асинхронным сервером uvicorn.\n- `_factory`: фабрика приложений типа `HttpControlAppFactory`, создающая приложения для обработки запросов.\n- `_actions`: коллекция действий управления, инициализируется как `None`.\n\nМетод `start` запускает сервер с приложением, созданным фабрикой, и ожидает завершения работы сервера при вызове `stop`. Класс предназначен для организации взаимодействия с внешним миром через HTTP-интерфейсы.",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/control/http_channel.py"
],
"symbol_candidates": [
"HttpControlChannel"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C2_DEPENDENCY_GRAPH"
]
}
## Mismatches
- none

4092
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-nonexistent-symbol.json
View File

File diff suppressed because it is too large Load Diff

36
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-nonexistent-symbol.md
View File

@@ -1,36 +0,0 @@
# plba-v2-explain-nonexistent-symbol
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Объясни класс RuntimeFactoryManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `RuntimeFactoryManager` не найден в предоставленном контексте. \n\nСогласно имеющимся данным, наиболее близкой сущностью является `ControlChannel`, объявленный в файле `base.py`. Однако его описание и работа напрямую не связаны с созданием или управлением фабриками для runtime. Если предполагается наличие класса с таким названием, возможно, он описан в другом модуле или импортируется из внешнего пакета. Рекомендую проверить остальные части проекта или уточнить местоположение данного класса.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeFactoryManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- answer_mode: expected degraded, got answered
- retrieval: expected empty rag, got 33 rows
- llm: expected answer to contain 'не найдена'

4154
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-runtime-manager.json
View File

File diff suppressed because it is too large Load Diff

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-runtime-manager.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Объясни как работает класс RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `RuntimeManager` определен в файле `src/app_runtime/core/runtime.py`, начиная с строки 18. Из доступных контекстных данных напрямую невозможно точно описать его работу, так как отсутствует подробная реализация или вызовы этого класса.\n\nТем не менее, можно сделать осторожные выводы:\n\n- Класс играет роль менеджера и управляет состоянием выполнения приложения.\n- Вероятно, он участвует в координации различных компонентов и служб через атрибуты и методы, такие как чтение и запись состояния (`configuration`, `add_config_file`), а также участие в срезах данных потока выполнения (`participates in dataflow slices`).\n- На основании имеющихся свидетельств сложно точно понять, какие конкретно действия выполняет этот класс при инициализации и во время своей работы.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-explain-trace-service.md
View File

@@ -1,34 +0,0 @@
# plba-v2-explain-trace-service
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Объясни как работает класс TraceService
## Actual
{
"intent": "CODE_QA",
"sub_intent": "EXPLAIN",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 33,
"llm_answer": "Класс `TraceService` находится в файле `src/app_runtime/tracing/service.py`. Это сервис для управления контекстами трассировки и записи событий в журнал.\n\nЕго основные обязанности:\n- Инициализация сервиса при создании экземпляра (`__init__`) с передачей транспортов и хранилищ контекста.\n- Создание нового контекста трассировки через метод `create_context`, который генерирует уникальный идентификатор трассировки и сохраняет запись контекста в хранилище.\n- Предоставление текущего идентификатора трассировки через метод `current_trace_id`.\n\nКонструктор принимает два необязательных параметра:\n- `transport`: транспорт для отправки сообщений трассировки (по умолчанию используется `NoOpTraceTransport`).\n- `store`: хранилище контекста (по умолчанию используется `TraceContextStore`).\n\nТаким образом, `TraceService` играет ключевую роль в отслеживании и документировании событий приложения, обеспечивая единообразие логирования и мониторинга.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"TraceService"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

1303
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-control-plane.json
View File

File diff suppressed because it is too large Load Diff

33
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-control-plane.md
View File

@@ -1,33 +0,0 @@
# plba-v2-find-entrypoints-control-plane
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Найди точки входа HTTP control plane
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 9,
"llm_answer": "Подтверждённые HTTP route points:\n\n- GET /health (src/app_runtime/control/http_app.py:52)\n- POST (не указан конкретный путь, но находится в src/app_runtime/control/http_app.py:38-42)\n- GET (повтор, src/app_runtime/control/http_app.py:38-42)\n\nКандидат на точку входа без явного HTTP route маркера:\n- Класс HttpControlChannel в src/app_runtime/control/http_channel.py:12-57, хотя его прямая роль неясна без дополнительного анализа поведения методов start и stop.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"HTTP",
"control",
"plane"
],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-entrypoints-health-endpoint.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-entrypoints-health-endpoint
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Где health endpoint?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_ENTRYPOINTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 9,
"llm_answer": "Конкретный health endpoint не обнаружен напрямую.\n\nОднако подтверждённые HTTP routes:\n- GET / (объявлен в src/app_runtime/control/http_app.py:31-34)\n- POST / (объявлен в src/app_runtime/control/http_app.py:38-42)\n- GET / (повторное объявление в src/app_runtime/control/http_app.py:38-42)",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"health",
"endpoint"
],
"layers": [
"C3_ENTRYPOINTS",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- llm: expected answer to contain 'GET /health'

2746
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-tests-create-runtime.json
View File

File diff suppressed because it is too large Load Diff

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-tests-create-runtime.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-create-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для create_runtime?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "Прямых тестов для `create_runtime` не обнаружено. Ближайший тест находится в файле `tests/test_runtime.py`, но он проверяет экспорт публичных контрактов пакета PLBA, а не непосредственно сам метод `create_runtime`. Косвенное покрытие отсутствует.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"create_runtime"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-tests-runtime-manager.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-runtime-manager
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для RuntimeManager?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "Прямые тесты для `RuntimeManager` обнаружены в следующих файлах:\n\n- **tests/test_runtime.py**: проверка инициализации и поведения `RuntimeManager`.\n- **tests/test_business_control_actions.py**: хотя этот файл упоминает `RuntimeManager`, он непосредственно не предназначен для тестирования `RuntimeManager`. Вместо этого здесь проверяются контрольные каналы и бизнес-действия.\n\nКосвенных тестов, специфичных для `RuntimeManager`, не найдено.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-tests-trace-service.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-trace-service
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для TraceService?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "Прямые тесты для `TraceService` находятся в файле `tests/test_runtime.py`.\n\nВ следующих функциях проверяются различные аспекты работы `TraceService`:\n- `test_trace_service_allows_messages_without_status`: проверяет корректность записи сообщений без статуса.\n- `test_trace_service_writes_contexts_and_messages`: проверяет запись контекстов и сообщений.\n- `test_trace_service_supports_debug_warning_and_error_levels`: проверяет поддержку различных уровней логирования.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"TraceService"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

3001
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-tests-workflow-runtime-factory-negative.json
View File

File diff suppressed because it is too large Load Diff

32
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-find-tests-workflow-runtime-factory-negative.md
View File

@@ -1,32 +0,0 @@
# plba-v2-find-tests-workflow-runtime-factory-negative
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Где тесты для WorkflowRuntimeFactory?
## Actual
{
"intent": "CODE_QA",
"sub_intent": "FIND_TESTS",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 24,
"llm_answer": "Insufficient evidence for a confident answer. No test candidates found.",
"answer_mode": "degraded",
"path_scope": [],
"symbol_candidates": [
"WorkflowRuntimeFactory"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C2_DEPENDENCY_GRAPH",
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

31
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-open-file-nonexistent.md
View File

@@ -1,31 +0,0 @@
# plba-v2-open-file-nonexistent
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: False
## Query
Открой файл src/app_runtime/core/missing_runtime.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 0,
"llm_answer": "Файл `src/app_runtime/core/missing_runtime.py` не найден.",
"answer_mode": "not_found",
"path_scope": [
"src/app_runtime/core/missing_runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- answer_mode: expected degraded, got not_found
- llm: expected answer to contain 'Файл src/app_runtime/core/missing_runtime.py не найден.'

30
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-open-file-public-api.md
View File

@@ -1,30 +0,0 @@
# plba-v2-open-file-public-api
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Открой файл src/plba/__init__.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "В файле src/plba/__init__.py видны следующие импорты и определения:\n\n- from plba.bootstrap import create_runtime\n- from plba.config import ConfigFileLoader, FileConfigProvider\n- from plba.control import ControlActionSet, ControlChannel, ControlPlaneService, HttpControlChannel\n- from plba.contracts import ApplicationModule, ConfigProvider, HealthContributor, TraceContext, TraceContextRecord, TraceLogMessage, TraceTransport, Worker, WorkerHealth, WorkerStatus\n- from plba.core import ConfigurationManager, RuntimeManager, ServiceContainer\n- from plba.health import HealthRegistry\n- from plba.logging import LogManager\n- from plba.queue import InMemoryTaskQueue\n- from plba.tracing import MySqlTraceTransport, NoOpTraceTransport, TraceService\n- from plba.workflow import StepResult, WorkflowContext, WorkflowDefinition, Workflo",
"answer_mode": "answered",
"path_scope": [
"src/plba/__init__.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

30
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-open-file-runtime.md
View File

@@ -1,30 +0,0 @@
# plba-v2-open-file-runtime
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Открой файл src/app_runtime/core/runtime.py
## Actual
{
"intent": "CODE_QA",
"sub_intent": "OPEN_FILE",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 1,
"llm_answer": "Виден класс `RuntimeManager` с инициализатором и статическими полями. Файл содержит 162 строки кода.",
"answer_mode": "answered",
"path_scope": [
"src/app_runtime/core/runtime.py"
],
"symbol_candidates": [],
"layers": [
"C0_SOURCE_CHUNKS"
]
}
## Mismatches
- none

35
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-health-endpoint.md
View File

@@ -1,35 +0,0 @@
# plba-v2-trace-flow-health-endpoint
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Покажи как проходит запрос /health в HttpControlAppFactory
## Actual
{
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "Поток выполнения запроса `/health` через `HttpControlAppFactory` выглядит следующим образом:\n\n1. Запрос приходит на сервер и обрабатывается фабрикой приложений `HttpControlAppFactory`.\n2. Внутри фабрики создается экземпляр приложения FastAPI с middleware для логирования времени обработки запросов.\n3. Для маршрута `/health` определяется обработчик, который вызывает предоставленный провайдер здоровья (`health_provider`), ожидающий асинхронный результат типа `HealthPayload`.\n4. В результате выполнения провайдера формируется JSON-ответ с кодом статуса 200 при успешном состоянии (\"ok\"), иначе возвращается статус 503.\n\nТаким образом, ключевой точкой является вызов провайдера здоровья внутри фабрики приложений, от которого зависит итоговый результат ответа.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"health",
"HttpControlAppFactory"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

34
tests/pipeline_setup_v3/test_results/plba_full_chain_subintents_v3/20260312_163609/full_chain_plba_code_subintents_v2_plba-v2-trace-flow-runtime-start.md
View File

@@ -1,34 +0,0 @@
# plba-v2-trace-flow-runtime-start
- source_file: /Users/alex/Dev_projects_v2/ai driven app process/v2/agent/tests/pipeline_setup_v2/cases/suite_02_pipeline/full_chain_plba_code_subintents_v2.yaml
- runner: agent_runtime
- mode: full_chain
- passed: True
## Query
Покажи поток выполнения при запуске RuntimeManager
## Actual
{
"intent": "CODE_QA",
"sub_intent": "TRACE_FLOW",
"graph_id": "CodeQAGraph",
"conversation_mode": "START",
"rag_count": 37,
"llm_answer": "При запуске `RuntimeManager` выполняются следующие основные шаги:\n\n1. Инициализация через `RuntimeManager.__init__` в файле `src/app_runtime/core/runtime.py`.\n2. Вызов метода `start` внутри `RuntimeManager`, который далее вызывает асинхронную функцию `_start_async`.\n3. В `ControlPlaneService.start` создается экземпляр канала управления с помощью метода `register_channel`.\n4. Канал управления инициализируется через метод `start` экземпляра `ControlChannel`, где создается веб-приложение с использованием фабрики `HttpControlAppFactory`.\n5. Веб-приложение запускается с помощью `UvicornThreadRunner.start`, который выполняет запуск сервера через uvicorn.\n\nТаким образом, поток начинается с инициализации менеджера времени выполнения и завершается запуском веб-канала управления.",
"answer_mode": "answered",
"path_scope": [],
"symbol_candidates": [
"RuntimeManager"
],
"layers": [
"C1_SYMBOL_CATALOG",
"C0_SOURCE_CHUNKS",
"C4_SEMANTIC_ROLES",
"C2_DEPENDENCY_GRAPH",
"C3_ENTRYPOINTS"
]
}
## Mismatches
- none

Some files were not shown because too many files have changed in this diff Show More