数据集概述
本数据集包含用于“Agentic Large Language Models for Conceptual Systems Engineering and Design”研究的60次运行的完整LangSmith JSON追踪数据和对应的汇总CSV文件,记录了大语言模型代理在系统工程设计中的运行过程与关键指标,为分析LLM代理在该领域的应用提供结构化数据支持。
文件详解
- IDETC-25-Extended_full_traces_2025-07-04.json
- 文件格式:JSON
- 字段映射介绍:包含完整追踪字典,涵盖节点结构、时间信息、token统计、元数据等详细内容
- IDETC-25-Extended_summary_2025-07-04.csv
- 文件格式:CSV
- 字段映射介绍:包含id、parent_id、name、status、start_time、end_time、latency、run_type、inputs、outputs、error、total_tokens、prompt_tokens、completion_tokens、total_cost、project_name、session_id等字段,为60次运行的扁平化汇总信息
适用场景
- 系统工程设计_LLM代理运行分析: 分析Agentic LLM在概念系统工程设计中的运行流程、效率与结果质量
- LLM代理性能评估: 基于latency、token统计、total_cost等指标评估大语言模型代理的运行性能
- 系统工程设计_AI辅助工具研究: 研究LLM代理在系统工程设计领域的应用潜力与优化方向
- 大语言模型追踪数据应用: 探索LangSmith追踪数据在工程设计AI工具开发中的应用价值