数据集概述
本数据集包含桌面环境的高分辨率截图,专注于标注单个UI组件,旨在提升桌面应用中UI元素识别与分类的准确性,支持层级结构提取。数据分为训练和测试两个压缩包,覆盖PDF阅读器、CRM系统等六类应用场景,含全屏及重叠窗口截图。
文件详解
- 文件名称:Desktop UI Detection Dataset.zip
- 文件格式:ZIP
- 内容介绍:训练集压缩包,包含100张通用场景截图,按G1至G6六组分类(G2因隐私未提供),每组对应特定类型应用的全屏或重叠窗口截图
- 文件名称:Test Desktop UI Detection Dataset.zip
- 文件格式:ZIP
- 内容介绍:测试集压缩包,用于评估模型性能,包含特定业务流程的截图,同样按G1至G6六组分类(G2因隐私未提供),含全屏或重叠窗口截图
适用场景
- UI元素识别模型训练: 用于训练桌面应用界面中按钮、文本框等UI组件的检测与分类模型
- 桌面UI层级结构提取: 支持从截图中解析UI元素的嵌套层级关系
- 跨应用UI识别泛化性测试: 通过不同复杂度(G1-G6)的场景评估模型泛化能力
- 重叠窗口UI识别研究: 利用重叠窗口截图数据优化复杂界面下的元素识别算法
- 业务流程界面分析: 基于测试集的特定业务流程截图,分析行业应用界面的UI设计模式