多语言维基百科评论文本毒性分析数据集MultilingualWikipediaCommentTextToxicityAnalysis-shahules

多语言维基百科评论文本毒性分析数据集MultilingualWikipediaCommentTextToxicityAnalysis-shahules

数据来源:互联网公开数据

标签:文本分类, 毒性检测, 多语言, 评论分析, 自然语言处理, 情感分析, 机器学习, 语料库

数据概述: 该数据集包含来自维基百科评论的文本数据,记录了不同语言环境下评论的毒性评估结果。主要特征如下: 时间跨度:数据未明确标注时间,可视为静态语料库,反映评论在特定时期的表现。 地理范围:数据来源于维基百科,覆盖范围广泛,涉及多种语言的评论文本。 数据维度:数据集包含四个主要字段:id(评论唯一标识符)、content(评论文本内容)、lang(评论使用的语言)和toxic(毒性标签,0代表无毒,1代表有毒)。 数据格式:CSV格式,文件名为ps_test.csv,方便进行文本分析和模型构建。 来源信息:数据来源于维基百科评论,并已进行毒性标注,方便研究人员进行相关分析。 该数据集适用于文本毒性检测、多语言文本分析等领域的研究。

数据用途概述: 该数据集具有广泛的应用潜力,特别适用于以下场景: 研究与分析:适用于自然语言处理、情感分析、文本挖掘等领域的学术研究,例如多语言文本毒性分析、恶意评论检测等。 行业应用:可以为社交媒体、在线论坛、评论平台等提供数据支持,用于构建内容审核系统、提升用户体验。 决策支持:支持平台方进行内容管理策略制定,优化内容过滤机制,减少不良信息传播。 教育和培训:作为自然语言处理和机器学习课程的实训材料,帮助学生和研究人员学习文本分类、情感分析等技术。 此数据集特别适合用于探索不同语言环境下评论的毒性特征,以及构建跨语言的毒性检测模型,从而实现对不良内容的有效识别和过滤。

packageimg

数据与资源

附加信息

字段
版本 1.0
数据集大小 5.8 MiB
最后更新 2025年4月29日
创建于 2025年4月29日
声明 当前数据集部分源数据来源于公开互联网,如果有侵权,请24小时联系删除(400-600-6816)。