维基百科评论区毒性文本分类数据集WikipediaCommentToxicityClassificationDataset-vineetkumar98
数据来源:互联网公开数据
标签:文本分类, 毒性检测, 情感分析, 自然语言处理, 恶意评论, 维基百科, 机器学习, 语料库
数据概述:
该数据集包含来自维基百科评论区用户生成的内容,记录了评论文本及其对应的毒性标签。主要特征如下:
时间跨度:数据未明确标注时间,可视为静态语料库,反映了特定时期内维基百科评论区的讨论内容。
地理范围:数据来源于维基百科,涵盖全球用户产生的评论。
数据维度:数据集包括以下字段:id(评论唯一标识符),comment_text(评论文本内容),以及toxic(毒性)、severe_toxic(严重毒性)、obscene(猥亵)、threat(威胁)、insult(侮辱)、identity_hate(身份仇恨)等多个标签,用于多标签分类任务。
数据格式:CSV格式,文件名为jigsaw-toxic-comment-train.csv,便于数据分析和模型训练。
数据来源:数据来源于Jigsaw竞赛,已进行初步的文本清洗和标签标注。
该数据集适合用于文本分类、情感分析、恶意文本检测等相关领域的研究。
数据用途概述:
该数据集具有广泛的应用潜力,特别适用于以下场景:
研究与分析:适用于自然语言处理、文本挖掘、情感分析等领域的学术研究,如恶意评论识别、用户行为分析、文本情感倾向分析等。
行业应用:为社交媒体、在线论坛、评论系统等提供数据支持,用于自动化内容审核、用户体验优化、风险预警等。
决策支持:支持内容平台制定更有效的社区管理策略,减少有害言论传播,维护健康的网络环境。
教育和培训:作为自然语言处理、机器学习、文本分类等课程的实训素材,帮助学生和研究人员掌握相关技术。
此数据集特别适合用于探索不同类型毒性文本的特征,构建高效的文本分类模型,提升内容审核的准确性和效率。