多语言恶意评论翻译与检测数据集MultilingualToxicCommentTranslationandDetectionDataset-mk9440

多语言恶意评论翻译与检测数据集MultilingualToxicCommentTranslationandDetectionDataset-mk9440

数据来源:互联网公开数据

标签:多语言, 文本翻译, 恶意评论, 文本分类, 自然语言处理, 机器翻译, 语料库, 文本分析

数据概述: 该数据集包含来自Jigsaw数据集的恶意评论,并提供了多语言翻译版本,用于训练和评估跨语言的文本理解和恶意评论检测模型。主要特征如下: 时间跨度:数据未明确标注时间,可视为静态语料库。 地理范围:数据来源于互联网,评论内容涉及全球范围。 数据维度:包括评论的原始文本(content),语言代码(lang),以及翻译后的文本(translated或content_en)。 数据格式:CSV格式,包含两个文件,分别对应多语言翻译数据(jigsaw_miltilingual_test_translated.csv)和英文评论数据(test_en.csv),便于分析和处理。 来源信息:数据来源于Jigsaw数据集,提供了多语言评论的翻译版本,以及原始的英文评论。 该数据集适合用于跨语言文本分析、机器翻译评估和恶意评论检测等任务。

数据用途概述: 该数据集具有广泛的应用潜力,特别适用于以下场景: 研究与分析:适用于自然语言处理、机器翻译和文本分类领域的学术研究,如跨语言恶意评论检测、多语言文本情感分析等。 行业应用:为社交媒体平台、在线论坛等提供数据支持,用于构建多语言恶意内容过滤系统,提升用户体验。 决策支持:支持内容审核策略的制定,帮助平台识别和处理不同语言的恶意言论,维护社区秩序。 教育和培训:作为自然语言处理、机器翻译和文本分类课程的实训材料,帮助学生和研究人员深入理解多语言文本处理技术。 此数据集特别适合用于研究跨语言恶意评论的特性与识别方法,帮助用户实现对多语言恶意内容的有效检测和过滤。

packageimg

数据与资源

附加信息

字段
版本 1.0
数据集大小 49.78 MiB
最后更新 2025年5月17日
创建于 2025年5月17日
声明 当前数据集部分源数据来源于公开互联网,如果有侵权,请24小时联系删除(400-600-6816)。