数据集列表

• AFQMC 蚂蚁金融语义相似度
• LSCTC 中文文本摘要
• NLI 阅读理解合集
• Sentiment 情感分析合集
• Similarity 文本相似度合集
• WuDao_180G 悟道开源预训练数据集

上述列表为封神榜模型开源计划中所有用到的数据集，并且包含一部分数据处理预逻辑，全量原始数据暂时未开源，我们提供一部分数据DEMO以便使用者了解数据集的结构以及如何做数据处理，敬请期待后续开源计划。

DEMO数据样式可以在[github](https://github.com/IDEA-CCNL/fs_datasets/blob/master/raw_data/demo_data.jsonl)查看。