基于BERT+PET数据预处理方法介绍.pptx

基于BERT+PET方式数据预处理介绍

查看项目数据集编写Config类项目文件配置代码编写数据处理相关代码

01查看项目数据集

数据集介绍数据存放位置：llm/prompt_tasks/PET/datadata文件夹里面包含4个txt文档，分别为：train.txt、dev.txt、prompt.txt、verbalizer.txt

train.txt水果 脆脆的，甜味可以，可能时间有点长了，水分不是很足。平板 华为机器肯定不错，但第一次碰上京东最糟糕的服务，以后不想到京东购物了。书籍 为什么不认真的检查一下，发这么一本脏脏的书给顾客呢！衣服 手感不错，用料也很好，不知道水洗后怎样，相信大品牌，质量过关，五星好评！！！水果 苹果有点小，不过好吃，还有几个烂的。估计是故意的放的。差评。衣服 掉色掉的厉害，洗一次就花了train.txt为训练数据集，其部分数据展示如下train.txt一共包含63条样本数据，每一行用`\t`分开，前半部分为标签(label)，后半部分为原始输入(用户评论)。如果想使用自定义数据训练，只需要仿照上述示例数据构建数据集即可。

dev.txt书籍 一点都不好笑,很失望,内容也不是很实用衣服 完全是一条旧裤子。手机 相机质量不错，如果阳光充足，可以和数码相机媲美．界面比较人性化，容易使用．软件安装简便书籍 明明说有货，结果送货又没有了。并且也不告诉我，