老师是否可以补充一下去除标点和停用词的代码在这里?
来源:7-7 数据预处理之分词
Shuren_Yu
2021-01-30
写回答
1回答
-
正十七
2021-02-10
去除标点和停用词的逻辑很简单,就是把停用词和标点的id设为UNK后者直接去掉即可。
这里建议自行实现一下哈。
00
相似问题
老师是否可以补充一下去除标点和停用词的代码在这里?
来源:7-7 数据预处理之分词
Shuren_Yu
2021-01-30
1回答
正十七
2021-02-10
去除标点和停用词的逻辑很简单,就是把停用词和标点的id设为UNK后者直接去掉即可。
这里建议自行实现一下哈。
相似问题