利用java实现对文本的去除停用词以及分词处理

最新推荐文章于 2025-06-08 10:21:46 发布

原创

最新推荐文章于 2025-06-08 10:21:46 发布 · 8.8k 阅读

收录于

当前文章被以下社区和专栏收录：

本文介绍如何使用Java结合HanLP库对34万条txt文本数据进行分词处理，并去除停用词。通过读取文本，调用HanLP分词API，然后保存处理后的结果到新的txt文件，最终实现有效的文本处理效果。

功能：

对txt文档进行分词处理，并去除停用词。

工具：

IDEA，java，hankcs.hanlp.seg.common.Term等库。

程序：

import java.util.*;
import java.io.*;


import java.lang.String;
import java.lang.StringBuilder;
import com.hankcs.hanlp.seg.common.Term;
import com.hankcs.hanlp.HanLP;
public class WordPre {
    public static void main(String[] args)throws Exception {
        File file = new File("E:\\资料\\数据\\test.txt"</