「Java人民分词」java现在分词

本篇文章给大家谈谈Java人民分词，以及java现在分词对应的知识点，希望对各位有所帮助，不要忘了收藏本站喔。

本文目录一览：

• 1、java如何分词？？
• 2、java语言中文分词程序怎么编写分词程序正
• 3、谁来推荐一个JAVA的分词工具
• 4、java 中文分词为什么用 ik

java如何分词？？

如果你的分词规则是在一个字符串的开头和结尾加上"_"，然后两个字符一分的话，代码可以这样写：

import java.util.ArrayList;

import java.util.List;

public class Participle

{

private static final String HEAD_END_STR = "_";

private static final int PARTICIPLE_LENGTH = 2;

public static void main(String[] args)

{

String exampleWord = "计算机";

exampleWord = "_" + exampleWord + "_";

int length = exampleWord.length();

ListString result = new ArrayListString();

for (int i = 0; i length - 1; i++)

{

String str = exampleWord.substring(i, i + PARTICIPLE_LENGTH);

result.add(str);

}

System.out.println(result);

}

}

输出结果：_计, 计算, 算机, 机_

java语言中文分词程序怎么编写分词程序正

现可以提供两种思路:

1.String或是StringBuffer(建议用) 中的indexOf("中华")方法，查找给定的的字符串中是否有给定词表中的词。

2.借鉴编译原理中的状态装换的思想。

先编写一个状态机，用于测试给定字符串中的词是否满足词表中的内容。

写在最后：1)建议使用第一种方法，因为在java 内部实现的查找操作其实 和你想得思路是相同的，不过他的效率会高些。

2)如果个人的编程能力比较强或是不考虑效率只是想实现专有的分词算法。可以使用第二种方法。

3)以上的两种方法都可以使用多线程来提高程序的效率。

谁来推荐一个JAVA的分词工具

java读取中文分词工具：linger

Java开源中文分词器

1、word分词器

2、Ansj分词器

3、Stanford分词器

4、FudanNLP分词器

5、Jieba分词器

6、Jcseg分词器

7、MMSeg4j分词器

8、IKAnalyzer分词器

9、Paoding分词器

10、smartcn分词器

java 中文分词为什么用 ik

为什么呢？因为Lucene自带的分词器比较适合英文的分词，而IK首先是一个中文的分词器。

具体的优点先不细说，单说分词的结果来看：

1 比如说 我爱北京

使用自带的分词 我/爱/北/京

IK分词 我/爱/北京

2 可以自己扩展词典

有很多分词器是不能够进行自己扩展词典的，有自己的词典，导致分词的结果才是自己想要的结果。

3 可以自己定义停用词字典

4 和Lucene结合比较高，有很多封装好的模块。用来检索非常顺手。

当然，IK自2012年已经不再维护了。后面有出现了很多其他的分词器。

Java人民分词的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于java现在分词、Java人民分词的信息别忘了在本站进行查找喔。