长沙做痔疮东大医院de网站,手机网站知识,wordpress 花园,广西网站建设性价比高Lucene是apache组织的一个用java实现全文搜索引擎的开源项目。其功能非常的强大#xff0c;但api其实很简单的#xff0c;它最主要就是做两件事:建立索引和进行搜索。1. 建立索引时最重要的几个术语* Document#xff1a;一个要进行索引的单元#xff0c;相当于数据库的一行… Lucene是apache组织的一个用java实现全文搜索引擎的开源项目。其功能非常的强大但api其实很简单的它最主要就是做两件事:建立索引和进行搜索。1. 建立索引时最重要的几个术语* Document一个要进行索引的单元相当于数据库的一行纪录任何想要被索引的数据都必须转化为Document对象存放。* FieldDocument中的一个字段相当于数据库中的Column Field是lucene比较多概念一个术语详细见后。* IndexWriter负责将Document写入索引文件。通常情况下,IndexWriter的构造函数包括了以下3个参数:索引存放的路径,分析 器和是否重新创建索引。特别注意的一点当IndexWriter执行完addDocument方法后一定要记得调用自身的close方法来关闭它。只 有在调用了close方法后索引器才会将存放在内在中的所有内容写入磁盘并关闭输出流。* Analyzer:分析器主要用于文本分词。常用的有StandardAnalyzer分析器StopAnalyzer分析器WhitespaceAnalyzer分析器等。* Directory:索引存放的位置。lucene提供了两种索引存放的位置一种是磁盘一种是内存。一般情况将索引放在磁盘上相应地lucene提供了FSDirectory和RAMDirectory两个类。* 段Segment,是Lucene索引文件的最基本的一个单位。Lucene说到底就是不断加入新的Segment然后按一定的规则算法合并不同的Segment以合成新的Segment。lucene建立索引的过程就是将待索引的对象转化为Lucene的Document对象使用IndexWriter将其写入lucene 自定义格式的索引文件中。待索引的对象可以来自文件、数据库等任意途径用户自行编码遍历目录读取文件或者查询数据库表取得ResultSetLucene的API只负责和字符串打交道。1.1 Field 的解释从源代码中可以看出Field 构造函数如下Field(String name, byte[] value, Field.Store store)Field(String name, Reader reader)Field(String name, Reader reader, Field.TermVector termVector)Field(String name, String value, Field.Store store, Field.Index index)Field(String name, String value, Field.Store store, Field.Index index, Field.TermVector termVector)在Field当中有三个内部类Field.Index,Field.Store,Field.termVector。其中* Field.Index有四个属性分别是Field.Index.TOKENIZED分词索引Field.Index.UN_TOKENIZED分词进行索引如作者名日期等Rod Johnson本身为一单词不再需要分词。Field.Index不进行索引存放不能被搜索的内容如文档的一些附加属性如文档类型, URL等。Field.Index.NO_NORMS* Field.Store也有三个属性分别是Field.Store.YES索引文件本来只存储索引数据, 此设计将原文内容直接也存储在索引文件中如文档的标题。Field.Store.NO原文不存储在索引文件中搜索结果命中后再根据其他附加属性如文件的Path数据库的主键等重新连接打开原文适合原文内容较大的情况。Field.Store.COMPRESS 压缩存储* termVector是Lucene 1.4.3新增的它提供一种向量机制来进行模糊查询,很少用。上面所说的Field属性与lucene1.4.3版本的有比较大的不同在旧版的1.4.3里lucene是通过Field.Keyword (...),FieldUnIndexed(...),FieldUnstored(...)和Field.Text(...)来设置不同字段的类型以达 到不同的用途而当前版本由Field.Index和Field.Store两个字段的不同组合来达到上述效果。还有一点说明,其中的两个构造函数其默认的值为Field.Store.NO和Field.Index.TOKENIZED。Field(String name, Reader reader)Field(String name, Reader reader, Field.TermVector termVector)* 限制Field的长度:IndexWriter类提供了一个setMaxFieldLength的方法来对Field的长度进行限制看一下源代码就知道其默认值为10000 我们可以在使用时重新设置此参数。如果使用默认值那么Lucene就仅仅对文档的前面的10000个term进行索引超过这一个数的文档就不会被建立 索引。1.2 索引的合并、删除、优化* IndexWriter中的addIndexes方法将索引进行合并;当在不同的地方创建了索引后如果需要将索引合并这时候使用addIndexes方法就显得很有意义。* 可以通过IndexReader类从索引中进行文档的删除。IndexReader是很特别的一个类看源代码就知道它主要是通过自身的静态方法来完成构造的。示例IndexReader reader IndexReader.open(C:\\springside);reader.deleteDocument(X); //这里的X是一个int的常数不推荐这一种删除方法reader.deleteDocument(new Term(name,springside));//这是另一种删除索引的方法按字段来删除推荐使用这一种做法reader.close();* 优化索引:可以使用IndexWriter类的optimize方法来进行优先它会将多个Segment进行合并组成一个新的Segment,可以加 快建立索引后搜索的速度。另外需要注意的一点optimize方法会降低建立索引的速度而且要求的磁盘空间会增加。2. 进行搜索时最常用的几个术语* IndexSearcher:是lucene中最基本的检索工具所有的检索都会用到IndexSearcher工具。初始化IndexSearcher需要设置索引存放的路径让查询器能定位索引而进行搜索。* Query:查询lucene中支持模糊查询语义查询短语查询组合查询等等,如有TermQuery,BooleanQuery,RangeQuery,WildcardQuery等一些类。* QueryParser: 是一个解析用户输入的工具可以通过扫描用户输入的字符串生成Query对象。* Hits:在搜索完成之后需要把搜索结果返回并显示给用户只有这样才算是完成搜索的目的。在lucene中搜索的结果的集合是用Hits类的实例来表示的。Hits对象中主要方法有length(): 返回搜索结果的总数,下面简单的用法中有用到Hit的这一个方法doc(int n): 返回第n个文档iterator(): 返回一个迭代器这里再提一下Hits这也是Lucene比较精彩的地方熟悉hibernate的朋友都知道hibernate有一个延迟加载的属性同样, Lucene也有。Hits对象也是采用延迟加载的方式返回结果的当要访问某个文档时Hits对象就在内部对Lucene的索引又进行一次检索最后 才将结果返回到页面显示。3. 一个简单的实例首先把lucene的包放在classpath路径中去写下面一个简单的类public class FSDirectoryTest {//建立索引的路径public static final String path c:\\index2;public static void main(String[] args) throws Exception {Document doc1 new Document();doc1.add( new Field(name, lighter springside com,Field.Store.YES,Field.Index.TOKENIZED));Document doc2 new Document();doc2.add(new Field(name, lighter blog,Field.Store.YES,Field.Index.TOKENIZED));IndexWriter writer new IndexWriter(FSDirectory.getDirectory(path, true), new StandardAnalyzer(), true);writer.addDocument(doc1);writer.addDocument(doc2);writer.close();IndexSearcher searcher new IndexSearcher(path);Hits hits null;Query query null;QueryParser qp new QueryParser(name,new StandardAnalyzer());query qp.parse(lighter);hits searcher.search(query);System.out.println(查找\lighter\ 共 hits.length() 个结果);query qp.parse(springside);hits searcher.search(query);System.out.println(查找\springside\ 共 hits.length() 个结果);}}执行的结果查找lighter 共2个结果查找springside 共1个结果4. 一个复杂一点的实例* 在windows系统下的的C盘建一个名叫s的文件夹,在该文件夹里面随便建三个txt文件随便起名啦就叫1.txt,2.txt和3.txt啦其中1.txt的内容如下springside社区更大进步吸引更多用户,更多贡献 2007年而2.txt和3.txt的内容也可以随便写几写这里懒写就复制一个和1.txt文件的内容一样吧* 下载lucene包放在classpath路径中然后建立索引:/*** author lighter date 2006-8-7*/public class LuceneExample {public static void main(String[] args) throws Exception {File fileDir new File(c:\\s); // 指明要索引文件夹的位置,这里是C盘的S文件夹下 File indexDir new File(c:\\index); // 这里放索引文件的位置File[] textFiles fileDir.listFiles();Analyzer luceneAnalyzer new StandardAnalyzer();IndexWriter indexWriter new IndexWriter(indexDir,luceneAnalyzer,true);indexFile(luceneAnalyzer,indexWriter, textFiles); indexWriter.optimize();//optimize()方法是对索引进行优化indexWriter.close(); }public static void indexFile(Analyzer luceneAnalyzer,IndexWriter indexWriter,File[] textFiles) throws Exception{//增加document到索引去for (int i 0; i textFiles.length; i) {if (textFiles[i].isFile() textFiles[i].getName().endsWith(.txt)) {String temp FileReaderAll(textFiles[i].getCanonicalPath(),GBK);Document document new Document();Field FieldBody new Field(body, temp, Field.Store.YES,Field.Index.TOKENIZED);document.add(FieldBody);indexWriter.addDocument(document);}}}public static String FileReaderAll(String FileName, String charset)throws IOException {BufferedReader reader new BufferedReader(new InputStreamReader(new FileInputStream(FileName), charset));String line ;String temp ;while ((line reader.readLine()) ! null) {temp line;}reader.close();return temp;}}* 执行查询public class TestQuery { public static void main(String[] args) throws IOException, ParseException { Hits hits null; String queryString 社区; Query query null; IndexSearcher searcher new IndexSearcher(c:\\index); Analyzer analyzer new StandardAnalyzer(); try { QueryParser qp new QueryParser(body, analyzer); query qp.parse(queryString); } catch (ParseException e) { } if (searcher ! null) { hits searcher.search(query); if (hits.length() 0) { System.out.println(找到: hits.length() 个结果!); } } } }* 执行结果找到:3 个结果!5、Hibernate与lucene的结合使用: 转载于:https://blog.51cto.com/zhoujiyu/200050
