other directory implementations
将某个directory装入到RAMDirectory中
Directory ramDir = new RAMDirectory(otherDir)
这个被用来加速搜索,将一个已经存在的在硬盘上的索引放入到ram中
我们也可以反过来:将RAMDirectory中的索引复制到另一个Directory中
Directory.copy(ramDir,otherDir)
该方法只是直接替换otherDir中的文件,需要保证没有indexwriter在ramDir中打开,因为该方法不会加锁
如果otherDir中存在一个index,当你需要将ramDir中documents加入到otherDir的index中,保留otherDir中原来的索引,需要使用下面的方法:IndexWriter.addIndexesNoOptimize
IndexWriter writer = new IndexWriter(otherDir,analyzer,InexWriter.MaxFieldLength.UNLIMITED);
writer.addIndexesNoOptimize(new Directory[]{ramDir});
在IndexWriter中还有其他的addIndexes方法,不过这些方法都有自己的优化措施
MMapDirectory 与FSDirectory一样,将文件存放在文件系统中,不同的地方是
它不是利用io来操作文件,而是利用内存映射
NIOFSDirectory 与FSDirectory一样,将文件存放在文件系统中,不同的地方是它利用的java.nio.*来读取文件,当多线程来读取同一文件时,不用像FSDirecotyr使用锁机制
Concurrency ,thread-safety,and locking issues
1.多个indexReader可以同时打开一个index
2.同一时刻只有一个writer打开一个index
3.indexReaders可以打开,即使有一个IndexWriter在操作index. indexReader看不到任何IndexWriter做的修改, 直到writer提交和reader 重新打开
4.多个线程可以分享同一个IndexReader或者IndexWirter实例
index locking
indexWriter或者indexReader执行删除或者修改norms,lucene会加锁
当企图在同一个index上建立另外一个writer会出现LockObtainFialedException
lucene允许改变锁机制,lockFactory的子类称为锁机制实现,然后调用Directory.setLockFactory,该方法需要在indexWriter打开之前执行
建立自己的锁机制时,lucene提供了一个工具来判断锁机制实现是否正确
LockStreassTest(org.apache.lucene.store)
package chapter02;
import static org.junit.Assert.assertNull;
import static org.junit.Assert.fail;
import java.io.IOException;
import org.apache.lucene.analysis.SimpleAnalyzer;
import org.apache.lucene.index.IndexWriter;
import org.apache.lucene.store.Directory;
import org.apache.lucene.store.FSDirectory;
import org.apache.lucene.store.LockObtainFailedException;
import org.junit.Before;
import org.junit.Test;
public class LockTest {
private Directory dir;
@Before
public void setUp() throws IOException {
String indexDir = System.getProperty("java.io.tmpdir", "tmp") + System.getProperty("file.separetor") + "index";
dir = FSDirectory.getDirectory(indexDir);
}
@Test
public void testWriterLock() throws IOException {
IndexWriter writer1 = null;
IndexWriter writer2 = null;
try {
writer1 = new IndexWriter(dir, new SimpleAnalyzer(), IndexWriter.MaxFieldLength.UNLIMITED);
writer2 = new IndexWriter(dir, new SimpleAnalyzer(), IndexWriter.MaxFieldLength.UNLIMITED);
fail("we should never reach this point");
} catch (LockObtainFailedException e) {
e.printStackTrace();
} finally {
writer1.close();
assertNull(writer2);
}
}
}
分享到:
相关推荐
lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习lucene学习...
4、创建索引库 5、查询索引库 6、分析器的分析过程 a) 测试分析器的分词效果 b) 第三方中文分析器 7、索引库的维护 a) 添加文档 b) 删除文档 c) 修改文档 Lucene的高级查询、solr入门 solr在项目中的应用及电商搜索...
Lucene的的学习资料及案例,包括一个lucene的学习资料总结。供大家学习使用,也有本人写的一个小案例。
Lucene学习源码.rar
这里面是lucene的相关学习资料,特别适合新手学习。
lucene学习
NULL 博文链接:https://huanglz19871030.iteye.com/blog/1278428
lucene的讲课文档, luke工具,用来查看lucene的内容。
Lucene.net学习.docx
lucene学习总结:lucene全文检索的原理,索引文件的格式,lucene的整体架构
Lucene学习文档Lucene学习文档Lucene学习文档Lucene学习文档
lucene学习笔记 1 .txt lucene学习笔记 2.txt lucene学习笔记 3 .txt lucene入门实战.txt Lucene 的学习 .txt Lucene-2.0学习文档 .txt Lucene入门与使用 .txt lucene性能.txt 大富翁全文索引和查询的例子...
第一章 LUCENE基础 2 1.1 索引部分的核心类 2 1.2 分词部分的核心类 2 1.3 搜索部分的核心类 2 第二章 索引建立 3 2.1 创建Directory 3 2.2 创建Writer 3 2.3 创建文档并且添加索引 4 2.4 查询索引的基本信息 5 2.5 ...
视频详细讲解,需要的小伙伴...学习Lucene对日后学习它的下游技术产品ElasticSearch和Solr将会大有帮助。 系统的学习Lucene全文检索技术,全面掌握搜索原理和底层知识,为学习其他应用层面搜索技术打下坚实的基础。
Lucene学习总结之一:全文检索的基本原理 Lucene学习总结之二:Lucene的总体架构 Lucene学习总结之三:Lucene的索引文件格式(1) ...Lucene学习总结之四:Lucene索引过程分析(4) www.chinaandroid.com
这是我通过对Lucene3.3.0源码进行了简单解读,依据应用详细的做了很多Demo,大家可以一道学习。
lucene学习教程lucene讲义 叫你用lucene算法
Lucene+compass学习资料+ajax
lucene学习入门程序,程序全面系统的描述了lucene各个接口的调用,包括高亮显示,范围搜索等
本资源有三个内容: 电子书《搜索引擎--原理、技术与系统》 和两个网友的lucene学习分析资源。