技术教育社区
www.teccses.org

开发自己的搜索引擎-Lucene+Heritrix-(第2版)-(附光盘)

封面

作者:邱哲,符滔滔,王学松编著

页数:562

出版社:人民邮电出版社

出版日期:2010

ISBN:9787115215291

电子书格式:pdf/epub/txt

内容简介

本书是一本介绍搜索引擎开发的书籍,通过本书,读者可以独立构建一个企业级的搜索引擎网站。本书讲解了搜索引擎与信息检索基础,lucene入门实例,索引的建立,使用lucene来搜索,排序,分析器,对word、excel和pdf格式文档的解析,compass搜索引擎框架,lucene分布式,爬虫heritrix,htmlparser,dwr等内容。最后综合这些技术,构建了一个典型的垂直搜索系统,具有很强的商业实用价值。
  本书是一本使用lucene和heritrix来讲解搜索引擎构建的书,通过对api和源代码的分析,力求使读者在应用的基础上,能够深入其核心,自行扩展和开发相应组件,发挥想象力,开发出更具有创意的搜索引擎产品。
  本书适合java程序员和从事计算机软件开发的编程人员阅读,同时也可以作为搜索引擎爱好者的入门书籍。

作者简介

邱哲,北京理工大学软件工程硕士。现为Eskalate.com公司技术经理,同时负责开发人员招聘工作一-主要从事欧美软件外包开发,曾承接多家美国本土公司项目,在J2EE方面有7年的开发经验。曾经编写了《souts Web设计与开发大全》、《开发自己的搜索引擎——Lucerie 2.0+Heritrix》。
王学松,博士。曾任职知名互联网搜索引擎公司,担任高级软件工程师、研发经理等职位,参与大型搜索引擎开发多年。开发完成亿级网页的互联网科技类信息垂直搜索引擎系统,完成中文搜索引擎的页面下载与分析、大规模索引建立、分类聚类技术、高并发检索和Web高速访问技术开发。目前从事海量信息挖掘、语义网搜索引擎和基于内容图像检索的研究和开发。

本书特色

原书是国内第一本讲解搜索引擎开发的畅销书
内容新颖、实用,提供了价值上百万元的大型数码产品搜索引擎开发案例,可直接应用于项目
用案例的方式讲解,便于读者实践

目录

第1章 搜索引擎与信息检索 
 1.1 搜索引擎的历史 
  1.1.1 萌芽:archie、gopher 
  1.1.2 起步:robot(网络机器人)的出现与spider(网络爬虫) 
  1.1.3 发展:excite、galaxy、yahoo等 
  1.1.4 繁荣:infoseek、altavista、google和baidu 
 1.2 信息检索系统的基本知识 
  1.2.1 信息检索系统 
  1.2.2 信息检索的过程 
  1.2.3 传统查找的优点和不足 
  1.2.4 使用索引提高检索速度 
  1.2.5 倒排索引 
  1.2.6 评价信息检索系统的标准 
 1.3 lucene的简介 
 1.4 小结 
第2章 lucene入门实例 
 2.1 实例介绍 
  2.1.1 实例说明 
  2.1.2 开发过程 
 2.2 准备工作 
  2.2.1 将文档的全角标点转成半角标点 
  2.2.2 将大文档切分成多个小文档 
  2.2.3 预处理源文件的统一接口 
 2.3 创建eclipse工程 
  2.3.1 准备工作 
  2.3.2 创建工程并引入lucene的jar包 
  2.3.3 运行文档预处理类 
  2.3.4 创建处理文档的索引类:indexprocessor 
  2.3.5 创建检索索引的搜索类 
 2.4 运行效果 
 2.5 小结 
第3章 索引的建立 
 3.1 document逻辑文件 
  3.1.1 lucene的document 
  3.1.2 为document添加多种field 
  3.1.3 document的内部实现 
 3.2 field的内部实现 
  3.2.1 field包含的类 
  3.2.2 field类的构造方法 
 3.3 lucene的索引工具indexwriter 
  3.3.1 indexwriter的初始化 
  3.3.2 向索引添加文档 
  3.3.3 限制每个field中的词条的数量 
 3.4 lucene索引过程详解 
  3.4.1 lucene索引建立过程概览 
  3.4.2 使用adddocument方法向索引添加文档 
  3.4.3 documentwriter的adddocument方法 
  3.4.4 文档的倒排 
  3.4.5 对postingtable进行排序 
  3.4.6 将posting信息写入索引 
 3.5 索引文件格式 
  3.5.1 索引的segment 
  3.5.2 .fnm格式 
  3.5.3 .fdx与.fdt格式 
  3.5.4 .tii与.tis格式 
  3.5.5 deletable格式 
  3.5.6 复合索引格式.cfs 
 3.6 索引过程的调优 
  3.6.1 合并因子mergefactor 
  3.6.2 maxmergedocs 
  3.6.3 minmergedocs 
 3.7 索引的合并与索引的优化 
  3.7.1 fsdirectory与ramdirectory 
  3.7.2 使用indexwriter来合并索引 
  3.7.3 索引的优化 
 3.8 从索引中删除文档 
  3.8.1 索引的读取工具index-reader 
  3.8.2 使用文档id号来删除特定文档 
  3.8.3 使用field信息来删除批量文档 
 3.9 lucene的同步问题 
  3.9.1 为什么要进行同步以及lucene的同步法则 
  3.9.2 commit.lock与write.lock 
 3.10 lucene 2.0的新类:indexmodifier类 
 3.11 小结 
第4章 lucene搜索
第5章 排序、过滤和分页
第6章 lucene的分析器 
第7章 word、excel和pdf的处理
第8章 compass:封装了lucene的框架
第9章 lucene分布式 
第10章 无比强大的网络爬虫heritrix
第11章 搜索引擎综合实例:准备篇 
第12章 搜索引擎综合实例:下载篇
第13章 使用正则表达式与html parser分析网页
第14章 网页内容存储与索引 
第15章 搜索引擎综合实例:交互篇
第16章 搜索引擎综合实例:web篇
附录 lucene 2.4更新内容

节选

《开发自己的搜索引擎:Lucene+Heritrix(第2版)》是一本介绍搜索引擎开发的书籍,通过《开发自己的搜索引擎:Lucene+Heritrix(第2版)》,读者可以独立构建一个企业级的搜索引擎网站。《开发自己的搜索引擎:Lucene+Heritrix(第2版)》讲解了搜索引擎与信息检索基础,Lucene入门实例,索引的建立,使用Lucene来搜索,排序,分析器,对Word、Excel和PDF格式文档的解析,Compass搜索引擎框架,Lucene分布式,爬虫Heritrix,HTMLParser,DWR等内容。最后综合这些技术,构建了一个典型的垂直搜索系统,具有很强的商业实用价值。《开发自己的搜索引擎:Lucene+Heritrix(第2版)》是一本使用Lucene和Heritrix来讲解搜索引擎构建的书,通过对API和源代码的分析,力求使读者在应用的基础上,能够深入其核心,自行扩展和开发相应组件,发挥想象力,开发出更具有创意的搜索引擎产品。《开发自己的搜索引擎:Lucene+Heritrix(第2版)》适合Java程序员和从事计算机软件开发的编程人员阅读,同时也可以作为搜索引擎爱好者的入门书籍。

下载地址

立即下载

(解压密码:www.teccses.org)

Article Title:《开发自己的搜索引擎-Lucene+Heritrix-(第2版)-(附光盘)》
Article link:https://www.teccses.org/153714.html