技术标签: 搜索引擎技术
目录:
1.Nutch1.2二次开发详细攻略(一)【图文】------Windows平台下Cygwin环境的搭建
2.Nutch1.2二次开发详细攻略(二)【图文】------Windows平台下Nutch1.2的搭建
3.Nutch1.2二次开发详细攻略(三)【图文】------Nutch1.2二次开发(关于界面修改)
4.Nutch1.2二次开发详细攻略(四)【图文】------Nutch1.2二次开发(关于中文分词)
本文出自 “守望者MS” 博客,谢绝转载!
一、开发环境介绍(以我个人为例):
个人开发端:windows Server 2003 + Cygwin + Eclipse3.2
二、具体步骤:
Nutch原来的首页和结果也非常难看,因此在二次开发中修改这两个页面也是非常重要的。
<1>.首页的修改
下图是Nutch原始的首页,除了页面难看之外,你会发现有很多你不想要的东西。下面
我们就开始修改首页。
(1).首先我们在tomcat中找到刚刚部署的Nutch首页(index.jsp),查看其源代码。
<%@ page
session="false"
import="java.io.*"
import="java.util.*"
%><%
String language =
ResourceBundle.getBundle("org.nutch.jsp.search", request.getLocale())
.getLocale().getLanguage();
String requestURI = HttpUtils.getRequestURL(request).toString();
String base = requestURI.substring(0, requestURI.lastIndexOf('/'));
response.sendRedirect(language + "/");
%>经过分析发现,其首页也就是做一个单一的参数传递和跳转罢了,而且对与我的二次开发来说,并不需要这么多的语言支持。
所以:
第一步,我将根目录下所有的语言包(包括EN,和ZH)全部删除,并且删除index.jsp。
第二步,自己新建一个首页,我的是index.html(这个首页可以找一个UI设计人员帮你设计一下,就是一个简单的静态页),其中唯一特殊的就是表单提交的地方,例如我的代码:
<form action="./search.jsp" method="get">
<input type="hidden" name="page1" value="1">
<input type="text" name="query" class="searchInputBot" id="keyword" disableautocomplete maxlength="100"/>
<input type="submit" value="电力搜索" class="searchBUtton"/>
</form>说白了就是传参和跳转。
下图是修改后的首页(图中擦去了一些相关信息,因为我的二次开发还没有完全结束)
<2>.搜索结果页的修改
跟首页的修改一样,先自行设计一个静态的页面,然后在search.jsp的源码中在相应的位置删除原来的代码,加上你的代码。由于这个页面是你自己写的,所以原来Nutch自带的一些引用之类的都可以不要,比如<jsp:include page="include/style.html"/>之类的,懂页面设计的在这个地方应该会很熟悉。
下图是我修改后的页面
<3>.分页显示的修改
在结果页中最重要的修改要数分页显示那个地方,由于Nutch原来提供的分页既不美观,也不满足用户体验。所以我们重点是修改分页显示功能。
找到原来代码中的分页代码:
<%
if ((hits.totalIsExact() && end < hits.getTotal()) // more hits to show
|| (!hits.totalIsExact() && (hits.getLength() > start+hitsPerPage))) {
%>
<form name="next" action="../search.jsp" method="get">
<input type="hidden" name="query" value="<%=htmlQueryString%>">
<input type="hidden" name="lang" value="<%=queryLang%>">
<input type="hidden" name="start" value="<%=end%>">
<input type="hidden" name="hitsPerPage" value="<%=hitsPerPage%>">
<input type="hidden" name="hitsPerSite" value="<%=hitsPerSite%>">
<input type="hidden" name="clustering" value="<%=clustering%>">
<input type="submit" value="<i18n:message key="next"/>">
<% if (sort != null) { %>
<input type="hidden" name="sort" value="<%=sort%>">
<input type="hidden" name="reverse" value="<%=reverse%>">
<% } %>
</form>
<%
} if ((!hits.totalIsExact() && (hits.getLength() <= start+hitsPerPage))) {
%>
<form name="showAllHits" action="../search.jsp" method="get">
<input type="hidden" name="query" value="<%=htmlQueryString%>">
<input type="hidden" name="lang" value="<%=queryLang%>">
<input type="hidden" name="hitsPerPage" value="<%=hitsPerPage%>">
<input type="hidden" name="hitsPerSite" value="0">
<input type="hidden" name="clustering" value="<%=clustering%>">
<input type="submit" value="<i18n:message key="showAllHits"/>">
<% if (sort != null) { %>
<input type="hidden" name="sort" value="<%=sort%>">
<input type="hidden" name="reverse" value="<%=reverse%>">
<% } %>
</form>
<%
}
%>将其修改为:
注意下面代码中的两个<div>标签的样式是自己写的,用CSS控制其样式。
<div id="pager">
<div class="pg">
<%
if (start >= hitsPerPage)
{
%>
<a class="flag_pg" href="/search.jsp?query=<%=htmlQueryString%>&page1=<%=page1-1%>&lang=<%=queryLang%>&start=<%=start - hitsPerPage%>&hitsPerPage=<%=hitsPerPage%>&hitsPerSite=<%=hitsPerSite%>&clustering=<%=clustering%>"><<</a>
<%} %>
<%
//显示页码按钮
int startnum=1;
String current_select="";
int select=-1;
//页面中最前面的页码编号,我设定(满足)共10页,当页为第6页
//若果结果大于等于11页,每次显示11个按钮,当前按钮在最中间,即第6个
if((int)(start/hitsPerPage)>=5)
startnum=(int)(start/hitsPerPage)-4;
for(int i=hitsPerPage*(startnum-1),j=0;i<=hits.getTotal()&&j<=10;)
{
if(hits.getTotal()==0&&i==hits.getTotal()) break; //搜索结果为整数的时候处理
if(page1 == (i/hitsPerPage+1))
{
%>
<span class="current"><%=page1%></span>
<%
}
else
{
%>
<a class="flag_pg" href="/search.jsp?query=<%=htmlQueryString%>&page1=<%=i/hitsPerPage+1 %>&lang=<%=queryLang%>&start=<%=i%>&hitsPerPage=<%=hitsPerPage%>&hitsPerSite=<%=hitsPerSite%>&clustering=<%=clustering%>"><%=i/hitsPerPage+1 %></a>
<%
}
i=i+10;
j++;
}
%>
<%
if ((hits.totalIsExact() && end < hits.getTotal()) // more hits to show
|| (!hits.totalIsExact() && (hits.getLength() > start + hitsPerPage))) {
%>
<a class="flag_pg" href="/search.jsp?query=<%=htmlQueryString%>&page1=<%=page1+1%>&lang=<%=queryLang%>&start=<%=end%>&hitsPerPage=<%=hitsPerPage%>&hitsPerSite=<%=hitsPerSite%>&clustering=<%=clustering%>">>></a>
<%} %>
</div></div>除此之外还需要在search.jsp源码的变量声明部分添加以下代码:
int page1 = 0;
String s_page = request.getParameter("page1");
if(s_page != null)
{
page1 = Integer.parseInt(s_page);
} 在这个修改代码中以下代码需要注意:
if(page1 == (i/hitsPerPage+1))
{
%>
<span class="current"><%=page1%></span>
… 其中page1 是一个URL参数,其代表当前页码
<span class="current"><%=page1%></span>这段代码则是为了将分页图标中的当前页标识出来。
下图是我修改的分页样式:
<4>.摘要中关键字红色高亮显示
在之前参阅的文章中对这个方案的解决方式是全部是去改源码,然后在编译部署。
这让我很是不明白,为什么要弄的那么复杂呢?
对此,我的解决办法是,通过CSS控制其显示样式。
例如我在控制我结果页样式的CSS文件中加入一下代码:
.highlight {
color: #FF0000;
}
保存,刷新,看看是不是已经变为红色啦。
<5>.关于其他要修改的请点击查看该文章(注:可以参考在本文中没有提及的一些要修改的点,对于已经提及的建议以参考本文为主,因为我采用的方式要更为简单,并且实际实践过)
转自:http://www.cnblogs.com/streamhope/archive/2011/07/27/2118564.html
文章浏览阅读2.6k次。解决Python词云库wordcloud不显示中文的问题2018-11-25背景:wordcloud是基于Python开发的词云生成库,功能强大使用简单。github地址:https://github.com/amueller/word_cloudwordcloud默认是不支持显示中文的,中文会被显示成方框。安装:安装命令:pip install wordcloud解决:经过测试发现不支持显示中文..._词云python代码无法输出文字
文章浏览阅读807次。扩展。_jmap 在线分析
文章浏览阅读1.1w次。随着炎热夏季的到来,当玩游戏正爽的时候,电脑突然死机了,自动关机了,是不是有想给主机一脚的冲动呢?这个很大的原因是因为CPU温度过高导致的。很多新手玩家可能都有一个疑虑,cpu温度多少以下正常?有些说是60,有些说是70,到底多高CPU温度不会死机呢?首先我们先看看如何查看CPU的温度。下载鲁大师并安装,运行鲁大师软件,即可进入软件界面,并点击温度管理,即可看到电脑各个硬件的温度。鲁大师一般情况下..._台式机玩游戏温度多少正常
文章浏览阅读243次。Day2-打印打印打印!我终于更新了!(哭腔)一、 最简单的打印最最简单的打印语句: print(“打印内容”)注意:python是全英的,符号记得是半角下面是我写的例子:然后进入power shell ,注意:你需要使用cd来进入你保存的例子的文件夹,保存时名字应该取为xxx.py我终于知道为什么文件夹取名都建议取英文了,因为进入的时候是真的很麻烦!如果你没有进入正确的文件夹..._puthon打印任务收获
文章浏览阅读1k次。centos8问题参考CentOS 8 EOL如何切换源? - 云服务器 ECS - 阿里云_"cenerrors during download metadata for repository \"appstream"
文章浏览阅读2.7k次,点赞3次,收藏11次。SpringBoot+Maven+MabatisPlusmaven在新建springboot项目引入RELEASE版本出错maven在新建springboot项目引入RELEASE版本出错maven详解maven就是通过pom.xml中的配置,就能够从仓库获取到想要的jar包。仓库分为:本地仓库、第三方仓库(私服)、中央仓库springframework.boot:spring-boot-starter-parent:2.2.1.RELEASE’ not found若出现jar包下载不了只有两_基于微服务的在线教育平台尚硅谷
文章浏览阅读316次。路由的概念路由器它称之为网关设备。路由器就是用于连接不同网络的设备路由器是位于OSI模型的第三层。路由器通过路由决定数据的转发。网关的背景:当时每家计算机厂商,用于交换数据的通信程序(协议)和数据描述格式各不相同。因此,就把用于相互转换这些协议和格式的计算机称为网关。路由器与三层交换器的对比路由协议对比路由器的作用:1.路由寻址2.实现不同网络之间相连的功能3.通过路由决定数据的转发,转发策略称为 路由选择。VLAN相关技术什么是VLAN?中文名称叫:虚拟局域网。虚_路由和vlan
文章浏览阅读2.8w次,点赞6次,收藏22次。设置div背景颜色透明度,内部元素不透明:.demo{ background-color:rgba(255,255,255,0.15) } 错误方式:.demo{ background-color:#5CACEE;opacity:0.75;} 这样会导致div里面的元素内容和背景颜色一起变透明只针对谷歌浏览器的测试_div设置透明度,里面的内容不透明
文章浏览阅读563次。1.[ u]文字:在文字的位置可以任意加入您需要的字符,显示为下划线效果。2.[ align=center]文字:在文字的位置可以任意加入您需要的字符,center位置center表示居中,left表示居左,right表示居右。5.[ color=red]文字:输入您的颜色代码,在标签的中间插入文字可以实现文字颜色改变。6.[ SIZE=数字]文字:输入您的字体大小,在标签的中间插入文..._discuzcode 大全
文章浏览阅读2.6k次。iOS中定时器有三种,分别是NSTimer、CADisplayLink、dispatch_source,下面就分别对这三种计时器进行说明。一、NSTimerNSTimer这种定时器用的比较多,但是特别需要注意释放问题,如果处理不好很容易引起循环引用问题,造成内存泄漏。1.1 NSTimer的创建NSTimer有两种创建方法。方法一:这种方法虽然创建了NSTimer,但是定时器却没有起作用。这种方式创建的NSTimer,需要加入到NSRunLoop中,有NSRunLoop的驱动才会让定时器跑起来。_ios nstimer
文章浏览阅读4.8k次,点赞17次,收藏51次。Linux的命令有几百个,对程序员来说,常用的并不多,考虑各位是初学者,先学习本章节前15个命令就可以了,其它的命令以后用到的时候再学习。1、开机 物理机服务器,按下电源开关,就像windows开机一样。 在VMware中点击“开启此虚拟机”。2、登录 启动完成后,输入用户名和密码,一般情况下,不要用root用户..._ls-lmore
文章浏览阅读4.1k次。1.登录MYSQL系统命令打开DOS命令框shengfen,以管理员的身份运行命令1:mysql -u usernae -p password命令2:mysql -u username -p password -h 需要连接的mysql主机名(localhost本地主机名)或是mysql的ip地址(默认为:127.0.0.1)-P 端口号(默认:3306端口)使用其中任意一个就OK,输入命令后DOS命令框得到mysql>就说明已经进入了mysql系统2. 查看mysql当中的._mysql -u user