热门关键词:

纪念差一点改变世界的coreseek的错误原因及解决方法

添加时间:2019-07-03 11:54:31

来源:

浏览:





Coreseek 是一款中文全文检索/搜索软件,以GPLv2许可协议开源发布,基于Sphinx研发并独立发布,专攻中文搜索和信息处理领域,适用于行业/垂直搜索、论坛/站内搜索、数据库搜索、文档/文献检索、信息检索、数据挖掘等应用场景,用户可以免费下载使用


整理了coreseek/sphinx中文检索引擎的常见问题和解决方法,感兴趣的可以参考下


Coreseek 是一款中文全文检索/搜索软件,以GPLv2许可协议开源发布,基于Sphinx研发并独立发布,专攻中文搜索和信息处理领域,适用于行业/垂直搜索、论坛/站内搜索、数据库搜索、文档/文献检索、信息检索、数据挖掘等应用场景,用户可以免费下载使用


1. Unigram dictionary load Error:


词典路径设置不正确,所设置的路径下没有uni.lib;特别要注意使用相对路径时,是否正确对应到了实际的目录;测试是否存在,可以在命令行执行:dir charset_dictpath所设置的目录,检查是否存在!



2. Segmentation fault 或者 段错误:可能原因如下


词典路径设置不正确,或者自己构造的词典数据过多(建议不超过20w条);

max_matches参数设置过大,建议设置在10000以内;


3. iniparser: cannot open ......mmseg.ini:


mmseg.ini没有设置,请在提示的位置创建mmseg.ini,然后前往mmseg.ini参考设置所需要的参数即可!


4. FATAL: failed to parse config file ‘......csft.conf‘:


或者:FATAL: config file ‘......csft.conf‘ does not exist or is not readable   没有设置配置文件或者配置文件位置不正确,使用相对路径时需要特别注意(例如在bin目录中直接运行indexer);请使用“-c 配置文件完整路径/csft.conf”,来进行设置


5. WARNING: no such index ‘......‘, skipping.:


配置文件中没有找到对应的索引名称,请查看提示的名称是否设置!


6. ERROR: unknown key name ‘charset_dictpath‘ in ......:


当前运行的程序不支持或者没有安装启用中文分词,请参考安装说明进行操作以便支持中文分词


7. FATAL: index ‘......‘: unknown charset type ‘zh_cn.utf-8‘:


没有设置charset_dictpath,或者charset_dictpath设置的路径下没有uni.lib;或者使用的不是coreseek。


8. Windows下面出现"应用程序错误:应用程序无法正常启动(0x????????)。请单击”确定“关闭应用程序。":(如下图所示)


此时需要下载安装Python2.6 Windows (x86);请使用x86版本,如果使用64位版本的Python将无法正常运行。


技术分享


9. 编译时错误提示:undefined reference to:


posixmodule.c:(.text+0x367e): undefined reference to `forkpty‘

posixmodule.c:(.text+0x3714): undefined reference to `openpty‘


启用Python数据源支持时,没有按照提示设置LIBS,请查看安装指南Python数据源部分设置LIBS,然后重新configure后编译安装


10. 编译时错误提示:typedef unsigned int DWORD


/usr/local/mmseg3/include/mmseg/csr_typedefs.h:64: 错误: 相互冲突的声明‘typedef unsigned int DWORD’

/usr/include/sqltypes.h:97: 错误: ‘DWORD’早先被声明为‘typedef long unsigned int DWORD’


解决方法:vi /usr/local/mmseg3/include/mmseg/csr_typedefs.h,到64行,注释该行,保存退出重新编译即可!


11. failed to open ....spl或者FATAL: no valid indexes to serve或者类似错误提示:


首先,执行命令:dir 提示的文件,检查提示的文件是否存在;

其次,执行命令:dir 提示的文件所在目录,检查提示的文件所在目录是否存在;

然后,请确认是否执行了indexer并正确建立了索引;

特别要注意,要在出现以上提示后,马上执行上面的命令检查;

如果,使用相对路径时,要仔细检查是否正确对应到了实际的目录;


12. Windows下面出现"应用程序错误:应用程序无法正常启动(0x????????)。请单击”确定“关闭应用程序。":(如下图所示)


技术分享

如果使用coreseek 3.x,此时需要下载安装Microsoft Visual C++ 2005 Redistributable Package (x86,2.6M大小);请使用x86版本,如果使用64位版本的将无法正常运行。

如果使用coreseek 4.x,此时需要下载安装Microsoft Visual C++ 2008 Redistributable Package (x86,1.7M大小);请使用x86版本,如果使用64位版本的将无法正常运行。


13. 搜索时出现:unknown local index ‘索引名称‘ in search request:


该提示表示Query("搜索字符串","索引名称")时的第二个参数-索引名称-在配置文件中不存在,请仔细核对!或者将其修改为“*”,表示在所有索引中搜索!


14. Windows2003:The Application failed to initialize properly ( 0xc0150002 )或者“应用程序错误:应用程序无法正常启动(0x????????)。”


可以安装:Microsoft Visual C++ 2005 SP1 Redistributable Package (x86),进行测试,下载地址:http://www.microsoft.com/downloads/details.aspx?familyid=200B2FD9-AE1A-4A14-984D-389C36F85647&displaylang=zh-cn


15. Query()查询后没有结果?


如果是PHP环境,请使用


print("<pre>");

print_r($cl->GetLastError());

print_r($cl->GetLastWarning ());

print_r($res);

print("$lt;pre>")

来输出当前状态并获取提示信息。其中$cl表示SphinxClient对象实例,$res表示Query()的返回;其他语言类似处理。


16. 索引时提示:FATAL: out of memory (unable to allocate ?????? bytes)


该提示表示当前环境下,可以使用的内存不足够;可能是因为其他程序占用内存较多导致可用内存太少;也有可能是因为配置中mem_limit设置太大。


17. searchd启动时提示:bind() failed on ......, retrying...


该提示表示已有其他搜索服务运行,或者有其他程序占用了配置文件中设置的端口;

如果是Linux/BSD环境,可以通过ps auxww | grep searchd查看当前运行的searchd程序,使用kill杀灭无需使用的进程;

如果是Windows环境,可以使用任务管理器查看当前运行的程序,并结束无需使用的程序。


18. Windows下安装为系统服务,启动时出现1067错误;或者启动出现错误:FATAL: failed to create pid file


该问题出现的原因比较复杂,可能与配置有关,也可能与Windows自身环境有关(Windows自己都可能出现内存错误等)。有可能的解决方法:

将配置文件中的所有路径设置,修改为绝对路径,路径不得包含中文,也不得包含空格,路径分隔符使用“/”而不是“”,例如:应该使用c:/usr/local/coreseek/etc/,而不使用c:usrlocalcoreseeketc


19. 命令行search搜索结果的字段中出现乱码或者???怎么办:


首先,该乱码只是显示乱码,对搜索不产生任何影响,只是因为mysql默认字符集导致查询结果读取数据显示出来不正确;

然后,如果使用的是MySQL4.1、MySQL5.0.x、MySQL5.1.x,请设置my.cnf(Linux/BSD)或者my.ini(Windows),在[client]、[mysql]、[mysqld]的配置段下面,设置或者加上:

default-character-set=utf8

接着,重启mysql服务,继续查询即可正确显示。

注意:Windows需要按照Windows系统安装测试说明文档中方式正确查询和显示UTF-8字符。


20. 索引或者查询时提示:no such filter attribute ‘


请仔细查看属性说明,请确保你调用的属性或者字段名使用"sql_attr_类型"设置了。


21. 编译时,出现 DWORD 错误:


如果编译中出现如下错误:

DWORD定义冲突: /usr/local/mmseg3/include/mmseg/csr_typedefs.h:64: 错误: 相互冲突的声明‘typedef unsigned int DWORD’

/usr/include/sqltypes.h:97: 错误: ‘DWORD’早先被声明为‘typedef long unsigned int DWORD’

解决方法:vi /usr/local/mmseg3/include/mmseg/csr_typedefs.h,到64行,注释该行,保存退出重新编译即可!


22. 索引或者查询时提示:ERROR: invalid token in 配置文件 line 1 col 1.:


该提示表示当前的配置文件的编码不是UTF-8(无BOM头)格式,无法正确解析,请使用编辑软件打开配置文件,另存为UTF-8(无BOM头)格式;

错误的编码格式包括:Unicode、Unicode BOM、Unicode big endian、Unicode 低位在前、UTF-8 + BOM、UTF-8 Signature、UTF-8 包含签名等;

特别注意:Windows自带的记事本(Notepad)或者写字板(WordPad)无法正确保存为所需格式,请勿使用其编辑配置文件;

推荐编辑器:点击下载Notepad2绿色版;使用Notepad2打开配置文件,依次选择:“文件”菜单--“编码”--“UTF-8”,然后保存文件(快捷键CTRL+S)即可。


23. ERROR: connection to localhost:**** failed (errno=111, msg=Connection refused).:


原因很简单,可能为:1. searchd没有启动;2. 连接的IP和端口不正确;3. 跨服务器时,检查防火墙是否允许连接。


24. 编译时提示:libtool: unrecognized option `--tag=CC‘ ...... make[2]: *** ......:


系统上老版本libtool的配置影响了libtool的正常使用,执行mv /usr/share/libtool /usr/share/libtool_old ; ln -s /usr/local/share/libtool /usr/share/libtool,然后再次解压coreseek(先删除旧的),并重新进行安装编译过程。


25. 搜索时提示:searchd error: client version is higher than daemon version ......:


该问题说明你所使用的SphinxClient接口,与服务器端的版本不一致。需要使用安装Coreseek/Sphinx的包里面的api/目录下对应的Client库。


26. 编译时提示:tokenizer_zhcn.h:26:30: error: SegmenterManager.h:


该问题说明编译mmseg的时候,没有执行:$ ./bootstrap,请前往编译安装指南查看具体步骤。


27. 编译时提示:undefined reference to `libiconv‘:


该问题说明当前环境的iconv没有安装或者没有正确设置,请前往编译安装指南查看具体解决方法。


用户名 Name
评论 Comment

软件开发  相关内容

——
14

2021-07

OracleNetsuite的建设标题

到目前为止,我们已经为我们OracleNetsuite的标题创建了导航栏。完成标题的下一件事是在图像上方包含图像和文本,如下面的屏幕截图所示:让我们再次查看index.html 文件中标题的部分代码。代码中突出显示的部分显示了标题的图像菜单:要完成图像菜单,我们首先需要在 id … [了解更多]

14

2021-07

OracleNetsuite响应式和移动…

响应式网站:响应式网站是旨在适合所有类型的设备并调整网站布局以最适合屏幕尺寸的网站。无需制作任何其他设备版本的网站以适应小型设备。移动网站:移动网站是专为适应手机、平板电脑等特别小的设备屏幕而设计的网站。需要制作网站的桌面版本以适应移动设备特定的桌面屏幕。响应式网站和移动网站的区… [了解更多]

08

2021-06

OracleNetsuite ​Doc…

OracleNetsuitePython 提供了许多分发 Python 项目的方法。其中一种方法是使用一种称为 Docker 的重要技术。Docker 是一个开源应用程序,允许管理员使用容器创建、管理、部署和复制应用程序。它基本上是一个平台,使开发人员能够通过将应用程序放入容器中… [了解更多]

22

2021-05

OracleNetsuiteERP在公开…

财务负责人戴了两顶帽子:一是遵守法规,以确保公司的行为和会计正确无误,并遵守公司开展业务的不同司法管辖区的法规;二是遵守法规。一种战略,确保公司达到财务里程碑和成功指标。当一家公司上市时,包括通过特殊目的收购公司(SPAC)上市时,这两个角色尤其重要。Oracle NetSuit… [了解更多]

08

2021-03

星空RPA智能链接方案

公司财务人员中记账人员的工作内容:1、从钉钉中下载审批完成的8种审批类型的单据数据,包含合同付款、费用报销等2、记账人员根据付款的性质及费用归属,把记账分成6种形式:合同付款(工程、成本)、合同付款(其他)、非合同付款(工程、成本)、非合同付款(其他)、费用报销(工程、成本)、费… [了解更多]

关注

深信服

  • 地 址:成都市人民南路四段成科西路三号 863国家孵化园
  • 电 话:18215 660330
  • 手机:18215 660330
  • 传 真:18215 660330
  • 邮 箱:179001057@qq.com
  • 邮政编码:610000