首页 > 其他 > 详细

简易全文搜索引擎设计

时间:2017-11-01 21:11:42      阅读:221      评论:0      收藏:0      [点我收藏+]

  最近利用空闲时间实现了一个简易的全文搜索引擎,主要是把学的东西练一下手,目前支持简单的单词搜索和基于用户点击实学习。其他部分还在继续开发(本文主要用以记录设计思路,完整代码等主要的做出来提交。)

1. 基本流程

技术分享

 

2. 主要模块

2.1  内容获取

  定时运行爬取程序

2.2 分词

  调用结巴分词开源包(https://github.com/fxsjy/jieba)

2.3 基本数据组织结构

  2.3.1 单词与URL存取 

    URL: id, url 
    Word: id, word
    urlConnetword: urlID, wordID

   2.3.2 DNN网络结构 

    Input_to_Hidden:  inputid, hiddenid
    Hidden_to_Output: hiddenid, outpudid
    举例:
    Input    ->      Hidden     -> output

    Word1
        -> Word1_to_word2_id -> URL(包含了Word1与Word2的URL)
    Word2 

 

3. 个性推荐(后续补充)

简易全文搜索引擎设计

原文:http://www.cnblogs.com/space-place/p/7768283.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!