1. 论坛系统升级为Xenforo，欢迎大家测试！
    排除公告

装了一个开源的蜘蛛程序

本帖由 小叶 于 2005-10-25 发布。版面名称：源码讨论

  1. 小叶

    小叶 New Member

    注册:
    2005-09-04
    帖子:
    17,941
    赞:
    33
    http://www.92key.com/s/

    老外做的开源系统,
    国内汉化的一塌糊涂,,,除了界面外,
    连编码都没转换.
     
    #1 小叶, 2005-10-25
  2. wm_chief

    wm_chief New Member

    注册:
    2005-09-05
    帖子:
    17,890
    赞:
    46
    过后研究。帝国搜索引擎也将不久面市
     
    #2 wm_chief, 2005-10-25
  3. jcking

    jcking Well-Known Member

    注册:
    2005-08-30
    帖子:
    22,282
    赞:
    70
    哦,
     
    #3 jcking, 2005-10-25
  4. 小叶

    小叶 New Member

    注册:
    2005-09-04
    帖子:
    17,941
    赞:
    33
    你可以对这个进行二次开发就不错了,,
    开源的东西,,有一些技术已经很成熟,
    一些缩略,快照没有,还有一些关键字区分不好,,
     
    #4 小叶, 2005-10-25
  5. jcking

    jcking Well-Known Member

    注册:
    2005-08-30
    帖子:
    22,282
    赞:
    70
    :eek:
    :eek:
     
    #5 jcking, 2005-10-25
  6. wm_chief

    wm_chief New Member

    注册:
    2005-09-05
    帖子:
    17,890
    赞:
    46
    搜索好像不是很好。我主要研究蜘蛛织网。。。
     
    #6 wm_chief, 2005-10-25
  7. 小叶

    小叶 New Member

    注册:
    2005-09-04
    帖子:
    17,941
    赞:
    33
    好像就是OE技术,,而且速度和效率很低,,
    我怀疑这个开源程序的官方自己用Exe这样的实体软件做爬行..
     
    #7 小叶, 2005-10-25
  8. wm_chief

    wm_chief New Member

    注册:
    2005-09-05
    帖子:
    17,890
    赞:
    46
    机器开着，影响不大，不过用exe可实现多线程，效果会更好
     
    #8 wm_chief, 2005-10-25
  9. 小叶

    小叶 New Member

    注册:
    2005-09-04
    帖子:
    17,941
    赞:
    33
    但数据库膨胀急剧厉害...一个站爬下就几百M了..
     
    #9 小叶, 2005-10-25
  10. wm_chief

    wm_chief New Member

    注册:
    2005-09-05
    帖子:
    17,890
    赞:
    46
    嗯，是个比较大的问题
     
    #10 wm_chief, 2005-10-25
  11. 小叶

    小叶 New Member

    注册:
    2005-09-04
    帖子:
    17,941
    赞:
    33
    以前落伍一个叫bigfoot的开发过一个独立引擎的搜索,,
    还不是找人赞助带宽和服务器,,
    数据膨胀太快了,蜘蛛都不敢随便放出去咬人.
     
    #11 小叶, 2005-10-25
  12. 老林

    老林 New Member

    注册:
    2005-09-06
    帖子:
    10,580
    赞:
    36
    只要摸透中文分词　下一个百度也就来鸟
     
    #12 老林, 2005-10-25
  13. wm_chief

    wm_chief New Member

    注册:
    2005-09-05
    帖子:
    17,890
    赞:
    46
    主要要有钱砸。：）
     
    #13 wm_chief, 2005-10-25
  14. 3web.com.cn

    3web.com.cn New Member

    注册:
    2005-10-24
    帖子:
    337
    赞:
    0
    关注学习中。。。
    下回请教
     
    #14 3web.com.cn, 2005-10-25
  15. 老林

    老林 New Member

    注册:
    2005-09-06
    帖子:
    10,580
    赞:
    36
    拿下一个专利　钱马上跟着来　这东东喜欢的人多了
     
    #15 老林, 2005-10-25
(您必须注册并登陆后发新主题。)
Toggle Width
语言
简体中文