全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

IP归属甄别会员请立即修改密码
查看: 8843|回复: 31
打印 上一主题 下一主题

用了全文索引,效果果然不一样了!

[复制链接]
跳转到指定楼层
1#
发表于 2016-2-28 08:37:27 | 只看该作者 回帖奖励 |正序浏览 |阅读模式
之前做DHT时没有使用全文索引软件,直接对数据库进行搜索查询,用过MySQL,用过MongoDB,效果都差不多,性能很差,一次查询要几秒甚至十几秒!

之后使用全文索引,用的elasticsearch,配合mongodb,效果一下子就明显了,在13W数据中查询出3W的数据只耗时199ms,强了太多太多了!

不过还是有问题,就是数据资源占用问题,因为用了mongodb存储一份,然后使用elasticsearch再存储一份,导致存在两份数据,资源占用就大了很多很多!

新的DHT演示:http://btkuaiche.com
32#
 楼主| 发表于 2016-3-5 21:37:02 | 只看该作者
77sky 发表于 2016-3-5 07:16
不是从种子库获取的?

哦,你是说种子文件啊,这个是从种子库取
31#
发表于 2016-3-5 07:16:28 | 只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
30#
发表于 2016-2-28 20:50:13 | 只看该作者
bt快车,送上一ip
29#
 楼主| 发表于 2016-2-28 20:42:29 来自手机 | 只看该作者
77sky 发表于 2016-2-28 20:25
怎么获取的种子

dht网络啊
28#
发表于 2016-2-28 20:25:08 来自手机 | 只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
27#
 楼主| 发表于 2016-2-28 16:41:05 | 只看该作者
楼下节操掉满地 发表于 2016-2-28 14:43
数据存es里就好了,  反正和mongodb一样都是吃内存大户,  单机跑都没什么可靠性, 就不用重复设施了. ...

这个主要是我测试了一下,不知道是不是我提取的方法有问题,我单数据提取时,es比mongodb要慢好多
26#
 楼主| 发表于 2016-2-28 16:27:56 | 只看该作者
fuckjp 发表于 2016-2-28 14:12
楼主你不想混了啊

没设置过滤,有这个功能,但是没有使用~
25#
发表于 2016-2-28 14:43:19 | 只看该作者
数据存es里就好了,  反正和mongodb一样都是吃内存大户,  单机跑都没什么可靠性, 就不用重复设施了.
24#
发表于 2016-2-28 14:12:44 | 只看该作者
QQ截图20160228142530.gif (10.74 KB, 下载次数: 0)

楼主你不想混了啊
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-9-25 23:41 , Processed in 0.067522 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表