有人对bdb比较熟不？ <- 中国开发网

CNDEV.ORG

当前在线

论坛

CBD
- 程序员情感CBD
- 程序员见面交流会
CBD开发区
- Java/J2ME
- .NET/C#
- 数据库
- Delphi/BCB
- Visual C
其它
情感
游戏
- CNDEV-CS/WOW
- 浩宇长空
生活
论坛系统

中国开发网: 论坛: 程序员情感CBD: 贴子 709067

virushuo：有人对bdb比较熟不？

[阅读: 411] 2009-03-31 07:23:58

我有3800W记录要放进去。开始还比较快，后来在持续变慢。

10小时写了80w进去，太少了。我正在找原因，有人对这个有经验吗？

相关信息:

有人对bdb比较熟不？ (66字) (virushuo [410] 2009-03-31 07:23)
- 试试临时关掉索引，插完再重建一下 (空) (pinxue [347] 2009-03-31 07:36)
  - PS, 3800w还用 bdb？ (空) (pinxue [348] 2009-03-31 07:37)
    - 恩，那用什么合适呢？我也没想出来别的。都是小数据，4k左右一个。 (空) (virushuo [361] 2009-03-31 07:48)
      - 显然应该用ini (空) (好望角 [320] 2009-03-31 07:50)
        haitao大师...... (空) (virushuo [309] 2009-03-31 07:53)
      - 猴子有经验，问他 (79字) (pinxue [345] 2009-03-31 07:59)
        我觉得ini就挺好的啊 (25字) (好望角 [323] 2009-03-31 08:04)
        他们用的东西跟我不一样吧，他们应该是顺序读取为主，我是典型的key-value的需求。hash库最合适。 (空) (virushuo [375] 2009-03-31 08:05)
        如果只是简单的操作，HASH数据库也不如自己的HASH表快呀。 (空) (好望角 [358] 2009-03-31 08:08)
        还是需要个库的，不然恢复，更新， log和热备都很麻烦。 (空) (virushuo [350] 2009-03-31 08:15)
        那是，要求不同。 (29字) (好望角 [329] 2009-03-31 08:16)
        http://tokyocabinet.sourceforge.net/index.html (57字) (乌烟 [377] 2009-03-31 08:30)
        目前看起来是满足你的需求的 (空) (乌烟 [273] 2009-03-31 08:31)
        这个和bdb是一样的。他的效率（据说)高一些，但本质没区别。另外这个日本人同时开的项目太多了，我有点不太敢信... (空) (virushuo [418] 2009-03-31 08:41)
        这个玩意儿有实际应用，爱词霸社区在使用，效果不错。 (空) (乌烟 [320] 2009-03-31 09:02)
        我也准备用这个来替代memcached (空) (乌烟 [369] 2009-03-31 09:03)
        呵呵，兼容memcached的client api，平滑过渡，我喜欢。 (空) (乌烟 [314] 2009-03-31 09:05)
        memcached那个没什么平滑的..一共就那么点东西..不平滑也无所谓。 (空) (virushuo [311] 2009-03-31 09:24)
        你这个流量太小了，而且应用太单一。不够有说明性。 (空) (virushuo [319] 2009-03-31 09:20)
        汗，那不是得自己写一套。。。 (空) (乌烟 [386] 2009-03-31 09:53)
        轮子，轮子 (空) (sealw [278] 2009-03-31 09:57)
        key-value还有啥复杂应用。。。如果我这边替换成功可能还有点说明性。 (空) (乌烟 [346] 2009-03-31 09:55)
        我这边最近一次统计是 500次/秒访问 (空) (乌烟 [331] 2009-03-31 10:01)
        另外，这玩意儿可以比较容易地做负载均衡。 (空) (乌烟 [294] 2009-03-31 09:06)
        79字，怎么没有内容了？ (158字) (haitao [352] 2009-03-31 08:07)
        难道是骗点击的方法？ (空) (virushuo [345] 2009-03-31 08:14)
        二喜又做法了吧 (空) (pinxue [294] 2009-03-31 08:27)
        有啊，你看不到吗？ (107字) (玉楼 [353] 2009-03-31 08:15)
        是不是都是空格？？ (空) (haitao [373] 2009-03-31 08:27)
      - vsam (空) (dead_lee [314] 2009-03-31 09:19)
- 发现的第一个问题：hashtable的默认大小太小，只有30w，扩大之后快了不少。原来估计就在不停的重新分配bucket，数据越多倒腾一次成本越大... (空) (virushuo [578] 2009-03-31 08:43)
  - 这是个大问题，如果用可持久化的内存数据库来替代呢？ (空) (乌烟 [518] 2009-03-31 09:04)
    - sina他们搞的那个memcachedb不错，memcached+bdb持久的方案。但是我确实是需要个硬盘存储，而不是内存存储。 (44字) (virushuo [596] 2009-03-31 09:21)
      - 日本人做的这个和sina那个有比较。 (空) (乌烟 [382] 2009-03-31 09:52)
      - sina那个日志文件比这个大很多，同步数据量大，主从时会受影响。 (空) (乌烟 [372] 2009-03-31 10:02)

欢迎光临本社区，您还没有登录，不能发贴子。请在这里登录

页面内容处理时间: 0.106 - 614192