注册
登录
首页
网站近况
会员
标签
统计
帮助
LUPA论坛
»
技术文档
»
JAVA
» ·关于大(巨)量信息并发对数据库操作的解决方案·
‹‹ 上一主题
|
下一主题 ››
发新话题
发布投票
发布商品
发布悬赏
发布活动
发布辩论
发布视频
打印
·关于大(巨)量信息并发对数据库操作的解决方案·
一叶孤剑
初来乍到
个人空间
发短消息
加为好友
1
#
发表于 2006-9-28 10:56
只看该作者
·关于大(巨)量信息并发对数据库操作的解决方案·
我的想法:
1:写一个类似中间件的后台控件,把“采集点”的大量并发信息写入缓存中,等满足一定时间和数据量的时候再统一批量提交数据库。
2:在这个过程中对于查询的要求先在缓存中查找,如果满足返回客户端,不满足再查询数据库返回客户端同时把信息暂存缓存中。
3:对于“采集点”的大量插入请求,在缓存中对数据库的主要采集表做表映射,并按照数据库对字段的要求做数据限制。在大量数据要求插入数据库的时候,先暂存缓存中。
我的想法是否可行,技术复杂度如何,细节如何实现,请各位高人指点。谢谢!
welcome.yygj@yahoo.com.cn
UID
25151
帖子
2
精华
0
积分
3
阅读权限
10
在线时间
0 小时
注册时间
2006-9-28
最后登录
2006-9-29
查看详细资料
TOP
webheat
初来乍到
个人空间
发短消息
加为好友
2
#
发表于 2006-9-28 13:59
只看该作者
你要准确定义一下海量信息, 实际上,多数DBMS在写操作时都会有个锁,你这样的操作实际意义在哪里还不清楚, 目前海量数据的处理在查询方面已经做得不错了. 思路跟你这里有些类似,也是利用缓存,memcached这个软件,你可以查一下,国内有的例子是多玩网,有60G数据,不知是否在你的海量范围内.
当你抱怨开源软件的时候,想想你为开源软件做了些什么。
UID
24248
帖子
10
精华
0
积分
6
阅读权限
10
在线时间
0 小时
注册时间
2006-8-29
最后登录
2008-6-3
查看个人网站
查看详细资料
TOP
一叶孤剑
初来乍到
个人空间
发短消息
加为好友
3
#
发表于 2006-9-29 17:15
只看该作者
主要是指大量并发插入数据库的问题。
UID
25151
帖子
2
精华
0
积分
3
阅读权限
10
在线时间
0 小时
注册时间
2006-9-28
最后登录
2006-9-29
查看详细资料
TOP
‹‹ 上一主题
|
下一主题 ››
控制面板首页
编辑个人资料
积分交易
积分记录
公众用户组
勋章
访问推广
基本概况
流量统计
客户软件
发帖量记录
版块排行
主题排行
发帖排行
积分排行
交易排行
在线时间
管理团队
管理统计