平台终端吞吐量每秒达到2万设备,每秒插入2万条数据技术方案

问题描述

平台终端吞吐量每秒达到2万设备,每秒插入2万条数据技术方案 5C
目前由于平台要处理2万设备,每秒能处理2万条数据,之前使用ActiveMQ,不能达到需求了,之前测试rabbitMQ,Redis 之类,在测试机子上面都不能达到需求,本地测试    模拟1000个线程并发处理,一个线程处理1000插入数据,始终未能达到!不知道大家有没什么好的解决方案能达到这种需求的?

解决方案

单机很难达到这样的吞吐量,需要使用负载平衡了。

解决方案二:
同多台机器分布式处理吧。

解决方案三:
hadoop等等...

时间: 2024-09-08 11:06:18

平台终端吞吐量每秒达到2万设备,每秒插入2万条数据技术方案的相关文章

100万条数据存入mongo,通过java代码实现,要求时间在5秒之内,或者越快越好

问题描述 100万条数据存入mongo,通过java代码实现,要求时间在5秒之内,或者越快越好 通过java代码将oracle中的100万条数据查询出来,然后直接插入mongo数据库中,要求时间越短越好.我从oracle中将100万条数据查询出来花费了3秒左右.希望存入mongo的时间在5秒以内.请问各位大神有没有好的办法,谢谢. 解决方案 你可以买一个性能好一些的电脑,这样会比较快的. 解决方案二: 你把oracle查询到的数据分下类,优化时间在2秒内,存到Mongo可能会快点,最近公司也是遇

极限挑战—C#100万条数据导入SQL SERVER数据库仅用4秒 (附源码)

原文:极限挑战-C#100万条数据导入SQL SERVER数据库仅用4秒 (附源码)     实际工作中有时候需要把大量数据导入数据库,然后用于各种程序计算,本实验将使用5中方法完成这个过程,并详细记录各种方法所耗费的时间.     本实验中所用到工具为VS2008和SQL SERVER 2000.SQL SERVER 2008,分别使用5中方法将100万条数据导入SQL 2000与SQL 2008中,实验环境是DELL 2850双2.0GCPU,2G内存的服务器.感兴趣的朋友可以下载源代码自己

2017阿里双11交易创建峰值 32.5 万笔/秒!

世界互联网史上 最大规模的并发流量洪峰 我们成功扛住了! 1小时00分49秒 ,2017天猫双11全球狂欢节成交额超571亿,超2014天猫双11年全天. 交易创建峰值  32.5 万笔/秒 支付成功峰值  25.6 万笔/秒 3分钟突破100亿! 1小时突破550亿! 双11快乐!!! 文章整理自阿里技术.天猫技术

云平台+终端 车载信息服务革命悄然打响

自从车载导航一体机这个行当里面提出了专车专用这种概念之后,国内品牌用不到一年的时间打败了由日本人占据的后装车载影音市场.经过几年的发展,国内的车载一体机品牌也越来越多,国内市场的竞争也越来越大.正所谓生产力到达一定的极限的时候,也就是一场革命的到来.这次,他们把眼光放在了云平台+终端这种模式上面. 云平台与终端 车载信息服务正在革命中 云平台与终端 车载信息服务正在革命中 云平台与终端 车载信息服务正在革命中   何为云平台呢?顾名思义,这种平台允许开发者们或是将写好的程序放在"云"里

大数据技术公司百分点今日宣布完成第二轮1000万美元融资

摘要: 新浪科技讯 7月25日下午消息,大数据技术公司百分点今日宣布完成第二轮1000万美元融资,投资方为东方星空创投和IDG资本,百分点同时发布新战略,由提供大数据技术进入到大数据管 新浪科技讯 7月25日下午消息,大数据技术公司百分点今日宣布完成第二轮1000万美元融资,投资方为东方星空创投和IDG资本,百分点同时发布新战略,由提供大数据技术进入到大数据管理与应用领域. 成立4年的百分点一直从事于大数据技术的创新,2011年7月获得IDG资本和名信中国成长基金720万美元的投资,百分点创始人

从数据来源、数据生态、数据技术、数加平台等方面,漫谈阿里大数据

目前人人都在谈大数据,谈DT时代,但是,大数据是什么,每个人都有自己的一个看法,好比盲人摸象,每个都认为自己摸到是真正的大象.我也担心我所看到的,只是大数据的冰山一角,毕竟,将引领整个人类下一次变革的大数据,不是几篇文章就能说清楚的. 一,DT时代 大数据这个概念,其实在上世纪九十年代就有人提出来了,当时希望通过将所有零散的数据归并起来,然后进行数据挖掘,以看到以前存在的问题,去预测未来几年的趋势,来指导商业决策.比如保险行业,人寿保险会通过大数据的统计计算,根据人均寿命来计算保费与回报率. 这

乐视TV决定在2万台现货追加1.3万台X50 Air超级电视

4月21日消息,明日中午12点,首批2万台le4K乐视TV超级电视X50 Air将在乐视商城(shop.letv.com)开放购买.由于乐迷需求火爆,X50 Air预约数快速突破10万,远超首批2万台现货的供应量,经过供应链的努力,乐视TV决定在原有2万台现货的基础上追加1.3万台X50 Air超级电视.其中,全配版增加供应5000台,张艺谋<归来>艺术版增加8000台.乐视TV超级电视X50Air预约火爆官方追加1.3万台现货4月9日,4K乐视TV超级电视X50Air开启预约后,总预约人数快

“919乐迷节”当天乐视商城超级电视销量10万台,配件超4万件

总销售金额4亿元,总参与人次超800万.超级电视创中国电视行业单日销售量.销售额纪录,乐视商城创中国B2C商城单日单品牌电视销售量.销售额纪录.乐视商城是智能硬件第一电商平台,基于乐迷兴趣及乐视生态的社会化电商平台,中国十大B2C电商网站.与传统渠道性电商不同,乐视TV坚持按BOM定价,采用CP2C的模式实现厂商合一,做到砍掉营销成本.渠道成本和不合理的品牌溢价,全流程直达用户,开创基于产业链垂直整合的"人人电商"模式.乐视以互联网模式重新定义电视,超级电视不仅是台电视,更是全球唯一的

豌豆荚视频搜索其索引内容从去年的 58 万增加至今年的 242 万

摘要: 就在上周,我参与了对豌豆荚原 Google 班底中:CEO 王俊煜.产品副总裁刘亚平的专访,他们回顾了过去一年里国内外应用内搜索领域各公司动作的同时,透露了豌豆荚应用内搜索.搜索 就在上周,我参与了对豌豆荚原 Google 班底中:CEO 王俊煜.产品副总裁刘亚平的专访,他们回顾了过去一年里国内外应用内搜索领域各公司动作的同时,透露了豌豆荚应用内搜索.搜索结果消费内容接入的最新进展和发展方向. 临走时,豌豆荚市场负责人告诉我,开这个发布会其实是因为国内媒体对应用内搜索领域并没有太多关注.