大数据分析要求会java吗,搞 Java 最重要的是什么?毫不夸张地说,掌握和了解进行大数据分析需要用到java的什么知识??,基本就能走遍天下都不怕了!
建议采用缓存处理,按照你说的这种数据量,基于redis的缓存完全可以满足,存取速度可以10W+的,另外,拟采用的hashMap 是还是其他,页面展示是增量查询还是直接所有的再查询一次,socket数据接收你是用的netty还是mina,这都需要经过仔细的斟酌考虑设计的。有这么大的并发的需求,完全可以考虑做分布式集群的,估计这只是领导想要的目标吧。第一:考虑适当延长更新时间间隔第二:在不延长时间间隔的情况下,采用事务处理或批处理,10W条数据不是很多,也不是很大,redis在1s内完全可以全部处理完第三:尽量不要采用普通的关系型数据库如Oracle、MySQL,即便采用,也要考虑定时批量入库,建议直接采用 内存数据库第四:不建议直接用Hadoop,毕竟Hadoop是高延迟的分布式系统,其功能主要用于离线数据的处理,你的应用应该属于低延迟的系统。
虽说掌握和了解了进行大数据分析需要用到java的什么知识??,能走遍天下,但也要不断去学习新的知识,更多的Java知识,请联系客服获取。
只要一个电话
我们免费为您回电