北京公司网站设计电话,医院网站备案,新网网站空间购买,黄浦网站建设公司在很多领域里面#xff0c;在现在这个时代下面#xff0c;很多公司产生的数据太多了#xff0c;数据量太大了。用原来的技术去做#xff0c;有种捉襟见肘的感觉#xff0c;要么在性能上面#xff0c;要么在速度上面遇到了瓶颈#xff0c;这个时候需要新的技术来解决在现在这个时代下面很多公司产生的数据太多了数据量太大了。用原来的技术去做有种捉襟见肘的感觉要么在性能上面要么在速度上面遇到了瓶颈这个时候需要新的技术来解决我们能想到的比如用高并发1M的数据单机来处理就够了如果1000M数据一台机子一个节点就可能做不了。 可能考虑集群分布式系统。但是分布式系统是很难编写的要考虑的问题很多。线程进程网络通信等等很多问题。业务逻辑本来很简单但因为考虑到分布式系统的协调问题程序变得非常复杂在传统的技术上花费太大。 比如 count()order by的业务几百兆Mysql可以搞定几十TBMysql和Oracle都扛不住。
------------------------------- 于是hadoop框架就出现了就像struts因为MVC而出现一样。 hadoop就是个框架不是什么圣神的东西多了不起的东西它就是个框架为了解决一个特定领域的问题而出现这个特定领域就是海量数据处理。
------------------------------- hadoop不是数据库是很多框架组成的生态系统。 hadoop不是在数据库里mysqloracle处理hadoop是把数据导成文本文件或直接保存为文本文件对文本文件进行处理 hadoop也有数据就是NOSQL非关系型数据。
相关文章: