JAVA开源大数据查询分析引擎有哪些方案
大数据查询分析是云计算中核心问题之一,自从Google在2006年之前的几篇论文奠定云计算领域基础,尤其是GFS、Map-Reduce、 Bigtable被称为云计算底层技术三大基石。GFS、Map-Reduce技术直接支持了Apache Hadoop项目的诞生。Bigtable和Amazon Dynamo直接催生了NoSQL这个崭新的数据库领域,撼动了RDBMS在商用数据库和数据仓库方面几十年的统治性地位。FaceBook的Hive项 目是建立在Hadoop上的数据仓库基础构架,提供了一系列用于存储、查询和分析大规模数据的工具。当我们还浸淫在GFS、Map-Reduce、 Bigtable等Google技术中,并进行理解、掌握、模仿时,Google在2009年之后,连续推出多项新技术,包括:Dremel、 Pregel、Percolator、Spanner和F1。其中,Dremel促使了实时计算系统的兴起,Pregel开辟了图数据计算这个新方 向,Percolator使分布式增量索引更新成为文本检索领域的新标准,Spanner和F1向我们展现了跨数据中心数据库的可能。在Google的第 二波技术浪潮中,基于Hive和Dremel,新兴的大数据公司Cloudera开源了大数据查询分析引擎Impala,Hortonworks开源了 Stinger,Fackbook开源了Presto。类似Pregel,UC Berkeley AMPLAB实验室开发了Spark图计算框架,并以Spark为核心开源了大数据查询分析引擎Shark。
php 哪些开源产品质量高,能学到东西的,最好是高...
建议看 yaf 和 phalcon 这两个都开源,特点是以扩展的方式运行程序,速度快,效率高。应对高并发大数据可以做读写分离,cdn缓存,数据库缓存,负载均衡,消息队列,硬件上可以提升CPU,加大内存和带宽。
windows下有没有开源的大数据处理工具
Win8系统可以支持用友软件的,以兼容模式安装就可以了。 WIN8软件兼容性安装和运行方法: 1、在程序右键-属性。 2、选择“兼容性。 3、在兼容模式下,勾寻以兼容模式运行这个程序”。 4、选择想要兼容的系统版本,确定即可。
全部评论