当大数据遇上SSD

大数据时代,人们越来越清楚地意识到数据中蕴藏的价值。海量数据的拥有者——运营商,银行,物流公司等等——都在积极地寻求方法利用手中的数据。然而,爆发式增长的数据量正在超出传统数据库的处理能力。为了应对这样的增长,企业需要对数据库进行升级。基于小型机DB2或Oracle架构的传统数据库升级依靠纵向扩展,也就是通过提升服务器本身的性能来提高处理能力。更大更强的服务器价格高昂,但性能的提升却是有限的。企业

详情

八大行业Hadoop大数据应用回顾和展望

任何新技术的发展都会经历一个从被公众了解到最终普遍应用的过程。大数据技术作为一个新兴的数据处理技术,经过了近十年的发展,刚刚开始在各个行业得到应用。但从媒体和公众视野中,大数据技术总是带有神秘的色彩,似乎有着挖掘财富和预测未来的神奇力量。广泛流传的大数据应用案例包括Target超市根据女孩的购物历史判断是否怀孕,信用卡公司根据用户在不同时空的购物行为预测客户的下一个购买行为,等等。大数据技术也为我

详情

国内Hadoop大数据厂商星环科技喜获软件开发国际认证:CMMI3

近日,国内Hadoop大数据厂商星环科技喜获软件业高等级认证:CMMI3。近年来,很多软件企业纷纷实施CMMI管理模式,CMMI里面所有的要求源自于成功企业的最佳实践,它的先进性不言而喻,而星环科技通过规划和努力顺利获得这极具有含金量的证书,意味着其良好的软件研发能力,每个产品能高质量,低成本,按期限地完成,通过度量和分析开发过程和产品,建立起公司的效率指标;从企业的管理的角度来说,意味着星环拥有

详情

让SQL用户装上hadoop大数据的引擎

2015年4月16日,第六届中国数据库技术大会(DTCC)在北京震撼登场。大会以”大数据技术交流和价值发现”为主题,吸引了2500多人参加,100多名数据库技术专家来分享技术,堪称数据库领域国内最大规模的专业会议。星环科技作为唯一受邀的大数据平台商参展,CTO孙元浩发表了题为“大数据基础技术发展的两大方向和最新研发成果”的主题演讲。

大数据产品最新测试基准看哪家(TPC-H or TPC-DS)?

随着开源Hapdoop、Map/Reduce、Spark、HDFS、HBASE等技术的商用化,大数据管理技术得到了突飞猛进的发展。一般来说,大数据具有3V特性,即Volume(海量)、Velocity(高速)和Variety(多样)[1]。TPC联合主席、Cisco高级工程师Raghunath Nambiar进一步认为大数据还面临Value(价值)和Veracity(精确)的挑战。如何客观地比较不

详情

如何构建安全的Kafka集群

Kafka是由LinkedIn设计的一个高吞吐量、分布式、基于发布订阅模式的消息系统,使用Scala编写,它以可水平扩展、可靠性、异步通信和高吞吐率等特性而被广泛使用。目前越来越多的开源分布式处理系统都支持与Kafka集成,其中Spark Strea-ming作为后端流引擎配合Kafka作为前端消息系统正成为当前流处理系统的主流架构之一。 然而,当下越来越多的安全漏洞、数据泄露等问题的爆发,安全正

详情