炼数成金 大数据
订阅

大数据

走进Affinity:VMware开源数据库Affinity介绍
走进Affinity:VMware开源数据库Affinity介绍
Affinity是VMware公司在今年2月28日发布的一种新型的开源数据库系统,其设计思想借鉴了关系型数据库、面向对象数据库、文档型数据库、RDF/XML数据库等多种数据库系统的优点,具有灵活多样、方便易用、接口丰富等优点 ...
分类:   
百度和谷歌背后的云计算应用特性与优势
百度和谷歌背后的云计算应用特性与优势
每天使用的“百度”“谷歌”就是云计算的最好应用,问题是我们如何看待云计算在企业信息化的应用前景。我想就这个问题谈一下个人看法:1、云计算四个显著特点,云计算提供了最可靠、最安全的数据存储中心,用户不用再 ...
分类:   
混合云:云部署的先驱
混合云:云部署的先驱
凭借VMware公司和其他一些大厂商近期声明的推动,混合云已经越来越吸引公众的眼球了。混合云把公共的外部云和内部私有“云”(其实目前就相当于传统的内部IT环境)整合成更具功能性的解决方案。而混合云的“秘诀”就 ...
分类:   
Hadoop——Microsoft大数据战略的核心
Hadoop——Microsoft大数据战略的核心
众所周知,大数据浪潮正在渐渐的席卷全球的各个角落。而Hadoop正是这股风暴的动力之源。Microsoft更是史无前例的与Apache Hadoop社区合作。Microsoft此举就是希望利用自己在软件领域的优势构建一个打上Microsoft烙印 ...
分类:   
HBase coprocessor的分析
HBase coprocessor的分析
本文来自于NoSQLFan联合作者@koven2049,他在淘宝从事Hadoop及HBase相关的应用和优化。对Hadoop、HBase都有深入的了解,本文就是他对HBase coprocessor的一些分析,分享给大家。 原文地址:http://walkoven.com/?p= ...
分类:   
应用云平台的可用性——从新浪SAE看云平台设计
应用云平台的可用性——从新浪SAE看云平台设计
一、可用性如何定义 可用性(availability)是关于系统可供使用时间的表述,以不可用的时间为衡量指标。不可用时间越短,可用性越高。通常用n个9来描述。比如4个9的可用性,则是指一年中不可用时间在52分钟内,平均每 ...
分类:   
下一代Hadoop战略——数据即平台
下一代Hadoop战略——数据即平台
在上周的Strata大会上,与会者透露出有关下代Hadoop的消息。包括对6000节点的支持、配备高可用性的HDFS以及下一代MapReduce的特性等。而未来Hadoop替代操作系统的大胆想法也让我们充满无限遐想。
分类:   
谷歌算法揭秘:一次搜索请求平均往返2400公里
谷歌算法揭秘:一次搜索请求平均往返2400公里
3月12日消息,作为全球使用最广泛的搜索引擎,谷歌算法一直有一层神秘面纱。近日谷歌工程总监斯科特·霍夫曼向腾讯科技讲述谷歌算法幕后故事,称2011年有520多项改进,自2003年到现在,Google搜索已解决4500亿个搜索 ...
分类:   
小文件存储的方案对比:nginx、Redis、Moosefs
小文件存储的方案对比:nginx、Redis、Moosefs
大量小文件存储一直是典型的应用场景之一,下面是一篇转载文章,对大量小文件存储分别采用Nginx+NFS、Redis和分布式文件系统Moosefs三种方案的优缺点进行了分析。现在有3KW的数据,单条数据都很小的,如果按key-valu ...
分类:   
quickdb 另辟捷径高效解决NOSQL数据库 数据持久性问题
quickdb 另辟捷径高效解决NOSQL数据库 数据持久性问题
目前的NOSQL主要分为两种,一种是基于内存型的如redis、memcached,一种是基于磁盘型的如Tokyo Tyrant、Tokyo Cabinet、Berkeley DB。 redis、memcached这类内存型NOSQL。虽然读写效率很高,但是有一个大问题,就是数 ...
分类:   
用还是不用MongoDB?悲催用户 PK 10gen CTO
用还是不用MongoDB?悲催用户 PK 10gen CTO
前几天在HackNew上出现了一篇文章,标题很彪悍,叫《Don’t use MongoDB》,其内容也是直接表达了对MongoDB的不满,作者列举了MongoDB使用过程中遇到的种种问题。甚至上升到对其开发团队的质疑,表示他们可能只关心b ...
分类:   
hadoop的1TB排序
hadoop的1TB排序
1、1TB(或1分钟)排序的冠军作为分布式数据处理的框架,集群的数据处理能力究竟有多快?或许1TB排序可以作为衡量的标准之一。 1TB排序,就是对1TB(1024GB,大约100亿行数据)的数据进行排序。2008年,Hadoop赢得1T ...
分类:   
大数据能否成为网络入侵者的克星?
大数据能否成为网络入侵者的克星?
大数据给我们在对抗入侵方面带来新希望,觊觎敏感信息的攻击者们变得更容易落网。"大数据”领域的安全体系具备这样一种特点:只要企业能够将自身与安全相关的事件数据与业务信息仓库相结合,就完全可以通过对大数据 ...
分类:   
Hadoop生态图谱
Hadoop生态图谱
当下Hadoop已经成长为一个庞大的体系,貌似只要和海量数据相关的,没有哪个领域缺少Hadoop的身影,下面是一个Hadoop生态系统的图谱,详细的列举了在Hadoop这个生态系统中出现的各种数据工具。 这一切,都起源自Web数 ...
分类:   
淘宝海量数据库OceanBase:系统架构详解
淘宝海量数据库OceanBase:系统架构详解
无论从数据量还是访问量,OceanBase不再能够是一个单机系统,即使一台单机能服务高达几个TB的数据、提供几万QPS的服务能力,因此,分布式系统不可避免,然而,内部如何实现拆表(拆库)以及如何实现数据库的事务,成为 ...
分类:   
云服务扩张诱发IT环境新问题
云服务扩张诱发IT环境新问题
随着IT厂商加速采用了由亚马逊及其主要竞争对手推出的云服务,越来越多的厂商发现他们以无法有效控制服务成本。由于云服务在财务上的不透明导致了一些厂商不仅花了冤枉钱还过度供应了云服务,由此占用了为其他需求专 ...
分类:   
云中的网络:Open vSwitch带来的巨变
云中的网络:Open vSwitch带来的巨变
计算,存储,网络,安全,是构建任何大型数据中心都绕不过去的四个问题。云也不例外。在这个风起云涌的云时代,各厂商赛马般发布层出不穷的新技术,着实让我们目不暇接。很多人昨天刚玩过Xen,今天看到Redhat宣称KVM ...
分类:   
浅谈云计算数据中心对布线系统的影响
浅谈云计算数据中心对布线系统的影响
在谈云计算数据中心之前,我们要先了解一下,什么是云计算?云计算是指IT基础设施的交付和使用模式,指通过网络以按需、易扩展的方式获得所需的资源。 提供资源的网络被称为“云”。 “云”是IT的资源池,可以随时获 ...
分类:   
iPad轻松办公:iCloud Mail 同步记录
iPad轻松办公:iCloud Mail 同步记录
为什么要用 iPad 来办公?我是一名服务于媒体行业的产品经理。平时的工作中,除了利用思维导图整理思路和利用原型工具制作 apps 的展示以外,还有一些日常的工作要处理,譬如收发邮件、安排日程、做做幻灯展示之类。
分类:   
Intel Xeon八核处理器将会给服务器带来什么改变?
Intel Xeon八核处理器将会给服务器带来什么改变?
采用了服务器虚拟化的企业IT工作站现在可以用八核Intel Xeon CPU了,它能支持更多内存,扩展了10千兆以太网(10 GbE)的使用 实例。IBM、HP和Dell都引入了基于这个新芯片的服务器。最近Intel的Xeon E5-2600 CPU支持 ...
分类:   
大数据处理三大瓶颈:大容量、多格式和速度
大数据处理三大瓶颈:大容量、多格式和速度
Yahoo CTO Raymie Stata是领导海量数据分析引擎的关键人物。IBM和Hadoop将更多的精力专注在海量数据上,海量数据正在潜移默化的改变企业和IT部门。越来越多的大企业的数据集以及创建需要的一切技术,包括存储、网络、 ...
分类:   
如何在私有云中检测虚拟机蔓延情况?
如何在私有云中检测虚拟机蔓延情况?
一般人都会认为,私有云是最最安全的云计算模式,因为是由企业自身直接掌控云计算的安全控制运行。但是,如同众多理论或产品原型一样,其在现实世界中所面临实际问题的复杂性往往是难以预料的,也就是说新事物在带来 ...
分类:   
Redis曝新BUG:内存超限后的死循环
Redis曝新BUG:内存超限后的死循环
Redis曝出了一个新bug,如果你设定了Redis的maxmemory,并且这个Redis有Slave,那么当你的maxmemory限制达到后,就会出现死循环。具体原因和流程如下:Redis 达到了配置中设定的maxmemory限制,开始按LRU策略删除数据 ...
分类:   
Space Monkey推新型云存储服务:1TB硬盘搬到家
Space Monkey推新型云存储服务:1TB硬盘搬到家
创业公司Space Monkey今夏将推出一项新的云存储服务“Space Monkey”,其最大特点是将P2P概念应用到数据存储上,在用户家中放置1TB(1000GB)硬盘,允许用户通过移动应用或已连接的计算机进行数据访问。
分类:   
Hadoop MapReduce:数据科学家的探索之路
Hadoop MapReduce:数据科学家的探索之路
Forrester分析师James Kobielus在一篇关于“大数据”的博客中指出:“关键不在于采用什么方法,而在于能够使用任意可用工具或方法真正地解决问题。” 近几年在解决大数据问题的迫切感驱使下,许多组织的数据架构师开 ...
分类:   
使用Redis的五个注意事项
使用Redis的五个注意事项
下面内容来源于Quora上的一个提问,问题是使用Redis需要避免的五个问题。而回答中超出了五个问题的范畴,描述了五个使用Redis的注意事项。如果你在使用或者考虑使用Redis,可能你可以学习一下下面的一些建议,避免一 ...
分类:   
Hadoop——Microsoft大数据战略的核心
Hadoop——Microsoft大数据战略的核心
众所周知,大数据浪潮正在渐渐的席卷全球的各个角落。而Hadoop正是这股风暴的动力之源。Microsoft更是史无前例的与Apache Hadoop社区合作。Microsoft此举就是希望利用自己在软件领域的优势构建一个打上Microsoft烙印 ...
分类:   
IDC预测2015年大数据市场规模或达169亿美元
IDC预测2015年大数据市场规模或达169亿美元
北京时间3月8日早间消息,市场调研机构IDC周三发布一份报道,预测大数据(Big Data)市场将会进一步蓬勃发展。 该报告预测,大数据技术与服务市场将从2010年的32亿美元攀升至2015年的169亿美元。根据IDC的介绍,这将实 ...
分类:   
数据仓库≠数据集市
数据仓库≠数据集市
我们知道,决策支持系统(DSS)主要有两种实现方式,即建立一个数据集市或者一个数据仓库。到底哪一种更能满足决策支持的要求并且适合企业今后的发展,是近两年来学术界和有关供应商激烈争论的一个话题。在数据集市领域,主 ...
分类:   
IEEE预见全球云计算应用之路的障碍
IEEE预见全球云计算应用之路的障碍
IEEE的会员正在帮助全球各地各种规模的企业清除可能会拖慢这项创新技术应用进度的障碍,履行推动云计算进步的承诺。目前云计算系统显而易见的潜在收益正在被广泛讨论,包括:在IT基础设施的使用及维护方面显著的成本 ...
分类:   

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

 

GMT+8, 2018-8-17 15:18 , Processed in 0.242767 second(s), 19 queries .