炼数成金 大数据
订阅

大数据

EMC为企业提供基于Hadoop的大数据分析
EMC为企业提供基于Hadoop的大数据分析
• EMC今天针对Apache Hadoop开源软件作为企业就绪的大数据工具,宣布了一项有关软件发布、集成和支持的全面战略。   • EMC推出了世界上第一个定制的、高性能的、Hadoop数据协同处理设备,面向结构化和 ...
分类:   
Hadoop命令手册
Hadoop命令手册
所有的hadoop命令均由bin/hadoop脚本引发。不指定参数运行hadoop脚本会打印所有命令的描述。 用法:hadoop Hadoop有一个选项解析框架用于解析一般的选项和运行类。 命令选项 描述 --config confdir 覆盖缺省配置 ...
分类:   
使用 Linux 和 Hadoop 进行分布式计算
使用 Linux 和 Hadoop 进行分布式计算
Hadoop 是最受欢迎的在 Internet 上对搜索关键字进行内容分类的工具,但它也可以解决许多要求极大伸缩性的问题。例如,如果您要 grep 一个 10TB 的巨型文件,会出现什么情况?在传统的系统上,这将需要很长的时间。但 ...
分类:   
大数据时代 Hadoop解决数据处理三瓶颈
大数据时代 Hadoop解决数据处理三瓶颈
越来越多的大企业的数据集以及创建需要的一切技术,包括存储、网络、分析、归档和检索等,这些被认为是海量数据。这些大量信息直接推动了存储、服务器以及安全的发展。同时也是给IT部门带来了一系列必须解决的问题。 ...
分类:   
Hadoop Streaming
Hadoop Streaming
Hadoop streaming是Hadoop的一个工具, 它帮助用户创建和运行一类特殊的map/reduce作业, 这些特殊的map/reduce作业是由一些可执行文件或脚本文件充当mapper或者reducer。例如: $HADOOP_HOME/bin/hadoop jar $HADOO ...
分类:   
Redis几个认识误区
Redis几个认识误区
此文的作者是新浪微博平台架构师杨卫华(timyang)大师,如果关注了新浪一些牛人微博的同学应该知道,timyang前段时间正在对Redis进行一些研究和测试,也分享出了不少成果。下面一篇文章相信是timyang这段时间对Redi ...
分类:   
Redis事件驱动库结构
Redis事件驱动库结构
本文翻译自Redis官方对事件驱动库的结构描述,英文原文点这里,由Day Day Up博客原创,文章写的时间已经比较长了,今天才被NoSQLFan挖出来,实属难得。 下面就是其原文: 文章地址:blog.ddup.us 这是一篇翻译文章 ...
分类:   
Redis SPOP不随机的问题
Redis SPOP不随机的问题
Redis 的 sets 结构有一个SPOP方法,方法描述为“Remove and return a random member from a set”,方法说明是随机的。但实际上通过测试表时此方法并不如说的这样随机,比如你将1,2,3,4四个数字用SADD添加到某一 ...
分类:   
Redis String类型实现原理
Redis String类型实现原理
本文推荐的是一篇对Redis官方文档的翻译,是Day Day Up博客的Redis文档翻译系列文章之一,内容是Redis中String数据类型的内部实现。废话不多说,请看文章吧。 原文链接:blog.ddup.us 这是一篇翻译文章,原文在这里 ...
分类:   
Redis进阶教程-aof(append only file)日志文件
Redis进阶教程-aof(append only file)日志文件
原文出处:http://lgone.com/html/y2010/757.html 今天看了Redis源码两个多小时,搞清楚了append only file(AOF)日志的rotate原理.官方文档里面对这部分做了单独的说明,但是就我看来,作者不够优美的用词,完全会让人理解 ...
分类:   
Redis集群功能说明
Redis集群功能说明
虽然目前可以通过在客户端做hash的方法来构建Redis集群,但Redis原生的集群支持还是颇受期待。本文是对Redis集群功能官方描述文档的一个翻译,译者是@PPS萝卜同学,也感谢他的投稿分享。 介绍 这篇文档主要是为了说 ...
分类:   
Redis zipmap内存布局分析
Redis zipmap内存布局分析
本文转自《淘宝核心系统团队博客》,作者为@淘宝千石,文章对Redis的zipmap内部结构进行了分析,主要包括了其内存使用及几个常用API的操作流程。 Redis被称为key/value应用中的瑞士军刀,除了其丰富的数据结构支持, ...
分类:   
深入理解Redis内部实现
相信很多人已经对Redis有所了解,包括其丰富的数据结构及操作,高性能,持久化等等。而Redis文档对每一个命令的复杂度也有相当详细的描述。下面PPT则是深入Redis内部,对Redis的内部实现进行了介绍。相信会让你对Red ...
分类:   
Redis源码分析-内存分配
Redis源码分析-内存分配
本文转载自Day Day Up博客,文章对Redis的内存分配封装zmalloc库进行了分析,描述了Redis在内存分配和使用统计方面的各种细节和技巧。 原文链接:blog.ddup.us Redis中到处都会进行内存分配操作。为了屏蔽不同平台之 ...
分类:   
redis源码分析-如何rehash
hash table是一种高效的数据结构,被广泛的用在key-value存储中,Redis的dict其实就是一个典型的hash table实现。 rehash是在hash table的大小不能满足需求,造成过多hash碰撞后需要进行的扩容hash table的操作,其实 ...
分类:   
深入Redis内部-Redis 源码讲解
深入Redis内部-Redis 源码讲解
Redis 作为 NoSQL 数据库的杰出代表,一直广受关注,其轻量级的敏捷架构,向来有存储中的瑞士军刀之称。下面推荐的一篇文章,从源码的角度讲解了Redis 的整个工作流程,是了解 Redis 流程的绝佳文章。强烈推荐: 原文 ...
分类:   
Redis源码分析系列文章
Redis源码分析系列文章
Redis 的源码只有2万来行,个人觉得是一个非常合适的学习Unix 环境下C语言编程的实例教材。而读源码,也对了解Redis内部结构很有帮助。 下面推荐的几篇文章,来自阿里巴巴云计算运维部的 hoterran 同学的个人博客,分 ...
分类:   
我国首台自主研发千万亿次计算机投入应用
我国首台自主研发千万亿次计算机投入应用
经过3个多月的试运行,全部采用国产CPU和系统软件构建的中国首台千万亿次计算机——“神威蓝光”千万亿次计算机系统近日在国家超级计算(济南)超级计算中心成功投入应用,这标志着中国继美国、日本之后,成为世界第三 ...
分类:   
Hadoop1.0正式发布
Hadoop1.0正式发布
历经六年的"妊娠发育"后,Hadoop 1.0终于正式发布了!
分类:   

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

 

GMT+8, 2018-11-20 08:13 , Processed in 0.176310 second(s), 19 queries .