炼数成金 大数据
订阅

大数据

万字详解Oracle架构、原理、进程,学会世间再无复杂架构
万字详解Oracle架构、原理、进程,学会世间再无复杂架构
对于一个数据库系统来说,假设这个系统没有运行,我们所能看到的和这个数据库相关的无非就是几个基于操作系统的物理文件,这是从静态的角度来看,如果从动态的角度来看呢,也就是说这个数据库系统运行起来了,能够对外 ...
分类:   
E级超算+深度学习,点亮癌症精准治疗之路
E级超算+深度学习,点亮癌症精准治疗之路
美国疾病预防与控制中心发布的最新发病率数据显示,癌症是美国民众的第二大致死原因,仅次于心脏病。沉重的统计数据让人感到沮丧。然而,最近我们迎来了抗癌的曙光,由专业研究团队牵头的“癌症分布式学习环境(CANDL ...
分类:   
让Elasticsearch飞起来!百亿级实时查询优化实战
让Elasticsearch飞起来!百亿级实时查询优化实战
最近的一个项目是风控过程数据实时统计分析和聚合的一个 OLAP 分析监控平台,日流量峰值在 10 到 12 亿上下,每年数据约 4000 亿条,占用空间大概 200T。面对这样一个数据量级的需求,我们的数据如何存储和实现实时 ...
分类:   
Kubernetes 2018 年度简史
Kubernetes 2018 年度简史
Kubernetes 在过去几年中一直是云计算领域最著名的开源项目之一。2018 年,Kubernetes 度过了自己的 4 岁生日。从 2014 年开源,到如今成功从 CNCF 孵化,它已成为容器编排的事实标准。虽然 Kubernetes 还很年轻,但 ...
分类:   
一文梳理 RedHat 和 CentOS 运维中的网络知识
一文梳理 RedHat 和 CentOS 运维中的网络知识
在很多公司,岗位职责都是很明确的,专职转岗,每人或者每组负责一块业务。系统运维岗基本上在IT架构上相对偏后一些,该岗位和网络管理岗基本上是平行的。因为今天咱们说的是系统运维方面网络方面的事情,或多或少都 ...
分类:   
基于 HTTP 协议的 3 种实时数据获取技术
基于 HTTP 协议的 3 种实时数据获取技术
HTTP协议是建立在TCP协议上的应用层协议,协议的本质是请求----应答:即对于HTTP协议来说,服务端给一次响应后整个请求就结束了,这是HTTP请求最大的特点,也是由于这个特点,HTTP请求无法做到的是服务端向客户端主 ...
分类:   
如何画出一张合格的技术架构图?
如何画出一张合格的技术架构图?
架构就是对系统中的实体以及实体之间的关系所进行的抽象描述,是一系列的决策。架构是结构和愿景。系统架构是概念的体现,是对物/信息的功能与形式元素之间的对应情况所做的分配,是对元素之间的关系以及元素同周边 ...
分类:   
我是如何把5万行C++代码移植到Go的?
我是如何把5万行C++代码移植到Go的?
从商业角度来看,这个项目是成功的:重写工作提前完成;性能在可接受的范围之内;并且整体代码量不超过 1W 行(代码量的剧减主要是因为重写团队删除了一些过时的或者不需要的特性)。但从开发者的角度来看,作者认为 ...
分类:   
C++ 力压 Python 进入最受欢迎编程语言前三
C++ 力压 Python 进入最受欢迎编程语言前三
发布新的语言定义 C++ 0x 的复杂性和延迟让 C++ 成功回春。这个新的语言标准最终在 2011 年发布后被命名为 C++ 11,它使这一编程语言变得更简单、更安全,同时也更具表现力。由于社区必须等待适当的编译器支持,所以 ...
分类:   
Elasticsearch 7 正式发布
Elasticsearch 7 正式发布
Elastic Stack 7.0.0 已正式发布,Elasticsearch 作为 Elastic Stack 的核心,它是一个分布式、面向文档的 RESTful 风格搜索和数据分析引擎,它支持结构化和非结构化查询,并且不需要提前定义模式。Elasticsearch 可 ...
分类:   
架构师的工作都干些什么?想做架构师必看!
架构师的工作都干些什么?想做架构师必看!
架构不是一个职业而是一种能力,每一种架构师只不过是在不同的领域里面使用不同的技术,没有什么可对比,就好比如你问一个篮球明星和一个足球明星有什么区别一样!架构师需要考虑4个问题,1. 确定系统干什么不干什么,也 ...
分类:   
大规模升级来临,谈谈Oracle 12cR2使用经验
大规模升级来临,谈谈Oracle 12cR2使用经验
随着2019年2月13日,Oracle 19c (Oracle 12.2.0.3) for Exadata 版本发布,Oracle 12cR2体系的数据库版本终于迎来了长期支持版本(Oracle 12c的最后一个大版本),也就是说数据库版本还在Oracle 10g/11g的系统是时候 ...
分类:   
在中国,SaaS公司怎么做生态
在中国,SaaS公司怎么做生态
过去做标准软件产品,而且是单部门(单部门单岗位或单部门多岗位)应用,所以过去做软件时分工特别简单:1、总部研发软件,然后构建分销网络,总部有专门的部门对分销网络进行培训、营销推广、管理与考核。2、分销网 ...
分类:   
ESXi CPU调度原理
ESXi CPU调度原理
很多客户会反映某些虚拟机的性能比较差,尤其是CPU,那么究竟如何去做优化呢?要想做好优化,需要首先了解一下ESXi的CPU调度原理。首先,作为虚拟化的基础架构平台,ESXi提供计算资源的共享,在ESXi上运行的所有虚拟 ...
分类:   
越南正开发自主5G芯片,越特尔已投资数百万美元
越南正开发自主5G芯片,越特尔已投资数百万美元
越南最大的电信运营商越特尔集团(Viettel)计划利用自己的核心技术建设第五代网络,这家越南国有企业准备在2021年前推出超高速无线服务。该公司的一名负责人表示:越特尔已投资数百万美元开发5G芯片,并正致力于开 ...
分类:   
Stack Overflow 最新调查告诉你,提升这项技能最有用!
Stack Overflow 最新调查告诉你,提升这项技能最有用!
Stack Overflow 2019年度开发者调查报告出炉,该调查来自170多个国家和地区的近90,000份回复,涵盖了从职业满意度和求职到教育和编码偏好等开发人员体验的各个方面。在全球范围内,使用Clojure的受访者的薪水最高, ...
分类:   
程序员群体的性取向如何?Stack Overflow 年度调查有亮点
程序员群体的性取向如何?Stack Overflow 年度调查有亮点
也不知道是从哪一年开始,GitHub 有了一个响亮的名号「最大的同性交友网站」,以至于程序员都把 GitHub 调侃称 GayHub。Python 是增长最快的主流编程语言。今年 Python 排位再次上升,由 2018 年的第 7 位(38.8%) ...
分类:   
Google发布Anthos:宣告多集群多云Kubernetes时代已来
Google发布Anthos:宣告多集群多云Kubernetes时代已来
Anthos(前身为Cloud Service Platform)让用户可以跨环境构建和管理现代混合应用程序,用户可以在Anthos之上交付和管理容器、Kubernetes、微服务架构和Service Mesh等。据Google CEO Sundar Pichai在大会发布时的介 ...
分类:   
2019最受欢迎数据库:MySQL居首PostgreSQL第二Oracle第八
2019最受欢迎数据库:MySQL居首PostgreSQL第二Oracle第八
共有 75,023人回答了这个问题,在用户采用上,MySQL 以 54.0% 位列第一,成为最为广泛采用的数据库产品,PostgreSQL 以 34.3% 位列第二,而 Microsoft SQL Server 以 32.8% 位列第三。PostgreSQL 成功的超越了2018 ...
分类:   
讲讲亿级PV的负载均衡架构!
讲讲亿级PV的负载均衡架构!
本来没想写这个题材的,为了某某童鞋能够更好的茁壮成长,临时写一篇负载均衡的。负载均衡,大家可能听过什么3层负载均衡、4层负载均衡、7层负载均衡什么的?那这是怎么分的呢,ok,是根据osi七层网络模型来分的,例 ...
分类:   
Java 8中Stream API集合操作的奇技淫巧!
Java 8中Stream API集合操作的奇技淫巧!
Java 8引入了全新的Stream API。这里的Stream和I/O流不同,它更像具有Iterable的集合类,但行为和集合类又有所不同。stream是对集合对象功能的增强,它专注于对集合对象进行各种非常便利、高效的聚合操作,或者大批 ...
分类:   
为什么说流处理即未来?
为什么说流处理即未来?
最广为人知的 Flink 使用场景是流分析、连续处理(或者说渐进式处理),这些场景中 Flink 实时或者近实时的处理数据,或者采集之前提到的历史数据并且连续的对这些事件进行计算。晓伟在之前的演讲中提到一个非常好的 ...
分类:   
Spark比拼Flink:下一代大数据计算引擎之争,谁主沉浮?
Spark比拼Flink:下一代大数据计算引擎之争,谁主沉浮?
自从数据处理需求超过了传统数据库能有效处理的数据量之后,Hadoop 等各种基于 MapReduce 的海量数据处理系统应运而生。从 2004 年 Google 发表 MapReduce 论文开始,经过近 10 年的发展,基于 Hadoop 开源生态或者 ...
分类:   
Flink 原理与实现:架构和拓扑概览
Flink 原理与实现:架构和拓扑概览
当 Flink 集群启动后,首先会启动一个 JobManger 和一个或多个的 TaskManager。由 Client 提交任务给 JobManager,JobManager 再调度任务到各个 TaskManager 去执行,然后 TaskManager 将心跳和统计信息汇报给 JobMa ...
分类:   
让女友情绪可视化的Python大招
让女友情绪可视化的Python大招
好不容易有了女朋友,可相处起来总是磕磕碰碰。有时候,你很想关心她,但是你太忙了,以至于她一直抱怨,觉得你不够关心她。你暗自下决心,下次一定要准时发消息给她,哪怕是几句话,可是你又忘记了。你觉得自己很委 ...
分类:   
世界上最好的编辑器Vim:1700多页数学笔记是如何实时完成的
世界上最好的编辑器Vim:1700多页数学笔记是如何实时完成的
一般你是用手写还是 MarkDown 做数学笔记?在这篇文章中,作者介绍了如何用 LaTex 和 Vim 实时做数学笔记,通过一系列炫酷的技巧,不论是表达式板书还是图像绘制,我们都能实时跟得上。在机器学习的学习过程中,很多 ...
分类:   
JavaScript 力压 Java 成最受欢迎编程语言,TypeScript 大涨!
JavaScript 力压 Java 成最受欢迎编程语言,TypeScript 大涨!
在多种趋势榜单中,Java、C、Python 已成编程语言界的新任“铁三角”。而在开发者日常使用以及讨论中,编程语言又有什么样的现状?近日,一年仅发布两次编程语言榜单的美国知名软件开发者行业分析公司 RedMonk 正式 ...
分类:   
GitHub 近 100,000 程序员“起义”:向“996”开炮!
GitHub 近 100,000 程序员“起义”:向“996”开炮!
有人注册了一个996.icu的域名,诉控互联网公司996工作制。截至发稿,已获得80000多个Star。什么是“996”工作制?每天9点到岗,一直工作到晚上9点。每周工作6天。周工作时间为最低60个小时。网站还点名58、有赞、京 ...
分类:   
简历大数据公司全员被抓,HR要注意什么?
简历大数据公司全员被抓,HR要注意什么?
日前,简历大数据公司巧达科技被警方一锅端,高管和员工全部被带走。到底发生了什么?“3月14日团队被警方带走,有HR等非核心成员回家,但核心高管依然失联中。”3月25日,一位巧达科技前员工告诉燃财经。在天眼查中 ...
分类:   
无论你准备上云还是已经上云,最好先看看这五大技术趋势!
无论你准备上云还是已经上云,最好先看看这五大技术趋势!
云计算实际上已经成为了推动数字化转型和现代化IT组合的平台。越来越多的企业正通过租用亚马逊网络服务(AWS)、微软和谷歌等厂商提供的软件,享受由此带来的业务敏捷性或成本节约等优势。事实上,大多数企业会从两 ...
分类:   

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

 

GMT+8, 2019-4-21 17:04 , Processed in 0.086531 second(s), 19 queries .