炼数成金 大数据
订阅

大数据

一个不可思议的 MySQL 慢查分析与解决!
一个不可思议的 MySQL 慢查分析与解决!
一、前言开发需要定期的删除表里一定时间以前的数据,SQL 如下mysql delete from testtable WHERE biz_date = '2017-08-21 00:00:00' AND status = 2 limit 500\G前段时间在优化的时候,已经在相应的查询条件上加上 ...
分类:   
云计算与粒计算
云计算与粒计算
云计算,不必细说谁都知道是什么,人们多多少少都有所耳闻。云计算是继20世纪80年代大型计算机到C/S转变之后,IT界的又一次巨变,它通过互联网将某计算任务分布到大量的计算机上,并可配置共享计算的资源池,且共享 ...
分类:   
我国北斗导航芯片价格已与GPS芯片价格持平
我国北斗导航芯片价格已与GPS芯片价格持平
11月5日晚,长征三号乙运载火箭以一箭双星方式,发射北斗三号第一和第二颗组网卫星。这两颗卫星开启了北斗卫星导航系统全球组网的征程。未来三年,我国将迎来新一轮北斗组网卫星高密度发射。据计划,到2020年我国将 ...
分类:   
Google Brain开源新的Python 库:Tangent
Google Brain开源新的Python 库:Tangent
神经网络(简称 NN)已经在图像、视频、音频以及文本类机器学习模型领域取得了巨大成功。而让我们得以训练出能够在此类任务中带来良好表现的神经网络的基本抽象思路,则源自 30 年前即已诞生的概念,即反向模式自动 ...
分类:   
浅谈TimesTen内存数据库的结构
浅谈TimesTen内存数据库的结构
Oracle TimesTen In-Memory Database(简称TimesTen或TT)是一种业界领先的内存中关系数据库,2005年被oracle公司收购。TimesTen主要为电信、网络、证券交易等行业提供基础架构软件,并用这种软件进行事件管理、交易 ...
分类:   
python 爬虫抓取了百万知乎,并做了分析
python 爬虫抓取了百万知乎,并做了分析
最近用 python 爬虫抓取了知乎用户个人资料(公开信息),去重之后有300+万条记录,为了得到这些数据,还不小心跑崩了一台服务器…… 当然主要是配置太低。手头有了数据也不能闲着,于是就有了这篇分析报告,这篇报 ...
分类:   
如何编写一个拼写纠错器?
如何编写一个拼写纠错器?
2007年的某个星期,我的两个朋友(Dean和Bill)分别向我传达了他们对Google的拼写自动纠错能力的赞叹。例如输入”speling”,Google会立即显示”spelling”的检索结果。我原以为这两位才智卓越的工程师、数学家,会对 ...
分类:   
抄袭漫天飞的时代下,如何利用好开源协议这块盾牌?
抄袭漫天飞的时代下,如何利用好开源协议这块盾牌?
近来,开源软件被抄袭事件层出不穷,开发者直指谴责,抄袭者无动于衷,最终不了了之。对此,不少开发者在谴责抄袭者的同时,也在提醒更多同行以开源软件协议来捍卫自己辛苦劳动的成果。然何为开源协议?前段时间,Fa ...
分类:   
一文快速掌握前端开发必备技能
一文快速掌握前端开发必备技能
ECMAScript 6(简称 ES6)于 2015 年 6 月正式发布,是 JavaScript 语言的下一代标准。它的目标,是使得 JavaScript 语言可以用来编写复杂的大型应用程序,成为企业级开发语言。标准的制定者有计划,以后每年发布一 ...
分类:   
Fedora 27的新特性
Fedora 27的新特性
Fedora 27, 红帽赞助的 linux 项目的最新版本,红帽企业版的功能试验田, 将会在本周或下一周发布。最重要的增加和变化 Fedora 27 包括:更大模块化的基础系统。最新版本的流行语言和系统组件。更广泛的使用 Flatpak ...
分类:   
开发者最讨厌的编程语言:Perl 名列第一
开发者最讨厌的编程语言:Perl 名列第一
说好的 PHP 是世界上最好的语言的呢?了解当下最流行的编程语言,那你知晓开发者中最不受欢迎的编程语言吗?是因为与时俱进的淘汰,还是“人红是非多”的不喜欢?近日,全球著名的 IT 网站 Stack Overflow 根据数百 ...
分类:   
那些年 AR 界吹过的牛 X,究竟有几分验证?
那些年 AR 界吹过的牛 X,究竟有几分验证?
从一条神奇的鲸鱼 Demo 惊现世人,到去年身陷视频造假、产品难产,如今 Magic Leap 又再次斩获 5 亿美元融资,这不由得让人开始重新审视 AR/VR 市场。与国内外近年来涉足 AR/VR 领域的其他科技公司一样,都将面临错 ...
分类:   
快速提高 MySQL 性能的 7 个技巧
快速提高 MySQL 性能的 7 个技巧
随着尺寸和负载的增长,MySQL的性能会趋于下降。记住这些诀窍,便可保持MySQL的流畅运行。测量应用程序的方法之一是看性能。而性能的指标之一便是用户体验,通俗的说法就是“用户是否需要等待更长的时间才能得到他们 ...
分类:   
Angular 5.0 来了,有这些大变化
Angular 5.0 来了,有这些大变化
我们很高兴地宣布Angular 5.0.0——五角形甜甜圈发布啦!这又是一个主版本,包含新功能并修复了很多bug。它再次体现了我们把Angular做得更小、更快、更好用的一贯目标。以下简单介绍v5的重大变化。要了解详情,请看c ...
分类:   
京东618大促网关承载十亿调用量背后的架构实践
京东618大促网关承载十亿调用量背后的架构实践
网关系统需要扛几十亿的流量调用,接口的平稳运行、每一个接口在后端服务之后的性能耗损都非常重要。比如我们使用了一个Redis集群,然后构建了两个机房,每一个机房都搭建了一个Redis集群,这样的话就能够很好地保证 ...
分类:   
11 月全球数据库排名:PostgreSQL 一路高涨
11 月全球数据库排名:PostgreSQL 一路高涨
DB-Engines 发布了 2017 年 11 月份的数据库排名。排前 20 名的数据库中,仅排名在第 15 位的 Splunk 和第 16 位的 HBase ,位置出现了互调,其他数据库排名未变。与上月相比,排名前三的 Oracle、MySQL 、Microsoft ...
分类:   
MySQL 竞品 MariaDB 完成 C 轮 2700 万美元投资 阿里巴巴领投
MySQL 竞品 MariaDB 完成 C 轮 2700 万美元投资 阿里巴巴领投
11 月 2 日,知名开源数据库公司 MariaDB 宣布完成由阿里巴巴领投的 C 轮 2700 万美元的融资。融资完成后,MariaDB 社区将具备更强的实力参与数据库日益激烈的竞争。MariaDB 是全球知名的开源数据库,总部位于芬兰赫 ...
分类:   
你选对数据库了吗?---- Digg 启示录
你选对数据库了吗?---- Digg 启示录
未来的世界是属于数据的,而数据则存储在数据库中。数据库,无疑是企业所有应用的基石。数据库种类有很多,你选对数据库了吗?美国有一家互联网公司,Digg。创办于 2004 年,又叫掘客,就是个新闻网站,但不同于传统 ...
分类:   
IBM模拟出56量子位计算机
IBM模拟出56量子位计算机
从理论上讲,量子计算机在使用被称为量子位的组件时能大大胜过传统计算机。现在,IBM说它已经在一台老式的超级计算机上模拟了一个56 位量子比特的量子计算机,一些先前建议的任务超出了常规机器的能力。研究人员补充 ...
分类:   
Linux 内核开发报告 2017 版
Linux 内核开发报告 2017 版
全球公有云上运行的负载有 90% 是 Linux 操作系统,在嵌入式市场的占有率是 62%,而在超算的市场占有率更是达到了 99%,还有,它运行在世界上超过 82% 的智能手机中,也是所有公有云厂商的主要支撑服务器(90%)。这 ...
分类:   
对 DBA 最重要的 PostgreSQL 10 新亮点
对 DBA 最重要的 PostgreSQL 10 新亮点
前段时间新的重大版本的 PostgreSQL 10 发布了! 强烈建议阅读公告、发布说明和“新功能”概述可以在这里、这里和这里。像往常一样,已经有相当多的博客覆盖了所有新的东西,但我猜每个人都有自己认为重要的角度,所 ...
分类:   
开发人员学 Linux:CentOS7 安装配置持续集成工具 Jenkins
开发人员学 Linux:CentOS7 安装配置持续集成工具 Jenkins
由于时间关系,仅仅简单讲述了如何配置和创建基本的持续集成项目。其实利用Jenkins除了上面演示的功能之外,还可以在构建完成后将失败或者成功的消息发邮件通知到相关人员,甚至自动部署到服务器(一般是部署到测试 ...
分类:   
一个创业公司的容器化之路
一个创业公司的容器化之路
在 2012 年以前,大部分互联网公司包括创业公司,都是直接购买服务器,租用 IDC 机房的机架部署的。应用是直接运行在物理机上的,要扩展必须购买新服务器。IDC 经常出各种故障,如果碰到 IDC 迁移的话,就更痛苦,必 ...
分类:   
利用Mesosphere DC/OS在任意基础设施之上实现TensorFlow分布
利用Mesosphere DC/OS在任意基础设施之上实现TensorFlow分布
今天,我们兴奋地宣布在Mesosphere DC/OS服务目录当中发布TensorFlow的beta测试版本。只需要一条命令,您现在即可将分布式TensorFlow部署在任意裸机、虚拟或者公有云基础设施当中。与其它可用于DC/OS的软件包一样, ...
分类:   
MySQL 8.0备受瞩目的新特性大放送!
MySQL 8.0备受瞩目的新特性大放送!
MySQL于 2016-09-12正式发布8.0 DM 版本到现在的 8.0.3 RC版本,进度还是蛮快的。对Oracle比较了解的朋友看到最近的MySQL 8.0的功能,会有一致的想法:在Oracle的带领下MySQL越来越像Oracle,包括安装包也越来越大。 ...
分类:   
IDC 2017 中国云计算市场前三名:阿里云、腾讯云、金山云
IDC 2017 中国云计算市场前三名:阿里云、腾讯云、金山云
11月1日,权威研究机构IDC发布了2017年上半年中国公有云IaaS市场份额调研结果。数据显示,阿里云2017年上半年IaaS营收5亿美元,占据47.6%中国市场份额;腾讯云位居第二,营收约1亿美元左右,份额为9.6%;金山云位居第 ...
分类:   
JavaScript 函数式编程介绍
JavaScript 函数式编程介绍
当 Brendan Eich 在 1995 年创造 JavaScript 时,他原本打算将 Scheme 移植到浏览器里。Scheme 作为 Lisp 的方言,是一种函数式编程语言。而当 Eich 被告知新的语言应该是一种可以与 Java 相比的脚本语言后,他最终 ...
分类:   
Ubuntu 18.04 LTS 定名为“仿生河狸”,将于明年 4 月 26 日发布
Ubuntu 18.04 LTS 定名为“仿生河狸”,将于明年 4 月 26 日发布
Ubuntu 母公司 Canonical 的 CEO, Mark Shuttleworth 刚刚披露,Ubuntu 操作系统的下一个长期支持版本(LTS)的代号定为 “Bionic Beaver”,意即“仿生河狸”,。它将于明年的 4 月发布。按照 Ubuntu 系列的命名传 ...
分类:   
Docker 宣布拥抱 Kubernetes
Docker 宣布拥抱 Kubernetes
10 月 17 日,在 DockerCon 欧洲大会上,容器供应商 Docker 丢出重磅消息,将拥抱容器编排对手 Kubernetes!在过去几年中,开源的容器编排技术 Kubernetes 获得了广泛的市场支持和企业采纳,10 月 17 日,它意义非凡 ...
分类:   
市值首超6000亿美元!微软云转型背后的故事
市值首超6000亿美元!微软云转型背后的故事
2017年10月,微软市值首次超过6000亿美元。这是Satya Nadella成为微软第三任CEO后,所创造的新微软历史,上一次微软市值超过6000亿美元,还是在2000年互联网泡沫的时候,距今已经17年。目前,全球市值超过6000亿美元 ...
分类:   

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

 

GMT+8, 2018-2-21 03:12 , Processed in 0.139153 second(s), 19 queries .