炼数成金 大数据
订阅

大数据

Node.js在携程的落地和最佳实践
Node.js在携程的落地和最佳实践
本篇主要介绍在携程,Node.js技术栈是如何实现从0到1进行技术落地的,以及在不断磨合的过程中,总结出来的最佳实践。在携程Node.js应用根据用户群,主要分两个方向:DA(数据聚合服务)和SSR(服务端渲染)是服务于 ...
分类:   
4G与5G 无线技术细节对比
4G与5G 无线技术细节对比
4G:上行使用单载波技术。优势:因为PAPR低,发射功率高,在边缘覆盖好;劣势:因为是单载波,单用户数据必须在连续的RB上传输,容易造成RB数不够传输一个用户数据而浪费;用户配对是1对1的,如两个用户需要的资源不 ...
分类:   
【数据中台】关于数据中台系统,需要了解哪些技术?
【数据中台】关于数据中台系统,需要了解哪些技术?
今天让我们全面解读中台,包括企业为什么要平台化,目前中台都有哪些形式,实施中台系统的优势、面临的问题以及建议都有哪些?中台这个概念早期是由美军的作战体系演化而来的,技术上所说的“中台”主要是指学习这种 ...
分类:   
一张主流编程语言的变迁图,讲清程序员迁移模式
一张主流编程语言的变迁图,讲清程序员迁移模式
我绘制了一个主流编程语言的变迁图,用以表示程序员在不同语言之间的切换路径。关于编程语言,还有很多类似的图可以表示它们相互之间的演进。不过我并不想从语言设计者角度来说明这个问题,而是想从程序员本身来看待 ...
分类:   
MySql 分库分表与分区的区别和思考
MySql 分库分表与分区的区别和思考
不要拘泥于某一个技术的一点,技术是相通的。重要的是编程思想,思想是最重要的。当数据量大的时候,需要具有分的思想去细化粒度。当数据量太碎片的时候,需要具有合的思想来粗化粒度。
分类:   
全球首个批流一体机器学习平台 Alink
全球首个批流一体机器学习平台 Alink
随着大数据时代的到来和人工智能的崛起,机器学习所能处理的场景更加广泛和多样。构建的模型需要对批量数据进行处理,为了达到实时性的要求还需要直接对流式数据进行实时预测,还要具备将模型应用在企业应用和微服务 ...
分类:   
对标谷歌、IBM、微软,亚马逊正式推出量子计算云服务Braket
对标谷歌、IBM、微软,亚马逊正式推出量子计算云服务Braket
自谷歌宣布实现量子优越性以来,量子计算的话题热度不断攀升。此外,IBM 和微软也在量子计算领域投入了大量的人力和资金。因此,作为云服务巨擘的亚马逊岂能在这场量子计算的发展狂潮中落后于别家公司。终于,亚马逊 ...
分类:   
Go 语言 10 岁啦:Go 在企业中的发展历程
Go 语言 10 岁啦:Go 在企业中的发展历程
Go 是一种开源的编程语言,旨在帮助开发者大规模构建快速、可靠且高效的软件。这种语言由 Google 创建,现由 2100 多位贡献者提供支持,他们主要来自开源社区。Go 语言在语法上与 C 语言类似,但它增加了内存安全、 ...
分类:   
为什么不推荐使用存储过程?
为什么不推荐使用存储过程?
之所以有这个题目,我既不是故意吸引眼球,也不想在本文对存储过程进行教科书般论述。最近项目中遇到的存储过程问题,让我想起了去年在武汉出差时一位同事的发问:我觉得存储过程挺好用的,为什么你不建议用?当时我 ...
分类:   
从业务架构到微服务
从业务架构到微服务
服务的架构设计决定软件的业务支撑能力,清晰的业务设计可以帮助开发人员理解系统。在业务架构设计过程中,需要根据用户需求作为核心方向,根据用户需求确定产品设计、框架搭建、服务划分、数据库规划。如果需求比较 ...
分类:   
Java 的 JSP 已经被淘汰了吗?
Java 的 JSP 已经被淘汰了吗?
随着时代的发展,渐渐的许多大中小公司开始把前后端的界限分的越来越明确,前端工程师只管前端的事情,后端工程师只管后端的事情,正所谓术业有专攻,一个人如果什么都会,那么他毕竟什么都不精。大中型公司需要专业 ...
分类:   
全球IPv4地址正式耗尽 IPv6新体系正在形成
全球IPv4地址正式耗尽 IPv6新体系正在形成
全球 IPv4 地址面临耗尽的现实已经被宣传多年,而这一天最终还是到来了。其实早在上世纪 80 年代,研究人员就已经预见到了这样的未来,且在 2012 年迎来了顶级 IPv4 地址的耗尽。今天,区域性的 IPv4 地址库存也已耗 ...
分类:   
数据治理的定义,挑战和最佳实践
数据治理的定义,挑战和最佳实践
数据治理构成了公司范围内数据管理的基础,并使有效使用可信赖的数据成为可能。数据的有效管理是一项重要任务,需要集中控制机制。数据治理包括管理和保护公司数据资产所需的人员,流程和技术,以保证普遍理解,正确 ...
分类:   
2019年招聘市场最抢手计算机技能排名:Python仅列第三
2019年招聘市场最抢手计算机技能排名:Python仅列第三
当今市场最炙手可热的技术技能仍然是 SQL,Java 和 Python 紧随其后。JavaScript,尤其是 AWS 的发展也势不可挡。数据科学工作的爆炸性增长是 Python 崛起的主要原因之一。虽然至少目前来看,SQL 仍然是美国雇主眼中 ...
分类:   
全球Top 500超算榜单更新:Summit仍居榜首,中国上榜227台,总算力占比31.9%
全球Top 500超算榜单更新:Summit仍居榜首,中国上榜227台,总算力占比31.9%
最近,关于量子计算碾压传统超算的消息层出不穷,比如量子计算机只需200秒,就相当于传统超算运算10000年。说的没错。但目前的一个简单事实是,对于几乎所有计算任务,超级计算机都比地球上现有的其他任何设备都快。 ...
分类:   
Git 使用教程:最详细、最全面、最易懂、真正手把手教!
Git 使用教程:最详细、最全面、最易懂、真正手把手教!
SVN是集中式版本控制系统,版本库是集中放在中央服务器的,而干活的时候,用的都是自己的电脑,所以首先要从中央服务器哪里得到最新的版本,然后干活,干完后,需要把自己做完的活推送到中央服务器。集中式版本控制 ...
分类:   
Redis 的内存淘汰策略
Redis 的内存淘汰策略
我们知道Redis是基于内存的key-value数据库,因为系统的内存大小有限,所以我们在使用Redis的时候可以配置Redis能使用的最大的内存大小。通过在Redis安装目录下面的redis.conf配置文件中添加以下配置设置内存大小。
分类:   
腾讯开源图计算框架 Plato:十亿级节点图计算进入分钟级时代
腾讯开源图计算框架 Plato:十亿级节点图计算进入分钟级时代
近日,腾讯开源再次迎来重磅项目。14 日,腾讯正式宣布开源高性能图计算框架 Plato,这是在近一周之内,开源的第五个重大项目。据介绍,Plato 可满足十亿级节点的超大规模图计算需求,并将算法计算时间从天级缩短到 ...
分类:   
Kafka是如何保证高性能和高吞吐量的?
Kafka是如何保证高性能和高吞吐量的?
Kafka是一款分布式消息发布和订阅系统,它的特点是高性能、高吞吐量。最早设计的目的是作为LinkedIn的活动流和运营数据的处理管道。这些数据主要是用来对用户做用户画像分析以及服务器性能数据的一些监控。所以kafka ...
分类:   
IntelliJ IDEA 详细图解最常用的配置 ,适合刚刚用的新人
IntelliJ IDEA 详细图解最常用的配置 ,适合刚刚用的新人
刚刚使用IntelliJ IDEA 编辑器的时候,会有很多设置,会方便以后的开发,磨刀不误砍柴工。比如:设置文件字体大小,代码自动完成提示,版本管理,本地代码历史,自动导入包,修改注释,修改tab的显示的数量和行数, ...
分类:   
2019年11月全球程序语言排行榜:C语言有望年底登顶
2019年11月全球程序语言排行榜:C语言有望年底登顶
TIOBE 公布了 11 月份编程语言排行榜。首先,C 现在非常接近 Java,排在 Java 后指数仅差 0.2%,预计年底之前 C 会再次冲上第一位;C++ 与 Python 已经连续几个月指数相差保持在大约 3%、4% 这个范围了,本月仍是 P ...
分类:   
一文读懂TensorFlow 2.0高阶API
一文读懂TensorFlow 2.0高阶API
在TensorFlow 2.0中对大量的高阶API库进行了删减与合并,根据官方的解释,这一切的变化都是为了使TensorFlow2.0更加易用和简洁。本文以官方推荐的唯一高阶API库tf.keras为主,概括地介绍TensorFlow 2.0的高阶API。tf ...
分类:   
Netflix开源Polynote:对标Jupyter,一个笔记本运行多种语言
Netflix开源Polynote:对标Jupyter,一个笔记本运行多种语言
使用类似 Jupyter Notebook 进行数据分析和机器学习是近来较为方便灵活的开发方式,但是 Jupyter Notebook 缺乏对多种语言的原生支持,在管理笔记本内的依赖、数据可视化等方面有所欠缺。近日,NetFlix 公司将其数据 ...
分类:   
Apache Flink 的迁移之路,2 年处理效果提升 5 倍
Apache Flink 的迁移之路,2 年处理效果提升 5 倍
我们最开始是以 standalone cluster 的模式部署。从 2017 年上半年开始,我们逐步把 Game Analytics 中一些小流量的 etl-job 迁移到 Flink,到 4 月份时,已经将产品接收各版本 SDK 数据的 etl-job 完全迁移至 Flink ...
分类:   
12 款 Linux 终端推荐
12 款 Linux 终端推荐
如果你跟我一样,整天要花大量的时间使用Linux命令行,而且正在寻找一些可替代系统自带的老旧且乏味的终端软件,那你真是找对了文章。我这里搜集了一些非常有趣的终端软件,可以用来替代debian系的Linux原生终端。Ti ...
分类:   
传感器发展通史简述
传感器发展通史简述
传感器与通信、计算机被称为现代信息技术的三大支柱和物联网基础,其应用涉及国民经济及国防科研的各个领域,是国民经济基础性、战略性产业之一。当前倍受国际关注的物联网、大数据、云计算技术,乃至智慧城市中的各 ...
分类:   
从Python代码到APP,你只需要一个小工具:GitHub已超3000星
从Python代码到APP,你只需要一个小工具:GitHub已超3000星
机器学习开发者想要打造一款 App 有多难?事实上,你只需要会 Python 代码就可以了,剩下的工作都可以交给一个工具。近日,Streamlit 联合创始人 Adrien Treuille 撰文介绍其开发的机器学习工具开发框架—— Streaml ...
分类:   
为什么要放弃 JSP ?
为什么要放弃 JSP ?
以前的项目大多数都是Java程序猿又当爹又当妈,既搞前,又搞后端。随着时代的发展,渐渐的许多大中小公司开始把前后端的界限分的越来越明确,前端工程师只负责前端的事情,后端工程师只管后端的事情。正所谓术业有专 ...
分类:   
SLAM初识
SLAM初识
SLAM,中文译作同时定位与地图创建。外行乍一听起来非常拗口,为了不在一开始就吓跑读者,我们先不对其进行专业的解释,用一个形象的例子来进行说明。我们知道现在有不少家用的扫地机器人(如下图所示),可以代替人 ...
分类:   
SLAM技术框架
SLAM技术框架
最早的SLAM雏形是在军事(核潜艇的海底定位)上的应用,主要传感器是军用雷达。SLAM技术发展到如今已经几十年,目前以激光雷达作为主传感器的SLAM技术比较稳定、可靠,仍然是主流的技术方案。但随着最近几年计算机视 ...
分类:   

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

 

GMT+8, 2019-12-15 00:57 , Processed in 0.128169 second(s), 19 queries .