炼数成金 大数据
订阅

大数据

处理数据时也保证安全,IBM发布Linux版完全同态加密工具包
处理数据时也保证安全,IBM发布Linux版完全同态加密工具包
6 月初,IBM 发布了适用于 macOS 和 iOS 的完全同态加密(Fully Homomorphic Encryption,FHE)工具包,并表示 Linux 版本将在数周内推出。现在 Linux 版本发布了,其将 FHE 带到 IBM Z 和 x86 架构的多个 Linux 发 ...
分类:   
RedMonk Q3语言排行:Rust首次进前20
RedMonk Q3语言排行:Rust首次进前20
知名软件行业分析公司 RedMonk 发布了 2020 年 6 月(Q3 季度)编程语言排行榜。RedMonk 编程语言排行榜通过追踪编程语言在 GitHub 和 Stack Overflow 上的代码使用情况与讨论数量,统计分析后进行排序,其旨在深入 ...
分类:   
GCC并行编译大型源代码文件性能大幅提升
GCC并行编译大型源代码文件性能大幅提升
虽然 GNU Make 和其他构建系统可以很好地进行扩展以并发编译大量文件,不过 GCC 自身也一直在让 GCC 的更多工作在编译大型源代码文件时能够并行执行。早在2019年夏天,其团队就已开始尝试解决并行化遇到的瓶颈,让更 ...
分类:   
深度传感器都有哪些创业机会?
深度传感器都有哪些创业机会?
以前,我们一直认为传统相机将3D世界转换为2D图像,已可以满足我们对于图像的应用,而2D图像中丢失的三维似乎并不重要。但随着计算机视觉(CV)的飞速发展以及与深度学习的结合,许多雄心勃勃的研究人员试图使机器通 ...
分类:   
微服务架构的核心关键点
微服务架构的核心关键点
当我们架构微服务应用时首先遇到的一个问题是,作为消费者如何访问并调用服务提供者所提供的服务,作为服务提供者如何能让服务消费者知道并进行消费。在传统应用开发时,通常是在开发语言层面上解决这个问题,可能我 ...
分类:   
Node.js 在大前端领域的应用分析
Node.js 在大前端领域的应用分析
关于 node 的使用已经很久了,使用范围也很广,似乎有前端的地方就有 node,那么来思考一个问题,node 到底是用来干嘛的呢?本文从五个大的方面对该问题进行了解释。本文不仅仅可以应用场景的分析,完全可以把它当做 ...
分类:   
NVIDIA和佛罗里达大学建最快超级计算机
NVIDIA和佛罗里达大学建最快超级计算机
7 月 21 日,佛罗里达大学宣布,与英伟达建立公私合作伙伴关系,为学生、教职员工和研究人员提供最强大的 AI 训练和工具,打造全球高校最快 AI 超级计算机。 为此事提供大力支持及资金捐赠的,正是英伟达联合创始人 ...
分类:   
Spark on K8S 的最佳实践和需要注意的坑
Spark on K8S 的最佳实践和需要注意的坑
Spark 哪个地方需要用到 K8S 呢?K8S 是 Spark 上全新的集群管理和调度系统,其他三个资源管理和调度为 Standalone、YARN 以及 Apache Mesos。YARN 集群中的 Spark 版本、Python 版本以及依赖都是全局配置的,缺乏隔 ...
分类:   
22款好用的CLI工具
22款好用的CLI工具
Shell- 毋庸置疑,在终端中,Shell 是使用最频繁也最重要的工具。过去,我曾经使用过 Bash 和 Z Shell,而如今,我正在使用的是 Fish Shell。这是一个非常优秀的终端 Shell 工具,拥有许多开箱即用的功能,例如语法 ...
分类:   
Netflix 微服务架构设计解析
Netflix 微服务架构设计解析
数年来,Netflix 一直是全球体验最好的在线订阅制视频流媒体服务,其流量占全球互联网带宽容量的 15%以上。 在过去的2019 年,Netflix 已经有 1.67 亿名订阅用户,平均每个季度新增 500 万订户,服务覆盖全球 200 ...
分类:   
Google第四代TPU 细节曝光!MLPerf榜单决战英伟达A100
Google第四代TPU 细节曝光!MLPerf榜单决战英伟达A100
2018年,谷歌在其年度 I/O 开发者大会上宣布了第三代产品,在今天上午刚刚揭开了第四代TPU产品的神秘面纱,该产品目前尚处于研发阶段。MLPerf 最新发布的一套人工智能性能基准指标显示,第四代 TPU集群大幅超越了第 ...
分类:   
为什么我不喜欢数据库三范式?
为什么我不喜欢数据库三范式?
数据库的这个三范式的概念,相信大多数人都不会陌生,从懵懵懂懂的大学时代就已经普及到教材了(没记错的话应该在数据库系统概论这本教材里)。还记得那会刚开始找实习的时候,由于自己本事太小,连简历都不知道怎么 ...
分类:   
Spark 3.0重磅发布!开发近两年,流、Python、SQL重大更新全面解读
Spark 3.0重磅发布!开发近两年,流、Python、SQL重大更新全面解读
Spark 诞生于加州大学伯克利分校的 AMPLab 实验室,该实验室致力于数据密集型计算的研究。AMPLab 研究人员与大型互联网公司合作,研究如何解决数据和 AI 问题,然后发现那些拥有海量数据的公司也面临同样的问题。于 ...
分类:   
亿级 ELK 日志平台构建实践
亿级 ELK 日志平台构建实践
Filebeat:轻量级数据收集引擎。基于原先 Logstash-fowarder 的源码改造出来。换句话说:Filebeat就是新版的 Logstash-fowarder,也会是 ELK Stack 在 Agent 的第一选择。Kafka: 数据缓冲队列。作为消息队列解耦了处 ...
分类:   
去Oracle实录:如何在线更换金融核心场景中的数据库?
去Oracle实录:如何在线更换金融核心场景中的数据库?
陆金所从 2018 年启动全站去 O 项目以来,在不做任何服务降级的情况下,历时 2 年通过上百次变更,把全站 98% 的 Oracle 数据库无缝切换到 MySQL 上。其中,这 98% 的数据库覆盖了陆金所的账务、资金、资产中心、支 ...
分类:   
React 中请求远程数据的四种方法
React 中请求远程数据的四种方法
React 是一个专注的组件库。因此,它对如何请求远程数据没有什么建议。如果要通过 HTTP 请求数据并将其发送到 Web API,可以考虑下面四种方法。对于一个简单的应用程序,只要发起几个请求,就可以正常工作。但是上面 ...
分类:   
图文了解 Kafka 的副本复制机制
图文了解 Kafka 的副本复制机制
让分布式系统的操作变得简单,在某种程度上是一种艺术,通常这种实现都是从大量的实践中总结得到的。Apache Kafka 的受欢迎程度在很大程度上归功于其设计和操作简单性。随着社区添加更多功能,开发者们会回过头来重 ...
分类:   
怎样利用开源软件赚钱?
怎样利用开源软件赚钱?
2010 到 2011 年,Mike Jumper 启动了 Guacamole 项目。这是一个多协议网关,它可以让管理员安全地提供远程桌面。因为客户端界面是在浏览器中运行的,因此,它非常轻量化且易于使用,可以替代一些旧的远程访问解决方 ...
分类:   
下一代构建工具 Gradle ,比 Maven 强在哪里!
下一代构建工具 Gradle ,比 Maven 强在哪里!
最传统的安装方法就是去gradle官网下载二进制包,解压,然后将路径添加到环境变量中。如果你没什么其他需求,可以使用这种安装方式。但是,gradle是一个非常新潮的项目,每隔几个月就会发布一个新版本,这种方式可能 ...
分类:   
一文读懂GNSS技术
一文读懂GNSS技术
2020年6月23日9点43分,我国在西昌卫星发射中心成功发射了北斗系统第五十五颗导航卫星,也是北斗三号的最后一颗全球组网卫星。至此,北斗三号全球卫星导航系统星座部署全面完成。新闻出来之后,国人为之振奋,纷纷点 ...
分类:   
高可用Redis服务架构分析与搭建
高可用Redis服务架构分析与搭建
基于内存的Redis应该是目前各种web开发业务中最为常用的key-value数据库了,我们经常在业务中用其存储用户登陆态(Session存储),加速一些热数据的查询(相比较mysql而言,速度有数量级的提升),做简单的消息队列 ...
分类:   
Kafka 集群在马蜂窝大数据平台的优化与应用扩展
Kafka 集群在马蜂窝大数据平台的优化与应用扩展
Kafka 是当下热门的消息队列中间件,它可以实时地处理海量数据,具备高吞吐、低延时等特性及可靠的消息异步传递机制,可以很好地解决不同系统间数据的交流和传递问题。Kafka 在马蜂窝也有非常广泛的应用,为很多核心 ...
分类:   
如何让你的Nginx 提升10倍性能?
如何让你的Nginx 提升10倍性能?
提升Web应用的性能从未像今天这样刻不容缓。在线经济活动的比例日益提高,就连发展中国家和地区的经济活动都已经有5%以上在线进行了(相关数据请参考本文后面的资源)。在这个超级链接、随时在线的现代世界,用户的 ...
分类:   
2020 年 7 月编程语言排行榜
2020 年 7 月编程语言排行榜
TIOBE 2020 年 7 月份的编程语言排行榜已经公布,官方的标题是:R 语言的排名达到了历史最高位。R 语言一种自由软件编程语言与操作环境,主要用于统计分析、绘图、数据挖掘。也有人把 R 语言用作矩阵计算,其分析速 ...
分类:   
8场5胜,微服务VS单体架构
8场5胜,微服务VS单体架构
越来越多的组织开始放弃单体应用,逐步转向微服务的架构模式–将业务流程分为多个独立的服务。例如,在一个机票预订中,就可能涉及许多个单独的过程:在航空公司预订机票,付款,并在机票成功预订后向客户发送确认信 ...
分类:   
Science评论:量子计算目前最大的挑战,在0和1之间
Science评论:量子计算目前最大的挑战,在0和1之间
2019年10月,谷歌的一项关于量子计算的研究登上了Nature封面。谷歌声称用53个量子比特的量子计算机Sycamore实现了quantum supremacy,引起了学界的广泛关注。论文中指出,他们的量子计算机用3分20秒完成了一项任务, ...
分类:   
Python 为什么推荐蛇形命名法?
Python 为什么推荐蛇形命名法?
关于变量的命名,这又是一个容易引发程序员论战的话题。如何命名才能更具有可读性、易写性与明义性呢?众说纷纭。本期“Python为什么”栏目,我们将聚焦于变量命名中的连接方式,来切入这块是非之地,想要回答的问题 ...
分类:   
Redis 6.0 除了多线程,别忘了这个牛逼特性!
Redis 6.0 除了多线程,别忘了这个牛逼特性!
当tracking开启时, Redis会"记住"每个客户端请求的key,当key的值发现变化时会发送失效信息给客户端(invalidation message)。失效信息可以通过RESP3协议发送给请求的客户端,或者转发给一个不同的连接(支持RESP ...
分类:   
分布式图数据库在贝壳的应用实践
分布式图数据库在贝壳的应用实践
图数据库的应用场景非常广:搜索、推荐、关系图谱、知识图谱等等。目前贝壳也有各种场景需要使用到图数据库,但选型各不相同,有的部门使用JanusGraph,有的使用Neo4j,每个有需要的部门都得从头搭建一套。所以我们 ...
分类:   
5个基本Linux命令行工具的现代化替代品
5个基本Linux命令行工具的现代化替代品
在日常使用 Linux/Unix 系统时,我们会使用许多命令行工具来完成我们的工作,并理解和管理我们的系统,像 du 用于监视磁盘利用率,top 用于显示系统资源。其中一些工具已经存在很长时间了。例如,top 于 1984 年首次 ...
分类:   

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

 

GMT+8, 2020-8-5 16:25 , Processed in 0.164501 second(s), 19 queries .