炼数成金 大数据
订阅

大数据

16 岁高中生把 iPhone7 改造成 Linux 服务器
16 岁高中生把 iPhone7 改造成 Linux 服务器
近日,国外一名 16 岁的开发者发布了一则视频,展示自己为一台已经无法正常使用的 iPhone 7 成功移植了 Ubuntu 20.04,并将其作为服务器来使用。发布视频的开发者网名为 Daniel Rodriguez,是一名在校高中生。据 Dan ...
分类:   
分布式文件系统架构对比
分布式文件系统架构对比
文件系统是计算机中一个非常重要的组件,为存储设备提供一致的访问和管理方式。在不同的操作系统中,文件系统会有一些差别,但也有一些共性几十年都没怎么变化:数据是以文件的形式存在,提供 Open、Read、Write、Se ...
分类:   
开发者供不应求,垃圾项目在去年已造成2.1万亿美元损失
开发者供不应求,垃圾项目在去年已造成2.1万亿美元损失
近日,信息和软件质量联盟(CISQ)发布的一份报告指出,受疫情影响,很多企业和组织在 2020 年都开始大力向数字化转型靠拢。在这种背景下,基于软件的创新和发展也在迅速扩大。然而,软件数量在实现了迅猛增长的同时 ...
分类:   
除了 Docker,我们还有哪些选择?
除了 Docker,我们还有哪些选择?
大约 4 年前的容器领域,Docker 是唯一的选择。然而,如今情况已然大不同,Docker 不再是是唯一的选择,它只不过是一个容器引擎而已。我们可以用 Docker 构建、运行、拉取、推送或检查容器镜像,但是这里的每一项任 ...
分类:   
Kubernetes 如果是个水族馆
Kubernetes 如果是个水族馆
Kubernetes 有很多东西,各种各样的名词,就像洋葱一样,一层一层包裹在一起。许多 Kubernetes 的介绍图都是这样的,解释了涵盖的所有名词。从技术上讲,它是准确的,但是对一些人而言不是很有帮助,本文将其类比于 ...
分类:   
什么是流式输出?
什么是流式输出?
流式(Stream)亦称响应式,是一种基于异步数据流研发框架,是一种概念和编程模型,并非一种技术架构,目前在各技术栈都有响应式的技术框架,前端的React.js、RxJs,服务端以RxJava、Reactor,Android端的RXJava。由 ...
分类:   
因为传感器,10年后我们将会生活在一个极端透明的世界
因为传感器,10年后我们将会生活在一个极端透明的世界
2014年,在芬兰的一个传染病实验室里,卫生研究员佩特里·拉特拉(Petteri Lahtela)发现了一件奇怪的事情,他突然意识到他所研究的很多问题的条件都存在着重叠。例如,在检查一些医生认为互不相关的疾病时,比如莱 ...
分类:   
亚马逊前高管:2000从Sun转向Linux,奠基AWS
亚马逊前高管:2000从Sun转向Linux,奠基AWS
近日,亚马逊前高管 DanRose 公开表示,在 2000 年互联网泡沫破灭之时,资本市场枯竭,亚马逊那个时候每年还要烧上 10 亿美元。其中最大的支出是数据中心使用 Sun 服务器。而后他们用一年的时间淘汰了 Sun,开始采用 ...
分类:   
Linux内核开发者讨论删除老旧CPU平台
Linux内核开发者讨论删除老旧CPU平台
近日,知名 Linux 内核开发者 Arnd Bergmann 发起了一个讨论:删除一堆老旧 CPU 的支持。自从 Linux 5.10 官方宣布为 LTS 版本以来,他发现有一些 ARM 平台至少 5 年未维护或使用,因此他研究了这些看上去需要删除的 ...
分类:   
ZooKeeper集群“脑裂”问题处理大全
ZooKeeper集群“脑裂”问题处理大全
ZooKeeper 容错指的是:当宕掉几个ZooKeeper节点服务器之后,剩下的个数必须大于宕掉的个数,也就是剩下的节点服务数必须大于n/2,这样ZooKeeper集群才可以继续使用,无论奇偶数都可以选举Leader。例如5台ZooKeeper ...
分类:   
如何打造一个经常宕机的业务系统?
如何打造一个经常宕机的业务系统?
删库跑路专家、宕机行为艺术家、肥胖版吴彦祖--老K,曾经说过:“打造一个偶尔宕机的系统并不难,难的是经常宕机,一辈子宕机,从来没有稳定过的系统,这才是最难的。”但是,作为一个有追求的技术人,我们要迎男而 ...
分类:   
几乎无解的最强加密方法,终于被证实真的存在
几乎无解的最强加密方法,终于被证实真的存在
构建无法破解的密码,是众多密码学科学家的目标。一种被称为不可区分混淆的加密方式因为太过完美,多年来被认为无法实现。不过最近,三名研究者首次证明不可区分混淆是可行的,这或许是通往完美密码的重要一步。2018 ...
分类:   
2021年,互联网往何处去?
2021年,互联网往何处去?
2021年已正式开启,在这一年中,互联网大小巨头们会有哪些绕不过的关键词?创业公司有哪些值得尝试的新机会?今天,深燃送上一份“互联网奋斗指南”。对于巨头来说,反垄断是不得不面临的首要问题,有业内人士分析, ...
分类:   
TIOBE 1 月榜单:Python年度语言四连冠,C 语言再次第一
TIOBE 1 月榜单:Python年度语言四连冠,C 语言再次第一
TIOBE 本月公布了 2020 年度编程语言,Python 获得四连冠,是过去一年中最受欢迎的编程语言。Python 在 2020 年实现了 2.01% 的正增长;C ++紧随其后,增长 1.99%。而就本月的情况看,C 语言已经挤下 Java,再次第 ...
分类:   
Linux 终端查看最消耗 CPU 内存的进程
Linux 终端查看最消耗 CPU 内存的进程
本文介绍了Linux 终端如何查看最消耗 CPU 内存的进程。其中包括:CPU占用最多的前10个进程、内存消耗最多的前10个进程、虚拟内存使用最多的前10个进程等
分类:   
盘点2020年晋升为Apache TLP的大数据相关项目
盘点2020年晋升为Apache TLP的大数据相关项目
在过去一年有很多 Apache 孵化项目顺利毕业成顶级项目(Top-Level Project ,简称 TLP ),在这里我将给大家盘点 2020 年晋升为 Apache TLP 的大数据相关项目。在2020年一共有四个大数据相关项目顺利毕业成顶级项目 ...
分类:   
Redis为什么变慢了?常见延迟问题定位与分析
Redis为什么变慢了?常见延迟问题定位与分析
Redis作为内存数据库,拥有非常高的性能,单个实例的QPS能够达到10W左右。但我们在使用Redis时,经常时不时会出现访问延迟很大的情况,如果你不知道Redis的内部实现原理,在排查问题时就会一头雾水。很多时候,Redis ...
分类:   
Twitter 把 Kafka 当作存储系统使用
Twitter 把 Kafka 当作存储系统使用
当开发者通过 API 消费 Twitter 的公共数据时,他们需要获得可靠性、速度和稳定性方面的保证。因此,在不久前,我们推出了 Account Activity Replay API帮助开发者们提升他们系统的稳定性。这个 API 是一个数据恢复 ...
分类:   
Vue项目开发的常见配置封装
Vue项目开发的常见配置封装
admin ,进行一个二次迭代的开发,其项目本身非常的优质,而在其 template 中去进行一个更改能够使得项目在一开始有一个很好的基础环境,但是如果没有花时间去琢磨透其中三分明细。在后续排雷来说,无疑是非常的困难 ...
分类:   
实用 Nginx 极简教程,覆盖了常用场景
实用 Nginx 极简教程,覆盖了常用场景
Nginx (engine x) 是一款轻量级的 Web 服务器 、反向代理服务器及电子邮件(IMAP/POP3)代理服务器。反向代理(Reverse Proxy)方式是指以代理服务器来接受 internet 上的连接请求,然后将请求转发给内部网络上的服 ...
分类:   
史上最便捷搭建 ZooKeeper 服务器的方法
史上最便捷搭建 ZooKeeper 服务器的方法
ZooKeeper 是 Apache 的一个顶级项目,为分布式应用提供高效、高可用的分布式协调服务,提供了诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知和分布式锁等分布式基础服务。由于 ZooKeeper 便捷的使用方式 ...
分类:   
分布式锁用Redis好?还是Zookeeper好?
分布式锁用Redis好?还是Zookeeper好?
提到锁大家肯定有了解,像 Synchronized、ReentrantLock,在单进程情况下,多个线程访问同一资源,可以用它们来保证线程的安全性。不过目前互联网项目越来越多的项目采用集群部署,也就是分布式情况,这两种锁就有些 ...
分类:   
Rust 和 C 性能对比:排序
Rust 和 C 性能对比:排序
要得出哪种语言更快的结论是相当困难的,因为它取决于具体情况。但我们可以认为 Rust 在速度上是 C 语言的竞争对手,它比许多其他流行的语言如 Java 和 Python 速度更快。Rust 提供了很多功能,比如它注重速度、内存 ...
分类:   
一致性协议算法-2PC、3PC、Paxos、Raft、ZAB、NWR超详细解析
一致性协议算法-2PC、3PC、Paxos、Raft、ZAB、NWR超详细解析
在常见的分布式系统中,总会发生诸如机器宕机或网络异常(包括消息的延迟、丢失、重复、乱序,还有网络分区)等情况。一致性算法需要解决的问题就是如何在一个可能发生上述异常的分布式系统中,快速且正确地在集群内 ...
分类:   
我为什么从macOS迁移到FreeBSD?
我为什么从macOS迁移到FreeBSD?
不久前,macOS 还是我的日常工作必备之一。我购买了一台 macbook 笔记本,原因是底层的 BSD Unix 和它漂亮的图形界面。另外,我还有一个 iPhone 手机。但是,我放弃 macOS 也是因为这些相同的原因。我们可以这样看。 ...
分类:   
C++20标准 (ISO/IEC 14882:2020) 正式发布
C++20标准 (ISO/IEC 14882:2020) 正式发布
ISO C++ 委员会正式发布了C++20 标准,命名为 ISO/IEC 14882:2020。草案和正式版本存在细微的差异,因为标准委员会不一定完全采用草案的内容,通常是从草案中剔除部分内容再发布正式版。不过这对于普通开发者几乎没 ...
分类:   
聊聊CentOS Linux的关闭
聊聊CentOS Linux的关闭
上周二发生了一件对开源社区可能具有历史性影响的事情,红帽首席技术官Chris Wright和CentOS社区经理Rich Bowen分别宣布了CentOS Linux的未来和功能的重大变化,CentOS Linux 8将是CentOS的最后一个版本。展望未来, ...
分类:   
40岁C++没有中年危机
40岁C++没有中年危机
强大、灵活、复杂:C++ 的起源可以追溯到 40 年前,但它仍然是当今使用最广泛的编程语言之一。为了找出原因,TechRepublic 采访了 C++ 之父 Bjarne Stroustrup。C++ 的起源可以追溯到 1979 年,那时编程语言的创造者 ...
分类:   
为什么阿里不建议MySQL使用text类型?
为什么阿里不建议MySQL使用text类型?
众所周知,MySQL广泛应用于互联网的OLTP(联机事务处理过程)业务系统中,在大厂开发规范中,经常会看到一条“不建议使用text大字段类型”。下面就从text类型的存储结构,引发的问题解释下为什么不建议使用text类型 ...
分类:   
我的电脑不联网,很安全,黑客:你还有风扇呢
我的电脑不联网,很安全,黑客:你还有风扇呢
从1988年第一个网络蠕虫病毒诞生以来,「互联网危机四伏」的观念就已经深入人心。如果只是这样,不给电脑联网、禁止使用任何可移动储存介质,数据就安全了吗?但专门研究黑客攻击技术的研究者告诉我们,这个想法太天 ...
分类:   

热门频道

  • 大数据
  • 商业智能
  • 量化投资
  • 科学探索
  • 创业

即将开课

 

GMT+8, 2021-3-6 19:40 , Processed in 0.155873 second(s), 19 queries .