炼数成金 ›大数据

大数据

2020年你应该选择哪个Java微服务框架？: 至今，Java仍旧是用来构建Web应用的最流行编程语言之一 —— 但是它不得不面对诸如Go，Python和TypeScript等新语言的严峻挑战。在Java世界里，Spring框架早已成为微服务开发的事实标准。通过使用诸如Spring Boot和Sp ...; 分类: Java

10W+ K8s容器数量下，携程如何打造统一弹性调度体系: 携程K8s容器服务承载着各BU的核心业务，容器数量超过10W，并仍然以每年数倍的速度增长。调度体系也经历了从Mesos上的自研调度器到K8s fork版本的调度器演进过程。业务目标上，最初调度器只服务于在线应用发布，现在 ...; 分类: 架构

中台翻车纪实：一年叫停，员工转岗被裁，资源全浪费: 正值 2016 年“直播元年”，在短视频风口上，国内某大集团开始调动各业务线的精兵强将，组建新的业务单元，以“业务中台”的形式集合公司力量，想要迅速占领行业高地。公司对这个“业务中台”的投入也是实实在在的： ...; 分类: 架构

Apache Doris在美团外卖数仓中的应用实践: 业务团队日常经营分析最典型的场景就是各种维度下的自定义查询，面对如此灵活可变、所见即所得的应用场景，美团平台使用Kylin作为公司的主要MOLAP引擎。MOLAP是预计算生产，在增量业务，预设维度分析场景下表现良好 ...; 分类: 大数据

Serverless 的喧哗与骚动: Serverless 和很多词如微服务一样，是没有精确定义的，也没有事实的标准。什么是事实标准？Kubernetes 是事实标准；对 Java 程序员来说 Spring Boot / Spring Cloud 是事实标准。事实标准就是一种思想/方法论得到了 ...; 分类: 云计算

聊聊分布式事务，再说说解决方案: 分布式事务是企业集成中的一个技术难点，也是每一个分布式系统架构中都会涉及到的一个东西，特别是在微服务架构中，几乎可以说是无法避免，本文就分布式事务来简单聊一下。当我们的单个数据库的性能产生瓶颈的时候， ...; 分类: 分布式系统

Python-Cartopy包: 地理空间数据可视化: Cartopy 是为了向 Python 添加地图制图功能而开发的扩展库。该项目致力于以 matplotlib 包为基础，用简单直观的方式操作各类地理要素的成图。Cartopy 官网的画廊页面已经提供了很多绘图的例子，它们和官方文档一起， ...; 分类: Python

用漫画了解 Linux 内核到底长啥样！: 这幅漫画是以一个房子的侧方刨面图来绘画的。使用这样的一个房子来代表 Linux 内核。作为一个房子，最重要的莫过于其地基，在这个图片里，我们也从最下面的地基开始看起：地基（底层）由一排排的文件柜组成，井然有 ...; 分类: Linux

RabbitMQ与Kafka的技术差异以及使用注意点: RabbitMQ是一个消息代理，但是Apache Kafka是一个分布式流式系统。好像从语义上就可以看出差异，但是它们内部的一些特性会影响到我们是否能够很好的设计各种用例。例如，Kafka最适用于数据的流式处理，但是RabbitMQ ...; 分类: 架构

core-js 作者入狱 18 个月，2600 万次周下载的开源项目将如何？: 一位彪悍的俄罗斯程序员，名字叫丹尼斯·普什卡列夫（Denis Pushkarev），平时爱好就是飙摩托车。在一次事故中，他以 60 km/h的速度驾驶，结果撞了两个行人，一人现场死亡。根据俄罗斯联邦法律，他被判处有期徒刑 18 ...; 分类: JavaScript

谷歌、甲骨文史诗级版权诉讼案，10 年 API 之争下周开审: 最近一桩缠绵十年的案子，因为临审将近，又被大家翻出来。那就是甲骨文和谷歌 API 侵权之争。这桩案子起源于 2009 年，甲骨文斥资 74 亿美元收购发明了 Java 的 Sun Microsystems。次年甲骨文提起了对谷歌的诉讼，理 ...; 分类: Oracle

消息队列和 RocketMQ 入门总结: 消息队列顾名思义就是存放消息的队列，队列我就不解释了，别告诉我你连队列都不知道似啥吧？所以问题并不是消息队列是什么，而是消息队列为什么会出现？消息队列能用来干什么？用它来干这些事会带来什么好处？消息队 ...; 分类: 分布式系统

2020年，5种将死的编程语言: 曾几何时，几乎每个人都在使用Perl语言编程。但是那些经常使用的人慢慢地发现，关于这个Perl语言似乎总是有点不对劲。至少我知道有这么个叫做“piecemeal”的编程语言，它的创造者似乎就只是将这个功能堆在另一个功 ...; 分类: 编程开发

RabbitMQ和Kafka的比较: 异步消息可以作为解耦消息的生产和处理的一种解决方案。提到消息系统，我们通常会想到两种主要的消息模式——消息队列和发布/订阅模式。利用消息队列可以解耦生产者和消费者。多个生产者可以向同一个消息队列发送消 ...; 分类: 分布式系统

盘点100个最受欢迎的Java库，看看用过那几个？: 续两年，junit 二度成为 GitHub 中最受欢迎的 Java 库。与此同时，Java 日志记录 API slf4j 获得第二名，log4j 排名第四。此外，谷歌的开源项目 Guava 来势汹汹，勇夺第三名，该库包含了一系列谷歌内含的核心 Java ...; 分类: Java

Kafka为什么这么快？: 在过去的几年里，软件架构领域发生了巨大的变化。人们不再认为所有的系统都应该共享一个数据库。微服务、事件驱动架构和CQRS（命令查询的责任分离 Command Query Responsibility Segregation）是构建当代业务应用程 ...; 分类: 分布式系统

金融级数据库分布式改造的架构设计要点: 银行业从最初的手工记账到会计电算化，到金融电子化，再到现在的金融科技，可以看到金融与科技的结合越来越紧密，人工智能、大数据、物联网、区块链等新兴技术改变了金融的交易方式，为金融行业的创新前行提供了源源 ...; 分类: 架构

发布 TensorFlow Quantum：用于量子机器学习的开源库: 机器学习（Machine Learning）虽然不能准确地模拟自然界中的系统，但可以学习系统模型并预测系统的行为。在过去的几年中，经典的机器学习模型在解决具有挑战性的科学问题方面展现出了强大的潜力，并在癌症检测、预测 ...; 分类: 超级计算

谷歌 Fuchsia OS 进入开发者测试阶段，它真的会代替安卓吗？: 在过去的 8 到 10 年里，移动市场一直被两个我们都熟悉的系统所主导: 安卓和 iOS。我们总是认为现在了解的事物永远不会结束，但是随着科技的发展，谷歌已经不再这么认为。自 2016 年 8 月以来，谷歌一直致力于研发全 ...; 分类: 开源软件

David Harold：云技术将开启Netflix般的云游戏时代: 在智能手机、现代电脑游戏和第一代游戏机出现之前的很长一段时间里，互动娱乐的最佳体验只能在游戏厅中得到。在今天的遥远记忆中，在大多数国家/地区，游戏厅在70年代、80年代和90年代初期都装备了最先进的电子游戏 ...; 分类: 云计算

Zuul：为了改进CI/CD而生，顺便淘汰了Jenkins: Jenkins是一个了不起的软件。作为一个执行和自动化引擎，它是你能找到的最好的引擎之一。Jenkins是无数持续集成（CI）系统的关键组成部分，但它本身不是一个CI系统，它只是为你运行东西。它做得非常好，有各种内置的 ...; 分类: 开源软件

LogDevice：一种用于日志的分布式数据存储系统: 说到日志，它就是一个将有序序列的不可变记录记下来，并将此记录可靠地保存下来的最简单的方法。如果想要构建一套数据密集型分布式服务，你可能需要一两套日志。在Facebook，我们构建了许多用来存储和处理数据的大型 ...; 分类: 分布式系统

什么？搞不定Kafka重复消费？: 给每个消息都设置一个独一无二的 key，消费的时候把 key 记录下来，然后每次消费新的消息的时候都查询一下，看当前消息的这个 key 是否消费过，如果没有消费过才进行消费。（这种方式好想，但是其实实现起来一点也不 ...; 分类: 分布式系统

Tomcat 爆出高危漏洞！: 2020年02月20日， 360CERT 监测发现国家信息安全漏洞共享平台(CNVD) 收录了 CNVD-2020-10487 Apache Tomcat文件包含漏洞。 CNVD-2020-10487/CVE-2020-1938是文件包含漏洞，攻击者可利用该高危漏洞读取或包含 Tomca ...; 分类: 安全

携程Hadoop跨机房架构实践: 携程Hadoop是从2014年引进的，基本上每年较前一年以两倍的速度在增长，我们对Hadoop集群做了大量性能方面的改造和优化。目前，HDFS存储层面拥有数百PB的数据，数千的节点，分为4个namespace做Federation，自研了name ...; 分类: Hadoop

10个节省时间和改善工作流的Git技巧: 这 10 个 Git 小技巧，不仅可以节省时间，而且能改善你的工作流程。根据手册，Git 被定义为傻瓜式内容追踪器，它功能丰富，但有些功能却让人望而生畏。因此，我们只是重复使用那几个被记住的命令，而没有充分使用。; 分类: 开源软件

影响超10亿设备，博通和Cypress芯片曝惊天漏洞，苹果、华为、三星等中招: 最新发现的一个 WiFi 芯片漏洞，影响全球超 10 亿设备，华为、苹果、谷歌、三星和亚马逊等纷纷中招。26日，在旧金山举办的 RSA 大会 2020 上，ESET 的网络安全研究人员披露了一个最新的 WiFi 芯片漏洞。这个漏洞被称 ...; 分类: 安全

毛骨悚然！拥有超30亿人脸数据的美国AI公司被黑，600多家客户名单被盗: 2月27日消息，美国人脸识别创企Clearview AI称其整个客户名单被盗！要知道，这可不是一家简单的AI创企，据说600多家执法机构及一些私人安保公司都在使用它的人脸识别产品。Clearview AI从网络社交媒体上抓取了超过30 ...; 分类: 安全

重磅！三大运营商网间结算重大调整：移动迎重磅利好，电联失意...: 刚刚，网上流出一份文件：工业和信息化部发布了一份关于调整互联网骨干网网间结算政策的通知。文件中指出，为深入贯彻落实网络强国战略，构建科学合理的网间结算关系，加快推进网络设施建设和提速降费，促进我国互联 ...; 分类: 网络技术

马蜂窝 IM 移动端架构的从 0 到 1: 移动互联网技术改变了旅游的世界，这个领域过去沉重的信息分销成本被大大降低。用户与服务供应商之间、用户与用户之间的沟通路径逐渐打通，沟通的场景也在不断扩展。这促使所有的移动应用开发者都要从用户视角出发， ...; 分类: 架构

1 2 3 456 7 8 9 10 ... 186 / 186 页下一页

热门频道

大数据
商业智能

量化投资
科学探索
创业

即将开课

热门文章

GMT+8, 2020-8-5 07:35 , Processed in 0.123698 second(s), 19 queries .