Jay Kreps是来自LinkedIn的首席工程师,他表示日志几乎在计算机产生的时候就存在,除了可用在分布式计算或者抽象分布式计算模型内部之外,还有广泛的用途。本文中他讲述的日志的原理和通过把日志用做单独服务来实现数据集成、实时数据处理以及分布式系统设计。文章内容非常干货,值得学习。
以下是原文:
我在六年前的一个令人兴奋的时刻加入到LinkedIn公司。从那个时候开始我们就破解单一的、集中式数据库的限制,并且启动到特殊的分布式系统套件的转换。这是一件令人兴奋的事情:我们构建、部署,而且直到今天仍然在运行的分布式图形数据库、分布式搜索后端、Hadoop安装以及之一代和第二代键值数据存储。
从这一切里我们体会到的最有益的事情是我们构建的许多东西的核心里都包含一个简单的理念:日志。有时候也称作预先写入日志或者提交日志或者事务日志,日志几乎在计算机产生的时候就存在,同时它还是许多分布式数据系统和实时应用结构的核心。
不懂得日志,你就不可能完全懂得数据库,NoSQL存储,键值存储,复制,paxos,Hadoop,版本控制以及几乎所有的软件系统;然而大多数软件工程师对它们不是很熟悉。我愿意改变这种现状。在这篇博客文章里,我将带你浏览你必须了解的有关日志的所有的东西,包括日志是什么,如何在数据集成、实时处理和系统构建中使用日志等。
bǎihé。一、释义1、开合,指运用手段使联合或分开。本为战国时纵横家分化、拉拢的游说之术。2、今义泛指分化、。 捭阖的拼音:bǎihé,捭阖的本义是开阖。捭就是拨动,阖就是闭藏。《鬼谷子》认为一开一...
1、ERP: 公司資源方案即 ERP (Enterprise Resource Planning),由英国 Gartner Group 企业于1990年明确提出。 公司資源方案是 MRP II(公司生...
今天支付宝蚂蚁庄园2020年7月14日庄园小课堂的答案是什么呢?蚂蚁庄园庄园小课堂2020年7月14日的问题是:食品的保质期其实指的是?和手指上长倒刺,很可能是因为?和以下哪种动物的瞳孔是长方形的?...
记者6日从国家文物局获悉,中法双方6日在京签署合作文件,就巴黎圣母院修复开展合作,中国专家将参与巴黎圣母院修复工作。 根据这份文件,中法双方将在2020年确定巴黎圣母院保护修复合作的主题、模式及中方...
板材要环保的,连工加料得多钱一平方,有说三百的,有说七百的,价值差那。 我们以一个2.4米宽2.8米高的衣柜举例来阐明木匠打造一个衣柜需要几多钱,到底自制不自制。凭据今朝的市场价,木匠板18m...
长沙晚报掌上长沙8月25日讯(全媒体记者 张洋子)如果今天你今天在五一广场,看到心型红灯,这不是眼花!记者从市交警支队获悉,为了迎接七夕节,长沙交警将信号灯中的红灯调整为心形,陪你浪漫一天。 据悉,...