正文

分布式技术追踪2017年第十七期

author  author  2022-08-29  221

关键词：

分布式系统实践

1. Kudu vs HBase

http://dwz.cn/5PF5gq

摘要: Cloudera在2016年发布了新型的分布式存储系统—kudu, kudu从外部形态上来说和HBase非常像, 这篇文章分析了二者的差异和定位.

2. Leaf——美团点评分布式ID生成系统

http://dwz.cn/5PFDFZ

摘要: 又一篇介绍分布式ID生成系统的文章, 思路大体上相同, 一些细节的优化值得学习.

微服务技术

1. 基于Prometheus的数据库监控

http://dwz.cn/5PRhog

摘要: Prometheus号称开源版本的borgmon, 这篇文章简单介绍了borgmon和基于Prometheus的监控.

2. 基于Neutron的Kubernetes SDN实践经验之谈

http://dwz.cn/5R5Msb

摘要: Neutron可以说是功能最完善的SDN实现, 不过大都用在OpenStack上, 本文介绍了把Neutron引入K8s的实践经验, 挺有意义.

高可用技术

1. kafka数据可靠性深度解读

http://dwz.cn/5PFq4u

摘要: 这篇文章深入分析了kafka保证数据可靠性的机制, 包括数据复制, Leader选举, 消息发送等内容, 并且给出了不同可靠性配置下的性能测试.

2. 如何完美使用Paxos算法，服务生产线上的大规模集群？

http://dwz.cn/5QKOQs

摘要: Paxos算法可以用来保证多个副本之间的数据一致性问题, 但是当集群中出现故障机器时, 就需要进行副本的数据迁移, 此时就意味着Paxos的组成员需要发生变化. 本文介绍了基于Paxos实现的一致性的组成员变更算法, 可以完美解决这个问题.

丰富多彩的计算机世界

1. 怎样让自己成为不可替代的程序员？

http://dwz.cn/5PFtsh

摘要: 上学的时候, 往往觉得那些学习好, 技术牛的人就一定能取得好成绩, 就像武侠小说中的绝顶高手. 工作之后才发现, 没有什么东西难到需要爱因斯坦的智商才能做出来的, 多数情况下, 大家智商差不多, 一个人的成功往往是很多非技术因素促成的, 这篇文章提出的3个品质我很认同.

2. 如何重构“箭头型”代码

http://coolshell.cn/articles/17757.html

摘要: 嵌套的if-else往往容易造成代码的可读性下降, 本文提出了几种重构的方法, 非常值得学习

分布式技术追踪2017年第四十七期

分布式系统实践1. 直击阿里双11神秘技术：PB级大规模文件分发系统“蜻蜓”https://mp.weixin.qq.com/s/J0O4jD0d4jCjU56wpEJu1w摘要: 2017天猫双11，交易峰值32.5万/秒，支付峰值25.6万/秒，数据库处理峰值4200万次／秒，再次刷新了记录... 查看详情

分布式技术追踪2017年第三十七期

分布式系统实践1. 微信开源PhxQueue：高可用、高可靠、高性能的分布式队列https://mp.weixin.qq.com/s/Hr4TUg8o1AQkowQpSDIhYA摘要: PhxQueue是微信开源的一款基于Paxos协议实现的高可用、高吞吐和高可靠的分布式队列，保证At-Least-OnceDeli... 查看详情

分布式技术追踪2018年第十七期

分布式系统实践1. 从HBase中移除WAL？3DXPoint技术带来的变革https://mp.weixin.qq.com/s/GQeVyR8qMnvHl14xJgaUWA摘要: 借助非易失内存消除HBase的WAL确实是可以撼动HBase架构的重大特性,期待更多细节公布.2. 认清性能问题https://mp.weixin.qq... 查看详情

分布式技术追踪2018年第七期

分布式系统实践1. Apache下流处理项目巡览https://mp.weixin.qq.com/s/HCKpLP0bvuBNWaQFQWLp0g摘要: 最近几年，数据的生成、消费、处理以及分析的速度惊人地增长，社交媒体、物联网、游戏等领域产生的数据都需要以接近实时的速度... 查看详情

分布式技术追踪2017年第五十一期

分布式系统实践1. 时序数据库技术体系–初识InfluxDBhttp://hbasefly.com/2017/12/08/influxdb-1/摘要: InfluxDB是一款非常优秀的时间序列数据库,这篇文章概要性的介绍了InfluxDB的原理.2. etcdv3原理分析https://yuerblog.cc/2017/12/10/principle-... 查看详情

分布式技术追踪2017年第四十三期

分布式系统实践1. LogDevice：来自Facebook的分布式日志数据存储系统http://www.infoq.com/cn/news/2017/10/LogDevice-Facebook摘要: LogDevice是Facebook研发的新一代日志存储系统,这篇文章简要介绍了LogDevice的设计要点,Facebook计划年底开源,到... 查看详情

分布式技术追踪2017年第十三期

分布式系统实践1. 阿里HBase超详实践总结http://dwz.cn/5D5Q21摘要: 这篇文章详细解释了阿里HBase在跨机房复制,高可用等方面的工作,特别是多集群的数据复制方案,非常值得参考和学习.2. 龙(Dragon)-facebook分布式图索引查询引... 查看详情

分布式技术追踪2017年第三期

p.p1{margin:0.0px0.0px0.0px0.0px;font:31.2px"HelveticaNeue";color:#111111}p.p2{margin:0.0px0.0px0.0px0.0px;font:17.3px"HelveticaNeue";color:#222222}p.p3{margin:0.0px0.0px0.0px0.0px;font:17.3px"Helveti 查看详情

分布式技术追踪2017年第一期

分布式系统实践1. 大话分布式系统理论基础http://dwz.cn/4UWN7i摘要:一致性是分布式系统的理论基础,这篇文章从2PC,3PC开始,概述了支撑分布式系统一致性的各个理论,便于大家再进行更深入和细致的学习.2. 美团云混合存储... 查看详情

分布式技术追踪2017年第十四期

分布式系统实践1. 稳定和性能如何兼顾？58大数据平台的技术演进与实践http://dwz.cn/5GIKUX摘要: 本文将为你分享58大数据平台在最近一年半内技术演进的过程，包括：58大数据平台目前的整体架构是怎么样的；最近一年半的... 查看详情

分布式技术追踪2017年第四十六期

分布式系统实践1. 分布式系统的时间https://mp.weixin.qq.com/s/NwFzR_rwHCrWxfxrG9h4Qw摘要: 时间对于我们日常生活来说在普通不过了,但是在分布式系统中获取精确的时间却非常困难.这篇文件介绍了分布式系统几种常用的解决方案.2.... 查看详情

分布式技术追踪2017年第二十三期

分布式系统实践1. 比较ApacheHadoop生态系统中不同的文件格式和存储引擎的性能http://dwz.cn/63s0D7摘要: 这篇文章提出了在ApacheHadoop生态系统中对比一些当前流行的数据格式和可用的存储引擎的性能：ApacheAvro,ApacheParquet,ApacheHBa... 查看详情

分布式技术追踪2017年第四十二期

分布式系统实践1. badger一个高性能的LSMK/Vstorehttp://colobu.com/2017/10/11/badger-a-performant-k-v-store摘要: 一款专门为SSD设计的高性能KV存储引擎,相比于RocksDB,badger把key和value分开存储,LSM中只存储key和value的offset,而把value存储在WAL中,... 查看详情

分布式技术追踪2017年第五期

p.p1{margin:0.0px0.0px0.0px0.0px;font:17.3px"HelveticaNeue";color:#666666}p.p2{margin:0.0px0.0px0.0px0.0px;font:31.2px"HelveticaNeue";color:#111111}p.p3{margin:0.0px0.0px0.0px0.0px;font:17.3px"Helveti 查看详情

分布式技术追踪2017年第六期

分布式技术追踪2017年第十二期

分布式技术追踪2017年第四十四期

分布式系统实践1. 分布式键值存储Dynamo的实现原理https://draveness.me/dynamo摘要: Dynamo是一篇比较老的论文了,如果大家之前没有读过论文,不妨读读这篇文章,可以对Dynamo的核心技术有一个整体的了解.2. 通俗说Sparkhttps://mp.we... 查看详情

分布式技术追踪2017年第五十期

分布式系统实践1. 系统设计高频：设计分布式文件系统GoogleFileSystemhttps://mp.weixin.qq.com/s/RzPgT4eIEcqFOZM6xmDGpw摘要: 这篇文章讲gfs的文章我觉得写的特别好,不是一味的翻译文章,而是从为什么讲到怎么做,让我们可以更深刻的理... 查看详情