正文

分布式技术追踪2017年第十四期

author  author  2022-08-27  758

关键词：

分布式系统实践

1. 稳定和性能如何兼顾？58大数据平台的技术演进与实践

http://dwz.cn/5GIKUX

摘要: 本文将为你分享58大数据平台在最近一年半内技术演进的过程，包括：58大数据平台目前的整体架构是怎么样的；最近一年半的时间内我们面临的问题、挑战以及技术演进过程；以及未来的规划。

2. 斗鱼大数据的玩法

http://dwz.cn/5GV3PL

摘要: 这篇文章介绍了斗鱼大数据平台的基本架构, 包括对Hive, Impala, Spark, HBase等经典开源组件的运用, 纠结技术选型的同学可以拿来参考参考.

服务化和虚拟化技术

1. 当我们聊Consul服务发现的时候我们在聊什么

http://dwz.cn/5GACa6

摘要: Consul是一款功能完备可扩展性很强的开源服务发现组件, 这篇文章介绍了Consul的应用实践, 对Consul感兴趣的同学可以参考.

2. 隔离术之使用Hystrix实现隔离

http://dwz.cn/5GV05j

摘要: 微服务架构中很关键的一个技术因素就是服务故障隔离, Hystrix是Netflix开源的功能非常完整的服务延迟和容错库, 本文介绍了Hystrix的基本使用过程, 如果想深入了解, 可以查阅官方文档.

高可用技术

1. 如何设计API的限流(Rate Limit)功能

http://dwz.cn/5HIuVw

摘要: 对于高可用服务来说, 限流和降级非常重要, 本文介绍了4种限流器的模型, 帮助大家设计自己的限流器. 特别是, 文章中提到基于Redis获取全局数据实现限流器的方法, 可以参考借鉴.

2. 新浪微博百万用户分布式压测实践手记

http://dwz.cn/5HIWgb

摘要: 我们做高并发系统开发的时候最难的恐怕就是测试了, 在资源有限的情况下, 尽可能模拟高并发的场景还是很有挑战的. 这篇文章介绍了新浪微博基于Tsung实现的百万用户分布式压测实践, 非常值得学习.

丰富多彩的计算机世界

1. 劈开迷雾：蘑菇街搜索架构及搜索排序实践

http://dwz.cn/5GIUSr

摘要: 本文简要介绍了蘑菇街的搜索架构和排序算法, 可以让我们看到一个复杂的搜索引擎所需要必备的各个过程.

2. 一名合格的架构师应该具备哪些特质？

http://dwz.cn/5GVcxc

摘要: 本文作者王福强, 原挖财技术VP及首席架构师, 总结了架构师所应该具备的素质: 前瞻性眼光, 系统性的思考, 开放的心态, 终身的学习者.

分布式技术追踪2017年第三十四期

分布式系统实践1. Linearizability一致性验证http://dwz.cn/6pPYpb摘要: 一致性是分布式系统很常见的特性,Jepsen是验证分布式系统一致性的有力工具.这篇文件中介绍了Jepsen的原理,文章有点深奥,不太容易懂.2. 深入浅出阿里云新... 查看详情

分布式技术追踪2017年第二十四期

分布式系统实践1. Google和Linkedin的老司机是如何管理海量数据的http://dwz.cn/66Tkqx摘要: 一直都听说数据仓库里需要元数据管理,但是没看见过具体的设计.这篇文章总结了Google和Linkedin发布的元数据管理系统的论文和开源实现,... 查看详情

分布式技术追踪2018年第十四期

分布式系统实践1. 聊聊ChaosEngineering的历史、原则和最佳实践https://mp.weixin.qq.com/s/-8gpUlbmlDDyOf7AqaFdTAhttps://www.jianshu.com/p/c8f78b8db2a0?from=timeline&isappinstalled=0摘要: 混沌工程是进行分布式异常测试的一种有效手段,自Ne 查看详情

分布式技术追踪2017年第五十一期

分布式系统实践1. 时序数据库技术体系–初识InfluxDBhttp://hbasefly.com/2017/12/08/influxdb-1/摘要: InfluxDB是一款非常优秀的时间序列数据库,这篇文章概要性的介绍了InfluxDB的原理.2. etcdv3原理分析https://yuerblog.cc/2017/12/10/principle-... 查看详情

分布式技术追踪2017年第二十七期

分布式系统实践1. 分布式系统中的时间和顺序——关于Spanner中的Linearizabilityhttp://dwz.cn/6gcYDC摘要: 本文主要介绍了分布式系统中Linearizability概念，以及它与Serializability的区别，并介绍了Spanner中是如何通过TrueTime来实现Linear... 查看详情

分布式技术追踪2017年第四十三期

分布式系统实践1. LogDevice：来自Facebook的分布式日志数据存储系统http://www.infoq.com/cn/news/2017/10/LogDevice-Facebook摘要: LogDevice是Facebook研发的新一代日志存储系统,这篇文章简要介绍了LogDevice的设计要点,Facebook计划年底开源,到... 查看详情

分布式技术追踪2017年第十三期

分布式系统实践1. 阿里HBase超详实践总结http://dwz.cn/5D5Q21摘要: 这篇文章详细解释了阿里HBase在跨机房复制,高可用等方面的工作,特别是多集群的数据复制方案,非常值得参考和学习.2. 龙(Dragon)-facebook分布式图索引查询引... 查看详情

分布式技术追踪2017年第三期

p.p1{margin:0.0px0.0px0.0px0.0px;font:31.2px"HelveticaNeue";color:#111111}p.p2{margin:0.0px0.0px0.0px0.0px;font:17.3px"HelveticaNeue";color:#222222}p.p3{margin:0.0px0.0px0.0px0.0px;font:17.3px"Helveti 查看详情

分布式技术追踪2017年第一期

分布式系统实践1. 大话分布式系统理论基础http://dwz.cn/4UWN7i摘要:一致性是分布式系统的理论基础,这篇文章从2PC,3PC开始,概述了支撑分布式系统一致性的各个理论,便于大家再进行更深入和细致的学习.2. 美团云混合存储... 查看详情

分布式技术追踪2017年第十七期

分布式系统实践1. KuduvsHBasehttp://dwz.cn/5PF5gq摘要: Cloudera在2016年发布了新型的分布式存储系统—kudu,kudu从外部形态上来说和HBase非常像,这篇文章分析了二者的差异和定位.2. Leaf——美团点评分布式ID生成系统http://dwz.cn/5PF... 查看详情

分布式技术追踪2017年第四十六期

分布式系统实践1. 分布式系统的时间https://mp.weixin.qq.com/s/NwFzR_rwHCrWxfxrG9h4Qw摘要: 时间对于我们日常生活来说在普通不过了,但是在分布式系统中获取精确的时间却非常困难.这篇文件介绍了分布式系统几种常用的解决方案.2.... 查看详情

分布式技术追踪2017年第二十三期

分布式系统实践1. 比较ApacheHadoop生态系统中不同的文件格式和存储引擎的性能http://dwz.cn/63s0D7摘要: 这篇文章提出了在ApacheHadoop生态系统中对比一些当前流行的数据格式和可用的存储引擎的性能：ApacheAvro,ApacheParquet,ApacheHBa... 查看详情

分布式技术追踪2017年第四十二期

分布式系统实践1. badger一个高性能的LSMK/Vstorehttp://colobu.com/2017/10/11/badger-a-performant-k-v-store摘要: 一款专门为SSD设计的高性能KV存储引擎,相比于RocksDB,badger把key和value分开存储,LSM中只存储key和value的offset,而把value存储在WAL中,... 查看详情

分布式技术追踪2017年第五期

p.p1{margin:0.0px0.0px0.0px0.0px;font:17.3px"HelveticaNeue";color:#666666}p.p2{margin:0.0px0.0px0.0px0.0px;font:31.2px"HelveticaNeue";color:#111111}p.p3{margin:0.0px0.0px0.0px0.0px;font:17.3px"Helveti 查看详情

分布式技术追踪2017年第六期

分布式技术追踪2017年第十二期

分布式技术追踪2017年第五十期

分布式系统实践1. 系统设计高频：设计分布式文件系统GoogleFileSystemhttps://mp.weixin.qq.com/s/RzPgT4eIEcqFOZM6xmDGpw摘要: 这篇文章讲gfs的文章我觉得写的特别好,不是一味的翻译文章,而是从为什么讲到怎么做,让我们可以更深刻的理... 查看详情

分布式技术追踪2017年第十六期

分布式系统实践1. 微信高可用分布式数据库PhxSQL设计与实现http://dwz.cn/5MDqea摘要: 微信团队的PhxSQL的文章之前也推荐过,本期再推荐一篇整体介绍PhxSQL的文章,相关代码已经开源.2. 以交易系统为例，看分布式事务架... 查看详情