分布式技术追踪2017年第十三期

author author     2022-08-26     250

关键词:

分布式系统实践

1. 阿里HBase超详实践总结

http://dwz.cn/5D5Q21

摘要: 这篇文章详细解释了阿里HBase在跨机房复制, 高可用等方面的工作, 特别是多集群的数据复制方案, 非常值得参考和学习.

2. 龙(Dragon) - facebook 分布式 图索引查询引擎

http://dwz.cn/5FhNVM

摘要: Facebook的Dragon是一个用嵌入式RocksDB作为存储引擎的分布式图数据库索引服务, Dragon运用了很多优化技术将id1和id2的关系和对象数据在同一个物理机上共存使得查询变得更加高效, 满足”好友的生日”这类的查询请求

服务化和虚拟化技术

1. 基于Nginx和Consul构建高可用及自动发现的Docker服务架构

http://dwz.cn/5D5qCQ

摘要: Consul是一款可定制性比较强的开源服务发现组件, 功能完毕, 这篇文章结合Consul Template来兼容已有应用, 构建服务发现系统.

2. Kubernetes 1.6:大规模的多用户、多负载支持

http://dwz.cn/5E81KU

摘要: K8s 1.6于3月28日发布, 支持的节点规模扩充到5000个, 15万个pod, 同时在调度, 存储上还丰富了很多新功能.

高可用技术

1. 技术解读:Facebook开源内存数据库Beringei,如何做到极致的压缩率

http://dwz.cn/5DiAVX

摘要: Facebook开源的Beringei针对时间序列数据的特点, 采用特殊的压缩算法, 可以获取近10倍的存储容量, 查询延时缩短了73倍, 吞吐量提高了14倍, 做度量数据存储的同学不妨参考参考.

丰富多彩的计算机世界

1. 旅游推荐系统的演进

http://dwz.cn/5Dibpl

摘要: 很多产品中都少不了推荐行为, 这篇文章非常详细的介绍了美团酒旅团队的个性化推荐策略, 对推荐系统感兴趣的同学千万不要错过.

2. 百度朱凯华:智能搜索和对话式OS最新技术全面解读

http://dwz.cn/5DI783

摘要: 这篇文章记录了我厂首席架构师朱凯华在上海计算机学会做的演讲, 高屋建瓴的介绍了AI在百度搜索和对话交互中的作用, 非常值得阅读, 推荐给大家.

技术分享

分布式技术追踪2017年第二十三期

分布式系统实践1. 比较ApacheHadoop生态系统中不同的文件格式和存储引擎的性能http://dwz.cn/63s0D7摘要: 这篇文章提出了在ApacheHadoop生态系统中对比一些当前流行的数据格式和可用的存储引擎的性能:ApacheAvro,ApacheParquet,ApacheHBa... 查看详情

分布式技术追踪2018年第十三期

分布式系统实践1. 细数云计算里的虚拟化https://mp.weixin.qq.com/s/AFsX1uQ6YzYePGa4MNWfGQ摘要: 虚拟化技术有很长历史了,这篇文章总结了AWS的虚拟化技术演变过程.2. 阳振坤:当我们在谈论金融级分布式数据库的时候,其实是在... 查看详情

分布式技术追踪2017年第三期

p.p1{margin:0.0px0.0px0.0px0.0px;font:31.2px"HelveticaNeue";color:#111111}p.p2{margin:0.0px0.0px0.0px0.0px;font:17.3px"HelveticaNeue";color:#222222}p.p3{margin:0.0px0.0px0.0px0.0px;font:17.3px"Helveti 查看详情

分布式技术追踪2017年第五十一期

分布式系统实践1. 时序数据库技术体系–初识InfluxDBhttp://hbasefly.com/2017/12/08/influxdb-1/摘要: InfluxDB是一款非常优秀的时间序列数据库,这篇文章概要性的介绍了InfluxDB的原理.2. etcdv3原理分析https://yuerblog.cc/2017/12/10/principle-... 查看详情

分布式技术追踪2018年第三期

分布式系统实践1. InfluxDBTSM存储引擎之TSMFilehttp://hbasefly.com/2018/01/13/timeseries-database-4/摘要: influxDB是一款非常知名的时间序列数据库,这篇文章重点介绍了influxDB的存储引擎TSM的细节,帮助大家理解influxDB是如何实现高效存储... 查看详情

分布式技术追踪2017年第十七期

分布式系统实践1. KuduvsHBasehttp://dwz.cn/5PF5gq摘要: Cloudera在2016年发布了新型的分布式存储系统—kudu,kudu从外部形态上来说和HBase非常像,这篇文章分析了二者的差异和定位.2. Leaf——美团点评分布式ID生成系统http://dwz.cn/5PF... 查看详情

分布式技术追踪2017年第十二期

p.p1{margin:0.0px0.0px0.0px0.0px;font:31.2px"HelveticaNeue";color:#111111}p.p2{margin:0.0px0.0px0.0px0.0px;font:17.3px"HelveticaNeue";color:#222222}p.p3{margin:0.0px0.0px0.0px0.0px;font:17.3px"Helveti 查看详情

分布式技术追踪2017年第十四期

分布式系统实践1. 稳定和性能如何兼顾?58大数据平台的技术演进与实践http://dwz.cn/5GIKUX摘要: 本文将为你分享58大数据平台在最近一年半内技术演进的过程,包括:58大数据平台目前的整体架构是怎么样的;最近一年半的... 查看详情

分布式技术追踪2017年第四十二期

分布式系统实践1. badger一个高性能的LSMK/Vstorehttp://colobu.com/2017/10/11/badger-a-performant-k-v-store摘要: 一款专门为SSD设计的高性能KV存储引擎,相比于RocksDB,badger把key和value分开存储,LSM中只存储key和value的offset,而把value存储在WAL中,... 查看详情

分布式技术追踪2017年第十六期

 分布式系统实践1. 微信高可用分布式数据库PhxSQL设计与实现http://dwz.cn/5MDqea摘要: 微信团队的PhxSQL的文章之前也推荐过,本期再推荐一篇整体介绍PhxSQL的文章,相关代码已经开源.2. 以交易系统为例,看分布式事务架... 查看详情

分布式技术追踪2017年第三十二期

分布式系统实践1. 数据一致性-分区可用性-性能——多副本强同步数据库系统实现之我见http://hedengcheng.com/?p=892摘要: 这篇文章非常深入的解释了数据一致性的问题和解决方案,强烈推荐阅读.2. 阿里10年分布式数据库技... 查看详情

分布式技术追踪2017年第十八期

分布式系统实践1. 一文读懂大数据计算框架与平台http://dwz.cn/5SgDC5摘要: 这篇文章从批处理模型,流式计算模型和交互式分析模型三个角度总结了开源大数据框架的特点,对于大家了解大数据平台的全貌有一定的帮助.2. ... 查看详情

分布式技术追踪2017年第五十二期

分布式系统实践1. 换个角度看Aurora:缘何“万能”?对比TiDB有何不同?https://mp.weixin.qq.com/s/iOqRC2M8e5E5-89At-w2Lw摘要: Aurora是AWS里非常重要的一个数据库中间件,2017年在SIGMOD上发表了论文阐述Aurora的设计理念,这篇文章进行了... 查看详情

分布式技术追踪2017年第十九期

分布式系统实践1. BigData-‘基于代价优化’究竟是怎么一回事?http://dwz.cn/5Vq8T8摘要: 很多同学应该都有认识,SQL的join操作很可能是性能杀手,如果写的不好,性能可能会大幅度下降.很多SQL引擎都尝试进行join的优化,其中基... 查看详情

分布式技术追踪2017年第四十一期

分布式系统实践1. ApacheBeam实战指南之基础入门https://mp.weixin.qq.com/s/rrGR7sWRkrOZ82TrrqFT9Q摘要: Beam是一套能同时支持流式和批量计算框架的SDK,可以方便的实现业务逻辑同时灵活的选择不同的运行框架而无需修改代码,本文是一... 查看详情

分布式技术追踪2017年第二十二期

分布式系统实践1. 列式存储的另一面http://dwz.cn/62D4i5摘要: 列存是很多数据库的数据存储方式,可以有效压缩和访问相近的行,在很多场景下效率都很高.但是列存也并非没有缺点,这篇文章总结了列存的几个缺点,总之还是要... 查看详情

分布式技术追踪2018年第三十一期

分布式技术追踪2018年第三十一期分布式系统实践1. Google‘sNewBook:TheSiteReliabilityWorkbookhttp://highscalability.com/blog/2018/7/25/googles-new-book-the-site-reliability-workbook.html摘要: Google关于SRE的第二本书,相对第一本来说 查看详情

分布式技术追踪2018年第十一期

分布式系统实践1. 使用SystemTap进行I/O错误注入https://www.jianshu.com/p/3f9881ca1d30摘要: 故障注入是测试分布式系统非常有效的方法,然而故障注入并非易事,这篇文章介绍了使用SystemTap进行故障注入的思路,很值得借鉴.2. 2018存... 查看详情