在微服务架构中，一次请求往往涉及到多个模块，多个中间件，多台机器的相互协作才能完成。这一系列调用请求中，有些是串行的，有些是并行的，那么如何确定这个请求背后调用了哪些应用，哪些模块，哪些节点及调用的先后顺序?本文将为你揭晓答案。排查问题难度大，周期长。这样

公司交给了萌新小猿一个光荣而艰巨的项目，该项目需要使用分布式锁，这可难道了小猿。只是听说过分布式锁很牛掰，其他就一概不知了，唉，不懂就问呗，遂向老板请教。常见于数据的修改、删除操作。小猿：受教了，老板 3 分钟后你还有一场面试。小猿：好的，我已在钉钉申请将

想看分布式 ， 想了很久，今天终于看了！可是刚看完第一章的时候一点也不如意！因为刚看的时候，总想着赶紧来个直观的感受吧！赶紧看看分布式系统，到底是个东西。分布式系统的重要性也是不言而喻的，客户端的请求 可以传送到最近的服务器，获得高效的服务，同时服务器端避

前面几篇文章我们把爬虫相关的基本知识都讲的差不多啦。这一篇我们来聊一聊爬虫架构相关的内容。

分布式系统类型多，涉及面非常广，不同类型的系统有不同的特点，批量计算和实时计算就差别非常大。这篇文章会重点讨论分布式数据系统的设计，比如分布式存储系统，分布式搜索系统，分布式分析系统等。我们先来简单看下 Elasticsearch 的架构。Elastic

lustre是一个大规模的、安全可靠的，具备高可用性的集群文件系统，它是由SUN公司开发和维护。该项目主要的目的就是开发下一代的集群文件系统，可以支持超过10000个节点，数以PB的数量存储系统。新的集群文件系统采用了开源的lustre技术，由美国能源部开

下面是一个对Redis官方文档《A fifteen minute introduction to Redis data types》一文的翻译，如其题目所言，此文目的在于让一个初学者能通过15分钟的简单学习对Redis的数据结构有一个了解。Redis是一种

12月份重构公司社群活动产品，原来自己不是很成熟，按传统的形式处理卖票的信息-现在回首很多地方都会出问题。所以自然而然会遇到高并发下的库存问题。缺点也很显然，高并发肯定是有问题的！上面是转载，公司目前用的是第一种方案，实际并发数不多。

edis被大量用在分布式的环境中，自然而然分布式环境下的锁如何解决，立马成为一个问题。redis在2.6以后的版本中增加了Lua脚本的功能，可以通过eval命令，直接在RedisServer环境中执行Lua脚本，并且可以在Lua脚本中调用Redis命令。

redis被大量用在分布式的环境中，自然而然分布式环境下的锁如何解决，立马成为一个问题。redis在2.6以后的版本中增加了Lua脚本的功能，可以通过eval命令，直接在RedisServer环境中执行Lua脚本，并且可以在Lua脚本中调用Redis命令。

一个比较成规模的系统，很多东西依赖官方组件不能满足定制、灵活、性能、监控的要求，需要开发哪些东西？略微整理了一下，这也是我们的目标。1）自己的组件需要处处体现集中配置、集中日志、内置性能监视器、集中监控、自动部署等理念！2）考虑分期，先实现必要的东西，尽量

Processor：业务逻辑框架，不同的processor表示不同的任务类型。以MapTaskMaster为例，大概的原理如下图所示：

什么是负载均衡?百度词条里的解释是：负载均衡，英文叫Load Balance，意思就是将请求或者数据分摊到多个操作单元上进行执行，共同完成工作任务。它的目的就通过调度集群，达到最佳化资源使用，最大化吞吐率，最小化响应时间，避免单点过载的问题。物理层，数据

从5年前第一次进入阿里云实习到如今，我一直都在表格存储TableStore团队，参与分布式NoSQL的研发等工作。回顾自己这几年的经历，是从一个实习生逐渐成为团队内的核心成员，从一个算法竞赛选手成为分布式NoSQL领域专家的过程。阿里云存储提供安全可靠、低

这是我与我的学生Kuo Zhang、Salem Alqahtani通力合作的成果。我们在2016年的秋天写了这篇论文，并且将在ICCCN'17上介绍这篇文章。由于在训练过程中要涉及到庞大的数据集和模型的大小，因此机器学习平台通常是分布式平台，而且并行运行了

最近，经常有客户咨询如何低成本搭建高性能的海量数据搜索引擎，比如实现公众号检索、影讯检索等等。由于客户的数据在阿里云上，所以希望找到云上解决方案。笔者开始调研一些云上产品，很多人向我推荐了OpenSearch，所以花了点时间好好研究了下，用过之后发现效果不

一提起“分布式系统”，大家的第一感觉就是好高大上啊，深不可测，看各类大牛关于分布式系统的演讲或者书籍，也大多是一脸懵逼。本文期望用浅显易懂的大白话来就什么是分布式系统、分布式系统有哪些优势、分布式系统会面临哪里挑战、如何来设计分布式等方面的话题来展开讨论。

对架构一个高性能，高可用，可伸缩，可扩展的分布式网站进行了概要性描述，并给出一个架构参考。一部分为读书笔记，一部分是个人经验总结。一般使用负载均衡技术，实现高可用。对已知问题有有效的解决方案，对未知/潜在问题建立发现和防御机制。同时，需要注意与安全有关的各

构建一个分布式系统是很困难的。它需要可扩展性、容错性、高可用性、一致性、可伸缩以及高效。为了达到这些目的，分布式系统需要很多复杂的组件以一 种复杂的方式协同工作。例如，ApacheHadoop在大型集群上并行处理TB级别的数据集时，需要依赖有着高容错的文件