Ngnix负载均衡 在多台服务器之间有效地分配客户端请求或网络负载 通过仅向正常服务器发送请求确保高可用性和可靠性 业务不中断地情况下，按需弹性分配服务器资源 使用nginx做负载均衡的三大模块： upstream定义负载节点池 location模块进行URL匹配 proxy模块发送请求给upstream定义的节点池 upstream模块解读 nginx的负载均衡功能依赖于ngx_http_upstream_module模块，所支持的代理方式有proxy_pass(一般用于反向代理),fastcgi_pass(一般用于和动态程序交互)，memcached_pass，proxy_nex...

Tinyid介绍 Tinyid是滴滴开发的一款分布式ID系统，Tinyid是在美团（Leaf）的leaf-segment算法基础上升级而来，不仅支持了数据库多主节点模式，还提供了tinyid-client客户端的接入方式，使用起来更加方便。但和美团（Leaf）不同的是，Tinyid只支持号段一种模式不支持雪花模式。 Tinyid的特性 全局唯一的long型ID 趋势递增的id 提供http和java-client方式接入 支持批量获取ID 支持生成1,3,5,7,9…序列的ID 支持多个db的配置 Tinyid部署 JDK部署 [root@localhostpackages]tarzx...

本次使用服务器系统：CentOS8.264bit华为弹性云服务器从华为的云服务器控制台进入远程登陆 本次nginx的安装位置为/usr目录下 cd/usr/local nginx的相关环境安装 yum-yinstallgccpcre-develzlib-developensslopenssl-devel 遇到报错 rrorsduringdownloadingmetadataforrepository'epel': Statuscode:404forhttp://archives.fedoraproject.org/pub/archive/epel/8/Everything/x86_64/r...

Ngnix缓存 缓存的使用在各种项目中非常普遍，nginx作为一款高效的代理服务器，也提供了强大的缓存机制，试想在一些大型网站中，静态的html，js，css文件等数量非常庞大的情况下，加载页面的时候，如果没有缓存的话，页面将会非常慢，在这种情况下，就可以考虑使用nginx提供的缓存功能的配置。 Nginx的web缓存 Nginx从0.7.48版提供缓存功能。 Nginx是基于ProxyStore来实现的，其原理是把URL及相关组合当做Key,在使用MD5算法对Key进行哈希，得到硬盘上对应的哈希目录路径，从而将缓存内容保存在该目录中。 它可以支持任意URL连接，同时也支持404/301/3...

nginx是最火的负载均衡工具之一，在流量陡增的互联网面前，针对高并发的场景，接口限流是很有必要的。流量限制(rate-limiting)，是nginx中一个非常实用的功能。流量限制可以用作安全目的，比如可以减慢暴力密码破----解的速率。通过将传入请求的速率限制为真实用户的典型值，并标识目标URL地址(通过日志)，还可以用来抵御DDOS攻-----击。更常见的情况，该功能被用来保护上游应用服务器不被同时太多用户请求所压垮。下面介绍一下nginx中是如何对请求进行流量限制的。 限流算法 令牌桶算法 算法思想是： 令牌以固定速率产生，并缓存到令牌桶中； 令牌桶放满时，多余的令牌被丢弃； 请求...

一、HTTP动态负载均衡 动态负载均衡 动态负载均衡策略类似于加权轮询策略，可以通过对于后端服务器集群的状态监测，量化不同服务器的性能差异，来周期性调整服务器的比重来实现权重的动态调整。 在nginx中传统的负载均衡，如果Upstream参数发生变化，每次都需要重新加载nginx.conf文件，因此扩展性不是很高，所以我们可以采用动态负载均衡，实现Upstream可配置化、动态化，无需人工重新加载nginx.conf。这类似分布式的配置中心。 动态负载均衡实现方案 Consul+Consul-template每次发现配置更改需要raloadnginx，重启Nginx。 Consul+Open...

背景 在分布式架构的系统中，服务发现简单来讲就是通过服务名找到提供服务的实例地址和端口，主要用于解决如何获取服务实例地址问题。 随着容器技术的兴起，服务集群部署在系统各处，服务之间的远程调用都需要通过服务发现来实现。服务注册发现是分布式系统中不可或缺的关键组件，常用于构建服务注册发现解决方案的开源框架如ZooKeeper、Etcd、Consul。下面主要介绍一下如何基于ZooKeeper、Etcd、Consul构建服务注册发现方案并进行一下对比。 一个标准的服务注册发现架构主要有三部分组成，分别是服务注册中心、服务消费者、服务提供者，架构图如下所示： 服务注册中心是服务发现的核心组件，其本质...

一、简介 1、介绍 Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。 2、主要应用场景是 日志收集：可以用kafka收集各种服务的日志，通过已统一接口的形式开放给各种消费者。 消息系统：解耦生产和消费者，缓存消息。 用户活动追踪：kafka可以记录webapp或app用户的各种活动，如浏览网页，点击等活动，这些活动可以发送到kafka，然后订阅者通过订阅这些...

1.为什么选择Etcd 据官网介绍，Etcd是一个分布式，可靠的Key-Value存储系统，主要用于存储分布式系统中的关键数据。初见之下，Etcd与NoSQL数据库系统有几分相似，但作为数据库绝非Etcd所长，其读写性能远不如MongoDB、Redis等Key-Value存储系统。“让专业的人做专业的事！”Ectd作为一个高可用的键值存储系统，有很多典型的应用场景，本文将介绍Etcd的优秀实践之一：分布式锁。 1.1Etcd优点 目前，可实现分布式锁的开源软件有很多，其中应用最广泛、大家最熟悉的应该就是ZooKeeper，此外还有数据库、Redis、Chubby等。但若从读写性能、可靠性、可用...

Etcd是一个高度一致的分布式键值存储，它提供了一种可靠的方式来存储需要由分布式系统或机器集群访问的数据。Etcd比较多的应用场景是用于服务注册与发现（前面文章已经介绍过），除此之外，也可用于键值对存储，应用程序可以读取和写入Etcd中的数据（类似于内存数据库redis），还可用于分布式系统系统的消息发布与订阅，分布式的通知与协调，以及分布式系统中的负载均衡等等。 消息发布与订阅 在分布式系统中，最适用的一种组件间通信方式就是消息发布与订阅。即构建一个配置共享中心，数据提供者在这个配置中心发布消息，而消息使用者则订阅他们关心的主题，一旦主题有消息发布，就会实时通知订阅者。通过这种方式可以做...

一、介绍 ​MySQL是一个关系型数据库管理系统，由瑞典MySQLAB公司开发，属于Oracle旗下产品。MySQL是最流行的关系型数据库管理系统之一，在WEB应用方面，MySQL是最好的RDBMS(RelationalDatabaseManagementSystem，关系数据库管理系统)应用软件之一。​MySQL是一种关系型数据库管理系统，关系数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样就增加了速度并提高了灵活性。​MySQL所使用的SQL语言是用于访问数据库的最常用标准化语言。MySQL软件采用了双授权政策，分为社区版和商业版，由于其体积小、速度快、总体拥有成本低，...