huangyongxing310的博客
huangyongxing310 · 共 502 篇文章
共识算法
共识算法 一致性协议 说到共识算法,大家首先想到的应该都是 Raft、Paxos、Zab 算法这类理解起来比较困难的强一致性算法。 但是还有一个弱一致性的共识算法比较好理解,Gossip 协议。 为了保证各个节点的数据的一致性,必然就涉及到数据的更新操作。 Gossip protocol 也叫 Epidemic Protocol (流行病协议) Gossip 设计了两种可能的消息传播模式:反熵(Anti-Entropy)和传谣(Rumor-Mongering), 因为这个网站里面直接有非常仿真的动画模拟 gossip 协议的同步过程,一个动图胜过千言万语。 地址先放在这里,大家可以自己访问玩…
2022-07-27 11:45 · 技术实现原理 · 评论(0)
RESTFul接口设计指南
概述 REST 一词是由 Roy Fielding 博士于 2000 年在他的博士论文 中提出的,实际指一种有助于创建和组织分布式系统的架构风格。它并不是一个标准或准则,而是一种基于资源的架构风格。 以 REST 风格构建的系统将在性能、组件交互的可扩展性、接口的简单性、可移植性、可靠性、可见性等多个方面得到提升和优化。 注:Roy Fielding 是 HTTP 协议(1.0 版和 1.1 版)的主要设计者、Apache 服务器软件的作者之一、Apache 基金会的第一任 设计指南 RESTful API的设计概括起来主要包含以下几个要点:用 URL 定位资源,用 HTTP 动词描述操作,…
2022-07-25 16:01 · 技术规范 · 评论(0)
前端开发规范
规范的目的是为了编写高质量的代码,让你的团队成员每天得心情都是愉悦的,大家在一起是快乐的。 一.编程规约 (一) 命名规范 项目命名 全部采用小写方式,以中线分隔。 正例:mall-management-system 反例:mall_management-system / mallManagementSystem 目录命名 全部采用小写方式, 以中划线分隔,有复数结构时,要采用复数命名法, 缩写不用复数。 正例: scripts / styles / components / images / utils / layouts / demo-styles / demo-scripts / im…
2022-07-25 15:56 · 技术规范 · 评论(0)
安全编码规范
名词定义 规范化:将数据的各种编码方式和表式转换成为一种单一的简单形式。 跨站点请求伪造:一个外部网站或应用程序强迫一个客户端制作一个非意愿的请求到另一个有活跃会话的客户端应用程序。当它们使用已知的、可预见的 URL和参数时,并且当浏览器对每个发往应用程序的请求自动传输所有需要的会话信息时,应用程序是可被攻击的。 利用:使用一个漏洞。通常而言,这是一种有意的行为,旨在利用漏洞危及软件的安全控制。 危险字符:任何字符或编码表示的字符,可以影响应用程序预期的操作,或者被解释为具有特殊的意义、预期用途以外的字符。这些字符可用于: 修改现有代码或语句的结构; 插入新的非预期的代码; 修改路径; 程序…
2022-07-25 15:54 · 技术规范 · 评论(0)
MySQL开发规范
MySQL开发规范 设计规范 1.【推荐】字段允许适当冗余,以提高查询性能,但必须考虑数据一致。冗余字段应遵循: 不是频繁修改的字段。 不是 varchar 超长字段,更不能是 text 字段。 正例: 商品类目名称使用频率高,字段长度短,名称基本一成不变,可在相关联的表中冗余存 储类目名称,避免关联查询。 【推荐】单表行数超过 500 万行或者单表容量超过 2GB,才推荐进行分库分表。 说明:如果预计3年后的数据量根本达不到这个级别,请不要在创建表时就分库分表。 【推荐】一个表的字段个数控制在30-50个字段以内;如果字段超过50个,可考虑将字段按冷热程度分表。 这样做虽然会给应用带来更多…
2022-07-25 15:52 · 技术规范 · 评论(0)
SQL常用语句
delete from cacherefresh where 1=1; COMMIT; //===================================================== 获取数据库所有表明的SQL MYSQL select table_name from information_schema.tables where table_schema='当前数据库'; select table_name from information_schema.tables where table_schema = (select database()) order by tab…
2022-07-21 19:09 · 数据库 · 评论(0)
ES数据同步方案
//=============================================================== ES数据同步方案 1.同步双写 数据写到mysql时,同时将数据写到ES,实现数据的双写。 优点:业务逻辑简单。 缺点:硬编码,业务强耦合,性能较差,代码的侵入性太强 2.异步双写(MQ方式)(程序到MQ,MQ再到MYSQL和ES) 改为写MQ,不直接写ES 优点:性能高(由于MQ的性能基本比mysql高出一个数量级);不存在丢数据问题 缺点:硬编码,业务强耦合,代码的侵入性太强,延时 3.异步双写(Worker方式)(定时任务) 让该程序按一定的时间周期扫描指…
2022-06-24 10:57 · 数据库 · elasticSearch使用 · 评论(0)
选举算法
选举算法 常用的选举算法有比较简单的Bully算法和复杂而强大的Paxos算法。 Bully算法 每个节点有一个唯一ID,然后对集群中所有的节点ID进行排序,选取其中最小的ID所属的节点作为Master。 Bully算法的问题: 假设当前Master因为负载过重而假死,然后ID第二大的被选举为新的Master,这时旧的Master恢复然后又被选举为Master然后又会因为负载过重而假死...... https://zhuanlan.zhihu.com/p/237710254 在集群开始启动的时候,或者主挂了之后会发起选举,节点间通过发消息来进行选举,消息分为三种: Election Mess…
elasticSearch使用
ElasticSearch 基于Apache Lucene构建的开源搜索引擎; 采用Java编写,提供简单易用的 RESTFul API;(Post,put,get,delete) 轻松的横向扩展,可支持PB级的结构化或非结构化数据处理; 应用场景 海量数据分析引擎 站内搜索引擎 数据仓库 一线公司实际应用场景: 英国卫报-实时分析公众对文章的回应; 维基百科、Github-站内实时搜索 百度-实时日志监控平台 ElasticSearch基础概念 集群和节点: 索引:含有相同属性的文档集合;相当于mysql的Database 类型:索引可以定义一个或多个类型,文档必须属于一个类型;类似于my…
2022-04-27 08:42 · Java · 互联网 · elasticSearch使用 · 评论(0)
IDEA 快捷键
大小写转换快捷键 ctr+shift+u IDEA生成get/set方法 光标在类里面,按alt+insert 快速插入try或for或if模块的代码 ctrl+shift+T idea 自动生成补全变量名 快捷键 CTRL+ALT+V idea 更改变量名 ALT+/ iter for (String arg : args) { } itco for (Iterator iterator = collection.iterator(); iterator.hasNext(); ) { Object next = iterator.next(); } itli for (int j = 0;…
每天学到的技术点3
1.TEXT与BLOB的区别,二者之间的主要差别是BLOB能用来保存二进制数据,比如照片;而TEXT只能保存字符数据,比如一遍文章或日记。(OK) 2.表索引的前缀长度,前缀索引兼顾索引大小和查询速度 3.varchar(255)的原因,对于变长字段varchar会用额外一两个字节保存长度,当长度小于255个字节时, 使用一个字节记录字符串的长度。如果大于255就使用两个字节保存字符串长度 3.1.通常情况下使用varchar(20)和varchar(255)保持'hello'占用的空间都是一样的,但使用长度较短的列却有巨大的优势。较大的列使用更多的内存, 因为MySQL通常会分配固定大小的…
2022-02-21 20:01 · Java · Spring boot · 每天学到的技术点 · 评论(0)
SQL存储过程例子和有用的SQL
delete from cacherefresh where 1=1; COMMIT; //===================================================== 获取数据库所有表明的SQL MYSQL select table_name from information_schema.tables where table_schema='当前数据库'; select table_name from information_schema.tables where table_schema = (select database()) order by tab…
2022-02-19 09:20 · 数据库 · 评论(0)
zookeeper dubbo 安装
docker-machine ssh default docker pull zookeeper docker pull chenchuxin/dubbo-admin docker images docker run --name myZookeeper -p 32181:2181 -d zookeeper docker run --name myZookeeper --restart always -e JVMFLAGS="-Xmx1024m" -p 2181:2181 zookeeper docker run --name myZookeeper -p 32181:2181 -d zoo…
docker mysql 主从安装
docker run -d -p 13306:3306 --name mysql_master -e MYSQL_ROOT_PASSWORD=123456 mysql:latest mysql -uroot -p GRANT ALL ON . TO 'root'@'%'; flush privileges; ALTER USER 'root'@'localhost' IDENTIFIED BY 'password' PASSWORD EXPIRE NEVER; ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '12…