这个免费工具可以将用于MySQL、Oracle、Postgresql或SQL服务器的SQL查询转换为MongoDBNoSQL查询格式。对于习惯了结构化数据库查询并刚开始学习MongoDB的人来说，这是一个非常方便的工具。还提供了浏览和加载输入SQL查询以及下载输出MongoDB查询的选项。 工具地址：https://www.site24x7.com/tools/sql-to-mongodb.html

GitHub分享了他们将自己1200+节点、300+TB数据存储的MySQL从5.7升级至8.0的故事 官方文献：https://github.blog/2023-12-07-upgrading-github-com-to-mysql-8-0/ 全文译： 15年前，GitHub从一个带有单一MySQL数据库的RubyonRails应用程序起步。从那时起，GitHub不断发展MySQL架构，以满足平台的扩展和弹性需求，包括构建高可用性、实施自动化测试和数据分区。如今，MySQL仍是GitHub基础架构的核心部分，也是我们首选的关系型数据库。 这就是我们如何将1200多台MySQL主机升级到8....

复现： CREATETABLE`t1`( `user_id`intDEFAULTNULL, `name`varchar(10)DEFAULTNULL, `address`varchar(10)DEFAULTNULL, KEY`idx_userid`(`user_id`) )ENGINE=InnoDB mysql>selectfromt1; +---------+------+---------+ |user_id|name|address| +---------+------+---------+ |10|aa|bj| |20|bb|sh| |30|cc|NULL| +------...

JAVA研发需求： 需要对A表的XXX字段扩容至varchar(500) 目前的现状： 线上A表有100G+的数据，如果直接modifyXXXvarchar(500)，会锁全表，即使用pt-osc工具凌晨搞，预估一宿加不完，并且从库会出现大面积延迟，读取的数据将不准确。 https://dev.mysql.com/doc/refman/8.0/en/innodb-online-ddl-operations.html DBA提出的技术方案： 1）生成一张新表A_new，对A_new表进行modifyXXXvarchar(500)，新的数据直接insert到A_new表里。 2）关联老表用u...

mycli它有如下特点： 1，当你输入SQL关键字、数据库的表格和列时，自动补全（按<Tab>键）。 2，关键词高亮显示 3，基于Python开发的 安装 shell>pip3installmycli-i"http://mirrors.aliyun.com/pypi/simple"--trusted-host"mirrors.aliyun.com" 使用 默认mycli客户端命令不支持换行，所以需要按住<Fn>+F3，切换为Multiline多行模式。 如果不能切换为Multiline多行模式，直接编辑配置文件 vim/.myclirc 将mu...

一招破“ERROR1040(HY000):Toomanyconnections” shell>mysql-S/tmp/mysql_mysql57_1.sock ERROR1040(HY000):Toomanyconnections 解决方案 1、得到mysqld进程号 shell>psaux|grep/tmp/mysql_mysql57_1.sock|grep-vroot|awk'{print$2}' 2、使用gdb调试器设置max_connections变量的值为1500 gdb-p16884-ex"setmax_connections=1500"-batch 3、...

★贡献：ThinkSQL类似ThinkPHP的数据库引擎，集成sql_helper(https://github.com/hcymysql/sql_helper) ※ThinkSQL地址：https://pypi.org/project/think-sql/ Projectdescription ThinkSQL类似ThinkPHP的数据库引擎 Install pipinstallthink-sql Howtouse 1.simpledemo Database:testTable:user exampledictparams fromthink_sql.databaseimp...

PERCONA8.0新增kill_idle_transaction参数，其作用是：自动KILL掉未提交的空闲事务。 注：MYSQL8.0.35并不支持。 参加官方文档：https://docs.percona.com/percona-server/8.0/kill-idle-trx.html 场景：updatet1setcid=200whereid=20;这条SQL长时间未提交，那么t1表会持有MDL锁，id=20该行持有排它行锁，这会造成后续对该表的DDL操作或者id=20的记录无法变更或删除，高并发会引发连接数上升，造成生产事故。 通过设置 SETGLOBALkill_idle_tran...

官方视频分享：https://mariadb.org/cloud-minifest2021/tendb-cluster/ 会议摘要 Spider存储引擎和我们的TenDBCluster解决方案简介1.1谈谈MariaDB和Spider，简单介绍一下Spider的特点。1.2介绍我们的TenDB集群解决方案（基于TSpider——腾讯游戏的SpiderSE分支）。内容包括TenDBCluster的架构、TSpider如何发挥作用、我们的解决方案给我们带来了什么（兼容性、可扩展性、高可用性）等。 TenDBCluster在腾讯游戏中的应用2.1显示腾讯游戏中TenDBCluster的使...

由于MySQL8.0默认字符集是utf8mb4，PHP访问会报错，报错信息如下所示： PHPWarning: mysqli_connect():Serversentcharset(255)unknowntotheclient.Please,reporttothedev elopersin/root/php_utf8mb4/conn.phponline4PHPWarning: mysqli_connect():(HY000/2054):Serversentcharsetunknowntotheclient.Please,reportto thedevelopersin/ro...

首先明确一个问题，Alter更改表结构，会加什么锁？ 答：MDL（元数据表锁），就如同我们打开一个EXCEL文档时，用户A正在翻阅，此时用户B要增加一列。那么用户B要等待用户A翻阅完，才可以增加，否则用户A查询的数据就会不一致，不符合ACID事务四大特性。 案例 会话一 会话二 会话三 selectsleep(1800),idfromsbtest1whereid=1; 注：休眠1800秒后查询id=1的记录 altertablesbtest1addcolumncityvarchar(30);  注：由于会话一未执行完，仍旧持有MDL锁，会...

mysql_sniffer是一个基于MySQL协议的抓包工具，用来实时抓取MySQL服务端的请求，并格式化输出，输出内容包括访问时间、来源IP、执行的SQL语句。 在进行MySQL8.0升级时，了解新版本对SQL语法的改变和新增的功能是非常重要的。通过使用mysql_sniffer，DBA可以在升级之前对现有的SQL语句进行抓取和分析，以确保在新版本中能够正常运行。 有一些已知SQL语法与MySQL8.0不兼容，例如： selectNVL(id/0,'YES')fromtest.t1whereid=1; selectuser_id,sum(amount)fromtest.usergroupb...

MySQL5.7将于2023年10月31日终结生命周期。终结意味着自2023年10月31日起，MySQL官方将不再提供对MySQL5.7版本的技术支持和更新。 具体来说，这意味着以下几点。 安全补丁和错误修复：MySQL官方将不再发布关于MySQL5.7版本的安全补丁和错误修复。这可能会导致在未来发现的安全漏洞或错误无法得到修复，增加了系统面临的风险。 技术支持：MySQL官方将不再提供有关MySQL5.7版本的官方技术支持。这意味着无法获得针对使用该版本时遇到的问题的官方支持和指导。 新功能和改进： MySQL官方将不再为MySQL5.7版本引入新的功能和改进。这意味着无法获得最...

slowquery 2023年9月13日更新:用自研的sql_helper替换掉soar，无需部署，直接拉取dockerpullslowquery即可。 1) 服务端部署： 拉取镜像 shell>dockerpulldocker.io/hcymysql/slowquery:2023-09-13 启动 shell>dockerrun-itd-e"TERM=xterm-256color"--privileged--nameslowquery-p80:80-p3306:3306<IMAGEID>/usr/sbin/init 打开浏览器，输入http://yo...

在MySQL中，AES_ENCRYPT函数本身不包含盐的功能。 盐（salt）是一个随机生成的值，用于增加加密的复杂性和安全性。在使用盐时，需要确保每次加密都使用不同的盐值，并将盐值与加密后的数据一起存储。解密时，需要将盐值与加密后的数据一起使用，以正确还原原始数据。 使用带盐的AES_ENCRYPT函数，加密具体步骤如下： 生成一个随机的盐值。盐值应该足够长、足够复杂，以增加破解的难度。 将盐值和密钥连接起来，形成新的字符串数据。 使用新的字符串数据作为密钥，对待加密的明文数据进行加密。 将加密结果和盐值一起存储到数据库中，以备后续的验证和解密使用。 使用带盐的AES_DECRY...

MySQL8.0MGR（组复制）高可用VIP故障转移脚本 简介：MGR（组复制）官方推荐用MySQLrouter中间件去做MGR高可用故障转移，但其多过了一层网络，性能会下降，并且需要额外维护一套中间件，运维成本过高，于是写了一个类似MHA的master_ip_failover脚本，实现VIP切换。 1）脚本会自动设置当前Primary和备选Primary参数group_replication_member_weight值为100（权重100，默认为50的Secondary不进行vip切换） 2）脚本会自动设置当前Primary和备选Primary参数group_replication_con...

mysqlstat是一个命令行工具，功能如下： 实时监控mysql服务器的QPS、TPS、网络带宽指标 查看执行次数最频繁的前N条SQL语句 查看访问次数最频繁的前N张表文件ibd 查看当前锁阻塞的SQL 查看死锁信息 查看重复或冗余的索引 查看应用端IP连接数总和 统计库里每个表的大小 MySQL命令行监控工具mysqlstat https://github.com/hcymysql/mysqlstat options: -h,--helpshowthishelpmessageandexit -HMYSQL_IP,--mysql_ipMYSQL_IP MysqlIP -PMYSQL_...

MongoDB4.2版本引入了流量控制特性，用于保持副本集多数提交延迟不超过指定的最大值，从而确保数据的一致性和可靠性。如果复制延迟达到"flowControlTargetLagSeconds":10（秒），流量控制机制就会开始限制主节点上的写入操作。 db.adminCommand({getParameter:1,"flowControlTargetLagSeconds":1}) 这个原理跟MySQLMGR的流控相似。 默认情况下，MongoDB启动后会自动开启流量控制，生产环境应将其关闭，以防止高并发期间自动触发限流，造成主库不可写，引起生产事故。 1）动态关闭： db.adminC...