MYSQL根据JSON列将一行拆为多行的操作方法

更新时间：2023年06月13日 14:56:04 作者：Mingvvv

这篇文章主要介绍了MYSQL根据JSON列将一行拆为多行的操作方法,本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值，需要的朋友可以参考下

MYSQL根据JSON列将一行拆为多行

使用JSON_TABLE

例如表中存在 json 字段 json_filed

我们要实现如下效果

可以使用 json_table 去实现，json_table 可以将 json 字段转换为 table 去使用

SELECT json_field,j.json_single_value FROM `user`
left join 
json_table(json_field, '$[*]' columns (json_single_value int path '$')) as j on true

查询结果如下，由一行分割成多行

Incorrect arguments to JSON_TABLE

有些时候我们会用到子查询，如下

SELECT a.json_field,j.json_single_value FROM 
( select * from `user` where 1=1) as a
left join json_table(a.json_field, '$[*]' columns (json_single_value int path '$')) as j on true

我们需要先对目标表进行筛选，用来节省占用内存，并提高查询效率，然后再将其 json 字段转换为 table
但是当我们运行上面的 SQL 时会爆出 Incorrect arguments to JSON_TABLE 的错误。
原因是我们子查询中的 json_field 字段格式有问题，需要我们强制转换一下

SELECT a.json_field,j.json_single_value FROM 
( select * from `user` where 1=1) as a
left join json_table(CAST(a.json_field AS JSON), '$[*]' columns (json_single_value int path '$')) as j on true

MySql 一行变多行(根据特定符号分割)

一、测试数据

DROP TABLE IF EXISTS `test`;
CREATE TABLE IF NOT EXISTS `test` (
`id` bigint(20) NOT NULL AUTO_INCREMENT ,
`name` varchar(255) DEFAULT NULL,
`num` int(8),
PRIMARY KEY (`id`)
);
INSERT INTO `test`(`name`, `num`) VALUES ('a1,b258,c', 11);
INSERT INTO `test`(`name`, `num`) VALUES ('f,g123456,h,i85,j', 33);
INSERT INTO `test`(`name`, `num`) VALUES ('d,e1234', 22);

那么: SELECT * FROM test; :

那么，把数据转换成为下面这样，需要怎么样实现呢:

二、普通 sql 实现(需要依赖 mysql.help_topic 表)

SELECT
    a.id,a.num,SUBSTRING_INDEX( SUBSTRING_INDEX( a.`name`, ',', b.help_topic_id + 1 ), ',',-1 ) name
FROM
    test a
    JOIN mysql.help_topic b ON b.help_topic_id < ( LENGTH( a.`name`) - LENGTH( REPLACE ( a.`name`, ',', '' ) ) + 1 );

三、mysql.help_topic 无权限处理办法

mysql.help_topic 的作用是对 SUBSTRING_INDEX 函数出来的数据(也就是按照分割符分割出来的)数据连接起来做笛卡尔积。

如果 mysql.help_topic 没有权限，可以自己创建一张临时表，用来与要查询的表连接查询。

获取该字段最多可以分割成为几个字符串:

SELECT MAX(LENGTH(a.`name`) - LENGTH(REPLACE(a.`name`, ',', '' )) + 1) FROM `test` a;

创建临时表，并给临时表添加数据:

注意:

临时表必须有一列从 0 或者 1 开始的自增数据
临时表表名随意，字段可以只有一个
临时表示的数据量必须比 MAX(LENGTH(a.name) - LENGTH(REPLACE(a.name, ',', '' )) + 1) 的值大

DROP TABLE IF EXISTS tmp_help_topic;
CREATE TABLE IF NOT EXISTS tmp_help_topic (
help_topic_id bigint(20) NOT NULL AUTO_INCREMENT ,
PRIMARY KEY (help_topic_id)
);
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();
INSERT INTO tmp_help_topic() VALUES ();

查询:

SELECT
    a.id,a.num,SUBSTRING_INDEX(SUBSTRING_INDEX(a.`name`, ',', b.help_topic_id), ',',-1 ) name
FROM
    test a
    JOIN tmp_help_topic b ON b.help_topic_id <= (LENGTH( a.`name`) - LENGTH(REPLACE(a.`name`, ',', '')) + 1 );

四、函数的意思

4.1 REPLACE 函数:

把 字符串   a,b,c,d   里面的逗号替换成空字符串
SELECT REPLACE('a,b,c,d', ',', '');
-- 输出: abcd

那么:

# 获取逗号的个数
SELECT (LENGTH('a,b,c,d') - LENGTH(REPLACE('a,b,c,d', ',', '')));
# 按照逗号分割后会有几个元素，这里分割后就是 a b c d，就是 4 个元素 
SELECT (LENGTH('a,b,c,d') - LENGTH(REPLACE('a,b,c,d', ',', '')) + 1);

4.2 SUBSTRING_INDEX 函数:

SUBSTRING_INDEX 是字符串截取函数

SUBSTRING_INDEX(str, delim, count)

str : 表示需要拆分的字符串
delim : 表示分隔符，通过某字符进行拆分
count : 当 count 为正数，取第 n 个分隔符之前的所有字符；当 count 为负数，取倒数第 n 个分隔符之后的所有字符。

例如:

SELECT SUBSTRING_INDEX('a*b*c*d', '*', 1); -- 返回: a
SELECT SUBSTRING_INDEX('a*b*c*d', '*', 2); -- 返回: a*b 
SELECT SUBSTRING_INDEX('a*b*c*d', '*', 3); -- 返回: a*b*c
SELECT SUBSTRING_INDEX('a*b*c*d', '*', 4); -- 返回: a*b*c*d
SELECT SUBSTRING_INDEX('a*b*c*d', '*', -1); -- 返回: d
SELECT SUBSTRING_INDEX('a*b*c*d', '*', -2); -- 返回: c*d
SELECT SUBSTRING_INDEX('a*b*c*d', '*', -3); -- 返回: b*c*d
SELECT SUBSTRING_INDEX('a*b*c*d', '*', -4); -- 返回: a*b*c*d

那么:

SELECT SUBSTRING_INDEX(SUBSTRING_INDEX('a*b*c*d', '*', 1), '*', -1); -- 返回: a
SELECT SUBSTRING_INDEX(SUBSTRING_INDEX('a*b*c*d', '*', 2), '*', -1); -- 返回: b
SELECT SUBSTRING_INDEX(SUBSTRING_INDEX('a*b*c*d', '*', 3), '*', -1); -- 返回: c
SELECT SUBSTRING_INDEX(SUBSTRING_INDEX('a*b*c*d', '*', 4), '*', -1); -- 返回: d

五、一行变多行原理

回到 sql:

SELECT
    a.id,a.num,SUBSTRING_INDEX(SUBSTRING_INDEX(a.`name`, ',', b.help_topic_id), ',',-1 ) 
FROM
    test a
    JOIN tmp_help_topic b ON b.help_topic_id <= (LENGTH( a.`name`) - LENGTH(REPLACE(a.`name`, ',', '')) + 1 );

SUBSTRING_INDEX(SUBSTRING_INDEX(a.name, ',', b.help_topic_id), ',',-1 ) 就是获取 tmp_help_topic 表的 help_topic_id 字段的值作为 name 字段的第几个子串
使用了 join 就会把字段 name 分为 (LENGTH( a.name) - LENGTH(REPLACE(a.name, ',', '')) + 1 ) 行，并且每行的字段刚好是 name 字段的第 help_topic_id 个子串

到此这篇关于MYSQL -- 根据JSON列将一行拆为多行的文章就介绍到这了,更多相关mysql一行拆为多行内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:

MySQL中IO问题的深入分析与优化
据库作为存储系统,所有业务访问数据的操作都会转化为底层数据库系统的IO行为,下面这篇文章主要给大家介绍了关于MySQL中IO问题的深入分析与优化的相关资料,需要的朋友可以参考下
2022-04-04
MySQL操作数据库实战指南
这篇文章主要给大家介绍了关于MySQL数据库操作库的相关资料,MySQL数据库是一个关系型数据库管理系统,所采用的SQL语言是用于访问数据库最常用的标准会语言,需要的朋友可以参考下
2023-07-07
MySQL8.0.23版本的root密码重置最优解法
这篇文章主要介绍了MySQL8.0.23版本的root密码重置最优解法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2021-03-03
小记一次mysql主从配置解决方案
mysql主从方案主要作用：读写分离，使数据库能支撑更大的并发。在报表中尤其重要。由于部分报表sql语句非常的慢，导致锁表，影响前台服务。如果前台使用master，报表使用slave，那么报表sql将不会造成前台锁，保证了前台速度。
2015-10-10
MySQL中的启动和关闭命令
这篇文章主要介绍了MySQL中的启动和关闭命令，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
2022-08-08
mysql innodb 异常修复经验分享
这篇文章主要介绍了mysql innodb 异常修复经验分享,需要的朋友可以参考下
2017-04-04
SQL中的distinct的使用方法
这篇文章主要介绍SQL中的distinct的使用方法，distinct用来查询不重复记录的条数,即用distinct来返回不重复字段的条数，文中通过图文介绍的非常详细,需要的朋友可以参考下
2023-05-05
MySQL Hash索引和B-Tree索引的区别
MySQL Hash索引和B-Tree索引的区别究竟在哪里呢？相信很多人都有这样的疑问，下文对两者的区别进行了详细的分析,需要的朋友可以参考下
2014-03-03
MySQL+Redis缓存+Gearman共同构建数据库缓存的方法
这篇文章主要介绍了MySQL+Redis缓存+Gearman共同构建数据库缓存,部署后在MySQL端进行创建一个用户给与远程登录权限，使得Redis作为缓存可以用来同步数据使用，需要的朋友可以参考下
2022-10-10
MySQL单表ibd文件恢复方法详解
随着innodb的普及，innobackup也成为了主流备份方式。物理备份对于新建slave，全库恢复的需求都能从容应对；但当面临单表数据误删，或者单表误drop的情况，如果使用物理全备进行恢复呢
2012-11-11