Mysql 统计标签出现次数（一行变多行）

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Mysql 统计标签出现次数（一行变多行），小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1922字，纯文字阅读大概需要3分钟。

内容图文

需求背景

需求

• 一张数据表
• 其中有sid字段，代表tag，每行数据可能有多个tag字段
• 统计全量数据中所有tag出现的次数（按tag分组，分别有多少数据）

source table demo

target table demo

SQL query in mysql

select substring_index( substring_index( sid , ‘,‘, id_table.help_topic_id + 1 ), ‘,‘,- 1 ) as sid_tag,count(sid) as sid_occurrence from src_t JOIN mysql.help_topic id_table on id_table.help_topic_id < (
  length(src_t.sid) - length(replace(src_t.sid, ‘,‘, ‘‘)) + 1
) GROUP BY sid_tag

hive

select tag,count(*) from(
select tag from table_name
lateral view explode(split(taglist,‘,‘)) r1 AS tag) a group by a.tag;

解析

• 利用系统表mysql.help_topic进行了index的记录（可以使用其他表），更暴力的解法是直接新建一张只有id列的表，可以预防系统表id不够用（一般足够了）
• JOIN a.id < b.id，解决了复制行的操作；若b.id = 5，a.id 为（1，2，3，4，5），返回数据为 [(1,5),(2,5),(3,5),(4,5)]
• substring_index( substring_index( sid , ‘,‘, id_table.help_topic_id + 1 ), ‘,‘,- 1 ) 利用index表中的index，作为子串索引进行数据拆分。索引构建基于上一步的join。
• 随后正常groupby统计

实验

mysql

select * from (
  SELECT concat(‘a‘,topic.help_topic_id) as sid,topic.help_topic_id AS id
  FROM mysql.help_topic topic
  WHERE help_topic_id IN (‘1‘, ‘2‘, ‘3‘, ‘4‘, ‘5‘)
) as id_table JOIN (
  SELECT concat(‘b‘,topic.help_topic_id) as sid,topic.help_topic_id AS id
  FROM mysql.help_topic topic
  WHERE help_topic_id IN (‘1‘, ‘2‘, ‘3‘)
) as id_table2 on id_table2.id <= id_table.id

结果

Mysql 统计标签出现次数（一行变多行）

标签：暴力   多个   view   索引   targe   cat   count   字段   多行   

本文系统来源：https://www.cnblogs.com/suanec/p/13187736.html

内容总结

以上是互联网集市为您收集整理的Mysql 统计标签出现次数（一行变多行）全部内容，希望文章能够帮你解决Mysql 统计标签出现次数（一行变多行）所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端