查询背景
有一个表tmp_test_course大概有10万条记录,然后有个json字段叫outline,存了一对多关系(保存了多个编码,例如jy1577683381775)
我们需要在这10万条数据中检索特定类型的数据,目标总数据量:2931
条
SELECT COUNT(*) FROM tmp_test_course WHERE `type`=5 AND del=2 AND is_leaf=1
我们在限定为上面类型的同时,还得包含下面任意一个编码(也就是OR查询)
jy1577683381775
jy1577683380808
jy1577683379178
jy1577683378676
jy1577683377617
jy1577683376672
jy1577683375903
jy1578385720787
jy1499916986208
jy1499917112460
jy1499917093400
jy1499917335579
jy1499917334770
jy1499917333339
jy1499917331557
jy1499917330833
jy1499917329615
jy1499917328496
jy1576922006950
jy1499916993558
jy1499916992308
jy1499917003454
jy1499917002952
下面分别列出4种方式查询outline字段,给出相应的查询时间和扫描行数
一、like查询
耗时248毫秒
SELECT * FROM tmp_test_course WHERE `type`=5 AND del=2 AND is_leaf=1 AND ( outline like '%jy1577683381775%' OR outline like '%jy1577683380808%' OR outline like '%jy1577683379178%' OR outline like '%jy1577683378676%' OR outline like '%jy1577683377617%' OR outline like '%jy1577683376672%' OR outline like '%jy1577683375903%' OR outline like '%jy1578385720787%' OR outline like '%jy1499916986208%' OR outline like '%jy1499917112460%' OR outline like '%jy1499917093400%' OR outline like '%jy1499917335579%' OR outline like '%jy1499917334770%' OR outline like '%jy1499917333339%' OR outline like '%jy1499917331557%' OR outline like '%jy1499917330833%' OR outline like '%jy1499917329615%' OR outline like '%jy1499917328496%' OR outline like '%jy1576922006950%' OR outline like '%jy1499916993558%' OR outline like '%jy1499916992308%' OR outline like '%jy1499917003454%' OR outline like '%jy1499917002952%' )
EXPLAIN分析结果如下,全表扫描
二、json函数查询
json官方函数
耗时196毫秒,速度稍微快了一点
SELECT * FROM tmp_test_course WHERE `type`=5 AND del=2 AND is_leaf=1 AND ( JSON_SEARCH(outline, 'one', 'jy1577683381775') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1577683380808') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1577683379178') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1577683378676') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1577683377617') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1577683376672') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1577683375903') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1578385720787') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499916986208') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917112460') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917093400') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917335579') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917334770') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917333339') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917331557') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917330833') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917329615') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917328496') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1576922006950') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499916993558') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499916992308') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917003454') IS NOT NULL OR JSON_SEARCH(outline, 'one', 'jy1499917002952') IS NOT NULL )
EXPLAIN分析结果如下,还是全表扫描
三、联合索引查询
下面为该表建立一个联合索引(本来想建一个type-del-is_leaf-outline的索引,但是outline字段太长限制,所以只加type-del-is_leaf的联合索引
ALTER TABLE tmp_test_course ADD KEY `type-del-is_leaf` (`type`,`del`,`is_leaf`)
加入索引后再执行like和json查询,明显提速。
like执行用了136毫秒,json查询用了82.6毫秒,由此可见针对json类型使用json函数查询比like快
EXPLAIN分析结果如下,两者查询扫描的行数都限定在了2931行
四、全文索引查询
因为全文索引只支持CHAR、VARCHAR和TEXT,我们需要把JSON字段定义改一下
ALTER TABLE tmp_test_course MODIFY `outline` VARCHAR(1024) NOT NULL DEFAULT '[]'
添加全文索引
ALTER TABLE tmp_test_course ADD FULLTEXT INDEX outline (outline);
现在再来用全文索引进行检索
SELECT * FROM tmp_test_course WHERE `type`=5 AND del=2 AND is_leaf=1 AND MATCH(outline) AGAINST ('jy1577683381775 jy1577683380808 jy1577683379178 jy1577683378676 jy1577683377617 jy1577683376672 jy1577683375903 jy1578385720787 jy1499916986208 jy1499917112460 jy1499917093400 jy1499917335579 jy1499917334770 jy1499917333339 jy1499917331557 jy1499917330833 jy1499917329615 jy1499917328496 jy1576922006950 jy1499916993558 jy1499916992308 jy1499917003454 jy1499917002952')
耗时11.6毫秒,速度提升极其明显,可见全文索引的牛逼。
EXPLAIN分析结果如下,显示只扫描了一行
结论
以下是4种情况的执行结果
全文索引: 11.6ms
联合索引:82.6ms(json)、136ms(like)
json函数查询:196ms
like查询: 248ms
结论:全文索引 > 联合索引 > json函数查询 > like查询
数据量越大,全文索引速度越明显,就10万的量,查询速度大概比直接查询快了20倍左右,如果是百万或千万级别的表,提升差距会更加大,所以有条件还是老老实实用全文索引吧
《魔兽世界》大逃杀!60人新游玩模式《强袭风暴》3月21日上线
暴雪近日发布了《魔兽世界》10.2.6 更新内容,新游玩模式《强袭风暴》即将于3月21 日在亚服上线,届时玩家将前往阿拉希高地展开一场 60 人大逃杀对战。
艾泽拉斯的冒险者已经征服了艾泽拉斯的大地及遥远的彼岸。他们在对抗世界上最致命的敌人时展现出过人的手腕,并且成功阻止终结宇宙等级的威胁。当他们在为即将于《魔兽世界》资料片《地心之战》中来袭的萨拉塔斯势力做战斗准备时,他们还需要在熟悉的阿拉希高地面对一个全新的敌人──那就是彼此。在《巨龙崛起》10.2.6 更新的《强袭风暴》中,玩家将会进入一个全新的海盗主题大逃杀式限时活动,其中包含极高的风险和史诗级的奖励。
《强袭风暴》不是普通的战场,作为一个独立于主游戏之外的活动,玩家可以用大逃杀的风格来体验《魔兽世界》,不分职业、不分装备(除了你在赛局中捡到的),光是技巧和战略的强弱之分就能决定出谁才是能坚持到最后的赢家。本次活动将会开放单人和双人模式,玩家在加入海盗主题的预赛大厅区域前,可以从强袭风暴角色画面新增好友。游玩游戏将可以累计名望轨迹,《巨龙崛起》和《魔兽世界:巫妖王之怒 经典版》的玩家都可以获得奖励。
更新动态
- 凤飞飞《我们的主题曲》飞跃制作[正版原抓WAV+CUE]
- 刘嘉亮《亮情歌2》[WAV+CUE][1G]
- 红馆40·谭咏麟《歌者恋歌浓情30年演唱会》3CD[低速原抓WAV+CUE][1.8G]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[320K/MP3][193.25MB]
- 【轻音乐】曼托凡尼乐团《精选辑》2CD.1998[FLAC+CUE整轨]
- 邝美云《心中有爱》1989年香港DMIJP版1MTO东芝首版[WAV+CUE]
- 群星《情叹-发烧女声DSD》天籁女声发烧碟[WAV+CUE]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[FLAC/分轨][748.03MB]
- 理想混蛋《Origin Sessions》[320K/MP3][37.47MB]
- 公馆青少年《我其实一点都不酷》[320K/MP3][78.78MB]
- 群星《情叹-发烧男声DSD》最值得珍藏的完美男声[WAV+CUE]
- 群星《国韵飘香·贵妃醉酒HQCD黑胶王》2CD[WAV]
- 卫兰《DAUGHTER》【低速原抓WAV+CUE】
- 公馆青少年《我其实一点都不酷》[FLAC/分轨][398.22MB]
- ZWEI《迟暮的花 (Explicit)》[320K/MP3][57.16MB]