我得到了如下表格
mysql> select * from tb_dts;
+----+------+------+
| Id | key1 | key2 |
+----+------+------+
| 1 | 1 | 1 |
| 2 | 1 | 1 |
| 3 | 1 | 1 |
| 4 | 2 | 1 |
| 5 | 2 | 1 |
| 6 | 2 | 1 |
| 7 | 2 | 1 |
| 8 | 1 | 2 |
| 9 | 1 | 2 |
| 10 | 1 | 2 |
| 11 | 1 | 2 |
| 12 | 1 | 2 |
| 13 | 3 | 1 |
| 14 | 3 | 1 |
| 15 | 3 | 1 |
| 16 | 3 | 1 |
| 17 | 2 | 2 |
| 18 | 2 | 2 |
| 19 | 2 | 2 |
| 20 | 2 | 3 |
| 21 | 2 | 3 |
| 22 | 2 | 3 |
| 23 | 3 | 2 |
| 24 | 3 | 2 |
| 25 | 3 | 2 |
| 26 | 3 | 2 |
+----+------+------+
26 rows in set (0.00 sec)
我采用这样的不同值,用于某些应用程序分页
mysql> select distinct key1,key2 from tb_dts limit 0,4;
+------+------+
| key1 | key2 |
+------+------+
| 1 | 1 |
| 1 | 2 |
| 2 | 1 |
| 2 | 2 |
+------+------+
4 rows in set (0.00 sec)
mysql> select distinct key1,key2 from tb_dts limit 4,4;
+------+------+
| key1 | key2 |
+------+------+
| 2 | 3 |
| 3 | 1 |
| 3 | 2 |
+------+------+
3 rows in set (0.00 sec)
通过group_concat
我也得到了 Id,但是,我想在WHERE Field IN
子句中使用此 Ids,例如where somefield IN ( ..here my Ids goes...)
mysql> select key1,key2,group_concat(Id) from tb_dts group by key1,key2 limit 0,4;
+------+------+------------------+
| key1 | key2 | group_concat(Id) |
+------+------+------------------+
| 1 | 1 | 1,2,3 |
| 1 | 2 | 8,9,10,11,12 |
| 2 | 1 | 4,5,6,7 |
| 2 | 2 | 17,18,19 |
+------+------+------------------+
4 rows in set (0.00 sec)
mysql> select key1,key2,group_concat(Id) from tb_dts group by key1,key2 limit 4,4;
+------+------+------------------+
| key1 | key2 | group_concat(Id) |
+------+------+------------------+
| 2 | 3 | 20,21,22 |
| 3 | 1 | 13,14,15,16 |
| 3 | 2 | 23,24,25,26 |
+------+------+------------------+
3 rows in set (0.00 sec)
但是我如何把它放在WHERE Fieldname IN
条款中呢?
我需要这样的东西,因为我的tb_dts
包含超过3000 万个reocrd,并且实际15
字段,我无法使用ID BETWEEN min_id and max_id
为了处理我需要的前 4 个唯一组合值
select * from tb_dts where Id IN (1,2,3,8,9,10,11,12,4,5,6,7,17,18,19 )
为了处理接下来的 4 个唯一组合值,我需要在我的应用程序中使用 Id,所以简而言之,我想在我的where Field IN
子句中包含下面提到的 Id
select * from tb_dts where Id IN (20,21,22,13,14,15,16,23,24,25,26 )
这是我的表格结构
DROP TABLE IF EXISTS `tb_dts`;
CREATE TABLE `tb_dts` (
`Id` int(11) NOT NULL AUTO_INCREMENT,
`key1` int(11) DEFAULT '-99',
`key2` int(11) DEFAULT '-99',
PRIMARY KEY (`Id`),
KEY `main` (`key1`,`key2`)
) ENGINE=MyISAM AUTO_INCREMENT=27 DEFAULT CHARSET=latin1;
LOCK TABLES `tb_dts` WRITE;
INSERT INTO `tb_dts` VALUES (1,1,1),(2,1,1),(3,1,1),(4,2,1),(5,2,1),(6,2,1),(7,2,1),(8,1,2),(9,1,2),(10,1,2),(11,1,2),(12,1,2),(13,3,1),(14,3,1),(15,3,1),(16,3,1),(17,2,2),(18,2,2),(19,2,2),(20,2,3),(21,2,3),(22,2,3),(23,3,2),(24,3,2),(25,3,2),(26,3,2);
UNLOCK TABLES;
正如你在这里看到的,它为每个不同的组合值给出了第一个找到的 Id
mysql> select Id from tb_dts group by key1,key2 limit 0,4;
+----+
| Id |
+----+
| 1 |
| 8 |
| 4 |
| 17 |
+----+
4 rows in set (0.00 sec)
但我希望所有Ids
都符合给定的标准,这只不过是所有 ID 低于 4 个唯一值的内容
mysql> select key1,key2 from tb_dts group by key1,key2 limit 0,4;
+------+------+
| key1 | key2 |
+------+------+
| 1 | 1 | --- 1,2,3
| 1 | 2 | --- 8,9,10,11,12
| 2 | 1 | --- 4,5,6,7
| 2 | 2 | --- 17,18,19
+------+------+
4 rows in set (0.00 sec)
预期盈亏
我希望得到这样的Id
group by key1,key2 limit 0,4
,以便可以在我的WHERE IN
子句中使用。
1
2
3
8
9
10
11
12
4
5
6
7
17
18
19
对于您的直接问题,您可以使用这样的find_in_set
:
select t.*
from your_table t
where exists (
select 1 from (
select group_concat(Id)
from tb_dts
group by key1, key2
order by key1, key2 -- very important when using limit
limit 0, 4
) t2 where find_in_set(t.fieldname, t2.ids) > 0
);
虽然我不确定这是否是做你正在做的事情的最佳方式。使用分组依据创建字符串,然后在该字符串中搜索将太慢。
此外,您希望在 key1、key2、id 列上有一个索引。
create index idx_tb_dts on tb_dts (key1, key2, id);
可以试试这个:
select t.*
from your_table t
where exists (
select 1
from tb_dts t1
inner join (
select distinct key1, key2
from tb_dts
order by key1, key2
limit 0, 4
) t2 on t1.key1 = t2.key1
and t1.key2 = t2.key2
where t1.id = t.fieldname
);
您应该了解,分组依据或不同部分可能会严重影响性能。如果有一个单独的表包含唯一键 1,键 2 上有一个唯一索引,那就更好了。
create table the_keys_table(
key1 int not null,
key2 int not null,
primary key (key1, key2)
);
然后,您可以将下面的tb_dts替换为该表,如下所示:
select key1, key2 -- no distinct or group by needed.
from the_keys_table
order by key1, key2
limit 0, 4
您的最终查询变为:
select t.*
from your_table t
where exists (
select 1
from tb_dts t2
where (key1, key2) in (
select key1, key2
from the_keys_table
order by key1, key2
limit 0, 4
) and t1.id = t.fieldname
);
你的问题似乎有点令人困惑,但据我了解,如果你想在WHERE field IN clause
中使用ids,你可以使用子查询。因此,在您拥有select key1,key2,group_concat(Id) from tb_dts group by key1,key2 limit 4,4;
的情况下,可以简单地成为
select field
from table_name
where id IN
(select group_concat(Id)
from tb_dts group by key1,key2 limit 4,4)
你可以找到谷歌子查询来了解更多信息。让我知道你对这种方法的看法。希望这可能是一个步骤。
你可以试试这个
select *
from tb_dts
where Id IN (
SELECT r2.Ids from
( SELECT group_concat(Id) Ids
from tb_dts as r1
group by r1.key1,r1.key2
limit 4,4
) r2
);
第 1 步:放弃您设想的分页方案。 相反,在key
上分页,而不是"每页 4 行"。
第 2 步:"记住你离开的地方"。 如果第一页包含 key1 = 1 或 2 的所有对,则第二页从 key1 = 2 之后的下一个值开始。
现在,查询变得更加高效,因为它超出了key1
值的"范围"。 目前,它必须先构建整个输出,然后才能分页!
更多关于不使用OFFSET
分页的讨论。