如何从oracle数据库中随机获取记录?

Posted

技术标签:

【中文标题】如何从oracle数据库中随机获取记录?【英文标题】:How to get records randomly from the oracle database? 【发布时间】:2012-04-09 17:41:34 【问题描述】:

我需要从 Oracle 数据库中随机选择行。

例如:假设一个有 100 行的表,我如何从整个 100 行中随机返回 20 条记录。

【问题讨论】:

【参考方案1】:
SELECT *
FROM   (
    SELECT *
    FROM   table
    ORDER BY DBMS_RANDOM.RANDOM)
WHERE  rownum < 21;

【讨论】:

打败我。但是,这只会从表中选择前 20 行并随机排序。 你必须知道,这对大表来说是一个非常繁重的操作,因为它会首先为每一行分配一个随机数,然后对这个值进行排序,然后从中取出一些记录。 @NishantSharma,行是随机的,然后有限 - 你的评论不正确。 这种方法很慢 @JonBetts,我认为该示例更快,资源效率更高:***.com/a/9920431/156787【参考方案2】:

SAMPLE() 不能保证准确地为您提供 20 行,但可能是合适的(并且可能比完整查询 + 大表随机排序的性能要好得多):

SELECT *
FROM   table SAMPLE(20);

注意:这里的20 是一个大概的百分比,而不是所需的行数。在这种情况下,由于您有 100 行,因此要获得大约 20 行,您需要 20% 的样本。

【讨论】:

样本速度很快,但似乎不是很随机。靠近表格顶部/开头的记录往往受到青睐。 如果您在查询通过整个表之前停止查询,就会发生这种情况。 对不起,我犯了一个错误,你的帖子很好,结果是平均分布的。当您结合 sample(20) 添加“where rownum 【参考方案3】:
SELECT * FROM table SAMPLE(10) WHERE ROWNUM <= 20;

这样更高效,因为它不需要对表格进行排序。

【讨论】:

在 20 行后停止样本将导致非随机结果(在表中较早找到的行将比后面的行更频繁地返回)。此外,这不能保证返回 20 行。【参考方案4】:
SELECT column FROM
( SELECT column, dbms_random.value FROM table ORDER BY 2 )
where rownum <= 20;

【讨论】:

【参考方案5】:

要随机选择 20 行,我认为您最好选择其中随机排序的很多行并选择该集合的前 20 行。

类似:

Select *
  from (select *
          from table
         order by dbms_random.value) -- you can also use DBMS_RANDOM.RANDOM
 where rownum < 21;

最好用于小表,以避免选择大块数据而丢弃大部分数据。

【讨论】:

【参考方案6】:

总结一下,介绍了两种方式

1) using order by DBMS_RANDOM.VALUE clause
2) using sample([%]) function

第一种方式在 'CORRECTNESS' 中具有优势,这意味着如果结果确实存在,您将永远不会失败,而在第二种方式中,即使有满足查询条件的案例,您也可能得不到结果,因为在采样期间信息减少了.

第二种方式在“高效”方面具有优势,这意味着您将更快地获得结果并减轻数据库的负载。 DBA 向我发出警告,我使用第一种方式的查询会给数据库带来负载

您可以根据自己的兴趣选择两种方式中的一种!

【讨论】:

【参考方案7】:

在大表的情况下,按 dbms_random.value 排序的标准方法无效,因为您需要扫描整个表,而 dbms_random.value 是一个非常慢的函数并且需要上下文切换。对于这种情况,还有 3 种额外的方法:


1:使用sample子句:

https://docs.oracle.com/en/database/oracle/oracle-database/19/sqlrf/SELECT.html#GUID-CFA006CA-6FF1-4972-821E-6996142A51C6 https://docs.oracle.com/en/database/oracle/oracle-database/19/sqlrf/SELECT.html#GUID-CFA006CA-6FF1-4972-821E-6996142A51C6

例如:

select *
from s1 sample block(1)
order by dbms_random.value
fetch first 1 rows only

即获取所有块的 1%,然后将它们随机排序并仅返回 1 行。


2:如果你在正态分布的列上有一个索引/主键,你可以得到最小值和最大值,在这个范围内得到随机值,并得到第一行的值更大或等于随机生成的值。

例子:

--big table with 1 mln rows with primary key on ID with normal distribution:
Create table s1(id primary key,padding) as 
   select level, rpad('x',100,'x')
   from dual 
   connect by level<=1e6;

select *
from s1 
where id>=(select 
              dbms_random.value(
                 (select min(id) from s1),
                 (select max(id) from s1) 
              )
           from dual)
order by id
fetch first 1 rows only;

3:获取随机表块,生成rowid并通过该rowid从表中获取行

select * 
from s1
where rowid = (
   select
      DBMS_ROWID.ROWID_CREATE (
         1, 
         objd,
         file#,
         block#,
         1) 
   from    
      (
      select/*+ rule */ file#,block#,objd
      from v$bh b
      where b.objd in (select o.data_object_id from user_objects o where object_name='S1' /* table_name */)
      order by dbms_random.value
      fetch first 1 rows only
      )
);

【讨论】:

【参考方案8】:

以下是如何从每组中随机抽取一个样本:

SELECT GROUPING_COLUMN, 
       MIN (COLUMN_NAME) KEEP (DENSE_RANK FIRST ORDER BY DBMS_RANDOM.VALUE) 
         AS RANDOM_SAMPLE
FROM TABLE_NAME
GROUP BY GROUPING_COLUMN
ORDER BY GROUPING_COLUMN;

我不确定它的效率如何,但是如果您有很多类别和子类别,这似乎可以很好地完成工作。

【讨论】:

以上是关于如何从oracle数据库中随机获取记录?的主要内容,如果未能解决你的问题,请参考以下文章

Oracle:从记录数据类型中选择

如何一次获取 100 条记录,直到使用 Spring JPA 的 oracle 中的所有记录?

从查询结果中选择随机结果样本

如何从 Oracle 中的 JDBC 批量插入中获取生成的密钥?

关于如何从 oracle10g 中提取 600 万条记录有啥建议吗?

如何获取新插入Oracle数据库Sequence值的5种方法