Question

Oracle中按照时间范围以及时间间隔抽取数据的问题

1.有一张表，里面有三个字段 ID-标示,Value-值,CreateTime
2.每次向表中存入17条CreateTime一样但是Value值不一样的数据，大概存了1000W条左右
3.目前需要一个查询语句 以时间范围和时间间隔为查询标准 取出满足条件的数据，例如:
查询时间范围为2012年10月1日 1:00 - 2012年10月1日 12:00数据中间隔时间是60秒 的所有数据! 这样查询的SQL语句应该如何写？ Tks!

Answer 1

SELECT * FROM 表名 A
where a.CreateTime between to_date('2012-10-01 01:00:00','YYYY-MM-DD HH24:MI:SS')
and to_date('2012-10-01 12:00:00','YYYY-MM-DD HH24:MI:SS')
and to_char(CreateTime,'SS') = '00'
-- 秒位上数据为'00'的，这样非00秒比如05,10等其它的就过滤掉了
其它条件根据需要再加

追问

and to_char(CreateTime,'SS') = '00'

这个是秒位数上的 那么，怎么根据这个来求得间隔时间 进行数据抽样.. 不懂..能具体一点么！
关键是间隔时间的条件 整不来.

追答

你可以看下我标准的字符串转日期函数
字符串转日期：to_date('2012-10-01 01:00:00','YYYY-MM-DD HH24:MI:SS')
日期转字符串：to_char(sysdate,‘YYYY-MM-DD HH24:MI:SS')
SS表示秒, to_char(sysdate,'SS')得到当前的秒
像你需求里的，正好60秒一个周期, 那你限制to_char(CreateTime,'SS')='00'
就可以实现需求了，如果要半分钟一个周期，可以试试mod(to_number(to_char(CreateTime,'SS')),30)=0，mod是得除后余数的函数

追问

现在按这样来试的话就相当于只对单条数据进行限制，这样会漏掉很多结果,应为在存入数据的时候，CreateTime 的秒上并不会是 00，是60秒内的任意一个数.
假设我存入了20次数据 每次17条那么
1: CreateTime: 2012年10月1日 1:00:02 17条记录
2: CreateTime: 2012年10月1日 1:01:02
...
20 -----CreateTime: 2012年10月1日 1:25:25
按照取的话就没有根据上组记录的时间和下一组记录的时间进行对比.

追答

目测你说的可能是个监控采样的数据
制定的规则是60秒为周期，所以那么写是没有问题的
先可以观察一下数据，最后一位秒上大多数为什么（比如02也好00也好），然后在你的查询中使用该限制
如果你说，有的是00秒，有的是02秒，那规则就没法定了，如果怕因为采集有时间误差
你可以试试最后的条件改为
and ( to_char(CreateTime,'SS') = '00'
or to_char(CreateTime,'SS') = '01'
or to_char(CreateTime,'SS') = '59')
这样秒的位数为59~00~01都可以留下来，但理论上就可能存在冗余数据

追问

就是设备传输上来的数据，所以存入的时间是不一致的 CreateTime 的秒可能是0-59内的任意数字，所以需要对数据做一个处理：
根据存入的数据-上一组数据-这一组数据-下一组数据 的时间进行计算。
如果说差值时间 在允许的间隔时间范围内（比如说60秒内或者是8秒内）就取出，如果不满足就丢弃.
如果用程序写，只能在一个可控的时间范围内进行查询排序以及过滤.加上是网络传输那就慢得不行了,所以需要写一个SQL处理

追答

1. 如果没有其它间隔规则（比如10秒一个、5秒一个）干扰
我之前的写法就ok
2. 如果你拿不准数据的分布（比如秒的位数都是1x还是2x），可以先用下面的sql统计下秒位上的数值分布情况
SELECT to_char(CreateTime,'YYYY-MM-DD HH24:MI') GRP_MIN--以每分钟为单元分组，如果要以小时，把格式中最后的:MI去掉
,AVG(to_number(to_char(CreateTime,'SS'))) avg_sec -- 平均秒位上的值
,COUNT(*) nums -- 分组的采样数量
FROM 表名 A
where a.CreateTime between to_date('2012-10-01 01:00:00','YYYY-MM-DD HH24:MI:SS')
and to_date('2012-10-01 12:00:00','YYYY-MM-DD HH24:MI:SS')
and to_char(CreateTime,'SS') = '00'
GROUP BY to_char(CreateTime,'YYYY-MM-DD HH24')

Answer 2

我这样理解：时间段内“整分”数据，也即秒为0的数据（CreateTime 为varchar2或date时分别如下）

select a.CreateTime
from 表 a
where extract(second from to_timestamp(a.CreateTime, 'yyyy-mm-dd hh24:mi:ss'))=0
and a.CreateTime >='2012-10-01 01:00:00' and a.CreateTime <='2012-10-01 12:00:00'

select a.CreateTime
from 表 a
where extract(second from to_timestamp(to_char(a.CreateTime,'yyyy-mm-dd hh24:mi:ss'), 'yyyy-mm-dd hh24:mi:ss'))=0
and a.CreateTime between to_date('2012-10-01 1','yyyy-mm-dd hh24:mi:ss') and to_date('2012-10-01 12','yyyy-mm-dd hh24:mi:ss')

Answer 3

这里TT是指定的时间间隔，单位：秒 下面语句可查出任意给定时间间隔的所有记录。
select * from tab
where CreateTime between to_date('2012-10-01 01:00:00','yyyy-mm-dd hh24:mi:ss') and
to_date('2012-10-01 12:00:00','yyyy-mm-dd hh24:mi:ss') and
CreateTime in (select to_date('2012-10-01 01:00:00','yyyy-mm-dd hh24:mi:ss')
+TT*rownum/24/60/60 from dual
CONNECT BY rownum<=
(to_date('2012-10-01 12:00:00','yyyy-mm-dd hh24:mi:ss')-
to_date('2012-10-01 01:00:00','yyyy-mm-dd hh24:mi:ss'))*24*60*60/TT);
在上面的语句中，下列部分是构造时间间隔的所有可能存在的记录。每TT秒一条记录。
(select to_date('2012-10-01 01:00:00','yyyy-mm-dd hh24:mi:ss') +TT*rownum/24/60/60
from dual CONNECT BY rownum<=
(to_date('2012-10-01 12:00:00','yyyy-mm-dd hh24:mi:ss')-
to_date('2012-10-01 01:00:00','yyyy-mm-dd hh24:mi:ss'))*24*60*60/TT)
不知道我理解的对不对，仅供参考。