从数据库读取数据到内存处理的问题、之前自己是用sql语句执行,后来由于数据量比较大、要求读取到内存。 5
本人是用C写的程序,之前写的程序直接是使用sql语句来分组求平均值执行、后来由于数据量比较大、要求把读取到的数据写到内存,但是自己写到内存了以后不会进行分组求平均。表结构...
本人是用C写的程序,之前写的程序直接是使用sql语句来分组求平均值执行、后来由于数据量比较大、要求把读取到的数据写到内存,但是自己写到内存了以后不会进行分组求平均。表结构如下:
自己的之前的sql语句是这样写的:
select my_saddr32,end_time,my_daddr32,port,app_id,my_end_time,avg(t.in_stream) in_stream
,AVG(t.out_stream) out_stream,avg(t.in_stream_pkt_cnt) in_stream_pkt_cnt, avg
(t.out_stream_pkt_cnt) out_stream_pkt_cnt,avg(t.tcp_fin_cnt) tcp_fin_cnt, avg(t.tcp_syn_cnt)
tcp_syn_cnt,avg(t.tcp_reset_cnt) tcp_reset_cnt,app_name,avg(t.average_delay_ctd)
average_delay_ctd,avg(t.average_delay_dts) average_delay_dts ,avg(tcp_retransmission_cnt)
tcp_retransmission_cnt,lKeyID,area_name from(select lKeyID,area_name,FROM_UNIXTIME(%s)
my_end_time,my_saddr32,port,end_time,my_daddr32,app_id,in_stream,out_stream,in_stream_pkt_cn
t,out_stream_pkt_cnt,tcp_fin_cnt,tcp_syn_cnt,tcp_reset_cnt,app_name,average_delay_ctd,averag
e_delay_dts,tcp_retransmission_cnt from nth_station_flow_60m_%s WHERE end_time > %s and
end_time <=%s ) t group by my_daddr32,port,my_saddr32;意思就是在把某个时间段的数据取出来、然后根据my_daddr32,port,my_saddr32进行分组求平均值、但是现在要求写到内存求平均值,自己把数据读取到以后保存在本地内存,并且使用了qsort进行排序了、但是接下来分组和求平均值不知道如何实现、求助、真的很着急、希望好心人帮帮忙。财富值只有这么点。 展开
自己的之前的sql语句是这样写的:
select my_saddr32,end_time,my_daddr32,port,app_id,my_end_time,avg(t.in_stream) in_stream
,AVG(t.out_stream) out_stream,avg(t.in_stream_pkt_cnt) in_stream_pkt_cnt, avg
(t.out_stream_pkt_cnt) out_stream_pkt_cnt,avg(t.tcp_fin_cnt) tcp_fin_cnt, avg(t.tcp_syn_cnt)
tcp_syn_cnt,avg(t.tcp_reset_cnt) tcp_reset_cnt,app_name,avg(t.average_delay_ctd)
average_delay_ctd,avg(t.average_delay_dts) average_delay_dts ,avg(tcp_retransmission_cnt)
tcp_retransmission_cnt,lKeyID,area_name from(select lKeyID,area_name,FROM_UNIXTIME(%s)
my_end_time,my_saddr32,port,end_time,my_daddr32,app_id,in_stream,out_stream,in_stream_pkt_cn
t,out_stream_pkt_cnt,tcp_fin_cnt,tcp_syn_cnt,tcp_reset_cnt,app_name,average_delay_ctd,averag
e_delay_dts,tcp_retransmission_cnt from nth_station_flow_60m_%s WHERE end_time > %s and
end_time <=%s ) t group by my_daddr32,port,my_saddr32;意思就是在把某个时间段的数据取出来、然后根据my_daddr32,port,my_saddr32进行分组求平均值、但是现在要求写到内存求平均值,自己把数据读取到以后保存在本地内存,并且使用了qsort进行排序了、但是接下来分组和求平均值不知道如何实现、求助、真的很着急、希望好心人帮帮忙。财富值只有这么点。 展开
- 你的回答被采纳后将获得:
- 系统奖励15(财富值+成长值)+难题奖励10(财富值+成长值)+提问者悬赏5(财富值+成长值)
1个回答
展开全部
可以尝试按照数据库的数据构造1个struct结构体,将各字段作为结构体内数据当做一个数据整体进行存储。然后按照你需要的字段,即结构体内的某个数据作为一个关键的数据进行分类处理。其实数据库本身就是如此处理的。
追问
自己已经排序完了、就是进行匹配求平均数的过程、不知道有没有好的方法快速求平均、因为求出来平均数、还要按照原来的结构把数据插入到另外一张表中。
追答
要是多组都要求均值可以采用多线程或者并行算法同时进行,可以缩短时间。
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询