PriceForecast/logs/pricepredict.log.1
2024-11-14 16:38:30 +08:00

12047 lines
1012 KiB
Raw Blame History

This file contains ambiguous Unicode characters

This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.

2024-11-05 15:15:08,260 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-05 15:15:08,261 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date
2024-11-05 15:16:38,316 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-05 15:16:39,389 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 641)
2024-11-05 15:16:39,395 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 641)
2024-11-05 15:16:39,400 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 562)
2024-11-05 15:16:44,359 - my_logger - INFO - Libya列数据为空
2024-11-05 15:16:44,362 - my_logger - INFO - Malaysia列数据为空
2024-11-05 15:16:44,758 - my_logger - INFO - 日度(357) 周度(200) 月度(2)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需 舟山:可用库容:原油
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 3 columns]
2024-11-05 15:16:44,772 - my_logger - INFO - 特征信息总共有559个,日度(357),周度(200),月度(2), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-05 15:16:44,773 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-05 15:23:11,765 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-05 15:23:11,766 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date
2024-11-05 15:24:38,610 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-05 15:24:39,630 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 641)
2024-11-05 15:24:39,635 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 641)
2024-11-05 15:24:39,640 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 562)
2024-11-05 15:24:44,466 - my_logger - INFO - Libya列数据为空
2024-11-05 15:24:44,468 - my_logger - INFO - Malaysia列数据为空
2024-11-05 15:24:44,856 - my_logger - INFO - 日度(357) 周度(200) 月度(2)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需 舟山:可用库容:原油
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 3 columns]
2024-11-05 15:24:44,870 - my_logger - INFO - 特征信息总共有559个,日度(357),周度(200),月度(2), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-05 15:24:44,871 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-05 15:35:40,669 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-05 15:35:40,670 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date
2024-11-05 15:37:06,169 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-05 15:37:07,168 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 641)
2024-11-05 15:37:07,174 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 641)
2024-11-05 15:37:07,179 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 562)
2024-11-05 15:37:11,984 - my_logger - INFO - Libya列数据为空
2024-11-05 15:37:11,986 - my_logger - INFO - Malaysia列数据为空
2024-11-05 15:37:12,387 - my_logger - INFO - 日度(357) 周度(200) 月度(1) 61天(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日 舟山:可用库容:原油
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 4 columns]
2024-11-05 15:37:12,403 - my_logger - INFO - 特征信息总共有559个,日度(357),周度(200),月度(1),61天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-05 15:37:12,404 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-05 15:37:52,970 - my_logger - INFO - 开始训练模型...
2024-11-05 15:37:52,989 - my_logger - INFO - Training set head:
2024-11-05 15:37:52,989 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 577 columns]
2024-11-05 15:37:53,276 - my_logger - INFO -
Testing set head:
2024-11-05 15:37:53,277 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 577 columns]
2024-11-05 15:44:41,325 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-05 15:44:41,786 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2236571537180296
2024-11-05 15:44:41,788 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-05 15:44:43,485 - my_logger - INFO - 价格类指标的相关性总和为100.80713663445724
2024-11-05 15:44:43,486 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-05 15:44:45,116 - my_logger - INFO - 供应类指标的相关性总和为15.841552773862325
2024-11-05 15:44:45,117 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-05 15:44:45,412 - my_logger - INFO - 供应给类指标的相关性总和为1.5495964178756472
2024-11-05 15:44:45,414 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-05 15:44:47,370 - my_logger - INFO - 其他类指标的相关性总和为6.895715573826763
2024-11-05 15:44:47,371 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-05 15:44:47,823 - my_logger - INFO - 宏观类指标的相关性总和为2.6100894874418974
2024-11-05 15:44:47,824 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-05 15:44:49,497 - my_logger - INFO - 库存类指标的相关性总和为39.83620163475673
2024-11-05 15:44:49,498 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-05 15:44:51,147 - my_logger - INFO - 期货市场类指标的相关性总和为75.43963122592632
2024-11-05 15:44:51,149 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-05 15:44:53,023 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.176909065750354
2024-11-05 15:44:53,024 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-05 15:44:53,334 - my_logger - INFO - 运输类指标的相关性总和为1.0268007380121404
2024-11-05 15:44:53,335 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-05 15:44:54,913 - my_logger - INFO - 进出口类指标的相关性总和为12.355097996621248
2024-11-05 15:44:54,914 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-05 15:44:56,556 - my_logger - INFO - 需求类指标的相关性总和为15.86020030447947
2024-11-05 15:44:56,557 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-05 15:44:56,941 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-05 15:45:00,904 - my_logger - INFO - 模型训练完成
2024-11-05 16:26:35,807 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-05 16:26:35,808 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date
2024-11-05 16:28:01,457 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-05 16:28:02,683 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 641)
2024-11-05 16:28:02,689 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 641)
2024-11-05 16:28:02,695 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 562)
2024-11-05 16:28:07,646 - my_logger - INFO - Libya列数据为空
2024-11-05 16:28:07,648 - my_logger - INFO - Malaysia列数据为空
2024-11-05 16:28:08,044 - my_logger - INFO - 日度(357) 周度(200) 月度(1) 61天(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日 舟山:可用库容:原油
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 4 columns]
2024-11-05 16:28:08,058 - my_logger - INFO - 特征信息总共有559个,日度(357),周度(200),月度(1),61天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-05 16:28:08,060 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-05 16:28:49,825 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '75.03' WHERE ds = '2024-11-05 00:00:00'
2024-11-05 16:28:49,834 - my_logger - INFO - 开始训练模型...
2024-11-05 16:28:50,577 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '75.66663', Informer = '76.564384', LSTM = '78.03253', iTransformer = '74.78894', TSMixer = '74.65522', TSMixerx = '74.081924', PatchTST = '75.425095', RNN = '79.02649', GRU = '75.851425', TCN = '74.326355', BiTCN = '74.85278', DilatedRNN = '76.27298', MLP = '74.9631', DLinear = '75.093094', NLinear = '75.60724', TFT = '76.81235', StemGNN = '74.54248', MLPMultivariate = '74.60546', TiDE = '74.914154', DeepNPTS = '75.14611' WHERE ds = '2024-11-06 00:00:00'
2024-11-05 16:28:52,658 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-05 16:28:53,127 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2236571537180296
2024-11-05 16:28:53,129 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-05 16:28:54,876 - my_logger - INFO - 价格类指标的相关性总和为100.80713663445724
2024-11-05 16:28:54,878 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-05 16:28:56,927 - my_logger - INFO - 供应类指标的相关性总和为15.841552773862325
2024-11-05 16:28:56,928 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-05 16:28:57,252 - my_logger - INFO - 供应给类指标的相关性总和为1.5495964178756472
2024-11-05 16:28:57,253 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-05 16:28:58,962 - my_logger - INFO - 其他类指标的相关性总和为6.895715573826763
2024-11-05 16:28:58,964 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-05 16:28:59,465 - my_logger - INFO - 宏观类指标的相关性总和为2.6100894874418974
2024-11-05 16:28:59,466 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-05 16:29:01,175 - my_logger - INFO - 库存类指标的相关性总和为39.83620163475673
2024-11-05 16:29:01,176 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-05 16:29:03,299 - my_logger - INFO - 期货市场类指标的相关性总和为75.43963122592632
2024-11-05 16:29:03,300 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-05 16:29:04,815 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.176909065750354
2024-11-05 16:29:04,817 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-05 16:29:05,144 - my_logger - INFO - 运输类指标的相关性总和为1.0268007380121404
2024-11-05 16:29:05,145 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-05 16:29:06,831 - my_logger - INFO - 进出口类指标的相关性总和为12.355097996621248
2024-11-05 16:29:06,832 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-05 16:29:09,036 - my_logger - INFO - 需求类指标的相关性总和为15.86020030447947
2024-11-05 16:29:09,038 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-05 16:29:09,429 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-05 16:29:13,399 - my_logger - INFO - 模型训练完成
2024-11-06 15:36:16,753 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 15:36:16,753 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 15:36:16,754 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 15:36:16,754 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 15:36:47,911 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 15:36:47,911 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 15:36:48,339 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 15:36:48,339 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 15:36:48,343 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 15:36:48,343 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 15:36:48,345 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 15:36:48,345 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 15:36:49,964 - my_logger - INFO - 日度(229) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 15:36:49,964 - my_logger - INFO - 日度(229) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 15:36:49,989 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 15:36:49,989 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 15:36:49,991 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 15:36:49,991 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 15:36:50,902 - my_logger - INFO - 开始训练模型...
2024-11-06 15:36:50,902 - my_logger - INFO - 开始训练模型...
2024-11-06 15:36:50,913 - my_logger - INFO - Training set head:
2024-11-06 15:36:50,913 - my_logger - INFO - Training set head:
2024-11-06 15:36:50,914 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 15:36:50,914 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 15:36:51,515 - my_logger - INFO -
Testing set head:
2024-11-06 15:36:51,515 - my_logger - INFO -
Testing set head:
2024-11-06 15:36:51,517 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 15:36:51,517 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 16:18:41,648 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 16:18:41,648 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 16:18:41,649 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 16:18:41,649 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 16:19:09,923 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 16:19:09,923 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 16:19:10,333 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 16:19:10,333 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 16:19:10,337 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 16:19:10,337 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 16:19:10,339 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 16:19:10,339 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 16:19:11,840 - my_logger - INFO - 日度(229) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 16:19:11,840 - my_logger - INFO - 日度(229) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 16:19:11,865 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 16:19:11,865 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 16:19:11,867 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 16:19:11,867 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 16:19:12,474 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 16:19:12,474 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 16:19:12,477 - my_logger - INFO - 开始训练模型...
2024-11-06 16:19:12,477 - my_logger - INFO - 开始训练模型...
2024-11-06 16:19:12,487 - my_logger - INFO - Training set head:
2024-11-06 16:19:12,487 - my_logger - INFO - Training set head:
2024-11-06 16:19:12,488 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 16:19:12,488 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 16:19:13,077 - my_logger - INFO -
Testing set head:
2024-11-06 16:19:13,077 - my_logger - INFO -
Testing set head:
2024-11-06 16:19:13,079 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 16:19:13,079 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 16:24:19,267 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '7434.7134', Informer = '7367.9683', LSTM = '7467.226', iTransformer = '7463.2046', TSMixer = '7406.9355', TSMixerx = '7578.1846', PatchTST = '7458.4346', RNN = '7424.3164', GRU = '7480.518', TCN = '7526.6685', BiTCN = '7446.571', DilatedRNN = '7527.0156', MLP = '7484.4873', DLinear = '7368.969', NLinear = '7413.825', TFT = '7408.5073', StemGNN = '7416.7656', MLPMultivariate = '7489.2236', TiDE = '7402.641', DeepNPTS = '7407.051' WHERE ds = '2024-11-06 00:00:00'
2024-11-06 16:24:19,267 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '7434.7134', Informer = '7367.9683', LSTM = '7467.226', iTransformer = '7463.2046', TSMixer = '7406.9355', TSMixerx = '7578.1846', PatchTST = '7458.4346', RNN = '7424.3164', GRU = '7480.518', TCN = '7526.6685', BiTCN = '7446.571', DilatedRNN = '7527.0156', MLP = '7484.4873', DLinear = '7368.969', NLinear = '7413.825', TFT = '7408.5073', StemGNN = '7416.7656', MLPMultivariate = '7489.2236', TiDE = '7402.641', DeepNPTS = '7407.051' WHERE ds = '2024-11-06 00:00:00'
2024-11-06 16:24:23,476 - my_logger - INFO - 邮件发送成功!
2024-11-06 16:24:23,476 - my_logger - INFO - 邮件发送成功!
2024-11-06 17:16:20,884 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:16:20,884 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:16:20,887 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:16:20,887 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:16:49,871 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:16:49,871 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:16:50,291 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:16:50,291 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:16:50,294 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:16:50,294 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:16:50,297 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:16:50,297 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:16:51,868 - my_logger - INFO - 日度(229) 周度(92) 154天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:16:51,868 - my_logger - INFO - 日度(229) 周度(92) 154天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:16:51,893 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),154天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:16:51,893 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),154天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:16:51,895 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:16:51,895 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:16:52,493 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:16:52,493 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:16:52,496 - my_logger - INFO - 开始训练模型...
2024-11-06 17:16:52,496 - my_logger - INFO - 开始训练模型...
2024-11-06 17:35:15,261 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:35:15,261 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:35:15,263 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:35:15,263 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:35:43,635 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:35:43,635 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:35:44,022 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:35:44,022 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:35:44,025 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:35:44,025 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:35:44,028 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:35:44,028 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:35:45,674 - my_logger - INFO - 日度(229) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:35:45,674 - my_logger - INFO - 日度(229) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:35:45,698 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:35:45,698 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:35:45,701 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:35:45,701 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:35:46,264 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:35:46,264 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:35:46,267 - my_logger - INFO - 开始训练模型...
2024-11-06 17:35:46,267 - my_logger - INFO - 开始训练模型...
2024-11-06 17:41:43,526 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:41:43,526 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:41:43,528 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:41:43,528 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:42:11,903 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:42:11,903 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:42:12,317 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:42:12,317 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:42:12,320 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:42:12,320 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:42:12,323 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:42:12,323 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:42:13,923 - my_logger - INFO - 日度(229) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:42:13,923 - my_logger - INFO - 日度(229) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:42:13,950 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:42:13,950 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:42:13,952 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:42:13,952 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:42:14,499 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:42:14,499 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:42:14,501 - my_logger - INFO - 开始训练模型...
2024-11-06 17:42:14,501 - my_logger - INFO - 开始训练模型...
2024-11-06 17:44:00,426 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:44:00,426 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:44:00,428 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:44:00,428 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:45:21,986 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:45:21,986 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:45:22,907 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:45:22,907 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:45:22,910 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:45:22,910 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:45:22,914 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:45:22,914 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:45:27,131 - my_logger - INFO - 日度(229) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:45:27,131 - my_logger - INFO - 日度(229) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:45:27,200 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:45:27,200 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:45:27,202 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:45:27,202 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:45:28,022 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:45:28,022 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:45:28,024 - my_logger - INFO - 开始训练模型...
2024-11-06 17:45:28,024 - my_logger - INFO - 开始训练模型...
2024-11-06 17:47:35,011 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:47:35,011 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:47:35,014 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:47:35,014 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:48:57,586 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:48:57,586 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:48:58,502 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:48:58,502 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:48:58,506 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:48:58,506 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:48:58,509 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:48:58,509 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:49:02,610 - my_logger - INFO - 日度(229) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:49:02,610 - my_logger - INFO - 日度(229) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:49:02,672 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:49:02,672 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:49:02,675 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:49:02,675 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:49:03,479 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:49:03,479 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:49:03,481 - my_logger - INFO - 开始训练模型...
2024-11-06 17:49:03,481 - my_logger - INFO - 开始训练模型...
2024-11-06 17:51:00,692 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:51:00,692 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:51:00,694 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:51:00,694 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:52:30,429 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:52:30,429 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:52:31,364 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:52:31,364 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:52:31,369 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:52:31,369 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:52:31,372 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:52:31,372 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:52:35,432 - my_logger - INFO - 日度(229) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:52:35,432 - my_logger - INFO - 日度(229) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:52:35,492 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:52:35,492 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:52:35,494 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:52:35,494 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:52:36,303 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:52:36,303 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:52:36,306 - my_logger - INFO - 开始训练模型...
2024-11-06 17:52:36,306 - my_logger - INFO - 开始训练模型...
2024-11-06 17:56:29,800 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:56:29,800 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 17:56:29,802 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:56:29,802 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 17:58:12,906 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:58:12,906 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 17:58:13,979 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:58:13,979 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 17:58:13,985 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:58:13,985 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 17:58:13,989 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:58:13,989 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 17:58:19,089 - my_logger - INFO - 日度(229) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:58:19,089 - my_logger - INFO - 日度(229) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 17:58:19,156 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:58:19,156 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 17:58:19,159 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:58:19,159 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 17:58:20,125 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:58:20,125 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 17:58:20,128 - my_logger - INFO - 开始训练模型...
2024-11-06 17:58:20,128 - my_logger - INFO - 开始训练模型...
2024-11-06 18:04:38,024 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 18:04:38,024 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 18:04:38,027 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 18:04:38,027 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 18:06:22,574 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 18:06:22,574 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 18:06:23,730 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 18:06:23,730 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 18:06:23,737 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 18:06:23,737 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 18:06:23,741 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 18:06:23,741 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 18:06:28,811 - my_logger - INFO - 日度(229) 周度(92) 21天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 18:06:28,811 - my_logger - INFO - 日度(229) 周度(92) 21天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 18:06:28,879 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),21天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 18:06:28,879 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),21天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 18:06:28,882 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 18:06:28,882 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 18:06:29,808 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 18:06:29,808 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 18:06:29,810 - my_logger - INFO - 开始训练模型...
2024-11-06 18:06:29,810 - my_logger - INFO - 开始训练模型...
2024-11-06 21:31:41,598 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 21:31:41,598 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-06 21:31:41,600 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 21:31:41,600 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-06 21:32:17,273 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 21:32:17,273 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-06 21:32:17,798 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 21:32:17,798 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-06 21:32:17,803 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 21:32:17,803 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-06 21:32:17,806 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 21:32:17,806 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-06 21:32:19,728 - my_logger - INFO - 日度(229) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 21:32:19,728 - my_logger - INFO - 日度(229) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-06 21:32:19,756 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 21:32:19,756 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-06 21:32:19,759 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 21:32:19,759 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-06 21:32:20,607 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 21:32:20,607 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-06 21:32:20,610 - my_logger - INFO - 开始训练模型...
2024-11-06 21:32:20,610 - my_logger - INFO - 开始训练模型...
2024-11-06 21:32:20,620 - my_logger - INFO - Training set head:
2024-11-06 21:32:20,620 - my_logger - INFO - Training set head:
2024-11-06 21:32:20,623 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 21:32:20,623 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 21:32:21,281 - my_logger - INFO -
Testing set head:
2024-11-06 21:32:21,281 - my_logger - INFO -
Testing set head:
2024-11-06 21:32:21,282 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-06 21:32:21,282 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-07 10:47:08,895 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-07 10:47:08,895 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-07 10:47:08,897 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-07 10:47:08,897 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-07 10:47:42,600 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-07 10:47:42,600 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-07 10:47:43,108 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-07 10:47:43,108 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-07 10:47:43,111 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-07 10:47:43,111 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-07 10:47:43,113 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-07 10:47:43,113 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-07 10:47:45,294 - my_logger - INFO - 日度(229) 周度(92) 154天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-07 10:47:45,294 - my_logger - INFO - 日度(229) 周度(92) 154天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-07 10:47:45,325 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),154天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 10:47:45,325 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),154天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 10:47:45,328 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 10:47:45,328 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 10:47:46,150 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-07 10:47:46,150 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-07 10:47:46,152 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 10:47:46,152 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 10:47:46,177 - my_logger - INFO - 最近20天预测残差最低的模型名称BiTCN
2024-11-07 10:47:46,177 - my_logger - INFO - 最近20天预测残差最低的模型名称BiTCN
2024-11-07 10:47:46,184 - my_logger - INFO - 开始训练模型...
2024-11-07 10:47:46,184 - my_logger - INFO - 开始训练模型...
2024-11-07 10:47:46,195 - my_logger - INFO - Training set head:
2024-11-07 10:47:46,195 - my_logger - INFO - Training set head:
2024-11-07 10:47:46,196 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-07 10:47:46,196 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-07 10:47:46,894 - my_logger - INFO -
Testing set head:
2024-11-07 10:47:46,894 - my_logger - INFO -
Testing set head:
2024-11-07 10:47:46,895 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-07 10:47:46,895 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
758 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 338 columns]
2024-11-07 10:54:44,524 - my_logger - INFO - 模型训练完成
2024-11-07 10:54:44,524 - my_logger - INFO - 模型训练完成
2024-11-07 10:54:44,528 - my_logger - INFO - 训练数据绘图ing
2024-11-07 10:54:44,528 - my_logger - INFO - 训练数据绘图ing
2024-11-07 10:54:45,893 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '7434.7134', Informer = '7367.3164', LSTM = '7467.226', iTransformer = '7465.537', TSMixer = '7406.9355', TSMixerx = '7578.1846', PatchTST = '7458.4346', RNN = '7424.3164', GRU = '7480.518', TCN = '7526.6685', BiTCN = '7446.8755', DilatedRNN = '7527.0156', MLP = '7484.4873', DLinear = '7368.969', NLinear = '7413.825', TFT = '7408.5073', StemGNN = '7417.236', MLPMultivariate = '7500.4634', TiDE = '7402.641', DeepNPTS = '7407.051' WHERE ds = '2024-11-06 00:00:00'
2024-11-07 10:54:45,893 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '7434.7134', Informer = '7367.3164', LSTM = '7467.226', iTransformer = '7465.537', TSMixer = '7406.9355', TSMixerx = '7578.1846', PatchTST = '7458.4346', RNN = '7424.3164', GRU = '7480.518', TCN = '7526.6685', BiTCN = '7446.8755', DilatedRNN = '7527.0156', MLP = '7484.4873', DLinear = '7368.969', NLinear = '7413.825', TFT = '7408.5073', StemGNN = '7417.236', MLPMultivariate = '7500.4634', TiDE = '7402.641', DeepNPTS = '7407.051' WHERE ds = '2024-11-06 00:00:00'
2024-11-07 10:54:47,963 - my_logger - INFO - 训练数据绘图end
2024-11-07 10:54:47,963 - my_logger - INFO - 训练数据绘图end
2024-11-07 10:54:47,963 - my_logger - INFO - 制作报告ing
2024-11-07 10:54:47,963 - my_logger - INFO - 制作报告ing
2024-11-07 10:54:48,125 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-07 10:54:48,125 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-07 10:54:50,377 - my_logger - INFO - 价差类指标的相关性总和为8.728672872849648
2024-11-07 10:54:50,377 - my_logger - INFO - 价差类指标的相关性总和为8.728672872849648
2024-11-07 10:54:50,379 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 10:54:50,379 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 10:54:54,166 - my_logger - INFO - 价格类指标的相关性总和为99.41270758676293
2024-11-07 10:54:54,166 - my_logger - INFO - 价格类指标的相关性总和为99.41270758676293
2024-11-07 10:54:54,168 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 10:54:54,168 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 10:54:56,513 - my_logger - INFO - 供应类指标的相关性总和为16.664542037508998
2024-11-07 10:54:56,513 - my_logger - INFO - 供应类指标的相关性总和为16.664542037508998
2024-11-07 10:54:56,515 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 10:54:56,515 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 10:54:58,251 - my_logger - INFO - 其他类指标的相关性总和为10.916473021707858
2024-11-07 10:54:58,251 - my_logger - INFO - 其他类指标的相关性总和为10.916473021707858
2024-11-07 10:54:58,252 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 10:54:58,252 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 10:55:00,878 - my_logger - INFO - 库存类指标的相关性总和为12.160374476076754
2024-11-07 10:55:00,878 - my_logger - INFO - 库存类指标的相关性总和为12.160374476076754
2024-11-07 10:55:00,880 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 10:55:00,880 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 10:55:01,479 - my_logger - INFO - 进出口类指标的相关性总和为1.3159172189330464
2024-11-07 10:55:01,479 - my_logger - INFO - 进出口类指标的相关性总和为1.3159172189330464
2024-11-07 10:55:01,480 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 10:55:01,480 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 10:55:03,229 - my_logger - INFO - 需求类指标的相关性总和为6.49911350832401
2024-11-07 10:55:03,229 - my_logger - INFO - 需求类指标的相关性总和为6.49911350832401
2024-11-07 10:55:03,230 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 10:55:03,230 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 10:55:03,610 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 10:55:03,610 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 10:55:06,849 - my_logger - INFO - 制作报告end
2024-11-07 10:55:06,849 - my_logger - INFO - 制作报告end
2024-11-07 10:55:06,850 - my_logger - INFO - 模型训练完成
2024-11-07 10:55:06,850 - my_logger - INFO - 模型训练完成
2024-11-07 10:55:11,283 - my_logger - INFO - 邮件发送成功!
2024-11-07 10:55:11,283 - my_logger - INFO - 邮件发送成功!
2024-11-07 11:17:54,528 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-07 11:17:54,528 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-07 11:17:54,530 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-07 11:17:54,530 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-07 11:18:32,031 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-07 11:18:32,031 - my_logger - INFO - 删除两月不更新特征前数据量:(2502, 355)
2024-11-07 11:18:32,550 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-07 11:18:32,550 - my_logger - INFO - 删除两月不更新特征后数据量:(2502, 323)
2024-11-07 11:18:32,555 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-07 11:18:32,555 - my_logger - INFO - 删除预测列为空值的行后数据量:(654, 323)
2024-11-07 11:18:32,557 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-07 11:18:32,557 - my_logger - INFO - 删除全为空值的列后数据量:(654, 323)
2024-11-07 11:18:34,879 - my_logger - INFO - 日度(229) 周度(92) 14天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-07 11:18:34,879 - my_logger - INFO - 日度(229) 周度(92) 14天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
224 PVC期货主力
225 PE期货收盘价
226 PP连续-1月
227 PP连续-5月
228 PP连续-9月
[229 rows x 3 columns]
2024-11-07 11:18:34,909 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),14天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 11:18:34,909 - my_logger - INFO - 特征信息总共有320个,日度(229),周度(92),14天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 11:18:34,912 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 11:18:34,912 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 11:18:35,902 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-07 11:18:35,902 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '7400.0' WHERE ds = '2024-11-05 00:00:00'
2024-11-07 11:18:35,904 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 11:18:35,904 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 11:18:35,928 - my_logger - INFO - 最近20天预测残差最低的模型名称BiTCN
2024-11-07 11:18:35,928 - my_logger - INFO - 最近20天预测残差最低的模型名称BiTCN
2024-11-07 11:18:35,941 - my_logger - INFO - 开始训练模型...
2024-11-07 11:18:35,941 - my_logger - INFO - 开始训练模型...
2024-11-07 11:18:35,942 - my_logger - INFO - 模型训练完成
2024-11-07 11:18:35,942 - my_logger - INFO - 模型训练完成
2024-11-07 11:18:35,943 - my_logger - INFO - 训练数据绘图ing
2024-11-07 11:18:35,943 - my_logger - INFO - 训练数据绘图ing
2024-11-07 11:18:37,148 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '7434.7134', Informer = '7367.3164', LSTM = '7467.226', iTransformer = '7465.537', TSMixer = '7406.9355', TSMixerx = '7578.1846', PatchTST = '7458.4346', RNN = '7424.3164', GRU = '7480.518', TCN = '7526.6685', BiTCN = '7446.8755', DilatedRNN = '7527.0156', MLP = '7484.4873', DLinear = '7368.969', NLinear = '7413.825', TFT = '7408.5073', StemGNN = '7417.236', MLPMultivariate = '7500.4634', TiDE = '7402.641', DeepNPTS = '7407.051' WHERE ds = '2024-11-06 00:00:00'
2024-11-07 11:18:37,148 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '7434.7134', Informer = '7367.3164', LSTM = '7467.226', iTransformer = '7465.537', TSMixer = '7406.9355', TSMixerx = '7578.1846', PatchTST = '7458.4346', RNN = '7424.3164', GRU = '7480.518', TCN = '7526.6685', BiTCN = '7446.8755', DilatedRNN = '7527.0156', MLP = '7484.4873', DLinear = '7368.969', NLinear = '7413.825', TFT = '7408.5073', StemGNN = '7417.236', MLPMultivariate = '7500.4634', TiDE = '7402.641', DeepNPTS = '7407.051' WHERE ds = '2024-11-06 00:00:00'
2024-11-07 11:18:39,369 - my_logger - INFO - 训练数据绘图end
2024-11-07 11:18:39,369 - my_logger - INFO - 训练数据绘图end
2024-11-07 11:18:39,370 - my_logger - INFO - 制作报告ing
2024-11-07 11:18:39,370 - my_logger - INFO - 制作报告ing
2024-11-07 11:18:39,534 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-07 11:18:39,534 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-07 11:18:42,025 - my_logger - INFO - 价差类指标的相关性总和为8.728672872849648
2024-11-07 11:18:42,025 - my_logger - INFO - 价差类指标的相关性总和为8.728672872849648
2024-11-07 11:18:42,028 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 11:18:42,028 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 11:18:44,278 - my_logger - INFO - 价格类指标的相关性总和为99.41270758676293
2024-11-07 11:18:44,278 - my_logger - INFO - 价格类指标的相关性总和为99.41270758676293
2024-11-07 11:18:44,280 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 11:18:44,280 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 11:18:46,444 - my_logger - INFO - 供应类指标的相关性总和为16.664542037508998
2024-11-07 11:18:46,444 - my_logger - INFO - 供应类指标的相关性总和为16.664542037508998
2024-11-07 11:18:46,446 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 11:18:46,446 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 11:18:48,764 - my_logger - INFO - 其他类指标的相关性总和为10.916473021707858
2024-11-07 11:18:48,764 - my_logger - INFO - 其他类指标的相关性总和为10.916473021707858
2024-11-07 11:18:48,766 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 11:18:48,766 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 11:18:50,916 - my_logger - INFO - 库存类指标的相关性总和为12.160374476076754
2024-11-07 11:18:50,916 - my_logger - INFO - 库存类指标的相关性总和为12.160374476076754
2024-11-07 11:18:50,918 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 11:18:50,918 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 11:18:51,488 - my_logger - INFO - 进出口类指标的相关性总和为1.3159172189330464
2024-11-07 11:18:51,488 - my_logger - INFO - 进出口类指标的相关性总和为1.3159172189330464
2024-11-07 11:18:51,489 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 11:18:51,489 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 11:18:53,204 - my_logger - INFO - 需求类指标的相关性总和为6.49911350832401
2024-11-07 11:18:53,204 - my_logger - INFO - 需求类指标的相关性总和为6.49911350832401
2024-11-07 11:18:53,206 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 11:18:53,206 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 11:18:53,598 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 11:18:53,598 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 11:18:56,877 - my_logger - INFO - 制作报告end
2024-11-07 11:18:56,877 - my_logger - INFO - 制作报告end
2024-11-07 11:18:56,878 - my_logger - INFO - 模型训练完成
2024-11-07 11:18:56,878 - my_logger - INFO - 模型训练完成
2024-11-07 11:19:01,698 - my_logger - INFO - 邮件发送成功!
2024-11-07 11:19:01,698 - my_logger - INFO - 邮件发送成功!
2024-11-07 11:38:37,418 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 11:40:57,305 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 11:42:49,516 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 11:42:49,516 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date
2024-11-07 11:44:15,802 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-07 11:44:16,814 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 636)
2024-11-07 11:44:16,820 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 636)
2024-11-07 11:44:16,824 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 557)
2024-11-07 11:44:21,610 - my_logger - INFO - Libya列数据为空
2024-11-07 11:44:21,612 - my_logger - INFO - Malaysia列数据为空
2024-11-07 11:44:21,996 - my_logger - INFO - 日度(357) 周度(195) 月度(1) 61天(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 舟山:可用库容:原油 EIA美国柴油产量千桶日
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 4 columns]
2024-11-07 11:44:22,010 - my_logger - INFO - 特征信息总共有554个,日度(357),周度(195),月度(1),61天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 11:44:22,012 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 11:44:23,671 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '75.03' WHERE ds = '2024-11-05 00:00:00'
2024-11-07 11:44:23,672 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 11:44:23,689 - my_logger - INFO - 最近20天预测残差最低的模型名称PatchTST
2024-11-07 11:44:23,705 - my_logger - INFO - 开始训练模型...
2024-11-07 11:44:23,722 - my_logger - INFO - Training set head:
2024-11-07 11:44:23,722 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 11:44:24,008 - my_logger - INFO -
Testing set head:
2024-11-07 11:44:24,009 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 11:51:30,665 - my_logger - INFO - 模型训练完成
2024-11-07 11:51:30,666 - my_logger - INFO - 训练数据绘图ing
2024-11-07 11:51:33,251 - my_logger - INFO - 训练数据绘图end
2024-11-07 11:51:33,252 - my_logger - INFO - 制作报告ing
2024-11-07 11:51:33,622 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 11:51:34,078 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2236571537180296
2024-11-07 11:51:34,080 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 11:51:35,750 - my_logger - INFO - 价格类指标的相关性总和为100.80713663445724
2024-11-07 11:51:35,751 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 11:51:37,677 - my_logger - INFO - 供应类指标的相关性总和为15.751831492683399
2024-11-07 11:51:37,678 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 11:51:37,975 - my_logger - INFO - 供应给类指标的相关性总和为1.5495964178756472
2024-11-07 11:51:37,976 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 11:51:39,621 - my_logger - INFO - 其他类指标的相关性总和为6.895715573826763
2024-11-07 11:51:39,622 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 11:51:40,079 - my_logger - INFO - 宏观类指标的相关性总和为2.6100894874418974
2024-11-07 11:51:40,080 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 11:51:41,700 - my_logger - INFO - 库存类指标的相关性总和为39.747273125745146
2024-11-07 11:51:41,701 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 11:51:43,690 - my_logger - INFO - 期货市场类指标的相关性总和为75.43963122592632
2024-11-07 11:51:43,691 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 11:51:45,168 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.176909065750354
2024-11-07 11:51:45,169 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 11:51:45,460 - my_logger - INFO - 运输类指标的相关性总和为1.0268007380121404
2024-11-07 11:51:45,461 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 11:51:47,074 - my_logger - INFO - 进出口类指标的相关性总和为12.355097996621248
2024-11-07 11:51:47,076 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 11:51:48,695 - my_logger - INFO - 需求类指标的相关性总和为15.460922074145275
2024-11-07 11:51:48,696 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 11:51:49,081 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 11:51:53,048 - my_logger - INFO - 制作报告end
2024-11-07 11:51:53,049 - my_logger - INFO - 模型训练完成
2024-11-07 11:51:55,623 - my_logger - INFO - 邮件发送成功!
2024-11-07 12:44:25,974 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 12:44:25,975 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date
2024-11-07 12:45:52,352 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-07 12:45:53,348 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 636)
2024-11-07 12:45:53,353 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 636)
2024-11-07 12:45:53,358 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 557)
2024-11-07 12:45:58,241 - my_logger - INFO - Libya列数据为空
2024-11-07 12:45:58,242 - my_logger - INFO - Malaysia列数据为空
2024-11-07 12:45:58,637 - my_logger - INFO - 日度(357) 周度(195) 月度(1) 61天(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日 舟山:可用库容:原油
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 4 columns]
2024-11-07 12:45:58,651 - my_logger - INFO - 特征信息总共有554个,日度(357),周度(195),月度(1),61天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 12:45:58,653 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 12:46:00,157 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '75.03' WHERE ds = '2024-11-05 00:00:00'
2024-11-07 12:46:00,158 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 12:46:00,173 - my_logger - INFO - 最近20天预测残差最低的模型名称PatchTST
2024-11-07 12:46:00,184 - my_logger - INFO - 开始训练模型...
2024-11-07 12:46:00,202 - my_logger - INFO - Training set head:
2024-11-07 12:46:00,202 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 12:46:00,488 - my_logger - INFO -
Testing set head:
2024-11-07 12:46:00,488 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 12:55:03,528 - my_logger - INFO - 模型训练完成
2024-11-07 12:55:03,530 - my_logger - INFO - 训练数据绘图ing
2024-11-07 12:55:04,468 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '75.66663', Informer = '76.28442', LSTM = '78.03253', iTransformer = '73.94377', TSMixer = '74.65522', TSMixerx = '74.081924', PatchTST = '75.425095', RNN = '79.02649', GRU = '75.851425', TCN = '74.326355', BiTCN = '74.8431', DilatedRNN = '76.27298', MLP = '74.9631', DLinear = '75.093094', NLinear = '75.60724', TFT = '76.81235', StemGNN = '74.89089', MLPMultivariate = '74.60546', TiDE = '74.914154', DeepNPTS = '75.14611' WHERE ds = '2024-11-06 00:00:00'
2024-11-07 12:55:06,115 - my_logger - INFO - 训练数据绘图end
2024-11-07 12:55:06,117 - my_logger - INFO - 制作报告ing
2024-11-07 12:55:06,492 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 12:55:06,965 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2236571537180296
2024-11-07 12:55:06,966 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 12:55:08,674 - my_logger - INFO - 价格类指标的相关性总和为100.80713663445724
2024-11-07 12:55:08,675 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 12:55:10,667 - my_logger - INFO - 供应类指标的相关性总和为15.751831492683399
2024-11-07 12:55:10,670 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 12:55:11,026 - my_logger - INFO - 供应给类指标的相关性总和为1.5495964178756472
2024-11-07 12:55:11,026 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 12:55:12,647 - my_logger - INFO - 其他类指标的相关性总和为6.895715573826763
2024-11-07 12:55:12,650 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 12:55:13,113 - my_logger - INFO - 宏观类指标的相关性总和为2.6100894874418974
2024-11-07 12:55:13,114 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 12:55:14,790 - my_logger - INFO - 库存类指标的相关性总和为39.747273125745146
2024-11-07 12:55:14,791 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 12:55:16,828 - my_logger - INFO - 期货市场类指标的相关性总和为75.43963122592632
2024-11-07 12:55:16,829 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 12:55:18,277 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.176909065750354
2024-11-07 12:55:18,278 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 12:55:18,589 - my_logger - INFO - 运输类指标的相关性总和为1.0268007380121404
2024-11-07 12:55:18,590 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 12:55:20,255 - my_logger - INFO - 进出口类指标的相关性总和为12.355097996621248
2024-11-07 12:55:20,257 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 12:55:21,902 - my_logger - INFO - 需求类指标的相关性总和为15.460922074145275
2024-11-07 12:55:21,903 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 12:55:22,729 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 12:55:26,686 - my_logger - INFO - 制作报告end
2024-11-07 12:55:26,686 - my_logger - INFO - 模型训练完成
2024-11-07 12:55:32,764 - my_logger - INFO - 邮件发送成功!
2024-11-07 13:17:14,015 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 13:17:14,017 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date
2024-11-07 13:18:41,956 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-07 13:18:42,982 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 636)
2024-11-07 13:18:42,987 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 636)
2024-11-07 13:18:42,992 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 557)
2024-11-07 13:18:47,879 - my_logger - INFO - Libya列数据为空
2024-11-07 13:18:47,882 - my_logger - INFO - Malaysia列数据为空
2024-11-07 13:18:48,274 - my_logger - INFO - 日度(357) 周度(195) 月度(2)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需 舟山:可用库容:原油
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 3 columns]
2024-11-07 13:18:48,287 - my_logger - INFO - 特征信息总共有554个,日度(357),周度(195),月度(2), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 13:18:48,289 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 13:18:49,836 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '75.03' WHERE ds = '2024-11-05 00:00:00'
2024-11-07 13:18:49,837 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 13:18:49,853 - my_logger - INFO - 最近20天预测残差最低的模型名称PatchTST
2024-11-07 13:18:49,863 - my_logger - INFO - 开始训练模型...
2024-11-07 13:18:49,881 - my_logger - INFO - Training set head:
2024-11-07 13:18:49,882 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 13:18:50,169 - my_logger - INFO -
Testing set head:
2024-11-07 13:18:50,170 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 13:27:06,982 - my_logger - INFO - 模型训练完成
2024-11-07 13:27:06,983 - my_logger - INFO - 训练数据绘图ing
2024-11-07 13:27:08,052 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-06 00:00:00', NHITS = '75.66663', Informer = '76.513596', LSTM = '78.03253', iTransformer = '74.78894', TSMixer = '74.65522', TSMixerx = '74.081924', PatchTST = '75.425095', RNN = '79.02649', GRU = '75.851425', TCN = '74.326355', BiTCN = '74.84743', DilatedRNN = '76.27298', MLP = '74.9631', DLinear = '75.093094', NLinear = '75.60724', TFT = '76.81235', FEDformer = '74.02089', StemGNN = '74.72955', MLPMultivariate = '75.07187', TiDE = '74.914154', DeepNPTS = '75.14611' WHERE ds = '2024-11-06 00:00:00'
2024-11-07 13:27:09,965 - my_logger - INFO - 训练数据绘图end
2024-11-07 13:27:09,966 - my_logger - INFO - 制作报告ing
2024-11-07 13:27:10,352 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 13:27:10,820 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2236571537180296
2024-11-07 13:27:10,821 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 13:27:12,617 - my_logger - INFO - 价格类指标的相关性总和为100.80713663445724
2024-11-07 13:27:12,618 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 13:27:14,686 - my_logger - INFO - 供应类指标的相关性总和为15.751831492683399
2024-11-07 13:27:14,688 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 13:27:15,009 - my_logger - INFO - 供应给类指标的相关性总和为1.5495964178756472
2024-11-07 13:27:15,010 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 13:27:16,709 - my_logger - INFO - 其他类指标的相关性总和为6.895715573826763
2024-11-07 13:27:16,710 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 13:27:17,200 - my_logger - INFO - 宏观类指标的相关性总和为2.6100894874418974
2024-11-07 13:27:17,201 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 13:27:18,962 - my_logger - INFO - 库存类指标的相关性总和为39.747273125745146
2024-11-07 13:27:18,964 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 13:27:21,104 - my_logger - INFO - 期货市场类指标的相关性总和为75.43963122592632
2024-11-07 13:27:21,105 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 13:27:22,644 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.176909065750354
2024-11-07 13:27:22,645 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 13:27:22,970 - my_logger - INFO - 运输类指标的相关性总和为1.0268007380121404
2024-11-07 13:27:22,971 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 13:27:24,696 - my_logger - INFO - 进出口类指标的相关性总和为12.355097996621248
2024-11-07 13:27:24,697 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 13:27:26,448 - my_logger - INFO - 需求类指标的相关性总和为15.460922074145275
2024-11-07 13:27:26,450 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 13:27:26,854 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 13:27:30,797 - my_logger - INFO - 制作报告end
2024-11-07 13:27:30,797 - my_logger - INFO - 模型训练完成
2024-11-07 13:27:36,669 - my_logger - INFO - 邮件发送成功!
2024-11-07 13:32:14,532 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 13:32:14,533 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-25
2024-11-07 13:34:13,292 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 13:34:13,293 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-25
2024-11-07 13:35:39,545 - my_logger - INFO - 删除两月不更新特征前数据量:(2490, 930)
2024-11-07 13:35:40,529 - my_logger - INFO - 删除两月不更新特征后数据量:(2490, 625)
2024-11-07 13:35:40,534 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 625)
2024-11-07 13:35:40,539 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 546)
2024-11-07 13:35:45,278 - my_logger - INFO - Libya列数据为空
2024-11-07 13:35:45,281 - my_logger - INFO - Malaysia列数据为空
2024-11-07 13:35:45,664 - my_logger - INFO - 日度(353) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
348 C2403150124
349 FVHCM1 INDEX
350 lmcads03 lme comdty
351 GC1 COMB Comdty
352 C2404167855
[353 rows x 2 columns]
2024-11-07 13:35:45,677 - my_logger - INFO - 特征信息总共有543个,日度(353),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 13:35:45,678 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 13:35:47,205 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 13:41:34,553 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 13:41:34,555 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-25
2024-11-07 13:43:01,322 - my_logger - INFO - 删除两月不更新特征前数据量:(2490, 930)
2024-11-07 13:43:02,344 - my_logger - INFO - 删除两月不更新特征后数据量:(2490, 625)
2024-11-07 13:43:02,349 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 625)
2024-11-07 13:43:02,354 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 546)
2024-11-07 13:43:07,064 - my_logger - INFO - Libya列数据为空
2024-11-07 13:43:07,065 - my_logger - INFO - Malaysia列数据为空
2024-11-07 13:43:07,451 - my_logger - INFO - 日度(353) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
348 C2403150124
349 FVHCM1 INDEX
350 lmcads03 lme comdty
351 GC1 COMB Comdty
352 C2404167855
[353 rows x 2 columns]
2024-11-07 13:43:07,463 - my_logger - INFO - 特征信息总共有543个,日度(353),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 13:43:07,465 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 13:43:08,886 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-07 13:43:08,886 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 13:43:08,902 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-07 13:43:08,913 - my_logger - INFO - 开始训练模型...
2024-11-07 13:43:08,931 - my_logger - INFO - Training set head:
2024-11-07 13:43:08,932 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 561 columns]
2024-11-07 13:43:09,231 - my_logger - INFO -
Testing set head:
2024-11-07 13:43:09,232 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 561 columns]
2024-11-07 13:50:30,915 - my_logger - INFO - 模型训练完成
2024-11-07 13:50:30,916 - my_logger - INFO - 训练数据绘图ing
2024-11-07 13:53:41,938 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 13:53:41,939 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-25
2024-11-07 13:55:08,144 - my_logger - INFO - 删除两月不更新特征前数据量:(2490, 930)
2024-11-07 13:55:09,138 - my_logger - INFO - 删除两月不更新特征后数据量:(2490, 625)
2024-11-07 13:55:09,143 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 625)
2024-11-07 13:55:09,148 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 546)
2024-11-07 13:55:13,899 - my_logger - INFO - Libya列数据为空
2024-11-07 13:55:13,900 - my_logger - INFO - Malaysia列数据为空
2024-11-07 13:55:14,293 - my_logger - INFO - 日度(353) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
348 C2403150124
349 FVHCM1 INDEX
350 lmcads03 lme comdty
351 GC1 COMB Comdty
352 C2404167855
[353 rows x 2 columns]
2024-11-07 13:55:14,305 - my_logger - INFO - 特征信息总共有543个,日度(353),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 13:55:14,306 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 13:55:15,829 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-07 13:55:15,830 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 13:55:15,846 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-07 13:55:15,863 - my_logger - INFO - 开始训练模型...
2024-11-07 13:55:15,884 - my_logger - INFO - Training set head:
2024-11-07 13:55:15,885 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 561 columns]
2024-11-07 13:55:16,172 - my_logger - INFO -
Testing set head:
2024-11-07 13:55:16,173 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 561 columns]
2024-11-07 14:04:17,050 - my_logger - INFO - 模型训练完成
2024-11-07 14:04:17,051 - my_logger - INFO - 训练数据绘图ing
2024-11-07 14:04:19,811 - my_logger - INFO - 训练数据绘图end
2024-11-07 14:04:19,811 - my_logger - INFO - 制作报告ing
2024-11-07 14:04:20,178 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 14:04:20,659 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-07 14:04:20,661 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 14:04:22,394 - my_logger - INFO - 价格类指标的相关性总和为100.3702102677255
2024-11-07 14:04:22,395 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 14:04:24,525 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-07 14:04:24,527 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 14:04:24,867 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-07 14:04:24,868 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 14:04:26,590 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-07 14:04:26,591 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 14:04:27,080 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-07 14:04:27,081 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 14:04:28,885 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-07 14:04:28,886 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 14:04:30,985 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-07 14:04:30,986 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 14:04:32,565 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-07 14:04:32,566 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 14:04:32,879 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-07 14:04:32,880 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 14:04:34,587 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-07 14:04:34,589 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 14:04:36,798 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-07 14:04:36,799 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 14:04:37,204 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 14:04:41,185 - my_logger - INFO - 制作报告end
2024-11-07 14:04:41,186 - my_logger - INFO - 模型训练完成
2024-11-07 14:04:47,712 - my_logger - INFO - 邮件发送成功!
2024-11-07 14:05:46,084 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 14:05:46,085 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 14:07:12,812 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 14:07:13,811 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 14:07:13,817 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 14:07:13,823 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 14:07:18,462 - my_logger - INFO - Libya列数据为空
2024-11-07 14:07:18,465 - my_logger - INFO - Malaysia列数据为空
2024-11-07 14:07:18,866 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 14:07:18,877 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 14:07:18,879 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 14:07:20,396 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 14:07:20,401 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 14:07:20,417 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 14:07:20,427 - my_logger - INFO - 开始训练模型...
2024-11-07 14:07:20,448 - my_logger - INFO - Training set head:
2024-11-07 14:07:20,449 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 14:07:20,739 - my_logger - INFO -
Testing set head:
2024-11-07 14:07:20,739 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 14:14:08,018 - my_logger - INFO - 模型训练完成
2024-11-07 14:14:08,019 - my_logger - INFO - 训练数据绘图ing
2024-11-07 14:27:39,186 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 14:27:39,187 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 14:31:32,277 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 14:31:34,425 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 14:31:34,431 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 14:31:34,437 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 14:31:47,153 - my_logger - INFO - Libya列数据为空
2024-11-07 14:31:47,156 - my_logger - INFO - Malaysia列数据为空
2024-11-07 14:31:48,234 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 14:31:48,263 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 14:31:48,265 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 14:31:50,004 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 14:31:50,005 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 14:31:50,037 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 14:31:50,053 - my_logger - INFO - 开始训练模型...
2024-11-07 14:31:50,053 - my_logger - INFO - 模型训练完成
2024-11-07 14:31:50,054 - my_logger - INFO - 训练数据绘图ing
2024-11-07 14:34:35,206 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 14:34:35,207 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 14:38:25,975 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 14:38:28,128 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 14:38:28,134 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 14:38:28,141 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 14:38:40,019 - my_logger - INFO - Libya列数据为空
2024-11-07 14:38:40,022 - my_logger - INFO - Malaysia列数据为空
2024-11-07 14:38:41,071 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 14:38:41,099 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 14:38:41,101 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 14:38:42,759 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 14:38:42,760 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 14:38:42,792 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 14:38:42,808 - my_logger - INFO - 开始训练模型...
2024-11-07 14:38:42,808 - my_logger - INFO - 模型训练完成
2024-11-07 14:38:42,809 - my_logger - INFO - 训练数据绘图ing
2024-11-07 14:41:23,786 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 14:41:23,787 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 14:45:14,448 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 14:45:16,671 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 14:45:16,677 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 14:45:16,683 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 14:45:28,860 - my_logger - INFO - Libya列数据为空
2024-11-07 14:45:28,863 - my_logger - INFO - Malaysia列数据为空
2024-11-07 14:45:29,951 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 14:45:29,979 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 14:45:29,980 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 14:45:31,710 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 14:45:31,711 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 14:45:31,743 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 14:45:31,758 - my_logger - INFO - 开始训练模型...
2024-11-07 14:45:31,759 - my_logger - INFO - 模型训练完成
2024-11-07 14:45:31,760 - my_logger - INFO - 训练数据绘图ing
2024-11-07 14:49:17,790 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 14:49:17,791 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 14:50:43,565 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 14:50:44,555 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 14:50:44,559 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 14:50:44,564 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 14:50:49,407 - my_logger - INFO - Libya列数据为空
2024-11-07 14:50:49,409 - my_logger - INFO - Malaysia列数据为空
2024-11-07 14:50:49,800 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 14:50:49,812 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 14:50:49,813 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 14:50:51,248 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 14:50:51,249 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 14:50:51,264 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 14:50:51,278 - my_logger - INFO - 开始训练模型...
2024-11-07 14:50:51,279 - my_logger - INFO - 模型训练完成
2024-11-07 14:50:51,280 - my_logger - INFO - 训练数据绘图ing
2024-11-07 14:52:56,131 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 14:52:56,131 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 14:54:24,792 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 14:54:25,792 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 14:54:25,797 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 14:54:25,802 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 14:54:30,541 - my_logger - INFO - Libya列数据为空
2024-11-07 14:54:30,543 - my_logger - INFO - Malaysia列数据为空
2024-11-07 14:54:30,945 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 14:54:30,957 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 14:54:30,958 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 14:54:32,388 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 14:54:32,389 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 14:54:32,404 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 14:54:32,419 - my_logger - INFO - 开始训练模型...
2024-11-07 14:54:32,419 - my_logger - INFO - 模型训练完成
2024-11-07 14:54:32,420 - my_logger - INFO - 训练数据绘图ing
2024-11-07 14:58:40,706 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 14:58:40,707 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 15:02:32,052 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 15:02:34,244 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 15:02:34,250 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 15:02:34,257 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 15:02:46,219 - my_logger - INFO - Libya列数据为空
2024-11-07 15:02:46,222 - my_logger - INFO - Malaysia列数据为空
2024-11-07 15:02:47,277 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 15:02:47,303 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 15:02:47,305 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 15:02:49,011 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 15:02:49,012 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 15:02:49,044 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 15:02:49,059 - my_logger - INFO - 开始训练模型...
2024-11-07 15:02:49,060 - my_logger - INFO - 模型训练完成
2024-11-07 15:02:49,061 - my_logger - INFO - 训练数据绘图ing
2024-11-07 15:09:02,227 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 15:09:02,229 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 15:12:54,515 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 15:12:56,736 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 15:12:56,746 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 15:12:56,752 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 15:13:08,906 - my_logger - INFO - Libya列数据为空
2024-11-07 15:13:08,910 - my_logger - INFO - Malaysia列数据为空
2024-11-07 15:13:09,981 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 15:13:10,007 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 15:13:10,009 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 15:13:11,738 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 15:13:11,739 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 15:13:11,770 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 15:13:11,785 - my_logger - INFO - 开始训练模型...
2024-11-07 15:13:11,786 - my_logger - INFO - 模型训练完成
2024-11-07 15:13:11,786 - my_logger - INFO - 训练数据绘图ing
2024-11-07 15:16:42,365 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 15:16:42,367 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 15:20:35,912 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 15:20:38,154 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 15:20:38,161 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 15:20:38,167 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 15:20:50,449 - my_logger - INFO - Libya列数据为空
2024-11-07 15:20:50,452 - my_logger - INFO - Malaysia列数据为空
2024-11-07 15:20:51,582 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 15:20:51,610 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 15:20:51,612 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 15:20:53,335 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 15:20:53,336 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 15:20:53,368 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 15:20:53,383 - my_logger - INFO - 开始训练模型...
2024-11-07 15:20:53,384 - my_logger - INFO - 模型训练完成
2024-11-07 15:20:53,384 - my_logger - INFO - 训练数据绘图ing
2024-11-07 15:22:48,340 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', NHITS = '71.95212', Informer = '73.32876', LSTM = '70.823456', iTransformer = '72.47994', TSMixer = '72.424866', TSMixerx = '71.88028', PatchTST = '72.3872', RNN = '51.000645', GRU = '71.613976', TCN = '73.9822', BiTCN = '72.74722', DilatedRNN = '72.03963', MLP = '73.16691', DLinear = '73.7958', NLinear = '71.165115', TFT = '71.57996', StemGNN = '74.69301', MLPMultivariate = '73.251854', TiDE = '71.87984', DeepNPTS = '73.69239' WHERE ds = '2024-10-29 00:00:00'
2024-11-07 15:23:58,438 - my_logger - INFO - 训练数据绘图end
2024-11-07 15:23:58,439 - my_logger - INFO - 制作报告ing
2024-11-07 15:23:58,890 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 15:23:59,886 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2171063065604213
2024-11-07 15:23:59,888 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 15:24:03,747 - my_logger - INFO - 价格类指标的相关性总和为100.36004723440129
2024-11-07 15:24:03,749 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 15:24:07,282 - my_logger - INFO - 供应类指标的相关性总和为15.529313125239998
2024-11-07 15:24:07,284 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 15:24:07,947 - my_logger - INFO - 供应给类指标的相关性总和为1.5498484047524501
2024-11-07 15:24:07,949 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 15:24:11,482 - my_logger - INFO - 其他类指标的相关性总和为6.900427715445381
2024-11-07 15:24:11,484 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 15:24:12,466 - my_logger - INFO - 宏观类指标的相关性总和为2.6110372969728046
2024-11-07 15:24:12,467 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 15:24:16,399 - my_logger - INFO - 库存类指标的相关性总和为39.74552188210093
2024-11-07 15:24:16,401 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 15:24:19,899 - my_logger - INFO - 期货市场类指标的相关性总和为74.66597103864117
2024-11-07 15:24:19,901 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 15:24:23,040 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.18238300245803
2024-11-07 15:24:23,043 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 15:24:23,682 - my_logger - INFO - 运输类指标的相关性总和为1.0275708634790275
2024-11-07 15:24:23,683 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 15:24:27,649 - my_logger - INFO - 进出口类指标的相关性总和为12.34341563584218
2024-11-07 15:24:27,651 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 15:24:31,176 - my_logger - INFO - 需求类指标的相关性总和为15.143035955883262
2024-11-07 15:24:31,178 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 15:24:31,960 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 15:24:39,545 - my_logger - INFO - 制作报告end
2024-11-07 15:24:39,545 - my_logger - INFO - 模型训练完成
2024-11-07 15:24:42,360 - my_logger - INFO - 邮件发送成功!
2024-11-07 15:26:23,671 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 15:26:23,672 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-07 15:27:49,772 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-07 15:27:50,753 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 628)
2024-11-07 15:27:50,758 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 628)
2024-11-07 15:27:50,762 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 549)
2024-11-07 15:27:55,611 - my_logger - INFO - Libya列数据为空
2024-11-07 15:27:55,613 - my_logger - INFO - Malaysia列数据为空
2024-11-07 15:27:55,993 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 15:27:56,005 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 15:27:56,006 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 15:27:57,495 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-07 15:27:57,498 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 15:27:57,514 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 15:27:57,524 - my_logger - INFO - 开始训练模型...
2024-11-07 15:27:57,524 - my_logger - INFO - 模型训练完成
2024-11-07 15:27:57,525 - my_logger - INFO - 训练数据绘图ing
2024-11-07 15:27:58,790 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', NHITS = '71.95212', Informer = '73.32876', LSTM = '70.823456', iTransformer = '72.47994', TSMixer = '72.424866', TSMixerx = '71.88028', PatchTST = '72.3872', RNN = '51.000645', GRU = '71.613976', TCN = '73.9822', BiTCN = '72.74722', DilatedRNN = '72.03963', MLP = '73.16691', DLinear = '73.7958', NLinear = '71.165115', TFT = '71.57996', StemGNN = '74.69301', MLPMultivariate = '73.251854', TiDE = '71.87984', DeepNPTS = '73.69239' WHERE ds = '2024-10-29 00:00:00'
2024-11-07 15:28:00,430 - my_logger - INFO - 训练数据绘图end
2024-11-07 15:28:00,431 - my_logger - INFO - 制作报告ing
2024-11-07 15:28:00,793 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 15:28:01,237 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-07 15:28:01,239 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 15:28:03,204 - my_logger - INFO - 价格类指标的相关性总和为100.34978693834032
2024-11-07 15:28:03,205 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 15:28:04,842 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-07 15:28:04,843 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 15:28:05,145 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-07 15:28:05,146 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 15:28:06,772 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-07 15:28:06,773 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 15:28:07,242 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-07 15:28:07,244 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 15:28:09,253 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-07 15:28:09,254 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 15:29:16,669 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 15:29:16,670 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-07 15:30:41,453 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-07 15:30:42,436 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 628)
2024-11-07 15:30:42,441 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 628)
2024-11-07 15:30:42,446 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 549)
2024-11-07 15:30:47,112 - my_logger - INFO - Libya列数据为空
2024-11-07 15:30:47,114 - my_logger - INFO - Malaysia列数据为空
2024-11-07 15:30:47,496 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 15:30:47,509 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 15:30:47,510 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 15:30:48,967 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-07 15:30:48,967 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 15:30:48,983 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 15:30:48,993 - my_logger - INFO - 开始训练模型...
2024-11-07 15:30:49,010 - my_logger - INFO - Training set head:
2024-11-07 15:30:49,011 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 15:30:49,293 - my_logger - INFO -
Testing set head:
2024-11-07 15:30:49,294 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 15:37:42,325 - my_logger - INFO - 模型训练完成
2024-11-07 15:37:42,326 - my_logger - INFO - 训练数据绘图ing
2024-11-07 15:37:45,013 - my_logger - INFO - 训练数据绘图end
2024-11-07 15:37:45,014 - my_logger - INFO - 制作报告ing
2024-11-07 15:37:45,371 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 15:37:45,846 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-07 15:37:45,847 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 15:37:47,553 - my_logger - INFO - 价格类指标的相关性总和为100.34978693834032
2024-11-07 15:37:47,554 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 15:37:49,478 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-07 15:37:49,479 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 15:37:49,770 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-07 15:37:49,771 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 15:37:51,407 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-07 15:37:51,408 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 15:37:51,873 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-07 15:37:51,874 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 15:37:53,561 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-07 15:37:53,562 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 15:37:55,569 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-07 15:37:55,570 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 15:37:57,008 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.181465055386917
2024-11-07 15:37:57,009 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 15:37:57,333 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-07 15:37:57,335 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 15:37:58,971 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-07 15:37:58,972 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 15:38:01,068 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-07 15:38:01,070 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 15:38:01,487 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 15:38:05,458 - my_logger - INFO - 制作报告end
2024-11-07 15:38:05,460 - my_logger - INFO - 模型训练完成
2024-11-07 15:38:11,822 - my_logger - INFO - 邮件发送成功!
2024-11-07 15:41:57,471 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 15:41:57,472 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-30
2024-11-07 15:43:24,641 - my_logger - INFO - 删除两月不更新特征前数据量:(2495, 930)
2024-11-07 15:43:25,653 - my_logger - INFO - 删除两月不更新特征后数据量:(2495, 628)
2024-11-07 15:43:25,659 - my_logger - INFO - 删除预测列为空值的行后数据量:(1766, 628)
2024-11-07 15:43:25,666 - my_logger - INFO - 删除全为空值的列后数据量:(1766, 549)
2024-11-07 15:43:30,447 - my_logger - INFO - Libya列数据为空
2024-11-07 15:43:30,450 - my_logger - INFO - Malaysia列数据为空
2024-11-07 15:43:30,838 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 15:43:30,849 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 15:43:30,851 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 15:43:32,388 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', y = '72.16' WHERE ds = '2024-10-30 00:00:00'
2024-11-07 15:43:32,392 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 15:43:32,407 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 15:43:32,417 - my_logger - INFO - 开始训练模型...
2024-11-07 15:43:32,435 - my_logger - INFO - Training set head:
2024-11-07 15:43:32,436 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 15:43:32,725 - my_logger - INFO -
Testing set head:
2024-11-07 15:43:32,725 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 15:50:09,498 - my_logger - INFO - 模型训练完成
2024-11-07 15:50:09,499 - my_logger - INFO - 训练数据绘图ing
2024-11-07 15:50:12,102 - my_logger - INFO - 训练数据绘图end
2024-11-07 15:50:12,103 - my_logger - INFO - 制作报告ing
2024-11-07 15:50:12,476 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 15:50:12,942 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2175358910941418
2024-11-07 15:50:12,943 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 15:50:14,657 - my_logger - INFO - 价格类指标的相关性总和为100.28967179521555
2024-11-07 15:50:14,659 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 15:50:16,642 - my_logger - INFO - 供应类指标的相关性总和为15.525781568032635
2024-11-07 15:50:16,644 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 15:50:16,944 - my_logger - INFO - 供应给类指标的相关性总和为1.549523664043174
2024-11-07 15:50:16,945 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 15:50:18,561 - my_logger - INFO - 其他类指标的相关性总和为6.897755337034983
2024-11-07 15:50:18,562 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 15:50:19,016 - my_logger - INFO - 宏观类指标的相关性总和为2.6104837226531727
2024-11-07 15:50:19,017 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 15:50:20,665 - my_logger - INFO - 库存类指标的相关性总和为39.74002870686131
2024-11-07 15:50:20,666 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 15:50:22,662 - my_logger - INFO - 期货市场类指标的相关性总和为74.06734384171318
2024-11-07 15:50:22,662 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 15:50:24,121 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.180576385560894
2024-11-07 15:50:24,122 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 15:50:24,432 - my_logger - INFO - 运输类指标的相关性总和为1.0274228259138274
2024-11-07 15:50:24,432 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 15:50:26,001 - my_logger - INFO - 进出口类指标的相关性总和为12.34462246265804
2024-11-07 15:50:26,002 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 15:50:27,657 - my_logger - INFO - 需求类指标的相关性总和为15.142900618539196
2024-11-07 15:50:27,658 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 15:50:28,448 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 15:50:32,389 - my_logger - INFO - 制作报告end
2024-11-07 15:50:32,390 - my_logger - INFO - 模型训练完成
2024-11-07 15:50:38,381 - my_logger - INFO - 邮件发送成功!
2024-11-07 15:51:17,629 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 15:51:17,630 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-31
2024-11-07 15:52:44,021 - my_logger - INFO - 删除两月不更新特征前数据量:(2496, 930)
2024-11-07 15:52:45,008 - my_logger - INFO - 删除两月不更新特征后数据量:(2496, 630)
2024-11-07 15:52:45,013 - my_logger - INFO - 删除预测列为空值的行后数据量:(1767, 630)
2024-11-07 15:52:45,019 - my_logger - INFO - 删除全为空值的列后数据量:(1767, 551)
2024-11-07 15:52:49,749 - my_logger - INFO - Libya列数据为空
2024-11-07 15:52:49,751 - my_logger - INFO - Malaysia列数据为空
2024-11-07 15:52:50,132 - my_logger - INFO - 日度(357) 周度(190) 月度(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 3 columns]
2024-11-07 15:52:50,146 - my_logger - INFO - 特征信息总共有548个,日度(357),周度(190),月度(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 15:52:50,148 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 15:52:51,663 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', y = '72.81' WHERE ds = '2024-10-31 00:00:00'
2024-11-07 15:52:51,667 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 15:52:51,685 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 15:52:51,695 - my_logger - INFO - 开始训练模型...
2024-11-07 15:52:51,714 - my_logger - INFO - Training set head:
2024-11-07 15:52:51,715 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 566 columns]
2024-11-07 15:52:52,022 - my_logger - INFO -
Testing set head:
2024-11-07 15:52:52,023 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 566 columns]
2024-11-07 16:00:43,856 - my_logger - INFO - 模型训练完成
2024-11-07 16:00:43,857 - my_logger - INFO - 训练数据绘图ing
2024-11-07 16:00:46,470 - my_logger - INFO - 训练数据绘图end
2024-11-07 16:00:46,471 - my_logger - INFO - 制作报告ing
2024-11-07 16:00:46,847 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 16:00:47,328 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2184726958129715
2024-11-07 16:00:47,330 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 16:00:49,081 - my_logger - INFO - 价格类指标的相关性总和为100.85097823156127
2024-11-07 16:00:49,082 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 16:00:51,089 - my_logger - INFO - 供应类指标的相关性总和为15.524781089112889
2024-11-07 16:00:51,090 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 16:00:51,413 - my_logger - INFO - 供应给类指标的相关性总和为1.5494604798948044
2024-11-07 16:00:51,414 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 16:00:53,073 - my_logger - INFO - 其他类指标的相关性总和为6.896880805926513
2024-11-07 16:00:53,074 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 16:00:53,539 - my_logger - INFO - 宏观类指标的相关性总和为2.6103197627496835
2024-11-07 16:00:53,540 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 16:00:55,259 - my_logger - INFO - 库存类指标的相关性总和为39.73983060226348
2024-11-07 16:00:55,260 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 16:00:57,325 - my_logger - INFO - 期货市场类指标的相关性总和为73.83779308597283
2024-11-07 16:00:57,326 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 16:00:58,861 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.179689363896115
2024-11-07 16:00:58,862 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 16:00:59,166 - my_logger - INFO - 运输类指标的相关性总和为1.02731770126438
2024-11-07 16:00:59,168 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 16:01:00,798 - my_logger - INFO - 进出口类指标的相关性总和为12.346398731964502
2024-11-07 16:01:00,798 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 16:01:02,453 - my_logger - INFO - 需求类指标的相关性总和为15.460557613236734
2024-11-07 16:01:02,454 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 16:01:02,843 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 16:01:07,269 - my_logger - INFO - 制作报告end
2024-11-07 16:01:07,270 - my_logger - INFO - 模型训练完成
2024-11-07 16:01:13,294 - my_logger - INFO - 邮件发送成功!
2024-11-07 16:02:19,510 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 16:02:19,511 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-11-01
2024-11-07 16:03:45,776 - my_logger - INFO - 删除两月不更新特征前数据量:(2497, 930)
2024-11-07 16:03:46,785 - my_logger - INFO - 删除两月不更新特征后数据量:(2497, 636)
2024-11-07 16:03:46,791 - my_logger - INFO - 删除预测列为空值的行后数据量:(1768, 636)
2024-11-07 16:03:46,797 - my_logger - INFO - 删除全为空值的列后数据量:(1768, 557)
2024-11-07 16:03:51,525 - my_logger - INFO - Libya列数据为空
2024-11-07 16:03:51,527 - my_logger - INFO - Malaysia列数据为空
2024-11-07 16:03:51,915 - my_logger - INFO - 日度(357) 周度(195) 月度(1) 61天(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日 舟山:可用库容:原油
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 4 columns]
2024-11-07 16:03:51,929 - my_logger - INFO - 特征信息总共有554个,日度(357),周度(195),月度(1),61天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 16:03:51,930 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 16:03:53,451 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-01 00:00:00', y = '73.1' WHERE ds = '2024-11-01 00:00:00'
2024-11-07 16:03:53,455 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 16:03:53,471 - my_logger - INFO - 最近20天预测残差最低的模型名称NHITS
2024-11-07 16:03:53,481 - my_logger - INFO - 开始训练模型...
2024-11-07 16:03:53,499 - my_logger - INFO - Training set head:
2024-11-07 16:03:53,500 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 16:03:53,787 - my_logger - INFO -
Testing set head:
2024-11-07 16:03:53,787 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-07 16:11:11,156 - my_logger - INFO - 模型训练完成
2024-11-07 16:11:11,157 - my_logger - INFO - 训练数据绘图ing
2024-11-07 16:11:13,844 - my_logger - INFO - 训练数据绘图end
2024-11-07 16:11:13,844 - my_logger - INFO - 制作报告ing
2024-11-07 16:11:14,222 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 16:11:14,688 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2195561801649653
2024-11-07 16:11:14,690 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 16:11:16,425 - my_logger - INFO - 价格类指标的相关性总和为100.8287730410694
2024-11-07 16:11:16,426 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 16:11:18,418 - my_logger - INFO - 供应类指标的相关性总和为15.75211902049459
2024-11-07 16:11:18,419 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 16:11:18,715 - my_logger - INFO - 供应给类指标的相关性总和为1.5494180182437378
2024-11-07 16:11:18,716 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 16:11:20,339 - my_logger - INFO - 其他类指标的相关性总和为6.8961334530789635
2024-11-07 16:11:20,339 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 16:11:20,813 - my_logger - INFO - 宏观类指标的相关性总和为2.610143318202318
2024-11-07 16:11:20,814 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 16:11:22,438 - my_logger - INFO - 库存类指标的相关性总和为39.740160565420304
2024-11-07 16:11:22,439 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 16:11:24,483 - my_logger - INFO - 期货市场类指标的相关性总和为75.5829296801632
2024-11-07 16:11:24,484 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 16:11:25,984 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.178801881104459
2024-11-07 16:11:25,985 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 16:11:26,297 - my_logger - INFO - 运输类指标的相关性总和为1.0271969814006003
2024-11-07 16:11:26,298 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 16:11:27,899 - my_logger - INFO - 进出口类指标的相关性总和为12.348350677681264
2024-11-07 16:11:27,900 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 16:11:29,562 - my_logger - INFO - 需求类指标的相关性总和为15.460736202771775
2024-11-07 16:11:29,563 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 16:11:30,002 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 16:11:33,932 - my_logger - INFO - 制作报告end
2024-11-07 16:11:33,933 - my_logger - INFO - 模型训练完成
2024-11-07 16:11:40,175 - my_logger - INFO - 邮件发送成功!
2024-11-07 16:18:06,548 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 16:18:06,549 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 16:19:33,814 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 16:19:34,809 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 16:19:34,815 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 16:19:34,820 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 16:19:39,650 - my_logger - INFO - Libya列数据为空
2024-11-07 16:19:39,652 - my_logger - INFO - Malaysia列数据为空
2024-11-07 16:19:40,052 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 16:19:40,064 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 16:19:40,066 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 16:19:41,576 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 16:19:41,590 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-07 16:19:41,606 - my_logger - INFO - 开始训练模型...
2024-11-07 16:19:41,630 - my_logger - INFO - Training set head:
2024-11-07 16:19:41,631 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 16:19:41,933 - my_logger - INFO -
Testing set head:
2024-11-07 16:19:41,935 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 16:26:58,158 - my_logger - INFO - 模型训练完成
2024-11-07 16:26:58,159 - my_logger - INFO - 训练数据绘图ing
2024-11-07 16:27:00,780 - my_logger - INFO - 训练数据绘图end
2024-11-07 16:27:00,781 - my_logger - INFO - 制作报告ing
2024-11-07 16:27:01,153 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 16:27:01,660 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2171063065604213
2024-11-07 16:27:01,662 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 16:27:03,409 - my_logger - INFO - 价格类指标的相关性总和为100.36004723440129
2024-11-07 16:27:03,410 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 16:27:05,398 - my_logger - INFO - 供应类指标的相关性总和为15.529313125239998
2024-11-07 16:27:05,400 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 16:27:05,720 - my_logger - INFO - 供应给类指标的相关性总和为1.5498484047524501
2024-11-07 16:27:05,721 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 16:27:07,373 - my_logger - INFO - 其他类指标的相关性总和为6.900427715445381
2024-11-07 16:27:07,374 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 16:27:07,836 - my_logger - INFO - 宏观类指标的相关性总和为2.6110372969728046
2024-11-07 16:27:07,837 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 16:27:09,585 - my_logger - INFO - 库存类指标的相关性总和为39.74552188210093
2024-11-07 16:27:09,586 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 16:27:11,637 - my_logger - INFO - 期货市场类指标的相关性总和为74.66597103864117
2024-11-07 16:27:11,637 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 16:27:13,105 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.18238300245803
2024-11-07 16:27:13,106 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 16:27:13,411 - my_logger - INFO - 运输类指标的相关性总和为1.0275708634790275
2024-11-07 16:27:13,412 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 16:27:15,070 - my_logger - INFO - 进出口类指标的相关性总和为12.34341563584218
2024-11-07 16:27:15,071 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 16:27:17,477 - my_logger - INFO - 需求类指标的相关性总和为15.143035955883262
2024-11-07 16:27:17,478 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 16:27:17,919 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 16:27:22,144 - my_logger - INFO - 制作报告end
2024-11-07 16:27:22,144 - my_logger - INFO - 模型训练完成
2024-11-07 16:27:28,283 - my_logger - INFO - 邮件发送成功!
2024-11-07 16:42:00,317 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 16:42:00,318 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 16:45:49,019 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 16:45:51,220 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 16:45:51,226 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 16:45:51,233 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 16:46:03,109 - my_logger - INFO - Libya列数据为空
2024-11-07 16:46:03,112 - my_logger - INFO - Malaysia列数据为空
2024-11-07 16:46:04,149 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 16:46:04,184 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 16:46:04,185 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 16:46:05,992 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 16:46:05,993 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 16:46:06,026 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-07 16:46:06,037 - my_logger - INFO - 开始训练模型...
2024-11-07 16:46:06,038 - my_logger - INFO - 模型训练完成
2024-11-07 16:46:06,038 - my_logger - INFO - 训练数据绘图ing
2024-11-07 16:57:45,725 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', NHITS = '71.95212', Informer = '73.3765', LSTM = '70.823456', iTransformer = '74.18783', TSMixer = '72.424866', TSMixerx = '71.88028', PatchTST = '72.3872', RNN = '51.000645', GRU = '71.613976', TCN = '73.9822', BiTCN = '72.746956', DilatedRNN = '72.03963', MLP = '73.16691', DLinear = '73.7958', NLinear = '71.165115', TFT = '71.57996', StemGNN = '74.590614', MLPMultivariate = '71.759125', TiDE = '71.87984', DeepNPTS = '73.69239' WHERE ds = '2024-10-29 00:00:00'
2024-11-07 16:57:50,857 - my_logger - INFO - 训练数据绘图end
2024-11-07 16:57:50,858 - my_logger - INFO - 制作报告ing
2024-11-07 16:57:51,548 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 16:57:53,109 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2171063065604213
2024-11-07 16:57:53,114 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 16:57:59,590 - my_logger - INFO - 价格类指标的相关性总和为100.36004723440129
2024-11-07 16:57:59,592 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 16:58:05,468 - my_logger - INFO - 供应类指标的相关性总和为15.529313125239998
2024-11-07 16:58:05,470 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 16:58:06,452 - my_logger - INFO - 供应给类指标的相关性总和为1.5498484047524501
2024-11-07 16:58:06,454 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 16:58:12,276 - my_logger - INFO - 其他类指标的相关性总和为6.900427715445381
2024-11-07 16:58:12,279 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 16:58:13,857 - my_logger - INFO - 宏观类指标的相关性总和为2.6110372969728046
2024-11-07 16:58:13,859 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 16:58:20,267 - my_logger - INFO - 库存类指标的相关性总和为39.74552188210093
2024-11-07 16:58:20,271 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 16:58:26,188 - my_logger - INFO - 期货市场类指标的相关性总和为74.66597103864117
2024-11-07 16:58:26,191 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 16:58:31,550 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.18238300245803
2024-11-07 16:58:31,553 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 16:58:32,609 - my_logger - INFO - 运输类指标的相关性总和为1.0275708634790275
2024-11-07 16:58:32,612 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 16:58:39,026 - my_logger - INFO - 进出口类指标的相关性总和为12.34341563584218
2024-11-07 16:58:39,029 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 16:58:44,758 - my_logger - INFO - 需求类指标的相关性总和为15.143035955883262
2024-11-07 16:58:44,761 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 16:58:46,010 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 16:58:57,708 - my_logger - INFO - 制作报告end
2024-11-07 16:58:57,709 - my_logger - INFO - 模型训练完成
2024-11-07 16:59:01,109 - my_logger - INFO - 邮件发送成功!
2024-11-07 17:03:48,782 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 17:03:48,783 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 17:06:15,081 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 17:06:16,619 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 17:06:16,624 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 17:06:16,630 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 17:06:24,382 - my_logger - INFO - Libya列数据为空
2024-11-07 17:06:24,385 - my_logger - INFO - Malaysia列数据为空
2024-11-07 17:06:25,028 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 17:06:25,040 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 17:06:25,043 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 17:06:27,295 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 17:06:27,297 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 17:06:27,327 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-07 17:06:27,341 - my_logger - INFO - 开始训练模型...
2024-11-07 17:06:27,361 - my_logger - INFO - Training set head:
2024-11-07 17:06:27,362 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 17:06:27,806 - my_logger - INFO -
Testing set head:
2024-11-07 17:06:27,807 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 17:21:14,261 - my_logger - INFO - 模型训练完成
2024-11-07 17:21:14,263 - my_logger - INFO - 训练数据绘图ing
2024-11-07 17:23:27,561 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 17:23:27,562 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-07 17:26:04,153 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-07 17:26:05,832 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 628)
2024-11-07 17:26:05,840 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 628)
2024-11-07 17:26:05,847 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 549)
2024-11-07 17:26:14,255 - my_logger - INFO - Libya列数据为空
2024-11-07 17:26:14,259 - my_logger - INFO - Malaysia列数据为空
2024-11-07 17:26:14,876 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 17:26:14,893 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 17:26:14,895 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 17:26:17,285 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-07 17:26:17,286 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 17:26:17,318 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-07 17:26:17,347 - my_logger - INFO - 开始训练模型...
2024-11-07 17:26:17,348 - my_logger - INFO - 模型训练完成
2024-11-07 17:26:17,349 - my_logger - INFO - 训练数据绘图ing
2024-11-07 17:26:19,030 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', NHITS = '71.95212', Informer = '73.573395', LSTM = '70.823456', iTransformer = '70.60455', TSMixer = '72.424866', TSMixerx = '71.88028', PatchTST = '72.3872', RNN = '51.000645', GRU = '71.613976', TCN = '73.9822', BiTCN = '72.74657', DilatedRNN = '72.03963', MLP = '73.16691', DLinear = '73.7958', NLinear = '71.165115', TFT = '71.57996', FEDformer = '72.16687', StemGNN = '74.57308', MLPMultivariate = '71.91764', TiDE = '71.87984', DeepNPTS = '73.69239' WHERE ds = '2024-10-29 00:00:00'
2024-11-07 17:26:21,804 - my_logger - INFO - 训练数据绘图end
2024-11-07 17:26:21,806 - my_logger - INFO - 制作报告ing
2024-11-07 17:26:22,277 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 17:26:23,095 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2171063065604213
2024-11-07 17:26:23,097 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 17:26:26,072 - my_logger - INFO - 价格类指标的相关性总和为100.36004723440129
2024-11-07 17:26:26,074 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 17:26:28,669 - my_logger - INFO - 供应类指标的相关性总和为15.529313125239998
2024-11-07 17:26:28,671 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 17:26:29,127 - my_logger - INFO - 供应给类指标的相关性总和为1.5498484047524501
2024-11-07 17:26:29,129 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 17:26:31,561 - my_logger - INFO - 其他类指标的相关性总和为6.900427715445381
2024-11-07 17:26:31,563 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 17:26:32,322 - my_logger - INFO - 宏观类指标的相关性总和为2.6110372969728046
2024-11-07 17:26:32,324 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 17:26:35,525 - my_logger - INFO - 库存类指标的相关性总和为39.74552188210093
2024-11-07 17:26:35,526 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 17:26:38,173 - my_logger - INFO - 期货市场类指标的相关性总和为74.66597103864117
2024-11-07 17:26:38,175 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 17:26:40,366 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.18238300245803
2024-11-07 17:26:40,367 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 17:26:40,826 - my_logger - INFO - 运输类指标的相关性总和为1.0275708634790275
2024-11-07 17:26:40,827 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 17:26:43,863 - my_logger - INFO - 进出口类指标的相关性总和为12.34341563584218
2024-11-07 17:26:43,865 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 17:26:46,450 - my_logger - INFO - 需求类指标的相关性总和为15.143035955883262
2024-11-07 17:26:46,451 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 17:26:47,039 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 17:26:53,219 - my_logger - INFO - 制作报告end
2024-11-07 17:26:53,219 - my_logger - INFO - 模型训练完成
2024-11-07 17:26:59,436 - my_logger - INFO - 邮件发送成功!
2024-11-07 17:32:49,837 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-07 17:32:49,839 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-07 17:35:17,909 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-07 17:35:19,512 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 628)
2024-11-07 17:35:19,520 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 628)
2024-11-07 17:35:19,527 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 549)
2024-11-07 17:35:27,790 - my_logger - INFO - Libya列数据为空
2024-11-07 17:35:27,794 - my_logger - INFO - Malaysia列数据为空
2024-11-07 17:35:28,505 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-07 17:35:28,526 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-07 17:35:28,528 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-07 17:35:31,167 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-07 17:35:31,178 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-07 17:35:31,209 - my_logger - INFO - 最近20天预测残差最低的模型名称LSTM
2024-11-07 17:35:31,226 - my_logger - INFO - 开始训练模型...
2024-11-07 17:35:31,256 - my_logger - INFO - Training set head:
2024-11-07 17:35:31,257 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 17:35:31,767 - my_logger - INFO -
Testing set head:
2024-11-07 17:35:31,768 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-07 17:48:15,393 - my_logger - INFO - 模型训练完成
2024-11-07 17:48:15,394 - my_logger - INFO - 训练数据绘图ing
2024-11-07 17:48:19,376 - my_logger - INFO - 训练数据绘图end
2024-11-07 17:48:19,377 - my_logger - INFO - 制作报告ing
2024-11-07 17:48:19,885 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-07 17:48:20,552 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-07 17:48:20,554 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-07 17:48:23,077 - my_logger - INFO - 价格类指标的相关性总和为100.34978693834032
2024-11-07 17:48:23,078 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-07 17:48:26,058 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-07 17:48:26,060 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-07 17:48:26,550 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-07 17:48:26,551 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-07 17:48:29,054 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-07 17:48:29,056 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-07 17:48:29,682 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-07 17:48:29,683 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-07 17:48:32,155 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-07 17:48:32,157 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-07 17:48:35,278 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-07 17:48:35,279 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-07 17:48:37,530 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.181465055386917
2024-11-07 17:48:37,532 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-07 17:48:38,028 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-07 17:48:38,029 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-07 17:48:40,650 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-07 17:48:40,652 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-07 17:48:43,118 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-07 17:48:43,120 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-07 17:48:43,719 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-07 17:48:50,363 - my_logger - INFO - 制作报告end
2024-11-07 17:48:50,364 - my_logger - INFO - 模型训练完成
2024-11-07 17:48:57,360 - my_logger - INFO - 邮件发送成功!
2024-11-08 11:13:00,378 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 11:13:00,379 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-30
2024-11-08 11:14:28,570 - my_logger - INFO - 删除两月不更新特征前数据量:(2495, 930)
2024-11-08 11:14:29,574 - my_logger - INFO - 删除两月不更新特征后数据量:(2495, 622)
2024-11-08 11:14:29,579 - my_logger - INFO - 删除预测列为空值的行后数据量:(1766, 622)
2024-11-08 11:14:29,583 - my_logger - INFO - 删除全为空值的列后数据量:(1766, 545)
2024-11-08 11:14:34,705 - my_logger - INFO - Libya列数据为空
2024-11-08 11:14:34,707 - my_logger - INFO - Malaysia列数据为空
2024-11-08 11:14:35,094 - my_logger - INFO - 日度(352) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
347 C2403150124
348 FVHCM1 INDEX
349 lmcads03 lme comdty
350 GC1 COMB Comdty
351 C2404167855
[352 rows x 2 columns]
2024-11-08 11:14:35,105 - my_logger - INFO - 特征信息总共有542个,日度(352),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 11:14:35,106 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 11:14:37,549 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', y = '72.16' WHERE ds = '2024-10-30 00:00:00'
2024-11-08 11:14:37,560 - my_logger - INFO - 开始训练模型...
2024-11-08 11:14:37,579 - my_logger - INFO - Training set head:
2024-11-08 11:14:37,579 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 560 columns]
2024-11-08 11:14:37,902 - my_logger - INFO -
Testing set head:
2024-11-08 11:14:37,903 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 560 columns]
2024-11-08 11:21:16,506 - my_logger - INFO - 模型训练完成
2024-11-08 11:21:16,506 - my_logger - INFO - 训练数据绘图ing
2024-11-08 11:21:19,144 - my_logger - INFO - 训练数据绘图end
2024-11-08 11:21:19,145 - my_logger - INFO - 制作报告ing
2024-11-08 11:21:19,502 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 11:21:19,963 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2175358910941418
2024-11-08 11:21:19,964 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 11:21:21,665 - my_logger - INFO - 价格类指标的相关性总和为97.82888243995313
2024-11-08 11:21:21,666 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 11:21:23,633 - my_logger - INFO - 供应类指标的相关性总和为15.525781568032635
2024-11-08 11:21:23,634 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 11:21:23,940 - my_logger - INFO - 供应给类指标的相关性总和为1.549523664043174
2024-11-08 11:21:23,941 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 11:21:25,597 - my_logger - INFO - 其他类指标的相关性总和为6.897755337034983
2024-11-08 11:21:25,598 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 11:21:26,090 - my_logger - INFO - 宏观类指标的相关性总和为2.6104837226531727
2024-11-08 11:21:26,091 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 11:21:27,758 - my_logger - INFO - 库存类指标的相关性总和为39.74002870686131
2024-11-08 11:21:27,760 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 11:21:29,802 - my_logger - INFO - 期货市场类指标的相关性总和为74.06734384171318
2024-11-08 11:21:29,804 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 11:21:31,301 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.180576385560894
2024-11-08 11:21:31,303 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 11:21:31,623 - my_logger - INFO - 运输类指标的相关性总和为1.0274228259138274
2024-11-08 11:21:31,624 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 11:21:33,240 - my_logger - INFO - 进出口类指标的相关性总和为12.34462246265804
2024-11-08 11:21:33,241 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 11:21:35,320 - my_logger - INFO - 需求类指标的相关性总和为15.142900618539196
2024-11-08 11:21:35,322 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 11:21:35,711 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 11:21:39,640 - my_logger - INFO - 制作报告end
2024-11-08 11:21:39,640 - my_logger - INFO - 模型训练完成
2024-11-08 11:21:42,070 - my_logger - INFO - 邮件发送成功!
2024-11-08 11:29:31,079 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 11:29:31,080 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-31
2024-11-08 11:30:58,223 - my_logger - INFO - 删除两月不更新特征前数据量:(2496, 930)
2024-11-08 11:30:59,228 - my_logger - INFO - 删除两月不更新特征后数据量:(2496, 628)
2024-11-08 11:30:59,234 - my_logger - INFO - 删除预测列为空值的行后数据量:(1767, 628)
2024-11-08 11:30:59,238 - my_logger - INFO - 删除全为空值的列后数据量:(1767, 551)
2024-11-08 11:31:04,002 - my_logger - INFO - Libya列数据为空
2024-11-08 11:31:04,004 - my_logger - INFO - Malaysia列数据为空
2024-11-08 11:31:04,387 - my_logger - INFO - 日度(357) 周度(190) 月度(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 3 columns]
2024-11-08 11:31:04,400 - my_logger - INFO - 特征信息总共有548个,日度(357),周度(190),月度(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 11:31:04,402 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 11:31:05,858 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', y = '72.81' WHERE ds = '2024-10-31 00:00:00'
2024-11-08 11:31:05,861 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 11:31:05,877 - my_logger - INFO - 最近20天预测残差最低的模型名称LSTM
2024-11-08 11:31:05,888 - my_logger - INFO - 开始训练模型...
2024-11-08 11:31:05,906 - my_logger - INFO - Training set head:
2024-11-08 11:31:05,906 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 566 columns]
2024-11-08 11:31:06,200 - my_logger - INFO -
Testing set head:
2024-11-08 11:31:06,201 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 566 columns]
2024-11-08 11:40:29,079 - my_logger - INFO - 模型训练完成
2024-11-08 11:40:29,079 - my_logger - INFO - 训练数据绘图ing
2024-11-08 11:40:31,785 - my_logger - INFO - 训练数据绘图end
2024-11-08 11:40:31,786 - my_logger - INFO - 制作报告ing
2024-11-08 11:40:32,148 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 11:40:32,611 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2184726958129715
2024-11-08 11:40:32,613 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 11:40:34,360 - my_logger - INFO - 价格类指标的相关性总和为100.85097823156127
2024-11-08 11:40:34,361 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 11:40:36,338 - my_logger - INFO - 供应类指标的相关性总和为15.524781089112889
2024-11-08 11:40:36,339 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 11:40:36,689 - my_logger - INFO - 供应给类指标的相关性总和为1.5494604798948044
2024-11-08 11:40:36,690 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 11:40:38,362 - my_logger - INFO - 其他类指标的相关性总和为6.896880805926513
2024-11-08 11:40:38,363 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 11:40:38,841 - my_logger - INFO - 宏观类指标的相关性总和为2.6103197627496835
2024-11-08 11:40:38,842 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 11:40:40,534 - my_logger - INFO - 库存类指标的相关性总和为39.73983060226348
2024-11-08 11:40:40,535 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 11:40:42,641 - my_logger - INFO - 期货市场类指标的相关性总和为73.83779308597283
2024-11-08 11:40:42,642 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 11:40:44,243 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.179689363896115
2024-11-08 11:40:44,244 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 11:40:44,592 - my_logger - INFO - 运输类指标的相关性总和为1.02731770126438
2024-11-08 11:40:44,593 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 11:40:46,347 - my_logger - INFO - 进出口类指标的相关性总和为12.346398731964502
2024-11-08 11:40:46,348 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 11:40:48,477 - my_logger - INFO - 需求类指标的相关性总和为15.460557613236734
2024-11-08 11:40:48,478 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 11:40:48,934 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 11:40:53,666 - my_logger - INFO - 制作报告end
2024-11-08 11:40:53,666 - my_logger - INFO - 模型训练完成
2024-11-08 11:40:56,204 - my_logger - INFO - 邮件发送成功!
2024-11-08 13:13:34,406 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 13:13:34,407 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-30
2024-11-08 13:14:59,761 - my_logger - INFO - 删除两月不更新特征前数据量:(2495, 930)
2024-11-08 13:15:00,754 - my_logger - INFO - 删除两月不更新特征后数据量:(2495, 622)
2024-11-08 13:15:00,759 - my_logger - INFO - 删除预测列为空值的行后数据量:(1766, 622)
2024-11-08 13:15:00,763 - my_logger - INFO - 删除全为空值的列后数据量:(1766, 545)
2024-11-08 13:15:05,611 - my_logger - INFO - Libya列数据为空
2024-11-08 13:15:05,613 - my_logger - INFO - Malaysia列数据为空
2024-11-08 13:15:06,005 - my_logger - INFO - 日度(352) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
347 C2403150124
348 FVHCM1 INDEX
349 lmcads03 lme comdty
350 GC1 COMB Comdty
351 C2404167855
[352 rows x 2 columns]
2024-11-08 13:15:06,016 - my_logger - INFO - 特征信息总共有542个,日度(352),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 13:15:06,018 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 13:15:07,468 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', y = '72.16' WHERE ds = '2024-10-30 00:00:00'
2024-11-08 13:15:07,469 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 13:15:07,485 - my_logger - INFO - 最近20天预测残差最低的模型名称LSTM
2024-11-08 13:15:07,495 - my_logger - INFO - 开始训练模型...
2024-11-08 13:15:07,513 - my_logger - INFO - Training set head:
2024-11-08 13:15:07,513 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 560 columns]
2024-11-08 13:15:07,811 - my_logger - INFO -
Testing set head:
2024-11-08 13:15:07,811 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 560 columns]
2024-11-08 13:21:47,348 - my_logger - INFO - 模型训练完成
2024-11-08 13:21:47,349 - my_logger - INFO - 训练数据绘图ing
2024-11-08 13:21:48,277 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', NHITS = '72.2036', Informer = '73.30838', LSTM = '74.659035', iTransformer = '68.06224', TSMixer = '72.53991', TSMixerx = '73.15256', PatchTST = '72.79773', RNN = '62.552338', GRU = '73.57961', TCN = '72.55539', BiTCN = '72.8946', DilatedRNN = '72.19688', MLP = '73.16078', DLinear = '72.62695', NLinear = '72.753654', TFT = '71.50726', StemGNN = '74.854034', MLPMultivariate = '73.19125', TiDE = '72.374146', DeepNPTS = '74.34018' WHERE ds = '2024-10-31 00:00:00'
2024-11-08 13:21:49,918 - my_logger - INFO - 训练数据绘图end
2024-11-08 13:21:49,919 - my_logger - INFO - 制作报告ing
2024-11-08 13:21:50,285 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 13:21:50,724 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2175358910941418
2024-11-08 13:21:50,726 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 13:21:52,417 - my_logger - INFO - 价格类指标的相关性总和为97.82888243995313
2024-11-08 13:21:52,418 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 13:21:54,350 - my_logger - INFO - 供应类指标的相关性总和为15.525781568032635
2024-11-08 13:21:54,351 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 13:21:54,675 - my_logger - INFO - 供应给类指标的相关性总和为1.549523664043174
2024-11-08 13:21:54,676 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 13:21:56,545 - my_logger - INFO - 其他类指标的相关性总和为6.897755337034983
2024-11-08 13:21:56,546 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 13:21:57,090 - my_logger - INFO - 宏观类指标的相关性总和为2.6104837226531727
2024-11-08 13:21:57,091 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 13:21:58,813 - my_logger - INFO - 库存类指标的相关性总和为39.74002870686131
2024-11-08 13:21:58,814 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 13:22:00,846 - my_logger - INFO - 期货市场类指标的相关性总和为74.06734384171318
2024-11-08 13:22:00,847 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 13:22:02,340 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.180576385560894
2024-11-08 13:22:02,341 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 13:22:02,665 - my_logger - INFO - 运输类指标的相关性总和为1.0274228259138274
2024-11-08 13:22:02,666 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 13:22:04,292 - my_logger - INFO - 进出口类指标的相关性总和为12.34462246265804
2024-11-08 13:22:04,293 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 13:22:06,327 - my_logger - INFO - 需求类指标的相关性总和为15.142900618539196
2024-11-08 13:22:06,328 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 13:22:06,699 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 13:22:10,625 - my_logger - INFO - 制作报告end
2024-11-08 13:22:10,626 - my_logger - INFO - 模型训练完成
2024-11-08 13:22:16,554 - my_logger - INFO - 邮件发送成功!
2024-11-08 13:24:26,582 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 13:24:26,583 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-31
2024-11-08 13:25:51,440 - my_logger - INFO - 删除两月不更新特征前数据量:(2496, 930)
2024-11-08 13:25:52,447 - my_logger - INFO - 删除两月不更新特征后数据量:(2496, 628)
2024-11-08 13:25:52,454 - my_logger - INFO - 删除预测列为空值的行后数据量:(1767, 628)
2024-11-08 13:25:52,458 - my_logger - INFO - 删除全为空值的列后数据量:(1767, 551)
2024-11-08 13:25:57,103 - my_logger - INFO - Libya列数据为空
2024-11-08 13:25:57,106 - my_logger - INFO - Malaysia列数据为空
2024-11-08 13:25:57,496 - my_logger - INFO - 日度(357) 周度(190) 月度(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 3 columns]
2024-11-08 13:25:57,509 - my_logger - INFO - 特征信息总共有548个,日度(357),周度(190),月度(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 13:25:57,511 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 13:25:58,949 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', y = '72.81' WHERE ds = '2024-10-31 00:00:00'
2024-11-08 13:25:58,950 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 13:25:58,965 - my_logger - INFO - 最近20天预测残差最低的模型名称LSTM
2024-11-08 13:25:58,975 - my_logger - INFO - 开始训练模型...
2024-11-08 13:25:58,992 - my_logger - INFO - Training set head:
2024-11-08 13:25:58,993 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 566 columns]
2024-11-08 13:25:59,287 - my_logger - INFO -
Testing set head:
2024-11-08 13:25:59,288 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 566 columns]
2024-11-08 13:32:36,589 - my_logger - INFO - 模型训练完成
2024-11-08 13:32:36,591 - my_logger - INFO - 训练数据绘图ing
2024-11-08 13:32:37,540 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-01 00:00:00', NHITS = '73.35375', Informer = '74.22666', LSTM = '73.40906', iTransformer = '68.16945', TSMixer = '73.22551', TSMixerx = '73.457275', PatchTST = '73.24618', RNN = '76.156', GRU = '74.40545', TCN = '73.91135', BiTCN = '73.333405', DilatedRNN = '74.119896', MLP = '73.43356', DLinear = '72.59255', NLinear = '72.939865', TFT = '72.98128', StemGNN = '74.722435', MLPMultivariate = '72.72546', TiDE = '73.70046', DeepNPTS = '74.35521' WHERE ds = '2024-11-01 00:00:00'
2024-11-08 13:32:39,229 - my_logger - INFO - 训练数据绘图end
2024-11-08 13:32:39,230 - my_logger - INFO - 制作报告ing
2024-11-08 13:32:39,611 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 13:32:40,076 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2184726958129715
2024-11-08 13:32:40,078 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 13:32:41,847 - my_logger - INFO - 价格类指标的相关性总和为100.85097823156127
2024-11-08 13:32:41,848 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 13:32:43,891 - my_logger - INFO - 供应类指标的相关性总和为15.524781089112889
2024-11-08 13:32:43,893 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 13:32:44,206 - my_logger - INFO - 供应给类指标的相关性总和为1.5494604798948044
2024-11-08 13:32:44,208 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 13:32:45,863 - my_logger - INFO - 其他类指标的相关性总和为6.896880805926513
2024-11-08 13:32:45,864 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 13:32:46,341 - my_logger - INFO - 宏观类指标的相关性总和为2.6103197627496835
2024-11-08 13:32:46,342 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 13:32:48,059 - my_logger - INFO - 库存类指标的相关性总和为39.73983060226348
2024-11-08 13:32:48,060 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 13:32:50,126 - my_logger - INFO - 期货市场类指标的相关性总和为73.83779308597283
2024-11-08 13:32:50,128 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 13:32:51,634 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.179689363896115
2024-11-08 13:32:51,635 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 13:32:51,959 - my_logger - INFO - 运输类指标的相关性总和为1.02731770126438
2024-11-08 13:32:51,960 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 13:32:53,599 - my_logger - INFO - 进出口类指标的相关性总和为12.346398731964502
2024-11-08 13:32:53,600 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 13:32:55,710 - my_logger - INFO - 需求类指标的相关性总和为15.460557613236734
2024-11-08 13:32:55,711 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 13:32:56,103 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 13:33:00,054 - my_logger - INFO - 制作报告end
2024-11-08 13:33:00,054 - my_logger - INFO - 模型训练完成
2024-11-08 13:33:02,619 - my_logger - INFO - 邮件发送成功!
2024-11-08 13:35:33,953 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 13:35:33,954 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-11-01
2024-11-08 13:36:58,377 - my_logger - INFO - 删除两月不更新特征前数据量:(2497, 930)
2024-11-08 13:36:59,369 - my_logger - INFO - 删除两月不更新特征后数据量:(2497, 634)
2024-11-08 13:36:59,374 - my_logger - INFO - 删除预测列为空值的行后数据量:(1768, 634)
2024-11-08 13:36:59,379 - my_logger - INFO - 删除全为空值的列后数据量:(1768, 557)
2024-11-08 13:37:04,086 - my_logger - INFO - Libya列数据为空
2024-11-08 13:37:04,088 - my_logger - INFO - Malaysia列数据为空
2024-11-08 13:37:04,472 - my_logger - INFO - 日度(357) 周度(195) 月度(1) 61天(1)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求 EIA美国柴油产量千桶日 舟山:可用库容:原油
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ... ...
352 C2403150124
353 FVHCM1 INDEX
354 lmcads03 lme comdty
355 GC1 COMB Comdty
356 C2404167855
[357 rows x 4 columns]
2024-11-08 13:37:04,486 - my_logger - INFO - 特征信息总共有554个,日度(357),周度(195),月度(1),61天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 13:37:04,488 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 13:37:05,938 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-01 00:00:00', y = '73.1' WHERE ds = '2024-11-01 00:00:00'
2024-11-08 13:37:05,941 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 13:37:05,957 - my_logger - INFO - 最近20天预测残差最低的模型名称TFT
2024-11-08 13:37:05,967 - my_logger - INFO - 开始训练模型...
2024-11-08 13:37:05,985 - my_logger - INFO - Training set head:
2024-11-08 13:37:05,986 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-08 13:37:06,277 - my_logger - INFO -
Testing set head:
2024-11-08 13:37:06,277 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 572 columns]
2024-11-08 13:44:33,628 - my_logger - INFO - 模型训练完成
2024-11-08 13:44:33,629 - my_logger - INFO - 训练数据绘图ing
2024-11-08 13:44:36,226 - my_logger - INFO - 训练数据绘图end
2024-11-08 13:44:36,227 - my_logger - INFO - 制作报告ing
2024-11-08 13:44:36,601 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 13:44:37,060 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2195561801649653
2024-11-08 13:44:37,062 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 13:44:38,780 - my_logger - INFO - 价格类指标的相关性总和为100.8287730410694
2024-11-08 13:44:38,781 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 13:44:40,766 - my_logger - INFO - 供应类指标的相关性总和为15.75211902049459
2024-11-08 13:44:40,768 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 13:44:41,076 - my_logger - INFO - 供应给类指标的相关性总和为1.5494180182437378
2024-11-08 13:44:41,078 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 13:44:42,710 - my_logger - INFO - 其他类指标的相关性总和为6.8961334530789635
2024-11-08 13:44:42,711 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 13:44:43,176 - my_logger - INFO - 宏观类指标的相关性总和为2.610143318202318
2024-11-08 13:44:43,177 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 13:44:44,843 - my_logger - INFO - 库存类指标的相关性总和为39.740160565420304
2024-11-08 13:44:44,845 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 13:44:46,850 - my_logger - INFO - 期货市场类指标的相关性总和为75.5829296801632
2024-11-08 13:44:46,851 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 13:44:48,319 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.178801881104459
2024-11-08 13:44:48,320 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 13:44:48,644 - my_logger - INFO - 运输类指标的相关性总和为1.0271969814006003
2024-11-08 13:44:48,646 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 13:44:50,253 - my_logger - INFO - 进出口类指标的相关性总和为12.348350677681264
2024-11-08 13:44:50,255 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 13:44:51,923 - my_logger - INFO - 需求类指标的相关性总和为15.460736202771775
2024-11-08 13:44:51,924 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 13:44:52,736 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 13:44:56,614 - my_logger - INFO - 制作报告end
2024-11-08 13:44:56,614 - my_logger - INFO - 模型训练完成
2024-11-08 13:45:02,223 - my_logger - INFO - 邮件发送成功!
2024-11-08 13:51:04,261 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 13:51:04,262 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 13:52:28,249 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 13:52:29,240 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 13:52:29,245 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 13:52:29,250 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 13:52:33,879 - my_logger - INFO - Libya列数据为空
2024-11-08 13:52:33,881 - my_logger - INFO - Malaysia列数据为空
2024-11-08 13:52:34,270 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 13:52:34,282 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 13:52:34,283 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 13:52:35,711 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 13:52:35,726 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 13:52:35,738 - my_logger - INFO - 开始训练模型...
2024-11-08 13:52:35,754 - my_logger - INFO - Training set head:
2024-11-08 13:52:35,755 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 13:52:36,039 - my_logger - INFO -
Testing set head:
2024-11-08 13:52:36,040 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 13:59:33,263 - my_logger - INFO - 模型训练完成
2024-11-08 13:59:33,263 - my_logger - INFO - 训练数据绘图ing
2024-11-08 13:59:35,864 - my_logger - INFO - 训练数据绘图end
2024-11-08 13:59:35,865 - my_logger - INFO - 制作报告ing
2024-11-08 13:59:36,224 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 13:59:36,684 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-08 13:59:36,686 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 13:59:38,411 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-08 13:59:38,413 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 13:59:40,420 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-08 13:59:40,421 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 13:59:40,725 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-08 13:59:40,726 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 13:59:42,354 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-08 13:59:42,356 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 13:59:42,809 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-08 13:59:42,810 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 13:59:44,483 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-08 13:59:44,484 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 13:59:46,502 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-08 13:59:46,503 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 13:59:47,957 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-08 13:59:47,958 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 13:59:48,268 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-08 13:59:48,269 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 13:59:49,889 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-08 13:59:49,890 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 13:59:51,967 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-08 13:59:51,968 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 13:59:52,348 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 13:59:56,278 - my_logger - INFO - 制作报告end
2024-11-08 13:59:56,278 - my_logger - INFO - 模型训练完成
2024-11-08 13:59:58,838 - my_logger - INFO - 邮件发送成功!
2024-11-08 14:07:06,854 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 14:07:06,855 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 14:08:30,659 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 14:08:31,651 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 14:08:31,656 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 14:08:31,660 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 14:08:36,276 - my_logger - INFO - Libya列数据为空
2024-11-08 14:08:36,278 - my_logger - INFO - Malaysia列数据为空
2024-11-08 14:08:36,661 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 14:08:36,672 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 14:08:36,674 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 14:08:38,102 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 14:08:38,103 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 14:08:38,121 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 14:08:38,131 - my_logger - INFO - 开始训练模型...
2024-11-08 14:08:38,148 - my_logger - INFO - Training set head:
2024-11-08 14:08:38,149 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 14:08:38,436 - my_logger - INFO -
Testing set head:
2024-11-08 14:08:38,437 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 14:16:21,447 - my_logger - INFO - 模型训练完成
2024-11-08 14:16:21,448 - my_logger - INFO - 训练数据绘图ing
2024-11-08 14:16:22,492 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.60933', LSTM = '76.698364', iTransformer = '74.71924', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.47034', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.93628', MLPMultivariate = '74.40146', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 14:16:24,220 - my_logger - INFO - 训练数据绘图end
2024-11-08 14:16:24,220 - my_logger - INFO - 制作报告ing
2024-11-08 14:16:24,582 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 14:16:25,043 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-08 14:16:25,045 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 14:16:26,759 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-08 14:16:26,760 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 14:16:28,792 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-08 14:16:28,793 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 14:16:29,109 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-08 14:16:29,110 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 14:16:30,764 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-08 14:16:30,766 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 14:16:31,260 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-08 14:16:31,261 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 14:16:32,963 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-08 14:16:32,963 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 14:16:35,049 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-08 14:16:35,050 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 14:16:36,523 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-08 14:16:36,525 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 14:16:36,827 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-08 14:16:36,828 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 14:16:38,480 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-08 14:16:38,481 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 14:16:40,576 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-08 14:16:40,577 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 14:16:40,953 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 14:16:44,911 - my_logger - INFO - 制作报告end
2024-11-08 14:16:44,911 - my_logger - INFO - 模型训练完成
2024-11-08 14:16:47,541 - my_logger - INFO - 邮件发送成功!
2024-11-08 14:19:10,477 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 14:19:10,478 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 14:20:35,220 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 14:20:36,221 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 14:20:36,227 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 14:20:36,232 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 14:20:40,792 - my_logger - INFO - Libya列数据为空
2024-11-08 14:20:40,794 - my_logger - INFO - Malaysia列数据为空
2024-11-08 14:20:41,173 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 14:20:41,184 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 14:20:41,186 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 14:20:42,615 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 14:20:42,616 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 14:20:42,631 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 14:20:42,647 - my_logger - INFO - 开始训练模型...
2024-11-08 14:20:42,663 - my_logger - INFO - Training set head:
2024-11-08 14:20:42,664 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 14:20:42,962 - my_logger - INFO -
Testing set head:
2024-11-08 14:20:42,963 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 14:30:04,811 - my_logger - INFO - 模型训练完成
2024-11-08 14:30:04,812 - my_logger - INFO - 训练数据绘图ing
2024-11-08 14:30:05,838 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.71135', LSTM = '76.698364', iTransformer = '73.95284', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.466995', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', FEDformer = '75.24683', StemGNN = '74.51698', MLPMultivariate = '74.249535', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 14:46:34,767 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 14:46:34,768 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 14:48:00,644 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 14:48:01,657 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 14:48:01,662 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 14:48:01,667 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 14:48:06,378 - my_logger - INFO - Libya列数据为空
2024-11-08 14:48:06,380 - my_logger - INFO - Malaysia列数据为空
2024-11-08 14:48:06,760 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 14:48:06,771 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 14:48:06,773 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 14:48:08,164 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 14:48:08,165 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 14:48:08,182 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 14:48:08,192 - my_logger - INFO - 开始训练模型...
2024-11-08 14:48:08,210 - my_logger - INFO - Training set head:
2024-11-08 14:48:08,211 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 14:48:08,507 - my_logger - INFO -
Testing set head:
2024-11-08 14:48:08,507 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 14:55:05,652 - my_logger - INFO - 模型训练完成
2024-11-08 14:55:05,653 - my_logger - INFO - 训练数据绘图ing
2024-11-08 14:55:06,691 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.342476', LSTM = '76.698364', iTransformer = '74.71924', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.46029', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.46467', MLPMultivariate = '74.40146', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 15:17:44,964 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 15:17:44,965 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 15:19:10,712 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 15:19:11,686 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 15:19:11,691 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 15:19:11,695 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 15:19:16,462 - my_logger - INFO - Libya列数据为空
2024-11-08 15:19:16,464 - my_logger - INFO - Malaysia列数据为空
2024-11-08 15:19:16,856 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 15:19:16,867 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 15:19:16,868 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 15:19:18,381 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 15:19:18,383 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 15:19:18,399 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 15:19:18,411 - my_logger - INFO - 开始训练模型...
2024-11-08 15:19:18,428 - my_logger - INFO - Training set head:
2024-11-08 15:19:18,428 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 15:19:18,719 - my_logger - INFO -
Testing set head:
2024-11-08 15:19:18,719 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 557 columns]
2024-11-08 15:28:08,840 - my_logger - INFO - 模型训练完成
2024-11-08 15:28:08,841 - my_logger - INFO - 训练数据绘图ing
2024-11-08 15:28:09,875 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 15:36:03,661 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 15:36:03,662 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 15:37:28,508 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 15:37:29,490 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 15:37:29,495 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 15:37:29,499 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 15:37:34,144 - my_logger - INFO - Libya列数据为空
2024-11-08 15:37:34,146 - my_logger - INFO - Malaysia列数据为空
2024-11-08 15:37:34,530 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 15:37:34,542 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 15:37:34,544 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 15:37:35,944 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 15:37:35,945 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 15:37:35,961 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 15:37:35,973 - my_logger - INFO - 开始训练模型...
2024-11-08 15:37:35,973 - my_logger - INFO - 模型训练完成
2024-11-08 15:37:35,974 - my_logger - INFO - 训练数据绘图ing
2024-11-08 15:39:11,805 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 15:39:11,806 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 15:40:36,293 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 15:40:37,274 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 15:40:37,279 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 15:40:37,283 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 15:40:41,888 - my_logger - INFO - Libya列数据为空
2024-11-08 15:40:41,890 - my_logger - INFO - Malaysia列数据为空
2024-11-08 15:40:42,271 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 15:40:42,281 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 15:40:42,283 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 15:40:43,670 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 15:40:43,671 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 15:40:43,688 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 15:40:43,700 - my_logger - INFO - 开始训练模型...
2024-11-08 15:40:43,700 - my_logger - INFO - 模型训练完成
2024-11-08 15:40:43,701 - my_logger - INFO - 训练数据绘图ing
2024-11-08 15:40:44,757 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 15:43:12,875 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 15:43:12,875 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 15:46:55,576 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 15:46:57,705 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 15:46:57,712 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 15:46:57,717 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 15:47:09,402 - my_logger - INFO - Libya列数据为空
2024-11-08 15:47:09,405 - my_logger - INFO - Malaysia列数据为空
2024-11-08 15:47:10,465 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 15:47:10,491 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 15:47:10,494 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 15:47:12,145 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 15:47:12,146 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 15:47:12,179 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 15:47:12,191 - my_logger - INFO - 开始训练模型...
2024-11-08 15:47:12,191 - my_logger - INFO - 模型训练完成
2024-11-08 15:47:12,192 - my_logger - INFO - 训练数据绘图ing
2024-11-08 15:47:14,417 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 15:49:55,590 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 15:49:55,592 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 15:53:37,039 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 15:53:39,179 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 15:53:39,185 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 15:53:39,191 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 15:53:50,759 - my_logger - INFO - Libya列数据为空
2024-11-08 15:53:50,763 - my_logger - INFO - Malaysia列数据为空
2024-11-08 15:53:51,805 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 15:53:51,832 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 15:53:51,834 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 15:53:53,495 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 15:53:53,495 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 15:53:53,526 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 15:53:53,543 - my_logger - INFO - 开始训练模型...
2024-11-08 15:53:53,544 - my_logger - INFO - 模型训练完成
2024-11-08 15:53:53,545 - my_logger - INFO - 训练数据绘图ing
2024-11-08 15:53:55,774 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 15:59:53,670 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 15:59:53,671 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:01:17,998 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 16:01:18,987 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 16:01:18,991 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 16:01:18,996 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 16:01:23,599 - my_logger - INFO - Libya列数据为空
2024-11-08 16:01:23,600 - my_logger - INFO - Malaysia列数据为空
2024-11-08 16:01:23,980 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 16:01:23,991 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 16:01:23,993 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 16:01:25,411 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 16:01:25,412 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 16:01:25,427 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 16:01:25,443 - my_logger - INFO - 开始训练模型...
2024-11-08 16:01:25,444 - my_logger - INFO - 模型训练完成
2024-11-08 16:01:25,444 - my_logger - INFO - 训练数据绘图ing
2024-11-08 16:01:26,531 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 16:01:28,234 - my_logger - INFO - 训练数据绘图end
2024-11-08 16:01:28,234 - my_logger - INFO - 制作报告ing
2024-11-08 16:01:28,577 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 16:01:29,039 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-08 16:01:29,041 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 16:01:31,001 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-08 16:01:31,003 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 16:01:32,710 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-08 16:01:32,711 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 16:01:33,026 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-08 16:01:33,027 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 16:01:34,696 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-08 16:01:34,697 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 16:01:35,167 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-08 16:01:35,168 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 16:01:37,173 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-08 16:01:37,175 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 16:01:38,872 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-08 16:01:38,873 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 16:01:40,375 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-08 16:01:40,376 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 16:01:40,695 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-08 16:01:40,696 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 16:01:42,862 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-08 16:01:42,865 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 16:01:44,701 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-08 16:01:44,702 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 16:01:45,324 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 16:01:50,698 - my_logger - INFO - 制作报告end
2024-11-08 16:01:50,699 - my_logger - INFO - 模型训练完成
2024-11-08 16:01:54,169 - my_logger - INFO - 邮件发送成功!
2024-11-08 16:15:14,295 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 16:15:14,297 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:19:01,733 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 16:19:04,017 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 16:19:04,023 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 16:19:04,030 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 16:19:16,269 - my_logger - INFO - Libya列数据为空
2024-11-08 16:19:16,272 - my_logger - INFO - Malaysia列数据为空
2024-11-08 16:19:17,329 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 16:19:17,356 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 16:19:17,358 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 16:19:19,067 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 16:19:19,069 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 16:19:19,101 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 16:19:19,119 - my_logger - INFO - 开始训练模型...
2024-11-08 16:19:19,119 - my_logger - INFO - 模型训练完成
2024-11-08 16:19:19,120 - my_logger - INFO - 训练数据绘图ing
2024-11-08 16:21:16,967 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 16:21:16,969 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:25:05,957 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 16:25:08,128 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 16:25:08,134 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 16:25:08,140 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 16:25:19,992 - my_logger - INFO - Libya列数据为空
2024-11-08 16:25:19,999 - my_logger - INFO - Malaysia列数据为空
2024-11-08 16:25:21,099 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 16:25:21,132 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 16:25:21,134 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 16:25:22,863 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 16:25:22,864 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 16:25:22,899 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 16:25:22,918 - my_logger - INFO - 开始训练模型...
2024-11-08 16:25:22,919 - my_logger - INFO - 模型训练完成
2024-11-08 16:25:22,919 - my_logger - INFO - 训练数据绘图ing
2024-11-08 16:26:40,740 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 16:26:40,741 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:31:32,774 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 16:31:32,776 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:33:06,302 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 16:33:07,344 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 16:33:07,349 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 16:33:07,355 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 16:33:12,445 - my_logger - INFO - Libya列数据为空
2024-11-08 16:33:12,447 - my_logger - INFO - Malaysia列数据为空
2024-11-08 16:33:12,886 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 16:33:12,898 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 16:33:12,900 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 16:33:14,412 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 16:33:14,413 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 16:33:14,430 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 16:33:14,447 - my_logger - INFO - 开始训练模型...
2024-11-08 16:33:14,447 - my_logger - INFO - 模型训练完成
2024-11-08 16:33:14,448 - my_logger - INFO - 训练数据绘图ing
2024-11-08 16:34:27,221 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 16:34:27,223 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:40:52,319 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 16:40:55,878 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 16:40:55,888 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 16:40:55,895 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 16:41:15,793 - my_logger - INFO - Libya列数据为空
2024-11-08 16:41:15,799 - my_logger - INFO - Malaysia列数据为空
2024-11-08 16:41:17,492 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 16:41:17,527 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 16:41:17,529 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 16:41:20,162 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 16:41:20,163 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 16:41:20,211 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 16:41:20,232 - my_logger - INFO - 开始训练模型...
2024-11-08 16:41:20,233 - my_logger - INFO - 模型训练完成
2024-11-08 16:41:20,234 - my_logger - INFO - 训练数据绘图ing
2024-11-08 16:42:50,372 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 16:42:50,373 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:45:23,055 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 16:45:24,766 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 16:45:24,773 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 16:45:24,779 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 16:45:32,658 - my_logger - INFO - Libya列数据为空
2024-11-08 16:45:32,661 - my_logger - INFO - Malaysia列数据为空
2024-11-08 16:45:33,284 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 16:45:33,297 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 16:45:33,301 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 16:45:35,601 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 16:45:35,602 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 16:45:35,629 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 16:45:35,644 - my_logger - INFO - 开始训练模型...
2024-11-08 16:45:35,645 - my_logger - INFO - 模型训练完成
2024-11-08 16:45:35,646 - my_logger - INFO - 训练数据绘图ing
2024-11-08 16:45:37,195 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 16:45:39,876 - my_logger - INFO - 训练数据绘图end
2024-11-08 16:45:39,877 - my_logger - INFO - 制作报告ing
2024-11-08 16:45:40,373 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 16:45:41,053 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-08 16:45:41,056 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 16:45:44,381 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-08 16:45:44,383 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 16:45:47,233 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-08 16:45:47,235 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 16:45:47,751 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-08 16:45:47,753 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 16:45:50,674 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-08 16:45:50,675 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 16:45:51,464 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-08 16:45:51,466 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 16:45:54,957 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-08 16:45:54,958 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 16:45:58,013 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-08 16:45:58,014 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 16:46:00,469 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-08 16:46:00,471 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 16:46:00,978 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-08 16:46:00,979 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 16:46:04,337 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-08 16:46:04,339 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 16:46:07,157 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-08 16:46:07,159 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 16:46:07,826 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 16:46:13,857 - my_logger - INFO - 制作报告end
2024-11-08 16:46:13,858 - my_logger - INFO - 模型训练完成
2024-11-08 16:46:20,307 - my_logger - INFO - 邮件发送成功!
2024-11-08 16:48:26,588 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 16:48:26,590 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 16:54:32,257 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 16:54:36,157 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 16:54:36,168 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 16:54:36,176 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 16:54:56,092 - my_logger - INFO - Libya列数据为空
2024-11-08 16:54:56,098 - my_logger - INFO - Malaysia列数据为空
2024-11-08 16:54:57,943 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 16:54:57,983 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 16:54:57,985 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 16:55:00,731 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 16:55:00,733 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 16:55:00,787 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 16:55:00,806 - my_logger - INFO - 开始训练模型...
2024-11-08 16:55:00,807 - my_logger - INFO - 模型训练完成
2024-11-08 16:55:00,808 - my_logger - INFO - 训练数据绘图ing
2024-11-08 17:07:41,132 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 17:07:41,134 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 17:10:10,043 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 17:10:11,778 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 17:10:11,787 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 17:10:11,793 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 17:10:19,468 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:10:19,473 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:10:20,099 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 17:10:20,110 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 17:10:20,112 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 17:10:22,340 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 17:10:22,343 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 17:10:22,368 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 17:10:22,401 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 17:10:22,403 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 17:10:22,416 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:10:24,358 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 17:10:27,929 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘end
2024-11-08 17:10:27,931 - my_logger - INFO - 鍒朵綔鎶ュ憡ing
2024-11-08 17:10:28,430 - my_logger - INFO - 寮€濮嬬粯鍒禟pler鏁版嵁--鍘熸补鍑哄彛绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-08 17:10:29,348 - my_logger - INFO - Kpler鏁版嵁--鍘熸补鍑哄彛绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細1.217152239699212
2024-11-08 17:10:29,351 - my_logger - INFO - 寮€濮嬬粯鍒朵环鏍肩被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:10:32,931 - my_logger - INFO - 浠锋牸绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細97.90910818847435
2024-11-08 17:10:32,933 - my_logger - INFO - 寮€濮嬬粯鍒朵緵搴旂被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:10:36,796 - my_logger - INFO - 渚涘簲绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細15.531343912790739
2024-11-08 17:10:36,799 - my_logger - INFO - 寮€濮嬬粯鍒朵緵搴旂粰绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-08 17:10:37,378 - my_logger - INFO - 渚涘簲缁欑被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細1.5500443529387788
2024-11-08 17:10:37,381 - my_logger - INFO - 寮€濮嬬粯鍒跺叾浠栫被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:10:40,846 - my_logger - INFO - 鍏朵粬绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細6.90185005982164
2024-11-08 17:10:40,849 - my_logger - INFO - 寮€濮嬬粯鍒跺畯瑙傜被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:10:41,724 - my_logger - INFO - 瀹忚<E780B9>绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細2.611349956994218
2024-11-08 17:10:41,726 - my_logger - INFO - 寮€濮嬬粯鍒跺簱瀛樼被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:10:45,873 - my_logger - INFO - 搴撳瓨绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細39.74899466223315
2024-11-08 17:10:45,875 - my_logger - INFO - 寮€濮嬬粯鍒舵湡璐у競鍦虹被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:10:49,542 - my_logger - INFO - 鏈熻揣甯傚満绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細73.8202116202404
2024-11-08 17:10:49,544 - my_logger - INFO - 寮€濮嬬粯鍒惰タ鍖楁<E98D96>甯傚満绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-08 17:10:52,713 - my_logger - INFO - 瑗垮寳娆у競鍦虹被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細6.183295534845926
2024-11-08 17:10:52,715 - my_logger - INFO - 寮€濮嬬粯鍒惰繍杈撶被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:10:53,394 - my_logger - INFO - 杩愯緭绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細1.0276073890794504
2024-11-08 17:10:53,396 - my_logger - INFO - 寮€濮嬬粯鍒惰繘鍑哄彛绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-08 17:10:57,065 - my_logger - INFO - 杩涘嚭鍙被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細12.34319101020204
2024-11-08 17:10:57,068 - my_logger - INFO - 寮€濮嬬粯鍒堕渶姹傜被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-08 17:11:01,375 - my_logger - INFO - 闇€姹傜被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細15.143260984964495
2024-11-08 17:11:01,377 - my_logger - INFO - 寮€濮嬬粯鍒剁浉鍏虫€ф€诲拰鐨勬皵娉″浘
2024-11-08 17:11:02,364 - my_logger - INFO - 缁樺埗鐩稿叧鎬ф€诲拰鐨勬皵娉″浘缁撴潫
2024-11-08 17:11:08,589 - my_logger - INFO - 鍒朵綔鎶ュ憡end
2024-11-08 17:11:08,590 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 17:11:15,001 - my_logger - INFO - 閭<>欢鍙戦€佹垚鍔燂紒
2024-11-08 17:14:48,572 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:15:30,322 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 17:15:30,324 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 17:15:31,434 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:15:39,030 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 17:15:39,031 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 17:18:16,013 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 17:18:17,747 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 17:18:17,755 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 17:18:17,761 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 17:18:25,547 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:18:25,551 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:18:26,298 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 17:18:26,305 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 17:18:26,308 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 17:18:28,538 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 17:20:39,117 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 17:20:39,119 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 17:23:21,203 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 17:23:22,883 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 17:23:22,891 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 17:23:22,898 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 17:23:30,305 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:23:30,310 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:23:30,947 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 17:23:30,957 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 17:23:30,959 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 17:23:33,184 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 17:23:33,186 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 17:23:33,210 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 17:23:33,250 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 17:23:33,252 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 17:23:33,265 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:26:55,191 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:27:03,236 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:35:50,872 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 17:35:50,874 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 17:35:52,638 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:36:04,185 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 17:36:04,186 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 17:38:36,379 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 17:38:38,022 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 17:38:38,031 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 17:38:38,037 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 17:38:44,979 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:38:44,982 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:38:45,594 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 17:38:45,600 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 17:38:45,602 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 17:38:47,548 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 17:38:47,549 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 17:38:47,568 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 17:38:47,605 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 17:38:47,607 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 17:38:47,620 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:50:20,471 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 17:50:20,472 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 17:52:36,502 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 17:52:38,166 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 17:52:38,176 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 17:52:38,183 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 17:52:45,291 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:52:45,294 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 17:52:45,885 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 17:52:45,893 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 17:52:45,895 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 17:52:47,899 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 17:52:47,901 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 17:52:47,918 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 17:52:47,955 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 17:52:47,957 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 17:52:47,969 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 17:55:57,578 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 18:07:55,155 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 18:07:55,157 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 18:14:16,437 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 18:14:20,572 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 18:14:20,581 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 18:14:20,591 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 18:14:38,719 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:14:38,725 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:14:40,531 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 18:14:40,551 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 18:14:40,554 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 18:14:43,130 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 18:14:43,132 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 18:14:43,191 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 18:14:43,242 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 18:14:43,244 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 18:14:43,263 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 18:18:38,507 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 18:18:38,509 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 18:25:27,067 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 18:25:27,070 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 18:27:59,736 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 18:28:01,364 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 18:28:01,372 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 18:28:01,378 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 18:28:08,509 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:28:08,512 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:28:09,149 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 18:28:09,159 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 18:28:09,162 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 18:28:11,297 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 18:28:11,299 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 18:28:11,321 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 18:28:11,360 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 18:28:11,362 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 18:28:11,374 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 18:30:59,670 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 18:30:59,672 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 18:33:27,799 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 18:33:29,379 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 18:33:29,385 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 18:33:29,391 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 18:33:36,532 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:33:36,535 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:33:37,104 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 18:33:37,109 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 18:33:37,112 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 18:33:39,064 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 18:33:39,067 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 18:33:39,089 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 18:33:39,129 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 18:33:39,130 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 18:33:39,142 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 18:35:29,092 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 18:35:29,094 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 18:37:59,622 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 18:38:01,211 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 18:38:01,219 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 18:38:01,226 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 18:38:08,398 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:38:08,400 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:38:08,973 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 18:38:08,980 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 18:38:08,982 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 18:38:10,951 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 18:38:10,954 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 18:38:10,972 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 18:38:11,014 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 18:38:11,015 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 18:38:11,029 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 18:41:24,740 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 18:41:24,741 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 18:43:39,112 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 18:43:40,612 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 18:43:40,621 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 18:43:40,629 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 18:43:47,180 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:43:47,184 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 18:43:47,776 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 18:43:47,784 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 18:43:47,786 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 18:43:49,760 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 18:43:49,763 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 18:43:49,782 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 18:43:49,816 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 18:43:49,818 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 18:43:49,830 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 20:12:19,170 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-08 20:12:19,172 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-08 20:15:23,305 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-08 20:15:25,095 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 619)
2024-11-08 20:15:25,103 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 619)
2024-11-08 20:15:25,113 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 542)
2024-11-08 20:15:33,696 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 20:15:33,701 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-08 20:15:34,487 - my_logger - INFO - 鏃ュ害(349) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 20:15:34,494 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>539涓<39>,鏃ュ害(349),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-08 20:15:34,497 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 20:15:36,698 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 20:15:36,701 - my_logger - INFO - 浠婂ぉ鏄<E38189>懆涓€锛屾洿鏂伴<E98F82>娴嬫ā鍨<C481>
2024-11-08 20:15:36,724 - my_logger - ERROR - 鏈€杩<E282AC>20澶╅<E6BEB6>娴嬫畫宸<E795AB>渶浣庣殑妯″瀷鍚嶇О畻澶辫触锛歛ttempt to get argmax of an empty sequence
2024-11-08 20:15:36,754 - my_logger - INFO - 寮€濮嬭<E6BFAE>缁冩ā鍨<C481>...
2024-11-08 20:15:36,755 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-08 20:15:36,767 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-08 20:16:27,245 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 20:16:27,246 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 20:19:15,036 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 20:19:16,567 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 20:19:16,574 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 20:19:16,580 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 20:19:26,241 - my_logger - INFO - Libya列数据为空
2024-11-08 20:19:26,245 - my_logger - INFO - Malaysia列数据为空
2024-11-08 20:19:27,032 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 20:19:27,049 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 20:19:27,051 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 20:19:29,663 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 20:19:29,664 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 20:19:29,693 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 20:19:29,709 - my_logger - INFO - 开始训练模型...
2024-11-08 20:19:29,710 - my_logger - INFO - 模型训练完成
2024-11-08 20:19:29,711 - my_logger - INFO - 训练数据绘图ing
2024-11-08 21:37:35,189 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 21:37:35,190 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 21:45:11,591 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 21:45:15,391 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 21:45:15,401 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 21:45:15,410 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 21:45:38,297 - my_logger - INFO - Libya列数据为空
2024-11-08 21:45:38,303 - my_logger - INFO - Malaysia列数据为空
2024-11-08 21:45:40,475 - my_logger - INFO - 日度(348) 4天(1) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EFS c1 02:30收盘价 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 3 columns]
2024-11-08 21:45:40,530 - my_logger - INFO - 特征信息总共有539个,日度(348),4天(1),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 21:45:40,533 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 21:45:43,545 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 21:45:43,548 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 21:45:43,606 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 21:45:43,626 - my_logger - INFO - 开始训练模型...
2024-11-08 21:45:43,627 - my_logger - INFO - 模型训练完成
2024-11-08 21:45:43,628 - my_logger - INFO - 训练数据绘图ing
2024-11-08 22:29:13,649 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 22:29:13,651 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 22:36:54,450 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 22:36:58,345 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 22:36:58,353 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 22:36:58,363 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 22:37:20,937 - my_logger - INFO - Libya列数据为空
2024-11-08 22:37:20,944 - my_logger - INFO - Malaysia列数据为空
2024-11-08 22:37:23,006 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 22:37:23,052 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 22:37:23,054 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 22:37:25,857 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 22:37:25,860 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 22:37:25,921 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 22:37:25,945 - my_logger - INFO - 开始训练模型...
2024-11-08 22:37:25,946 - my_logger - INFO - 模型训练完成
2024-11-08 22:37:25,947 - my_logger - INFO - 训练数据绘图ing
2024-11-08 22:54:26,342 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 22:54:26,345 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 23:02:07,624 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 23:02:11,802 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 23:02:11,815 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 23:02:11,823 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 23:02:35,001 - my_logger - INFO - Libya列数据为空
2024-11-08 23:02:35,007 - my_logger - INFO - Malaysia列数据为空
2024-11-08 23:02:37,209 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 23:02:37,251 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 23:02:37,253 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 23:02:39,977 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 23:02:39,979 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 23:02:40,028 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 23:02:40,047 - my_logger - INFO - 开始训练模型...
2024-11-08 23:02:40,048 - my_logger - INFO - 模型训练完成
2024-11-08 23:02:40,049 - my_logger - INFO - 训练数据绘图ing
2024-11-08 23:07:14,297 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 23:07:27,999 - my_logger - INFO - 训练数据绘图end
2024-11-08 23:07:28,000 - my_logger - INFO - 制作报告ing
2024-11-08 23:07:28,684 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 23:07:30,260 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-08 23:07:30,265 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 23:07:36,256 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-08 23:07:36,260 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 23:07:41,919 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-08 23:07:41,922 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 23:07:43,123 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-08 23:07:43,126 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 23:07:49,172 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-08 23:07:49,175 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 23:07:50,704 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-08 23:07:50,706 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 23:07:57,018 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-08 23:07:57,021 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 23:08:03,033 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-08 23:08:03,036 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 23:08:08,288 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-08 23:08:08,291 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 23:08:09,468 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-08 23:08:09,481 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 23:08:16,166 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-08 23:08:16,169 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 23:08:22,443 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-08 23:08:22,447 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 23:08:23,950 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 23:08:37,443 - my_logger - INFO - 制作报告end
2024-11-08 23:08:37,447 - my_logger - INFO - 模型训练完成
2024-11-08 23:08:40,673 - my_logger - INFO - 邮件发送成功!
2024-11-08 23:26:30,152 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 23:26:30,153 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 23:29:14,237 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 23:29:15,971 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 23:29:15,979 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 23:29:15,985 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 23:29:25,980 - my_logger - INFO - Libya列数据为空
2024-11-08 23:29:25,982 - my_logger - INFO - Malaysia列数据为空
2024-11-08 23:29:26,840 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 23:29:26,867 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 23:29:26,870 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 23:29:29,775 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 23:29:29,776 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 23:29:29,806 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 23:29:29,823 - my_logger - INFO - 开始训练模型...
2024-11-08 23:29:29,824 - my_logger - INFO - 模型训练完成
2024-11-08 23:29:29,825 - my_logger - INFO - 训练数据绘图ing
2024-11-08 23:29:31,624 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 23:29:34,353 - my_logger - INFO - 训练数据绘图end
2024-11-08 23:29:34,353 - my_logger - INFO - 制作报告ing
2024-11-08 23:29:34,902 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 23:29:35,712 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-08 23:29:35,714 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 23:29:39,237 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-08 23:29:39,239 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 23:29:42,165 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-08 23:29:42,167 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 23:29:42,638 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-08 23:29:42,640 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 23:29:45,336 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-08 23:29:45,338 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 23:29:46,111 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-08 23:29:46,112 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 23:29:49,649 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-08 23:29:49,650 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 23:29:52,711 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-08 23:29:52,713 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 23:29:55,290 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-08 23:29:55,291 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 23:29:55,810 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-08 23:29:55,811 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 23:29:59,467 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-08 23:29:59,469 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 23:30:02,737 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-08 23:30:02,739 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 23:30:03,450 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 23:30:10,332 - my_logger - INFO - 制作报告end
2024-11-08 23:30:10,334 - my_logger - INFO - 模型训练完成
2024-11-08 23:30:20,331 - my_logger - INFO - 邮件发送成功!
2024-11-08 23:33:08,269 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 23:33:08,270 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 23:35:53,426 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 23:35:55,205 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 23:35:55,212 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 23:35:55,219 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 23:36:05,305 - my_logger - INFO - Libya列数据为空
2024-11-08 23:36:05,309 - my_logger - INFO - Malaysia列数据为空
2024-11-08 23:36:06,104 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 23:36:06,126 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 23:36:06,129 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 23:36:08,805 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 23:36:08,811 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 23:36:08,842 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 23:36:08,885 - my_logger - INFO - 开始训练模型...
2024-11-08 23:36:08,885 - my_logger - INFO - 模型训练完成
2024-11-08 23:36:08,886 - my_logger - INFO - 训练数据绘图ing
2024-11-08 23:36:10,649 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 23:47:08,542 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-08 23:47:08,544 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-08 23:49:51,956 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-08 23:49:53,596 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 619)
2024-11-08 23:49:53,603 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 619)
2024-11-08 23:49:53,610 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 542)
2024-11-08 23:50:03,289 - my_logger - INFO - Libya列数据为空
2024-11-08 23:50:03,291 - my_logger - INFO - Malaysia列数据为空
2024-11-08 23:50:03,988 - my_logger - INFO - 日度(349) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
344 C2403150124
345 FVHCM1 INDEX
346 lmcads03 lme comdty
347 GC1 COMB Comdty
348 C2404167855
[349 rows x 2 columns]
2024-11-08 23:50:04,022 - my_logger - INFO - 特征信息总共有539个,日度(349),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-08 23:50:04,026 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-08 23:50:06,512 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-08 23:50:06,514 - my_logger - INFO - 今天是周一,更新预测模型
2024-11-08 23:50:06,544 - my_logger - ERROR - 最近20天预测残差最低的模型名称计算失败attempt to get argmax of an empty sequence
2024-11-08 23:50:06,563 - my_logger - INFO - 开始训练模型...
2024-11-08 23:50:06,564 - my_logger - INFO - 模型训练完成
2024-11-08 23:50:06,565 - my_logger - INFO - 训练数据绘图ing
2024-11-08 23:50:08,347 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-08 23:50:11,507 - my_logger - INFO - 训练数据绘图end
2024-11-08 23:50:11,509 - my_logger - INFO - 制作报告ing
2024-11-08 23:50:12,121 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-08 23:50:12,963 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-08 23:50:12,965 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-08 23:50:16,446 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-08 23:50:16,448 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-08 23:50:19,440 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-08 23:50:19,442 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-08 23:50:20,031 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-08 23:50:20,033 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-08 23:50:23,290 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-08 23:50:23,291 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-08 23:50:24,184 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-08 23:50:24,185 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-08 23:50:27,882 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-08 23:50:27,884 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-08 23:50:30,985 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-08 23:50:30,987 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-08 23:50:34,048 - my_logger - INFO - 西北欧市场类指标的相关性总和为6.183295534845926
2024-11-08 23:50:34,049 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-08 23:50:34,626 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-08 23:50:34,627 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-08 23:50:38,328 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-08 23:50:38,330 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-08 23:50:41,635 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-08 23:50:41,636 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-08 23:50:42,450 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-08 23:50:49,404 - my_logger - INFO - 制作报告end
2024-11-08 23:50:49,405 - my_logger - INFO - 模型训练完成
2024-11-08 23:50:56,533 - my_logger - INFO - 邮件发送成功!
2024-11-11 10:05:55,439 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 10:05:55,440 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 10:09:41,025 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 10:09:43,138 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 10:09:43,144 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 10:09:43,151 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 10:09:54,842 - my_logger - INFO - Libya列数据为空
2024-11-11 10:09:54,846 - my_logger - INFO - Malaysia列数据为空
2024-11-11 10:09:55,888 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 10:09:55,914 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 10:09:55,916 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 10:09:58,545 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 10:09:58,553 - my_logger - INFO - 开始训练模型...
2024-11-11 10:09:58,553 - my_logger - INFO - 模型训练完成
2024-11-11 10:09:58,554 - my_logger - INFO - 训练数据绘图ing
2024-11-11 10:10:00,837 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 10:10:04,175 - my_logger - INFO - 训练数据绘图end
2024-11-11 10:10:04,175 - my_logger - INFO - 制作报告ing
2024-11-11 10:10:04,620 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 10:10:05,569 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-11 10:10:05,571 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 10:10:08,843 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-11 10:10:08,845 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 10:10:12,323 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-11 10:10:12,324 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 10:10:12,911 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-11 10:10:12,912 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 10:10:16,089 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-11 10:10:16,091 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 10:10:16,977 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-11 10:10:16,978 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 10:10:20,559 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-11 10:10:20,561 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 10:10:23,753 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-11 10:10:23,754 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 10:10:26,310 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.97315734820405
2024-11-11 10:10:26,312 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 10:10:26,891 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-11 10:10:26,892 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 10:10:30,041 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-11 10:10:30,043 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 10:10:33,664 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-11 10:10:33,666 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 10:10:34,375 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 10:10:41,768 - my_logger - INFO - 制作报告end
2024-11-11 10:10:41,769 - my_logger - INFO - 模型训练完成
2024-11-11 10:10:44,518 - my_logger - INFO - 邮件发送成功!
2024-11-11 10:12:47,010 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-11 10:12:47,011 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-11 10:14:13,644 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-11 10:14:14,653 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 618)
2024-11-11 10:14:14,659 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 618)
2024-11-11 10:14:14,664 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 541)
2024-11-11 10:14:18,905 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-11 10:14:18,908 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-11 10:14:19,258 - my_logger - INFO - 鏃ュ害(348) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 10:14:19,263 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>538涓<38>,鏃ュ害(348),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-11 10:14:19,265 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 10:14:20,658 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 10:15:05,193 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:25:04,767 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 10:25:08,943 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘end
2024-11-11 10:25:08,944 - my_logger - INFO - 鍒朵綔鎶ュ憡ing
2024-11-11 10:25:09,397 - my_logger - INFO - 寮€濮嬬粯鍒禟pler鏁版嵁--鍘熸补鍑哄彛绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-11 10:25:10,521 - my_logger - INFO - Kpler鏁版嵁--鍘熸补鍑哄彛绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細1.217152239699212
2024-11-11 10:25:10,524 - my_logger - INFO - 寮€濮嬬粯鍒朵环鏍肩被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:14,915 - my_logger - INFO - 浠锋牸绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細97.90910818847435
2024-11-11 10:25:14,917 - my_logger - INFO - 寮€濮嬬粯鍒朵緵搴旂被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:19,038 - my_logger - INFO - 渚涘簲绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細15.531343912790739
2024-11-11 10:25:19,040 - my_logger - INFO - 寮€濮嬬粯鍒朵緵搴旂粰绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-11 10:25:19,765 - my_logger - INFO - 渚涘簲缁欑被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細1.5500443529387788
2024-11-11 10:25:19,767 - my_logger - INFO - 寮€濮嬬粯鍒跺叾浠栫被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:23,935 - my_logger - INFO - 鍏朵粬绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細6.90185005982164
2024-11-11 10:25:23,937 - my_logger - INFO - 寮€濮嬬粯鍒跺畯瑙傜被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:25,056 - my_logger - INFO - 瀹忚<E780B9>绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細2.611349956994218
2024-11-11 10:25:25,058 - my_logger - INFO - 寮€濮嬬粯鍒跺簱瀛樼被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:29,624 - my_logger - INFO - 搴撳瓨绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細39.74899466223315
2024-11-11 10:25:29,628 - my_logger - INFO - 寮€濮嬬粯鍒舵湡璐у競鍦虹被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:33,786 - my_logger - INFO - 鏈熻揣甯傚満绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細73.8202116202404
2024-11-11 10:25:33,789 - my_logger - INFO - 寮€濮嬬粯鍒惰タ鍖楁<E98D96>甯傚満绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-11 10:25:37,176 - my_logger - INFO - 瑗垮寳娆у競鍦虹被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細5.97315734820405
2024-11-11 10:25:37,178 - my_logger - INFO - 寮€濮嬬粯鍒惰繍杈撶被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:37,908 - my_logger - INFO - 杩愯緭绫绘寚鏍囩殑鐩稿叧鎬ф€诲拰涓猴細1.0276073890794504
2024-11-11 10:25:37,910 - my_logger - INFO - 寮€濮嬬粯鍒惰繘鍑哄彛绫绘寚鏍囩殑鐩稿叧鎬х洿鏂瑰浘
2024-11-11 10:25:42,126 - my_logger - INFO - 杩涘嚭鍙被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細12.34319101020204
2024-11-11 10:25:42,129 - my_logger - INFO - 寮€濮嬬粯鍒堕渶姹傜被鎸囨爣鐨勭浉鍏虫€х洿鏂瑰浘
2024-11-11 10:25:46,701 - my_logger - INFO - 闇€姹傜被鎸囨爣鐨勭浉鍏虫€ф€诲拰涓猴細15.143260984964495
2024-11-11 10:25:46,703 - my_logger - INFO - 寮€濮嬬粯鍒剁浉鍏虫€ф€诲拰鐨勬皵娉″浘
2024-11-11 10:25:47,683 - my_logger - INFO - 缁樺埗鐩稿叧鎬ф€诲拰鐨勬皵娉″浘缁撴潫
2024-11-11 10:25:55,229 - my_logger - INFO - 鍒朵綔鎶ュ憡end
2024-11-11 10:25:55,231 - my_logger - INFO - 妯″瀷璁<E780B7>粌瀹屾垚
2024-11-11 10:25:55,650 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:26:35,397 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:27:29,837 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-11 10:27:29,839 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-11 10:29:01,581 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-11 10:29:02,549 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 618)
2024-11-11 10:29:02,555 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 618)
2024-11-11 10:29:02,561 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 541)
2024-11-11 10:29:06,876 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-11 10:29:06,878 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-11 10:29:07,230 - my_logger - INFO - 鏃ュ害(348) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 10:29:07,235 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>538涓<38>,鏃ュ害(348),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-11 10:29:07,237 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 10:29:08,701 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 10:29:25,564 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:30:02,554 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:31:51,102 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:32:12,750 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:32:30,637 - my_logger - INFO - 璇诲彇鏈<E5BD87>湴鏁版嵁锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx
2024-11-11 10:32:30,638 - my_logger - INFO - getdata鎺ユ敹锛歞ataset\鍘熸补鎸囨爣鏁版嵁.xlsx date 2024-10-27
2024-11-11 10:36:29,943 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸墠鏁版嵁閲忥細(2492, 930)
2024-11-11 10:36:32,167 - my_logger - INFO - 鍒犻櫎涓ゆ湀涓嶆洿鏂扮壒寰佸悗鏁版嵁閲忥細(2492, 618)
2024-11-11 10:36:32,175 - my_logger - INFO - 鍒犻櫎棰勬祴鍒椾负绌哄€肩殑琛屽悗鏁版嵁閲忥細(1763, 618)
2024-11-11 10:36:32,181 - my_logger - INFO - 鍒犻櫎鍏ㄤ负绌哄€肩殑鍒楀悗鏁版嵁閲忥細(1763, 541)
2024-11-11 10:36:43,868 - my_logger - INFO - Libya鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-11 10:36:43,871 - my_logger - INFO - Malaysia鍒楁暟鎹<E69A9F>负绌<E8B49F>
2024-11-11 10:36:44,934 - my_logger - INFO - 鏃ュ害(348) 鍛ㄥ害(190)
0 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 EIA缇庡浗娌瑰搧闇€姹<E282AC>
1 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 涓<>浗姹芥煷娌硅〃闇€
2 鏂板姞鍧偧鍘傚姞宸<E5A79E>ubai鍘熸补CDU鍒╂鼎 DOE-缇庡浗姹芥补浜ч噺瓒呭<E79392>鑺傛€<E5829B>/3骞<33>
3 瑗垮寳娆х偧鍘傚姞宸<E5A79E>rent鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补琛ㄩ渶锛堝懆搴︼級
4 缇庡ⅷ婀剧偧鍘傚姞宸<E5A79E>TI鍘熸补CDU鍒╂鼎 M2 缇庡浗姹芥补浜ч噺锛堝懆搴︼級
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 10:36:44,946 - my_logger - INFO - 鐗瑰緛淇℃伅锛氭€诲叡鏈<E58FA1>538涓<38>,鏃ュ害(348),鍛ㄥ害(190), 璇︾湅 闄<>1銆佺壒寰佸垪琛<E59EAA>
鏁版嵁鐗瑰緛宸ョ▼锛<E296BC>
1. 鏁版嵁鏃ユ湡鎺掑簭锛屾柊鏃ユ湡鍦ㄦ渶鍚<E6B8B6>
2. 鍒犻櫎绌哄垪锛岀壒寰佹暟鎹<E69A9F>垪娌℃湁鍊硷紝灏卞垹闄<E59EB9>
3. 鍒犻櫎杩戜袱鏈堜笉鍐嶆洿鏂板€肩殑鎸囨爣
4. 闈炴棩搴︽暟鎹<E69A9F>鍏呬负鏃ュ害鏁版嵁锛屽鍏呰<E98D8F>鍒欙細
-- 鍚戝悗濉<E68297>厖锛屼妇渚嬶細鍋囪<E98D8B>鍛ㄤ簲鍑虹幇涓€涓<E282AC>懆搴︽寚鏍囨暟鎹<E69A9F>紝閭箞鍦ㄨ繖涔嬪墠鐨勬暟鎹<E69A9F>敤涓婂懆浜旂殑鏁版嵁
-- 鍚戝墠濉<E5A2A0>厖锛屼妇渚嬶細閲囬泦鏁版嵁寮€濮嬫棩鏈熶负2018骞<38>1鏈<31>1鏃ワ紝閭箞鍛ㄥ害鏁版嵁鍙<E5B581>兘鏄<E58598>2018骞<38>1鏈<31>3鏃ワ紝閭箞3鏃ョ殑鏁版嵁鍚戝墠濉<E5A2A0>厖锛屼娇1鏃<31>2鏃ラ兘鏈夋暟鍊<E69A9F>
鏁版嵁鐗瑰緛鐩稿叧鎬у垎鏋愶細
2024-11-11 10:36:44,948 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 10:36:46,544 - my_logger - INFO - 鏇存柊鏁版嵁sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 10:37:44,151 - my_logger - INFO - 璁<>粌鏁版嵁缁樺浘ing
2024-11-11 10:39:14,734 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 10:39:14,735 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 10:43:01,484 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 10:43:03,614 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 10:43:03,620 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 10:43:03,625 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 10:43:15,162 - my_logger - INFO - Libya列数据为空
2024-11-11 10:43:15,165 - my_logger - INFO - Malaysia列数据为空
2024-11-11 10:43:16,189 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 10:43:16,216 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 10:43:16,218 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 10:43:17,910 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 10:43:17,918 - my_logger - INFO - 开始训练模型...
2024-11-11 10:43:17,919 - my_logger - INFO - 模型训练完成
2024-11-11 10:43:17,920 - my_logger - INFO - 训练数据绘图ing
2024-11-11 10:48:24,267 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 10:48:24,268 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 10:52:12,744 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 10:52:14,907 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 10:52:14,913 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 10:52:14,920 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 10:52:26,516 - my_logger - INFO - Libya列数据为空
2024-11-11 10:52:26,520 - my_logger - INFO - Malaysia列数据为空
2024-11-11 10:52:27,542 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 10:52:27,568 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 10:52:27,570 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 10:52:29,195 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 10:52:29,203 - my_logger - INFO - 开始训练模型...
2024-11-11 10:52:29,203 - my_logger - INFO - 模型训练完成
2024-11-11 10:52:29,204 - my_logger - INFO - 训练数据绘图ing
2024-11-11 10:56:00,479 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 10:56:00,480 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 11:00:06,970 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 11:00:09,252 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 11:00:09,258 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 11:00:09,264 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 11:00:21,508 - my_logger - INFO - Libya列数据为空
2024-11-11 11:00:21,511 - my_logger - INFO - Malaysia列数据为空
2024-11-11 11:00:22,582 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 11:00:22,612 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 11:00:22,614 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 11:00:24,304 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 11:00:24,312 - my_logger - INFO - 开始训练模型...
2024-11-11 11:00:24,312 - my_logger - INFO - 模型训练完成
2024-11-11 11:00:24,313 - my_logger - INFO - 训练数据绘图ing
2024-11-11 11:02:36,739 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 11:02:36,740 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 11:06:27,202 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 11:06:29,648 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 11:06:29,655 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 11:06:29,660 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 11:06:41,430 - my_logger - INFO - Libya列数据为空
2024-11-11 11:06:41,434 - my_logger - INFO - Malaysia列数据为空
2024-11-11 11:06:42,639 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 11:06:42,672 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 11:06:42,675 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 11:06:44,460 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 11:06:44,468 - my_logger - INFO - 开始训练模型...
2024-11-11 11:06:44,469 - my_logger - INFO - 模型训练完成
2024-11-11 11:06:44,469 - my_logger - INFO - 训练数据绘图ing
2024-11-11 11:12:31,972 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 11:12:31,973 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 11:17:04,682 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 11:17:04,684 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 11:20:53,709 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 11:20:55,840 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 11:20:55,846 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 11:20:55,852 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 11:21:07,460 - my_logger - INFO - Libya列数据为空
2024-11-11 11:21:07,463 - my_logger - INFO - Malaysia列数据为空
2024-11-11 11:21:08,490 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 11:21:08,517 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 11:21:08,518 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 11:21:10,198 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 11:21:10,207 - my_logger - INFO - 开始训练模型...
2024-11-11 11:21:10,207 - my_logger - INFO - 模型训练完成
2024-11-11 11:21:10,208 - my_logger - INFO - 训练数据绘图ing
2024-11-11 11:26:56,511 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 11:26:56,512 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 11:30:44,213 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 11:30:46,399 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 11:30:46,406 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 11:30:46,412 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 11:30:57,962 - my_logger - INFO - Libya列数据为空
2024-11-11 11:30:57,966 - my_logger - INFO - Malaysia列数据为空
2024-11-11 11:30:58,970 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 11:30:58,997 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 11:30:58,999 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 11:31:00,692 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 11:31:00,699 - my_logger - INFO - 开始训练模型...
2024-11-11 11:31:00,700 - my_logger - INFO - 模型训练完成
2024-11-11 11:31:00,701 - my_logger - INFO - 训练数据绘图ing
2024-11-11 11:34:47,334 - my_logger - INFO - 从eta获取数据...
2024-11-11 11:36:56,394 - my_logger - INFO - 跳过指标 SC c1-c2
2024-11-11 11:36:56,395 - my_logger - INFO - 跳过指标 Brent-TI
2024-11-11 11:36:56,396 - my_logger - INFO - 跳过指标 Dubai swap c1-c2
2024-11-11 11:36:56,396 - my_logger - INFO - 跳过指标 Dubai swap c1-c3
2024-11-11 11:36:56,397 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/5DMA5日环差/65DMA
2024-11-11 11:36:56,398 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/5DMA5日环差/65DMA
2024-11-11 11:36:56,398 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/65DMA
2024-11-11 11:36:56,399 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/65DMA
2024-11-11 11:36:56,399 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/5DMA5日环差
2024-11-11 11:36:56,400 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/5DMA5日环差
2024-11-11 11:36:56,400 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/5DMA
2024-11-11 11:36:56,401 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/5DMA
2024-11-11 11:36:56,401 - my_logger - INFO - 跳过指标 RBOB&HO近12月合约均价532裂解
2024-11-11 11:36:56,402 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解
2024-11-11 11:36:56,402 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解
2024-11-11 11:36:56,402 - my_logger - INFO - 跳过指标 HO近12月合约均价
2024-11-11 11:36:56,403 - my_logger - INFO - 跳过指标 RBOB近12月合约均价
2024-11-11 11:36:56,403 - my_logger - INFO - 跳过指标 布油近12月合约均价
2024-11-11 11:36:56,404 - my_logger - INFO - 跳过指标 Brent连1合约价格/2DMA
2024-11-11 11:36:56,404 - my_logger - INFO - 跳过指标 Brent连1合约价格/7DMA
2024-11-11 11:36:56,405 - my_logger - INFO - 跳过指标 Brent连1合约价格/23DMA
2024-11-11 11:36:56,406 - my_logger - INFO - 跳过指标 库欣原油库存超季节性/5年拟合残差/WTI c1-c6
2024-11-11 11:36:56,406 - my_logger - INFO - 跳过指标 Brent连1合约价格/5DMA
2024-11-11 11:36:56,407 - my_logger - INFO - 跳过指标 Brent c1-c2超季节性/3年
2024-11-11 11:36:56,407 - my_logger - INFO - 跳过指标 PP主力收盘价拟合残差/期货收盘价(活跃):布伦特原油
2024-11-11 11:36:56,408 - my_logger - INFO - 跳过指标 Brent连1合约价格/11DMA
2024-11-11 11:36:56,408 - my_logger - INFO - 跳过指标 山东地炼柴油裂解价差拟合残差/期货结算价(活跃):布伦特原油
2024-11-11 11:36:56,409 - my_logger - INFO - 跳过指标 山东地炼汽油裂解价差拟合残差/
2024-11-11 11:36:56,409 - my_logger - INFO - 跳过指标 原油(中国胜利)拟合残差/布伦特原油
2024-11-11 11:36:56,410 - my_logger - INFO - 跳过指标 Brent连1合约价格/21DMA
2024-11-11 11:36:56,410 - my_logger - INFO - 跳过指标 Brent连1合约价格/14DMA
2024-11-11 11:36:56,411 - my_logger - INFO - 跳过指标 Brent连1合约价格/15DMA
2024-11-11 11:36:56,411 - my_logger - INFO - 跳过指标 Brent连1-连12
2024-11-11 11:36:56,412 - my_logger - INFO - 跳过指标 Brent-SC价差
2024-11-11 11:36:56,413 - my_logger - INFO - 跳过指标 SC连2-连3月差
2024-11-11 11:36:56,413 - my_logger - INFO - 跳过指标 SC连1-连6
2024-11-11 11:36:56,414 - my_logger - INFO - 跳过指标 SC连1-连2
2024-11-11 11:36:56,414 - my_logger - INFO - 跳过指标 SC连1-连3月差
2024-11-11 11:36:56,415 - my_logger - INFO - 跳过指标 HO连1-连6
2024-11-11 11:36:56,415 - my_logger - INFO - 跳过指标 HO连1-连3
2024-11-11 11:36:56,416 - my_logger - INFO - 跳过指标 HO连1-连2合约
2024-11-11 11:36:56,416 - my_logger - INFO - 跳过指标 RBOB连1-连2
2024-11-11 11:36:56,417 - my_logger - INFO - 跳过指标 RBOB连1-连3
2024-11-11 11:36:56,417 - my_logger - INFO - 跳过指标 RBOB连1-连6
2024-11-11 11:36:56,419 - my_logger - INFO - 跳过指标 RBOB连2-连3月差
2024-11-11 11:36:56,419 - my_logger - INFO - 跳过指标 Oman连2-连3月差
2024-11-11 11:36:56,419 - my_logger - INFO - 跳过指标 Brent-Oman价差
2024-11-11 11:36:56,420 - my_logger - INFO - 跳过指标 DUBAI原油贴水
2024-11-11 11:36:56,420 - my_logger - INFO - 跳过指标 阿曼原油贴水
2024-11-11 11:36:56,421 - my_logger - INFO - 跳过指标 SC内外价差
2024-11-11 11:36:56,421 - my_logger - INFO - 跳过指标 WTI c1-c36
2024-11-11 11:36:56,422 - my_logger - INFO - 跳过指标 WTI c1-c24
2024-11-11 11:36:56,422 - my_logger - INFO - 跳过指标 WTI c1-c12
2024-11-11 11:36:56,423 - my_logger - INFO - 跳过指标 WTI c1-c6
2024-11-11 11:36:56,423 - my_logger - INFO - 跳过指标 WTI c1-c3
2024-11-11 11:36:56,424 - my_logger - INFO - 跳过指标 WTI c1-c2
2024-11-11 11:36:56,424 - my_logger - INFO - 跳过指标 Brent c1-c36
2024-11-11 11:36:56,425 - my_logger - INFO - 跳过指标 Brent c1-c24
2024-11-11 11:36:56,425 - my_logger - INFO - 跳过指标 Brent c1-c12
2024-11-11 11:36:56,426 - my_logger - INFO - 跳过指标 Brent c1-c9
2024-11-11 11:36:56,426 - my_logger - INFO - 跳过指标 Brent c1-c6
2024-11-11 11:36:56,427 - my_logger - INFO - 跳过指标 Brent c1-c3
2024-11-11 11:36:56,427 - my_logger - INFO - 跳过指标 Brent c1-c2
2024-11-11 11:36:56,428 - my_logger - INFO - 跳过指标 Brent-WTI
2024-11-11 11:36:56,429 - my_logger - INFO - 跳过指标 Brent连1合约价格1日环差
2024-11-11 11:36:56,429 - my_logger - INFO - 跳过指标 Brent连1合约价格1日环比
2024-11-11 11:36:56,430 - my_logger - INFO - 跳过指标 WTI连1合约价格拟合残差/美国标普500指数
2024-11-11 11:36:56,430 - my_logger - INFO - 跳过指标 期货成交量:INE原油
2024-11-11 11:36:56,431 - my_logger - INFO - 跳过指标 期货持仓量:INE原油
2024-11-11 11:36:56,431 - my_logger - INFO - 跳过指标 期货持仓量(活跃合约):INE原油
2024-11-11 11:36:56,432 - my_logger - INFO - 跳过指标 期货持仓量(连续):INE原油
2024-11-11 11:36:56,432 - my_logger - INFO - 跳过指标 Dubai连1合约价格
2024-11-11 11:36:56,433 - my_logger - INFO - 跳过指标 Dubai连2合约价格
2024-11-11 11:36:56,433 - my_logger - INFO - 跳过指标 Dubai连4合约价格
2024-11-11 11:36:56,434 - my_logger - INFO - 跳过指标 Dubai连1-连4月差
2024-11-11 11:36:56,434 - my_logger - INFO - 跳过指标 美国RBOB期货2212月份合约价格
2024-11-11 11:36:56,435 - my_logger - INFO - 跳过指标 美国RBOB期货2301月份合约价格
2024-11-11 11:36:56,435 - my_logger - INFO - 跳过指标 美国RBOB期货2306月份合约价格
2024-11-11 11:36:56,436 - my_logger - INFO - 跳过指标 美国RBOB期货2309月份合约价格
2024-11-11 11:36:56,436 - my_logger - INFO - 跳过指标 OMAN原油中质远期现货DES价山东
2024-11-11 11:36:56,437 - my_logger - INFO - 跳过指标 PVM Dubai EFS/Swap vs ICE First Month Brent
2024-11-11 11:36:56,437 - my_logger - INFO - 跳过指标 Ebob连1合约
2024-11-11 11:36:56,437 - my_logger - INFO - 跳过指标 印度原油连1合约价格
2024-11-11 11:36:56,438 - my_logger - INFO - 跳过指标 Dubai连7合约价格
2024-11-11 11:36:56,438 - my_logger - INFO - 跳过指标 Dubai连9合约价格
2024-11-11 11:36:56,439 - my_logger - INFO - 跳过指标 迪拜连7-连9月差
2024-11-11 11:36:56,439 - my_logger - INFO - 跳过指标 ICE轻柴油连4合约价格
2024-11-11 11:36:56,440 - my_logger - INFO - 跳过指标 期货结算价(活跃):布伦特原油
2024-11-11 11:36:56,440 - my_logger - INFO - 跳过指标 布伦特迪拜掉期 EFS
2024-11-11 11:36:56,441 - my_logger - INFO - 跳过指标 Brent连2
2024-11-11 11:36:56,441 - my_logger - INFO - 跳过指标 期货结算价(连续):INE原油
2024-11-11 11:36:56,442 - my_logger - INFO - 跳过指标 WTI连2合约价格
2024-11-11 11:36:56,442 - my_logger - INFO - 跳过指标 期货收盘价WTI原油
2024-11-11 11:36:56,443 - my_logger - INFO - 跳过指标 期货收盘价(活跃):布伦特原油
2024-11-11 11:36:56,443 - my_logger - INFO - 跳过指标 SC原油期货价格
2024-11-11 11:36:56,444 - my_logger - INFO - 跳过指标 WTI连1合约价格
2024-11-11 11:36:56,445 - my_logger - INFO - 跳过指标 WTI连4合约价格
2024-11-11 11:36:56,445 - my_logger - INFO - 跳过指标 Brent连1合约价格
2024-11-11 11:36:56,446 - my_logger - INFO - 跳过指标 Brent连4合约价格
2024-11-11 11:36:56,447 - my_logger - INFO - 跳过指标 SC/ZC活跃合约
2024-11-11 11:36:56,447 - my_logger - INFO - 跳过指标 Brent/迪拜原油升贴水
2024-11-11 11:36:56,447 - my_logger - INFO - 跳过指标 SC期货库存
2024-11-11 11:36:56,449 - my_logger - INFO - 跳过指标 WTI连24合约
2024-11-11 11:36:56,449 - my_logger - INFO - 跳过指标 WTI连7合约价格
2024-11-11 11:36:56,450 - my_logger - INFO - 跳过指标 期货结算价(活跃合约):INE原油
2024-11-11 11:36:56,450 - my_logger - INFO - 跳过指标 BU-SC活跃合约
2024-11-11 11:36:56,451 - my_logger - INFO - 跳过指标 IPE布油期货结算价
2024-11-11 11:36:56,451 - my_logger - INFO - 跳过指标 WTI连12合约价格
2024-11-11 11:36:56,452 - my_logger - INFO - 跳过指标 W-B活跃合约价差
2024-11-11 11:36:56,452 - my_logger - INFO - 跳过指标 B-W活跃合约价差
2024-11-11 11:36:56,453 - my_logger - INFO - 跳过指标 布伦特连24合约价格
2024-11-11 11:36:56,453 - my_logger - INFO - 跳过指标 WTI活跃合约
2024-11-11 11:36:56,454 - my_logger - INFO - 跳过指标 Brent活跃合约
2024-11-11 11:36:56,454 - my_logger - INFO - 跳过指标 期货收盘价连续INE原油
2024-11-11 11:36:56,455 - my_logger - INFO - 跳过指标 Brent连6合约价格
2024-11-11 11:36:56,455 - my_logger - INFO - 跳过指标 Brent连12合约价格
2024-11-11 11:36:56,456 - my_logger - INFO - 跳过指标 Brent连9合约
2024-11-11 11:36:56,456 - my_logger - INFO - 跳过指标 brent连3合约
2024-11-11 11:36:56,457 - my_logger - INFO - 跳过指标 Brent连5
2024-11-11 11:36:56,457 - my_logger - INFO - 跳过指标 Brent连10合约
2024-11-11 11:36:56,458 - my_logger - INFO - 跳过指标 Brent连11合约
2024-11-11 11:36:56,458 - my_logger - INFO - 跳过指标 WTI连3合约价格
2024-11-11 11:36:56,459 - my_logger - INFO - 跳过指标 Brent 连7合约价格
2024-11-11 11:36:56,459 - my_logger - INFO - 跳过指标 Brent连8合约价格
2024-11-11 11:36:56,460 - my_logger - INFO - 跳过指标 Brent连13
2024-11-11 11:36:56,460 - my_logger - INFO - 跳过指标 ICE Brent c14
2024-11-11 11:36:56,461 - my_logger - INFO - 跳过指标 ICE Brent c15
2024-11-11 11:36:56,462 - my_logger - INFO - 跳过指标 ICE Brent c16
2024-11-11 11:36:56,462 - my_logger - INFO - 跳过指标 ICE Brent c17
2024-11-11 11:36:56,463 - my_logger - INFO - 跳过指标 ICE Brent c18
2024-11-11 11:36:56,463 - my_logger - INFO - 跳过指标 ICE Brent c19
2024-11-11 11:36:56,464 - my_logger - INFO - 跳过指标 ICE Brent c20
2024-11-11 11:36:56,464 - my_logger - INFO - 跳过指标 Dubai Swap c1
2024-11-11 11:36:56,465 - my_logger - INFO - 跳过指标 ICE Brent c21
2024-11-11 11:36:56,465 - my_logger - INFO - 跳过指标 ICE Brent c22
2024-11-11 11:36:56,466 - my_logger - INFO - 跳过指标 ICE Brent c23
2024-11-11 11:36:56,466 - my_logger - INFO - 跳过指标 ICE Brent c25
2024-11-11 11:36:56,467 - my_logger - INFO - 跳过指标 ICE Brent c26
2024-11-11 11:36:56,467 - my_logger - INFO - 跳过指标 ICE Brent c27
2024-11-11 11:36:56,468 - my_logger - INFO - 跳过指标 ICE Brent c28
2024-11-11 11:36:56,468 - my_logger - INFO - 跳过指标 ICE Brent c29
2024-11-11 11:36:56,468 - my_logger - INFO - 跳过指标 ICE Brent c30
2024-11-11 11:36:56,469 - my_logger - INFO - 跳过指标 ICE Brent c31
2024-11-11 11:36:56,469 - my_logger - INFO - 跳过指标 ICE Brent c32
2024-11-11 11:36:56,470 - my_logger - INFO - 跳过指标 ICE Brent c33
2024-11-11 11:36:56,470 - my_logger - INFO - 跳过指标 ICE Brent c34
2024-11-11 11:36:56,471 - my_logger - INFO - 跳过指标 ICE Brent c35
2024-11-11 11:36:56,471 - my_logger - INFO - 跳过指标 ICE Brent c36
2024-11-11 11:36:56,472 - my_logger - INFO - 跳过指标 NYMWX WTI c5
2024-11-11 11:36:56,472 - my_logger - INFO - 跳过指标 NYMWX WTI c6
2024-11-11 11:36:56,473 - my_logger - INFO - 跳过指标 NYMWX WTI c8
2024-11-11 11:36:56,473 - my_logger - INFO - 跳过指标 NYMWX WTI c9
2024-11-11 11:36:56,474 - my_logger - INFO - 跳过指标 NYMWX WTI c10
2024-11-11 11:36:56,474 - my_logger - INFO - 跳过指标 NYMWX WTI c11
2024-11-11 11:36:56,475 - my_logger - INFO - 跳过指标 NYMWX WTI c13
2024-11-11 11:36:56,475 - my_logger - INFO - 跳过指标 NYMWX WTI c14
2024-11-11 11:36:56,476 - my_logger - INFO - 跳过指标 NYMWX WTI c15
2024-11-11 11:36:56,476 - my_logger - INFO - 跳过指标 NYMWX WTI c16
2024-11-11 11:36:56,477 - my_logger - INFO - 跳过指标 NYMWX WTI c17
2024-11-11 11:36:56,477 - my_logger - INFO - 跳过指标 NYMWX WTI c18
2024-11-11 11:36:56,478 - my_logger - INFO - 跳过指标 NYMWX WTI c19
2024-11-11 11:36:56,478 - my_logger - INFO - 跳过指标 NYMWX WTI c20
2024-11-11 11:36:56,480 - my_logger - INFO - 跳过指标 NYMWX WTI c21
2024-11-11 11:36:56,480 - my_logger - INFO - 跳过指标 NYMWX WTI c22
2024-11-11 11:36:56,481 - my_logger - INFO - 跳过指标 NYMWX WTI c23
2024-11-11 11:36:56,481 - my_logger - INFO - 跳过指标 NYMWX WTI c25
2024-11-11 11:36:56,482 - my_logger - INFO - 跳过指标 NYMWX WTI c26
2024-11-11 11:36:56,482 - my_logger - INFO - 跳过指标 NYMWX WTI c27
2024-11-11 11:36:56,483 - my_logger - INFO - 跳过指标 NYMWX WTI c28
2024-11-11 11:36:56,483 - my_logger - INFO - 跳过指标 NYMWX WTI c29
2024-11-11 11:36:56,484 - my_logger - INFO - 跳过指标 NYMWX WTI c30
2024-11-11 11:36:56,484 - my_logger - INFO - 跳过指标 NYMWX WTI c31
2024-11-11 11:36:56,485 - my_logger - INFO - 跳过指标 NYMWX WTI c32
2024-11-11 11:36:56,485 - my_logger - INFO - 跳过指标 NYMWX WTI c33
2024-11-11 11:36:56,486 - my_logger - INFO - 跳过指标 NYMWX WTI c34
2024-11-11 11:36:56,486 - my_logger - INFO - 跳过指标 NYMWX WTI c35
2024-11-11 11:36:56,487 - my_logger - INFO - 跳过指标 NYMWX WTI c36
2024-11-11 11:36:56,487 - my_logger - INFO - 跳过指标 INE SC c1
2024-11-11 11:36:56,487 - my_logger - INFO - 跳过指标 INE SC c2
2024-11-11 11:36:56,488 - my_logger - INFO - 跳过指标 INE SC c3
2024-11-11 11:36:56,488 - my_logger - INFO - 跳过指标 INE SC c4
2024-11-11 11:36:56,489 - my_logger - INFO - 跳过指标 INE SC c5
2024-11-11 11:36:56,489 - my_logger - INFO - 跳过指标 INE SC c6
2024-11-11 11:36:56,489 - my_logger - INFO - 跳过指标 INE SC c7
2024-11-11 11:36:56,491 - my_logger - INFO - 跳过指标 INE SC c8
2024-11-11 11:36:56,492 - my_logger - INFO - 跳过指标 INE SC c9
2024-11-11 11:36:56,492 - my_logger - INFO - 跳过指标 INE SC c10
2024-11-11 11:36:56,493 - my_logger - INFO - 跳过指标 INE SC c11
2024-11-11 11:36:56,493 - my_logger - INFO - 跳过指标 INE SC c12
2024-11-11 11:36:56,493 - my_logger - INFO - 跳过指标 INE SC c13
2024-11-11 11:36:56,493 - my_logger - INFO - 跳过指标 INE SC c14
2024-11-11 11:36:56,495 - my_logger - INFO - 跳过指标 INE SC c15
2024-11-11 11:36:56,496 - my_logger - INFO - 跳过指标 INE SC c16
2024-11-11 11:36:56,496 - my_logger - INFO - 跳过指标 INE SC c17
2024-11-11 11:36:56,497 - my_logger - INFO - 跳过指标 INE SC c18
2024-11-11 11:36:56,497 - my_logger - INFO - 跳过指标 INE SC c19
2024-11-11 11:36:56,497 - my_logger - INFO - 跳过指标 INE SC c20
2024-11-11 11:36:56,497 - my_logger - INFO - 跳过指标 EFS c1
2024-11-11 11:36:56,498 - my_logger - INFO - 跳过指标 EFS c2
2024-11-11 11:36:56,498 - my_logger - INFO - 跳过指标 EFS c3
2024-11-11 11:36:56,499 - my_logger - INFO - 跳过指标 EFS c4
2024-11-11 11:36:56,499 - my_logger - INFO - 跳过指标 EFS c5
2024-11-11 11:36:56,499 - my_logger - INFO - 跳过指标 EFS c6
2024-11-11 11:36:56,501 - my_logger - INFO - 跳过指标 Dubai Swap c15
2024-11-11 11:36:56,501 - my_logger - INFO - 跳过指标 Dubai Swap c16
2024-11-11 11:36:56,502 - my_logger - INFO - 跳过指标 Dubai Swap c17
2024-11-11 11:36:56,502 - my_logger - INFO - 跳过指标 Dubai Swap c18
2024-11-11 11:36:56,502 - my_logger - INFO - 跳过指标 Dubai Swap c19
2024-11-11 11:36:56,504 - my_logger - INFO - 跳过指标 Dubai Swap c20
2024-11-11 11:36:56,504 - my_logger - INFO - 跳过指标 Dubai Swap c21
2024-11-11 11:36:56,505 - my_logger - INFO - 跳过指标 Dubai Swap c22
2024-11-11 11:36:56,505 - my_logger - INFO - 跳过指标 Oman Swap c1
2024-11-11 11:36:56,506 - my_logger - INFO - 跳过指标 Oman Swap c2
2024-11-11 11:36:56,506 - my_logger - INFO - 跳过指标 Oman Swap c3
2024-11-11 11:36:56,507 - my_logger - INFO - 跳过指标 Oman Swap c4
2024-11-11 11:36:56,507 - my_logger - INFO - 跳过指标 Oman Swap c5
2024-11-11 11:36:56,508 - my_logger - INFO - 跳过指标 Oman Swap c6
2024-11-11 11:36:56,508 - my_logger - INFO - 跳过指标 Oman Swap c7
2024-11-11 11:36:56,509 - my_logger - INFO - 跳过指标 Oman Swap c8
2024-11-11 11:36:56,509 - my_logger - INFO - 跳过指标 Oman Swap c9
2024-11-11 11:36:56,510 - my_logger - INFO - 跳过指标 Oman Swap c10
2024-11-11 11:36:56,510 - my_logger - INFO - 跳过指标 Oman Swap c11
2024-11-11 11:36:56,511 - my_logger - INFO - 跳过指标 Oman Swap c12
2024-11-11 11:36:56,511 - my_logger - INFO - 跳过指标 Oman Swap c13
2024-11-11 11:36:56,512 - my_logger - INFO - 跳过指标 Oman Swap c14
2024-11-11 11:36:56,512 - my_logger - INFO - 跳过指标 Oman Swap c15
2024-11-11 11:36:56,513 - my_logger - INFO - 跳过指标 Oman Swap c16
2024-11-11 11:36:56,514 - my_logger - INFO - 跳过指标 Oman Swap c17
2024-11-11 11:36:56,514 - my_logger - INFO - 跳过指标 Oman Swap c18
2024-11-11 11:36:56,515 - my_logger - INFO - 跳过指标 Oman Swap c19
2024-11-11 11:36:56,515 - my_logger - INFO - 跳过指标 Oman Swap c20
2024-11-11 11:36:56,516 - my_logger - INFO - 跳过指标 Oman Swap c21
2024-11-11 11:36:56,516 - my_logger - INFO - 跳过指标 Oman Swap c22
2024-11-11 11:36:56,517 - my_logger - INFO - 跳过指标 Oman Swap c23
2024-11-11 11:36:56,517 - my_logger - INFO - 跳过指标 Oman Swap c24
2024-11-11 11:36:56,518 - my_logger - INFO - 跳过指标 Oman Swap c25
2024-11-11 11:36:56,518 - my_logger - INFO - 跳过指标 Oman Swap c26
2024-11-11 11:36:56,519 - my_logger - INFO - 跳过指标 Oman Swap c27
2024-11-11 11:36:56,519 - my_logger - INFO - 跳过指标 Oman Swap c28
2024-11-11 11:36:56,520 - my_logger - INFO - 跳过指标 Oman Swap c29
2024-11-11 11:36:56,520 - my_logger - INFO - 跳过指标 Oman Swap c30
2024-11-11 11:36:56,521 - my_logger - INFO - 跳过指标 Oman Swap c31
2024-11-11 11:36:56,521 - my_logger - INFO - 跳过指标 Oman Swap c32
2024-11-11 11:36:56,521 - my_logger - INFO - 跳过指标 Oman Swap c33
2024-11-11 11:36:56,522 - my_logger - INFO - 跳过指标 Oman Swap c34
2024-11-11 11:36:56,522 - my_logger - INFO - 跳过指标 Oman Swap c35
2024-11-11 11:36:56,523 - my_logger - INFO - 跳过指标 Oman Swap c36
2024-11-11 11:36:56,523 - my_logger - INFO - 跳过指标 Oman Swap c37
2024-11-11 11:36:56,523 - my_logger - INFO - 跳过指标 Oman Swap c38
2024-11-11 11:36:56,524 - my_logger - INFO - 跳过指标 DME Oman c1
2024-11-11 11:36:56,524 - my_logger - INFO - 跳过指标 DME Oman c2
2024-11-11 11:36:56,525 - my_logger - INFO - 跳过指标 DME Oman c3
2024-11-11 11:36:56,525 - my_logger - INFO - 跳过指标 DME Oman c4
2024-11-11 11:36:56,526 - my_logger - INFO - 跳过指标 DME Oman c5
2024-11-11 11:36:56,526 - my_logger - INFO - 跳过指标 DME Oman c6
2024-11-11 11:36:56,527 - my_logger - INFO - 跳过指标 Murban Futures c1
2024-11-11 11:36:56,527 - my_logger - INFO - 跳过指标 Murban Futures c2
2024-11-11 11:36:56,528 - my_logger - INFO - 跳过指标 Murban Futures c3
2024-11-11 11:36:56,529 - my_logger - INFO - 跳过指标 Murban Futures c4
2024-11-11 11:36:56,529 - my_logger - INFO - 跳过指标 Murban Futures c5
2024-11-11 11:36:56,530 - my_logger - INFO - 跳过指标 Murban Futures c6
2024-11-11 11:36:56,530 - my_logger - INFO - 跳过指标 HO连6合约
2024-11-11 11:36:56,531 - my_logger - INFO - 跳过指标 HO连5合约
2024-11-11 11:36:56,531 - my_logger - INFO - 跳过指标 ho连7合约
2024-11-11 11:36:56,532 - my_logger - INFO - 跳过指标 HO连8合约
2024-11-11 11:36:56,532 - my_logger - INFO - 跳过指标 HO连9合约
2024-11-11 11:36:56,533 - my_logger - INFO - 跳过指标 HO连10合约
2024-11-11 11:36:56,533 - my_logger - INFO - 跳过指标 HO连11合约
2024-11-11 11:36:56,534 - my_logger - INFO - 跳过指标 HO连12合约
2024-11-11 11:36:56,534 - my_logger - INFO - 跳过指标 CFD W1
2024-11-11 11:36:56,535 - my_logger - INFO - 跳过指标 CFD W6
2024-11-11 11:36:56,535 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):INE原油
2024-11-11 11:36:56,536 - my_logger - INFO - 跳过指标 期货成交额:INE原油
2024-11-11 11:36:56,536 - my_logger - INFO - 跳过指标 可用库容量:INE原油
2024-11-11 11:36:56,537 - my_logger - INFO - 跳过指标 库存期货:INE原油:总计-巴士拉轻油
2024-11-11 11:36:56,537 - my_logger - INFO - 跳过指标 库存期货:INE原油:总计-巴士拉轻油(I 级)
2024-11-11 11:36:56,538 - my_logger - INFO - 跳过指标 库存期货:INE原油:总计-上扎库姆原油
2024-11-11 11:36:56,538 - my_logger - INFO - 跳过指标 库存期货:INE原油:总计-阿曼原油
2024-11-11 11:36:56,539 - my_logger - INFO - 跳过指标 库存期货:INE原油:总计-卡塔尔海洋油
2024-11-11 11:36:56,539 - my_logger - INFO - 跳过指标 库存期货:INE原油:总计-迪拜原油
2024-11-11 11:36:56,540 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连保税-穆尔班原油
2024-11-11 11:36:56,540 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:合计
2024-11-11 11:36:56,541 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中化兴中
2024-11-11 11:36:56,541 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中油大榭
2024-11-11 11:36:56,542 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:大鼎石油
2024-11-11 11:36:56,542 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中国石化册子岛
2024-11-11 11:36:56,543 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:合计
2024-11-11 11:36:56,543 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:青岛港实华
2024-11-11 11:36:56,544 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中化弘润潍坊
2024-11-11 11:36:56,544 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:青岛港摩科瑞
2024-11-11 11:36:56,545 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中国石化日照
2024-11-11 11:36:56,545 - my_logger - INFO - 跳过指标 库存期货:INE原油:上海:合计
2024-11-11 11:36:56,547 - my_logger - INFO - 跳过指标 库存期货:INE原油:上海:洋山石油
2024-11-11 11:36:56,547 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:合计
2024-11-11 11:36:56,548 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中油湛江
2024-11-11 11:36:56,548 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中国石化湛江
2024-11-11 11:36:56,549 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:合计
2024-11-11 11:36:56,549 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:北方油品
2024-11-11 11:36:56,550 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连保税
2024-11-11 11:36:56,550 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连国际
2024-11-11 11:36:56,551 - my_logger - INFO - 跳过指标 库存期货:INE原油:海南:合计
2024-11-11 11:36:56,551 - my_logger - INFO - 跳过指标 库存期货:INE原油:海南:中国石化海南
2024-11-11 11:36:56,552 - my_logger - INFO - 跳过指标 库存期货:INE原油:河北:中国石化曹妃甸
2024-11-11 11:36:56,552 - my_logger - INFO - 跳过指标 可用库容量:INE原油:辽宁:合计
2024-11-11 11:36:56,553 - my_logger - INFO - 跳过指标 可用库容量:INE原油:浙江:合计
2024-11-11 11:36:56,553 - my_logger - INFO - 跳过指标 可用库容量:INE原油:广东:合计
2024-11-11 11:36:56,554 - my_logger - INFO - 跳过指标 可用库容量:INE原油:广西:合计
2024-11-11 11:36:56,554 - my_logger - INFO - 跳过指标 可用库容量:INE原油:河北:合计
2024-11-11 11:36:56,555 - my_logger - INFO - 跳过指标 可用库容量:INE原油:上海:合计
2024-11-11 11:36:56,555 - my_logger - INFO - 跳过指标 可用库容量:INE原油:海南:合计
2024-11-11 11:36:56,556 - my_logger - INFO - 跳过指标 可用库容量:INE原油:山东:合计
2024-11-11 11:36:56,556 - my_logger - INFO - 跳过指标 可用库容量:INE原油:浙江:中化兴中
2024-11-11 11:36:56,556 - my_logger - INFO - 跳过指标 可用库容量:INE原油:浙江:大鼎石油
2024-11-11 11:36:56,557 - my_logger - INFO - 跳过指标 可用库容量:INE原油:浙江:中国石化册子岛
2024-11-11 11:36:56,557 - my_logger - INFO - 跳过指标 可用库容量:INE原油:上海:洋山石油
2024-11-11 11:36:56,558 - my_logger - INFO - 跳过指标 可用库容量:INE原油:广东:中油湛江
2024-11-11 11:36:56,558 - my_logger - INFO - 跳过指标 可用库容量:INE原油:广东:中国石化湛江
2024-11-11 11:36:56,559 - my_logger - INFO - 跳过指标 可用库容量:INE原油:辽宁:北方油品
2024-11-11 11:36:56,559 - my_logger - INFO - 跳过指标 可用库容量:INE原油:辽宁:中油大连保税
2024-11-11 11:36:56,560 - my_logger - INFO - 跳过指标 可用库容量:INE原油:海南:中国石化海南
2024-11-11 11:36:56,560 - my_logger - INFO - 跳过指标 可用库容量:INE原油:山东:中国石化日照
2024-11-11 11:36:56,561 - my_logger - INFO - 跳过指标 可用库容量:INE原油:山东:青岛港实华
2024-11-11 11:36:56,562 - my_logger - INFO - 跳过指标 可用库容量:INE原油:山东:中化弘润潍坊
2024-11-11 11:36:56,562 - my_logger - INFO - 跳过指标 可用库容量:INE原油:山东:青岛港摩科瑞
2024-11-11 11:36:56,563 - my_logger - INFO - 跳过指标 可用库容量:INE原油:广西:中油广西国际
2024-11-11 11:36:56,563 - my_logger - INFO - 跳过指标 可用库容量:INE原油:河北:中国石化曹妃甸
2024-11-11 11:36:56,564 - my_logger - INFO - 跳过指标 舟山:可用库容:原油
2024-11-11 11:36:56,564 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中化兴中-上扎库姆原油
2024-11-11 11:36:56,565 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中化兴中-巴士拉轻油
2024-11-11 11:36:56,565 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中化兴中-巴士拉轻油(I 级)
2024-11-11 11:36:56,566 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中油大榭-上扎库姆原油
2024-11-11 11:36:56,567 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中国石化册子岛-巴士拉轻油
2024-11-11 11:36:56,567 - my_logger - INFO - 跳过指标 库存期货:INE原油:浙江:中国石化册子岛-巴士拉轻油(I 级)
2024-11-11 11:36:56,568 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:青岛港董家口-阿曼原油
2024-11-11 11:36:56,568 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中化弘润潍坊-阿曼原油
2024-11-11 11:36:56,569 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中化弘润潍坊-上扎库姆原油
2024-11-11 11:36:56,569 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中化弘润潍坊-巴士拉轻油
2024-11-11 11:36:56,570 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中化弘润潍坊-巴士拉轻油(I 级)
2024-11-11 11:36:56,570 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中国石化日照-上扎库姆原油
2024-11-11 11:36:56,571 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中国石化日照-巴士拉轻油
2024-11-11 11:36:56,571 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:中国石化日照-巴士拉轻油(I 级)
2024-11-11 11:36:56,572 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:山港青岛实华
2024-11-11 11:36:56,572 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:山港青岛实华-阿曼原油
2024-11-11 11:36:56,573 - my_logger - INFO - 跳过指标 库存期货:INE原油:山东:山港海业董家口
2024-11-11 11:36:56,573 - my_logger - INFO - 跳过指标 库存期货:INE原油:上海:洋山石油-巴士拉轻油(I 级)
2024-11-11 11:36:56,574 - my_logger - INFO - 跳过指标 库存期货:INE原油:上海:洋山石油-巴士拉轻油
2024-11-11 11:36:56,574 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中油湛江-卡塔尔海洋油
2024-11-11 11:36:56,575 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中油湛江-阿曼原油
2024-11-11 11:36:56,575 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中油湛江-巴士拉轻油(I 级)
2024-11-11 11:36:56,576 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中油湛江-巴士拉轻油
2024-11-11 11:36:56,576 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中国石化湛江-巴士拉轻油(I级)
2024-11-11 11:36:56,576 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中国石化湛江-卡塔尔海洋油
2024-11-11 11:36:56,578 - my_logger - INFO - 跳过指标 库存期货:INE原油:广东:中国石化湛江-上扎库姆原油
2024-11-11 11:36:56,578 - my_logger - INFO - 跳过指标 库存期货:INE原油:海南:中国石化海南-上扎库姆原油
2024-11-11 11:36:56,579 - my_logger - INFO - 跳过指标 库存期货:INE原油:海南:中国石化海南-阿曼原油
2024-11-11 11:36:56,580 - my_logger - INFO - 跳过指标 库存期货:INE原油:河北:中国石化曹妃甸-巴士拉轻油(I 级)
2024-11-11 11:36:56,580 - my_logger - INFO - 跳过指标 库存期货:INE原油:河北:中国石化曹妃甸-巴士拉轻油
2024-11-11 11:36:56,581 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:北方油品-巴士拉轻油(I 级)
2024-11-11 11:36:56,581 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连保税-上扎库姆原油
2024-11-11 11:36:56,582 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连保税-巴士拉轻油(I级)
2024-11-11 11:36:56,582 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连保税-阿曼原油
2024-11-11 11:36:56,583 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连国际-巴士拉轻油(I级)
2024-11-11 11:36:56,583 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连国际-阿曼原油
2024-11-11 11:36:56,584 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连国际-上扎库姆原油
2024-11-11 11:36:56,584 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连国际-迪拜原油
2024-11-11 11:36:56,585 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油国际大连-迪拜原油
2024-11-11 11:36:56,585 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油国际大连-阿曼原油
2024-11-11 11:36:56,586 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油国际大连-巴士拉轻油(I 级)
2024-11-11 11:36:56,586 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油国际大连-上扎库姆原油
2024-11-11 11:36:56,587 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油国际大连-巴士拉轻油
2024-11-11 11:36:56,587 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连-巴士拉轻油(I 级)
2024-11-11 11:36:56,587 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连-阿曼原油
2024-11-11 11:36:56,588 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连-上扎库姆原油
2024-11-11 11:36:56,588 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:中油大连-巴士拉轻油
2024-11-11 11:36:56,589 - my_logger - INFO - 跳过指标 库存期货:INE原油:辽宁:北方油品-巴士拉轻油
2024-11-11 11:36:56,589 - my_logger - INFO - 跳过指标 Oman c1 * 汇率
2024-11-11 11:36:56,590 - my_logger - INFO - 跳过指标 SC c2-Oman c1*汇率
2024-11-11 11:36:56,590 - my_logger - INFO - 跳过指标 SC c3-Oman c1*汇率
2024-11-11 11:36:56,591 - my_logger - INFO - 跳过指标 INE SC主力合约价格
2024-11-11 11:36:56,591 - my_logger - INFO - 跳过指标 SC主力-Brent主力*汇率
2024-11-11 11:36:56,592 - my_logger - INFO - 跳过指标 Brent主力*汇率
2024-11-11 11:36:56,592 - my_logger - INFO - 跳过指标 SC c1日盘-Brent c1(15:00)*汇率
2024-11-11 11:36:56,593 - my_logger - INFO - 跳过指标 SC c2日盘-Brent c1(15:00)*汇率
2024-11-11 11:36:56,593 - my_logger - INFO - 跳过指标 SC c2日盘-Brent c2(15:00)*汇率
2024-11-11 11:36:56,594 - my_logger - INFO - 跳过指标 EFS c1-c2
2024-11-11 11:36:56,594 - my_logger - INFO - 跳过指标 TD3C 运费 c1-c2
2024-11-11 11:36:56,595 - my_logger - INFO - 跳过指标 SC理论估值-Dubai原油
2024-11-11 11:36:56,596 - my_logger - INFO - 跳过指标 SC c1夜盘-理论估值(Dubai)
2024-11-11 11:36:56,596 - my_logger - INFO - 跳过指标 SC c2夜盘-理论估值(Dubai)
2024-11-11 11:36:56,597 - my_logger - INFO - 跳过指标 SC c3夜盘-理论估值(Dubai)
2024-11-11 11:36:56,597 - my_logger - INFO - 跳过指标 DFL M1
2024-11-11 11:36:56,598 - my_logger - INFO - 跳过指标 DFL M2
2024-11-11 11:36:56,599 - my_logger - INFO - 跳过指标 CFD W1-Brent c1
2024-11-11 11:36:56,599 - my_logger - INFO - 跳过指标 SC c1-c2/7DMA
2024-11-11 11:36:56,600 - my_logger - INFO - 跳过指标 SC主力-理论估值
2024-11-11 11:36:56,600 - my_logger - INFO - 跳过指标 美国柴油裂差-美国汽油裂差
2024-11-11 11:36:56,601 - my_logger - INFO - 跳过指标 B00.IPE结算价
2024-11-11 11:36:56,601 - my_logger - INFO - 跳过指标 B02.IPE结算价
2024-11-11 11:36:56,602 - my_logger - INFO - 跳过指标 Brent c1-c2 (结算)
2024-11-11 11:36:56,602 - my_logger - INFO - 跳过指标 SC c1夜盘-Brent c1 (结算)*汇率
2024-11-11 11:36:56,603 - my_logger - INFO - 跳过指标 SC c2夜盘-Brent c1 (结算)*汇率
2024-11-11 11:36:56,603 - my_logger - INFO - 跳过指标 SC c2夜盘-Brent c2 (结算)*汇率
2024-11-11 11:36:56,604 - my_logger - INFO - 跳过指标 SC c2-c3 (夜盘)
2024-11-11 11:36:56,604 - my_logger - INFO - 跳过指标 B03.IPE结算价
2024-11-11 11:36:56,604 - my_logger - INFO - 跳过指标 B04.IPE结算价
2024-11-11 11:36:56,605 - my_logger - INFO - 跳过指标 B05.IPE结算价
2024-11-11 11:36:56,605 - my_logger - INFO - 跳过指标 B06.IPE结算价
2024-11-11 11:36:56,606 - my_logger - INFO - 跳过指标 Brent c2-c3 (结算)
2024-11-11 11:36:56,606 - my_logger - INFO - 跳过指标 WTI c2-c3
2024-11-11 11:36:56,607 - my_logger - INFO - 跳过指标 Brent c2-c3
2024-11-11 11:36:56,607 - my_logger - INFO - 跳过指标 SCc1夜盘收盘(日期调整)
2024-11-11 11:36:56,607 - my_logger - INFO - 跳过指标 SCc2夜盘收盘(日期调整)
2024-11-11 11:36:56,608 - my_logger - INFO - 跳过指标 SCc3夜盘收盘(日期调整)
2024-11-11 11:36:56,608 - my_logger - INFO - 跳过指标 SCc4夜盘收盘(日期调整)
2024-11-11 11:36:56,609 - my_logger - INFO - 跳过指标 SC c1夜盘-Brent c1 (结算B)*汇率
2024-11-11 11:36:56,609 - my_logger - INFO - 跳过指标 SC c2夜盘-Brent c1 (结算B)*汇率
2024-11-11 11:36:56,610 - my_logger - INFO - 跳过指标 SC c2夜盘-Brent c2 (结算B)*汇率
2024-11-11 11:36:56,610 - my_logger - INFO - 跳过指标 Brent c1-c2 (结算B)
2024-11-11 11:36:56,611 - my_logger - INFO - 跳过指标 Brent c2-c3 (结算B)
2024-11-11 11:36:56,612 - my_logger - INFO - 跳过指标 WTI c1-c2 (结算B)
2024-11-11 11:36:56,612 - my_logger - INFO - 跳过指标 WTI c2-c3 (结算B)
2024-11-11 11:36:56,613 - my_logger - INFO - 跳过指标 DME Oman c1 02:30收盘价预估
2024-11-11 11:36:56,613 - my_logger - INFO - 跳过指标 DME Oman c2 02:30收盘价预估
2024-11-11 11:36:56,614 - my_logger - INFO - 跳过指标 阿曼原油 (湛江交割) 到岸入库成本(Oman c1预估)
2024-11-11 11:36:56,614 - my_logger - INFO - 跳过指标 SC c2夜盘-阿曼入库湛江成本(Oman c1预估)
2024-11-11 11:36:56,615 - my_logger - INFO - 跳过指标 SC c3夜盘-阿曼入库湛江成本(Oman c1预估)
2024-11-11 11:36:56,616 - my_logger - INFO - 跳过指标 EFS c2 15:00收盘价
2024-11-11 11:36:56,616 - my_logger - INFO - 跳过指标 Brent c1 15:00收盘价
2024-11-11 11:36:56,617 - my_logger - INFO - 跳过指标 EFS c1 15:00收盘价
2024-11-11 11:36:56,617 - my_logger - INFO - 跳过指标 Brent c2 15:00收盘价
2024-11-11 12:38:32,807 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 12:38:32,809 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 12:42:16,768 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 12:42:18,937 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 12:42:18,943 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 12:42:18,949 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 12:42:30,455 - my_logger - INFO - Libya列数据为空
2024-11-11 12:42:30,460 - my_logger - INFO - Malaysia列数据为空
2024-11-11 12:42:31,483 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 12:42:31,511 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 12:42:31,512 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 12:42:33,177 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 12:42:33,184 - my_logger - INFO - 开始训练模型...
2024-11-11 12:42:33,185 - my_logger - INFO - 模型训练完成
2024-11-11 12:42:33,186 - my_logger - INFO - 训练数据绘图ing
2024-11-11 12:43:46,065 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 12:43:46,066 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 12:47:29,970 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 12:47:32,110 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 12:47:32,116 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 12:47:32,122 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 12:47:43,717 - my_logger - INFO - Libya列数据为空
2024-11-11 12:47:43,720 - my_logger - INFO - Malaysia列数据为空
2024-11-11 12:47:44,732 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 12:47:44,758 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 12:47:44,760 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 12:47:46,434 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 12:47:46,441 - my_logger - INFO - 开始训练模型...
2024-11-11 12:47:46,442 - my_logger - INFO - 模型训练完成
2024-11-11 12:47:46,442 - my_logger - INFO - 训练数据绘图ing
2024-11-11 13:11:45,207 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 13:11:45,207 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 13:15:29,247 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 13:15:31,407 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 13:15:31,413 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 13:15:31,419 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 13:15:42,941 - my_logger - INFO - Libya列数据为空
2024-11-11 13:15:42,944 - my_logger - INFO - Malaysia列数据为空
2024-11-11 13:15:43,962 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 13:15:43,989 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 13:15:43,990 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 13:15:45,638 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 13:15:45,646 - my_logger - INFO - 开始训练模型...
2024-11-11 13:15:45,647 - my_logger - INFO - 模型训练完成
2024-11-11 13:15:45,648 - my_logger - INFO - 训练数据绘图ing
2024-11-11 13:30:17,246 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 13:30:17,247 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 13:34:00,498 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 13:34:02,590 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 13:34:02,596 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 13:34:02,601 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 13:34:14,020 - my_logger - INFO - Libya列数据为空
2024-11-11 13:34:14,023 - my_logger - INFO - Malaysia列数据为空
2024-11-11 13:34:15,023 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 13:34:15,049 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 13:34:15,051 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 13:34:16,680 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 13:34:16,688 - my_logger - INFO - 开始训练模型...
2024-11-11 13:34:16,688 - my_logger - INFO - 模型训练完成
2024-11-11 13:34:16,689 - my_logger - INFO - 训练数据绘图ing
2024-11-11 13:39:09,330 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 13:39:09,332 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 13:42:55,263 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 13:42:57,505 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 13:42:57,511 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 13:42:57,517 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 13:43:09,149 - my_logger - INFO - Libya列数据为空
2024-11-11 13:43:09,152 - my_logger - INFO - Malaysia列数据为空
2024-11-11 13:43:10,178 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 13:43:10,205 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 13:43:10,207 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 13:43:11,852 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 13:43:11,859 - my_logger - INFO - 开始训练模型...
2024-11-11 13:43:11,860 - my_logger - INFO - 模型训练完成
2024-11-11 13:43:11,860 - my_logger - INFO - 训练数据绘图ing
2024-11-11 13:43:16,228 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 13:43:19,527 - my_logger - INFO - 训练数据绘图end
2024-11-11 13:43:19,528 - my_logger - INFO - 制作报告ing
2024-11-11 13:43:19,959 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 13:43:20,914 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-11 13:43:20,916 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 13:43:24,449 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-11 13:43:24,451 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 13:43:27,703 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-11 13:43:27,705 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 13:43:28,292 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-11 13:43:28,294 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 13:43:31,556 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-11 13:43:31,557 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 13:43:32,434 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-11 13:43:32,436 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 13:43:36,047 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-11 13:43:36,049 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 13:43:39,518 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-11 13:43:39,520 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 13:43:42,130 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.97315734820405
2024-11-11 13:43:42,133 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 13:43:42,713 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-11 13:43:42,714 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 13:43:46,274 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-11 13:43:46,276 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 13:43:49,582 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-11 13:43:49,583 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 13:43:50,322 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 13:44:11,371 - my_logger - INFO - 制作报告end
2024-11-11 13:44:11,372 - my_logger - INFO - 模型训练完成
2024-11-11 13:44:14,009 - my_logger - INFO - 邮件发送成功!
2024-11-11 13:52:02,334 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 13:52:02,335 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 13:55:47,374 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 13:55:49,542 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 13:55:49,548 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 13:55:49,554 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 13:56:01,209 - my_logger - INFO - Libya列数据为空
2024-11-11 13:56:01,213 - my_logger - INFO - Malaysia列数据为空
2024-11-11 13:56:02,226 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 13:56:02,256 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 13:56:02,257 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 13:56:03,965 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 13:56:03,973 - my_logger - INFO - 开始训练模型...
2024-11-11 13:56:03,974 - my_logger - INFO - 模型训练完成
2024-11-11 13:56:03,974 - my_logger - INFO - 训练数据绘图ing
2024-11-11 14:00:07,069 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 14:00:07,070 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-27
2024-11-11 14:03:53,040 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 930)
2024-11-11 14:03:55,204 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 618)
2024-11-11 14:03:55,211 - my_logger - INFO - 删除预测列为空值的行后数据量:(1763, 618)
2024-11-11 14:03:55,216 - my_logger - INFO - 删除全为空值的列后数据量:(1763, 541)
2024-11-11 14:04:06,896 - my_logger - INFO - Libya列数据为空
2024-11-11 14:04:06,899 - my_logger - INFO - Malaysia列数据为空
2024-11-11 14:04:07,916 - my_logger - INFO - 日度(348) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
343 C2403150124
344 FVHCM1 INDEX
345 lmcads03 lme comdty
346 GC1 COMB Comdty
347 C2404167855
[348 rows x 2 columns]
2024-11-11 14:04:07,943 - my_logger - INFO - 特征信息总共有538个,日度(348),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 14:04:07,945 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 14:04:09,620 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-25 00:00:00', y = '75.63' WHERE ds = '2024-10-25 00:00:00'
2024-11-11 14:04:09,628 - my_logger - INFO - 开始训练模型...
2024-11-11 14:04:09,629 - my_logger - INFO - 模型训练完成
2024-11-11 14:04:09,629 - my_logger - INFO - 训练数据绘图ing
2024-11-11 14:04:43,885 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 14:04:47,214 - my_logger - INFO - 训练数据绘图end
2024-11-11 14:04:47,215 - my_logger - INFO - 制作报告ing
2024-11-11 14:04:47,691 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 14:04:48,661 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.217152239699212
2024-11-11 14:04:48,664 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 14:04:52,567 - my_logger - INFO - 价格类指标的相关性总和为97.90910818847435
2024-11-11 14:04:52,569 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 14:04:56,088 - my_logger - INFO - 供应类指标的相关性总和为15.531343912790739
2024-11-11 14:04:56,090 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 14:04:56,751 - my_logger - INFO - 供应给类指标的相关性总和为1.5500443529387788
2024-11-11 14:04:56,753 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 14:05:00,285 - my_logger - INFO - 其他类指标的相关性总和为6.90185005982164
2024-11-11 14:05:00,287 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 14:05:01,277 - my_logger - INFO - 宏观类指标的相关性总和为2.611349956994218
2024-11-11 14:05:01,280 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 14:05:05,221 - my_logger - INFO - 库存类指标的相关性总和为39.74899466223315
2024-11-11 14:05:05,223 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 14:05:08,793 - my_logger - INFO - 期货市场类指标的相关性总和为73.8202116202404
2024-11-11 14:05:08,795 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 14:05:11,708 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.97315734820405
2024-11-11 14:05:11,709 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 14:05:12,377 - my_logger - INFO - 运输类指标的相关性总和为1.0276073890794504
2024-11-11 14:05:12,379 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 14:05:16,363 - my_logger - INFO - 进出口类指标的相关性总和为12.34319101020204
2024-11-11 14:05:16,365 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 14:05:20,035 - my_logger - INFO - 需求类指标的相关性总和为15.143260984964495
2024-11-11 14:05:20,037 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 14:05:20,795 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 14:06:38,193 - my_logger - INFO - 制作报告end
2024-11-11 14:06:38,193 - my_logger - INFO - 模型训练完成
2024-11-11 14:06:41,067 - my_logger - INFO - 邮件发送成功!
2024-11-11 14:09:56,067 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 14:09:56,067 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-11 14:11:22,782 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-11 14:11:23,767 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 621)
2024-11-11 14:11:23,773 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 621)
2024-11-11 14:11:23,778 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 544)
2024-11-11 14:11:28,514 - my_logger - INFO - Libya列数据为空
2024-11-11 14:11:28,516 - my_logger - INFO - Malaysia列数据为空
2024-11-11 14:11:28,926 - my_logger - INFO - 日度(351) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
346 C2403150124
347 FVHCM1 INDEX
348 lmcads03 lme comdty
349 GC1 COMB Comdty
350 C2404167855
[351 rows x 2 columns]
2024-11-11 14:11:28,939 - my_logger - INFO - 特征信息总共有541个,日度(351),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 14:11:28,941 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 14:11:30,383 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 14:11:30,392 - my_logger - INFO - 开始训练模型...
2024-11-11 14:11:30,393 - my_logger - INFO - 模型训练完成
2024-11-11 14:11:30,393 - my_logger - INFO - 训练数据绘图ing
2024-11-11 14:11:32,721 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', NHITS = '72.375534', Informer = '77.86241', LSTM = '76.698364', iTransformer = '75.98318', TSMixer = '75.15075', TSMixerx = '74.38121', PatchTST = '75.594734', RNN = '53.52923', GRU = '77.05893', TCN = '74.90376', BiTCN = '75.4683', DilatedRNN = '77.86542', MLP = '74.50678', DLinear = '75.67038', NLinear = '75.36442', TFT = '73.99709', StemGNN = '74.57198', MLPMultivariate = '74.20644', TiDE = '75.10396', DeepNPTS = '74.762405' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 14:11:34,386 - my_logger - INFO - 训练数据绘图end
2024-11-11 14:11:34,386 - my_logger - INFO - 制作报告ing
2024-11-11 14:11:34,735 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 14:11:35,183 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2171063065604213
2024-11-11 14:11:35,185 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 14:11:37,149 - my_logger - INFO - 价格类指标的相关性总和为97.89903990887427
2024-11-11 14:11:37,151 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 14:11:38,820 - my_logger - INFO - 供应类指标的相关性总和为15.529313125239998
2024-11-11 14:11:38,821 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 14:11:39,151 - my_logger - INFO - 供应给类指标的相关性总和为1.5498484047524501
2024-11-11 14:11:39,152 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 14:11:40,850 - my_logger - INFO - 其他类指标的相关性总和为6.900427715445381
2024-11-11 14:11:40,851 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 14:11:41,308 - my_logger - INFO - 宏观类指标的相关性总和为2.6110372969728046
2024-11-11 14:11:41,309 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 14:11:43,353 - my_logger - INFO - 库存类指标的相关性总和为39.74552188210093
2024-11-11 14:11:43,354 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 14:11:45,068 - my_logger - INFO - 期货市场类指标的相关性总和为74.66597103864117
2024-11-11 14:11:45,069 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 14:11:46,454 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.972145104929376
2024-11-11 14:11:46,455 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 14:11:46,774 - my_logger - INFO - 运输类指标的相关性总和为1.0275708634790275
2024-11-11 14:11:46,775 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 14:11:48,851 - my_logger - INFO - 进出口类指标的相关性总和为12.34341563584218
2024-11-11 14:11:48,853 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 14:11:50,597 - my_logger - INFO - 需求类指标的相关性总和为15.143035955883262
2024-11-11 14:11:50,598 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 14:11:51,005 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 14:11:54,922 - my_logger - INFO - 制作报告end
2024-11-11 14:11:54,923 - my_logger - INFO - 模型训练完成
2024-11-11 14:11:57,466 - my_logger - INFO - 邮件发送成功!
2024-11-11 14:14:09,051 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 14:14:09,052 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-28
2024-11-11 14:15:35,204 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 930)
2024-11-11 14:15:36,205 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 621)
2024-11-11 14:15:36,210 - my_logger - INFO - 删除预测列为空值的行后数据量:(1764, 621)
2024-11-11 14:15:36,216 - my_logger - INFO - 删除全为空值的列后数据量:(1764, 544)
2024-11-11 14:15:40,807 - my_logger - INFO - Libya列数据为空
2024-11-11 14:15:40,808 - my_logger - INFO - Malaysia列数据为空
2024-11-11 14:15:41,203 - my_logger - INFO - 日度(351) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
346 C2403150124
347 FVHCM1 INDEX
348 lmcads03 lme comdty
349 GC1 COMB Comdty
350 C2404167855
[351 rows x 2 columns]
2024-11-11 14:15:41,214 - my_logger - INFO - 特征信息总共有541个,日度(351),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 14:15:41,216 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 14:15:42,650 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '71.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 14:15:42,658 - my_logger - INFO - 开始训练模型...
2024-11-11 14:15:42,677 - my_logger - INFO - Training set head:
2024-11-11 14:15:42,678 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 559 columns]
2024-11-11 14:15:42,948 - my_logger - INFO -
Testing set head:
2024-11-11 14:15:42,949 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 ... 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 559 columns]
2024-11-11 14:25:12,273 - my_logger - INFO - 模型训练完成
2024-11-11 14:25:12,274 - my_logger - INFO - 训练数据绘图ing
2024-11-11 14:25:16,529 - my_logger - INFO - 训练数据绘图end
2024-11-11 14:25:16,530 - my_logger - INFO - 制作报告ing
2024-11-11 14:25:16,924 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 14:25:17,406 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2171063065604213
2024-11-11 14:25:17,407 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 14:25:19,187 - my_logger - INFO - 价格类指标的相关性总和为97.89903990887427
2024-11-11 14:25:19,188 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 14:25:21,250 - my_logger - INFO - 供应类指标的相关性总和为15.529313125239998
2024-11-11 14:25:21,251 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 14:25:21,564 - my_logger - INFO - 供应给类指标的相关性总和为1.5498484047524501
2024-11-11 14:25:21,565 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 14:25:23,287 - my_logger - INFO - 其他类指标的相关性总和为6.900427715445381
2024-11-11 14:25:23,289 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 14:25:23,768 - my_logger - INFO - 宏观类指标的相关性总和为2.6110372969728046
2024-11-11 14:25:23,768 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 14:25:25,473 - my_logger - INFO - 库存类指标的相关性总和为39.74552188210093
2024-11-11 14:25:25,475 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 14:25:27,602 - my_logger - INFO - 期货市场类指标的相关性总和为74.66597103864117
2024-11-11 14:25:27,604 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 14:25:28,992 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.972145104929376
2024-11-11 14:25:28,993 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 14:25:29,326 - my_logger - INFO - 运输类指标的相关性总和为1.0275708634790275
2024-11-11 14:25:29,327 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 14:25:31,040 - my_logger - INFO - 进出口类指标的相关性总和为12.34341563584218
2024-11-11 14:25:31,041 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 14:25:32,765 - my_logger - INFO - 需求类指标的相关性总和为15.143035955883262
2024-11-11 14:25:32,766 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 14:25:33,147 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 14:25:37,540 - my_logger - INFO - 制作报告end
2024-11-11 14:25:37,541 - my_logger - INFO - 模型训练完成
2024-11-11 14:25:43,508 - my_logger - INFO - 邮件发送成功!
2024-11-11 14:27:12,934 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 14:27:12,935 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-11 14:28:42,264 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-11 14:28:43,400 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 621)
2024-11-11 14:28:43,407 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 621)
2024-11-11 14:28:43,413 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 544)
2024-11-11 14:28:48,487 - my_logger - INFO - Libya列数据为空
2024-11-11 14:28:48,489 - my_logger - INFO - Malaysia列数据为空
2024-11-11 14:28:48,869 - my_logger - INFO - 日度(351) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
346 C2403150124
347 FVHCM1 INDEX
348 lmcads03 lme comdty
349 GC1 COMB Comdty
350 C2404167855
[351 rows x 2 columns]
2024-11-11 14:28:48,880 - my_logger - INFO - 特征信息总共有541个,日度(351),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 14:28:48,881 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 14:28:50,415 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-11 14:28:50,429 - my_logger - INFO - 开始训练模型...
2024-11-11 14:28:50,447 - my_logger - INFO - Training set head:
2024-11-11 14:28:50,448 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 559 columns]
2024-11-11 14:28:50,705 - my_logger - INFO -
Testing set head:
2024-11-11 14:28:50,706 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 ... 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 559 columns]
2024-11-11 14:36:12,914 - my_logger - INFO - 模型训练完成
2024-11-11 14:36:12,915 - my_logger - INFO - 训练数据绘图ing
2024-11-11 14:36:16,958 - my_logger - INFO - 训练数据绘图end
2024-11-11 14:36:16,958 - my_logger - INFO - 制作报告ing
2024-11-11 14:36:17,332 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 14:36:17,803 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-11 14:36:17,805 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 14:36:19,552 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-11 14:36:19,553 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 14:36:21,602 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-11 14:36:21,603 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 14:36:21,968 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-11 14:36:21,969 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 14:36:23,664 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-11 14:36:23,665 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 14:36:24,157 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-11 14:36:24,158 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 14:36:25,897 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-11 14:36:25,898 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 14:36:28,021 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-11 14:36:28,022 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 14:36:29,423 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.971137202065036
2024-11-11 14:36:29,424 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 14:36:29,746 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-11 14:36:29,747 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 14:36:31,448 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-11 14:36:31,449 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 14:36:33,177 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-11 14:36:33,178 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 14:36:34,020 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 14:36:37,984 - my_logger - INFO - 制作报告end
2024-11-11 14:36:37,984 - my_logger - INFO - 模型训练完成
2024-11-11 14:36:44,682 - my_logger - INFO - 邮件发送成功!
2024-11-11 14:39:56,054 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 14:39:56,055 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-30
2024-11-11 14:41:21,764 - my_logger - INFO - 删除两月不更新特征前数据量:(2495, 930)
2024-11-11 14:41:22,749 - my_logger - INFO - 删除两月不更新特征后数据量:(2495, 621)
2024-11-11 14:41:22,755 - my_logger - INFO - 删除预测列为空值的行后数据量:(1766, 621)
2024-11-11 14:41:22,760 - my_logger - INFO - 删除全为空值的列后数据量:(1766, 544)
2024-11-11 14:41:27,319 - my_logger - INFO - Libya列数据为空
2024-11-11 14:41:27,321 - my_logger - INFO - Malaysia列数据为空
2024-11-11 14:41:27,703 - my_logger - INFO - 日度(351) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
346 C2403150124
347 FVHCM1 INDEX
348 lmcads03 lme comdty
349 GC1 COMB Comdty
350 C2404167855
[351 rows x 2 columns]
2024-11-11 14:41:27,713 - my_logger - INFO - 特征信息总共有541个,日度(351),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 14:41:27,714 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 14:41:29,221 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', y = '72.16' WHERE ds = '2024-10-30 00:00:00'
2024-11-11 14:41:29,234 - my_logger - INFO - 开始训练模型...
2024-11-11 14:41:29,254 - my_logger - INFO - Training set head:
2024-11-11 14:41:29,255 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 559 columns]
2024-11-11 14:41:29,507 - my_logger - INFO -
Testing set head:
2024-11-11 14:41:29,508 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 559 columns]
2024-11-11 14:49:04,869 - my_logger - INFO - 模型训练完成
2024-11-11 14:49:04,870 - my_logger - INFO - 训练数据绘图ing
2024-11-11 14:49:08,859 - my_logger - INFO - 训练数据绘图end
2024-11-11 14:49:08,860 - my_logger - INFO - 制作报告ing
2024-11-11 14:49:09,229 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 14:49:09,702 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2175358910941418
2024-11-11 14:49:09,704 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 14:49:11,436 - my_logger - INFO - 价格类指标的相关性总和为97.82888243995313
2024-11-11 14:49:11,437 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 14:49:13,453 - my_logger - INFO - 供应类指标的相关性总和为15.525781568032635
2024-11-11 14:49:13,454 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 14:49:13,806 - my_logger - INFO - 供应给类指标的相关性总和为1.549523664043174
2024-11-11 14:49:13,807 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 14:49:15,432 - my_logger - INFO - 其他类指标的相关性总和为6.897755337034983
2024-11-11 14:49:15,433 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 14:49:15,907 - my_logger - INFO - 宏观类指标的相关性总和为2.6104837226531727
2024-11-11 14:49:15,908 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 14:49:17,627 - my_logger - INFO - 库存类指标的相关性总和为39.74002870686131
2024-11-11 14:49:17,628 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 14:49:19,681 - my_logger - INFO - 期货市场类指标的相关性总和为74.06734384171318
2024-11-11 14:49:19,682 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 14:49:21,075 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.970108543974543
2024-11-11 14:49:21,076 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 14:49:21,399 - my_logger - INFO - 运输类指标的相关性总和为1.0274228259138274
2024-11-11 14:49:21,400 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 14:49:23,058 - my_logger - INFO - 进出口类指标的相关性总和为12.34462246265804
2024-11-11 14:49:23,059 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 14:49:24,740 - my_logger - INFO - 需求类指标的相关性总和为15.142900618539196
2024-11-11 14:49:24,741 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 14:49:25,526 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 14:49:29,399 - my_logger - INFO - 制作报告end
2024-11-11 14:49:29,400 - my_logger - INFO - 模型训练完成
2024-11-11 14:49:35,364 - my_logger - INFO - 邮件发送成功!
2024-11-11 14:55:43,550 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 14:55:43,550 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-31
2024-11-11 14:57:11,558 - my_logger - INFO - 删除两月不更新特征前数据量:(2496, 930)
2024-11-11 14:57:12,541 - my_logger - INFO - 删除两月不更新特征后数据量:(2496, 626)
2024-11-11 14:57:12,545 - my_logger - INFO - 删除预测列为空值的行后数据量:(1767, 626)
2024-11-11 14:57:12,549 - my_logger - INFO - 删除全为空值的列后数据量:(1767, 549)
2024-11-11 14:57:17,267 - my_logger - INFO - Libya列数据为空
2024-11-11 14:57:17,269 - my_logger - INFO - Malaysia列数据为空
2024-11-11 14:57:17,637 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 14:57:17,647 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 14:57:17,649 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 14:57:19,187 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', y = '72.81' WHERE ds = '2024-10-31 00:00:00'
2024-11-11 14:57:19,201 - my_logger - INFO - 开始训练模型...
2024-11-11 14:57:19,221 - my_logger - INFO - Training set head:
2024-11-11 14:57:19,222 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-11 14:57:19,488 - my_logger - INFO -
Testing set head:
2024-11-11 14:57:19,488 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 564 columns]
2024-11-11 15:07:15,368 - my_logger - INFO - 模型训练完成
2024-11-11 15:07:15,369 - my_logger - INFO - 训练数据绘图ing
2024-11-11 15:13:06,039 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 15:13:06,039 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-31
2024-11-11 15:14:31,719 - my_logger - INFO - 删除两月不更新特征前数据量:(2496, 930)
2024-11-11 15:14:32,708 - my_logger - INFO - 删除两月不更新特征后数据量:(2496, 626)
2024-11-11 15:14:32,714 - my_logger - INFO - 删除预测列为空值的行后数据量:(1767, 626)
2024-11-11 15:14:32,718 - my_logger - INFO - 删除全为空值的列后数据量:(1767, 549)
2024-11-11 15:14:37,630 - my_logger - INFO - Libya列数据为空
2024-11-11 15:14:37,632 - my_logger - INFO - Malaysia列数据为空
2024-11-11 15:14:38,057 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 15:14:38,069 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 15:14:38,071 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 15:14:39,560 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', y = '72.81' WHERE ds = '2024-10-31 00:00:00'
2024-11-11 15:14:39,568 - my_logger - INFO - 开始训练模型...
2024-11-11 15:14:39,569 - my_logger - INFO - 模型训练完成
2024-11-11 15:14:39,569 - my_logger - INFO - 训练数据绘图ing
2024-11-11 15:20:32,748 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 15:20:32,750 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-31
2024-11-11 15:24:19,705 - my_logger - INFO - 删除两月不更新特征前数据量:(2496, 930)
2024-11-11 15:24:21,869 - my_logger - INFO - 删除两月不更新特征后数据量:(2496, 626)
2024-11-11 15:24:21,875 - my_logger - INFO - 删除预测列为空值的行后数据量:(1767, 626)
2024-11-11 15:24:21,881 - my_logger - INFO - 删除全为空值的列后数据量:(1767, 549)
2024-11-11 15:24:33,672 - my_logger - INFO - Libya列数据为空
2024-11-11 15:24:33,675 - my_logger - INFO - Malaysia列数据为空
2024-11-11 15:24:34,708 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 15:24:34,734 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 15:24:34,736 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 15:24:36,415 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', y = '72.81' WHERE ds = '2024-10-31 00:00:00'
2024-11-11 15:24:36,423 - my_logger - INFO - 开始训练模型...
2024-11-11 15:24:36,423 - my_logger - INFO - 模型训练完成
2024-11-11 15:24:36,424 - my_logger - INFO - 训练数据绘图ing
2024-11-11 15:28:49,253 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 15:28:49,253 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-31
2024-11-11 15:30:14,816 - my_logger - INFO - 删除两月不更新特征前数据量:(2496, 930)
2024-11-11 15:30:15,798 - my_logger - INFO - 删除两月不更新特征后数据量:(2496, 626)
2024-11-11 15:30:15,803 - my_logger - INFO - 删除预测列为空值的行后数据量:(1767, 626)
2024-11-11 15:30:15,807 - my_logger - INFO - 删除全为空值的列后数据量:(1767, 549)
2024-11-11 15:30:20,503 - my_logger - INFO - Libya列数据为空
2024-11-11 15:30:20,505 - my_logger - INFO - Malaysia列数据为空
2024-11-11 15:30:20,878 - my_logger - INFO - 日度(356) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 15:30:20,890 - my_logger - INFO - 特征信息总共有546个,日度(356),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 15:30:20,892 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 15:30:22,325 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', y = '72.81' WHERE ds = '2024-10-31 00:00:00'
2024-11-11 15:30:22,332 - my_logger - INFO - 开始训练模型...
2024-11-11 15:30:22,333 - my_logger - INFO - 模型训练完成
2024-11-11 15:30:22,334 - my_logger - INFO - 训练数据绘图ing
2024-11-11 15:30:26,259 - my_logger - INFO - 训练数据绘图end
2024-11-11 15:30:26,259 - my_logger - INFO - 制作报告ing
2024-11-11 15:30:26,618 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 15:30:27,089 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2184726958129715
2024-11-11 15:30:27,091 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 15:30:29,135 - my_logger - INFO - 价格类指标的相关性总和为100.85097823156127
2024-11-11 15:30:29,136 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 15:30:30,798 - my_logger - INFO - 供应类指标的相关性总和为15.524781089112889
2024-11-11 15:30:30,799 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 15:30:31,153 - my_logger - INFO - 供应给类指标的相关性总和为1.5494604798948044
2024-11-11 15:30:31,154 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 15:30:32,816 - my_logger - INFO - 其他类指标的相关性总和为6.896880805926513
2024-11-11 15:30:32,817 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 15:30:33,287 - my_logger - INFO - 宏观类指标的相关性总和为2.6103197627496835
2024-11-11 15:30:33,288 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 15:30:35,356 - my_logger - INFO - 库存类指标的相关性总和为39.73983060226348
2024-11-11 15:30:35,357 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 15:30:37,075 - my_logger - INFO - 期货市场类指标的相关性总和为73.83779308597283
2024-11-11 15:30:37,076 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 15:30:38,491 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.969059503867423
2024-11-11 15:30:38,492 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 15:30:38,813 - my_logger - INFO - 运输类指标的相关性总和为1.02731770126438
2024-11-11 15:30:38,814 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 15:30:40,889 - my_logger - INFO - 进出口类指标的相关性总和为12.346398731964502
2024-11-11 15:30:40,890 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 15:30:42,639 - my_logger - INFO - 需求类指标的相关性总和为15.14322449316535
2024-11-11 15:30:42,640 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 15:30:43,042 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 15:30:46,970 - my_logger - INFO - 制作报告end
2024-11-11 15:30:46,971 - my_logger - INFO - 模型训练完成
2024-11-11 15:30:52,876 - my_logger - INFO - 邮件发送成功!
2024-11-11 15:31:27,474 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 15:31:27,475 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-11-01
2024-11-11 15:32:53,254 - my_logger - INFO - 删除两月不更新特征前数据量:(2497, 930)
2024-11-11 15:32:54,246 - my_logger - INFO - 删除两月不更新特征后数据量:(2497, 631)
2024-11-11 15:32:54,250 - my_logger - INFO - 删除预测列为空值的行后数据量:(1768, 631)
2024-11-11 15:32:54,255 - my_logger - INFO - 删除全为空值的列后数据量:(1768, 554)
2024-11-11 15:32:58,867 - my_logger - INFO - Libya列数据为空
2024-11-11 15:32:58,869 - my_logger - INFO - Malaysia列数据为空
2024-11-11 15:32:59,251 - my_logger - INFO - 日度(356) 周度(195)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 15:32:59,261 - my_logger - INFO - 特征信息总共有551个,日度(356),周度(195), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 15:32:59,263 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 15:33:00,735 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-01 00:00:00', y = '73.1' WHERE ds = '2024-11-01 00:00:00'
2024-11-11 15:33:00,750 - my_logger - INFO - 开始训练模型...
2024-11-11 15:33:00,769 - my_logger - INFO - Training set head:
2024-11-11 15:33:00,769 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 15:33:01,027 - my_logger - INFO -
Testing set head:
2024-11-11 15:33:01,028 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 15:42:29,666 - my_logger - INFO - 模型训练完成
2024-11-11 15:42:29,667 - my_logger - INFO - 训练数据绘图ing
2024-11-11 15:42:33,744 - my_logger - INFO - 训练数据绘图end
2024-11-11 15:42:33,745 - my_logger - INFO - 制作报告ing
2024-11-11 15:42:34,124 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 15:42:34,597 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2195561801649653
2024-11-11 15:42:34,599 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 15:42:36,317 - my_logger - INFO - 价格类指标的相关性总和为100.8287730410694
2024-11-11 15:42:36,319 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 15:42:38,298 - my_logger - INFO - 供应类指标的相关性总和为15.75211902049459
2024-11-11 15:42:38,299 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 15:42:38,610 - my_logger - INFO - 供应给类指标的相关性总和为1.5494180182437378
2024-11-11 15:42:38,611 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 15:42:40,265 - my_logger - INFO - 其他类指标的相关性总和为6.8961334530789635
2024-11-11 15:42:40,266 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 15:42:40,730 - my_logger - INFO - 宏观类指标的相关性总和为2.610143318202318
2024-11-11 15:42:40,731 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 15:42:42,371 - my_logger - INFO - 库存类指标的相关性总和为39.740160565420304
2024-11-11 15:42:42,372 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 15:42:44,399 - my_logger - INFO - 期货市场类指标的相关性总和为75.37524469357547
2024-11-11 15:42:44,400 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 15:42:45,721 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.968000453540654
2024-11-11 15:42:45,722 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 15:42:46,040 - my_logger - INFO - 运输类指标的相关性总和为1.0271969814006003
2024-11-11 15:42:46,041 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 15:42:47,667 - my_logger - INFO - 进出口类指标的相关性总和为12.348350677681264
2024-11-11 15:42:47,668 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 15:42:49,322 - my_logger - INFO - 需求类指标的相关性总和为15.143296864285553
2024-11-11 15:42:49,323 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 15:42:50,117 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 15:42:53,951 - my_logger - INFO - 制作报告end
2024-11-11 15:42:53,951 - my_logger - INFO - 模型训练完成
2024-11-11 15:42:59,816 - my_logger - INFO - 邮件发送成功!
2024-11-11 15:46:11,743 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 15:46:11,744 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-11-02
2024-11-11 15:47:38,000 - my_logger - INFO - 删除两月不更新特征前数据量:(2498, 930)
2024-11-11 15:47:39,018 - my_logger - INFO - 删除两月不更新特征后数据量:(2498, 631)
2024-11-11 15:47:39,023 - my_logger - INFO - 删除预测列为空值的行后数据量:(1768, 631)
2024-11-11 15:47:39,028 - my_logger - INFO - 删除全为空值的列后数据量:(1768, 554)
2024-11-11 15:47:43,762 - my_logger - INFO - Libya列数据为空
2024-11-11 15:47:43,763 - my_logger - INFO - Malaysia列数据为空
2024-11-11 15:47:44,135 - my_logger - INFO - 日度(356) 周度(195)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 15:47:44,147 - my_logger - INFO - 特征信息总共有551个,日度(356),周度(195), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 15:47:44,148 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 15:47:45,676 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-01 00:00:00', y = '73.1' WHERE ds = '2024-11-01 00:00:00'
2024-11-11 15:47:45,682 - my_logger - INFO - 开始训练模型...
2024-11-11 15:47:45,702 - my_logger - INFO - Training set head:
2024-11-11 15:47:45,703 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 15:47:45,965 - my_logger - INFO -
Testing set head:
2024-11-11 15:47:45,966 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 15:55:51,631 - my_logger - INFO - 模型训练完成
2024-11-11 15:55:51,632 - my_logger - INFO - 训练数据绘图ing
2024-11-11 15:55:53,976 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-04 00:00:00', NHITS = '74.630196', Informer = '75.50402', LSTM = '73.28303', iTransformer = '73.85779', TSMixer = '73.27461', TSMixerx = '73.097275', PatchTST = '72.75564', RNN = '58.61363', GRU = '74.22052', TCN = '72.09316', BiTCN = '73.37706', DilatedRNN = '71.75002', MLP = '73.30252', DLinear = '73.62403', NLinear = '73.38681', TFT = '73.075584', StemGNN = '74.72731', MLPMultivariate = '73.02433', TiDE = '73.29927', DeepNPTS = '74.73792' WHERE ds = '2024-11-04 00:00:00'
2024-11-11 15:55:55,721 - my_logger - INFO - 训练数据绘图end
2024-11-11 15:55:55,722 - my_logger - INFO - 制作报告ing
2024-11-11 15:55:56,109 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 15:55:56,586 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2195561801649653
2024-11-11 15:55:56,587 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 15:55:58,354 - my_logger - INFO - 价格类指标的相关性总和为100.8287730410694
2024-11-11 15:55:58,355 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 15:56:00,398 - my_logger - INFO - 供应类指标的相关性总和为15.75211902049459
2024-11-11 15:56:00,399 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 15:56:00,715 - my_logger - INFO - 供应给类指标的相关性总和为1.5494180182437378
2024-11-11 15:56:00,716 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 15:56:02,391 - my_logger - INFO - 其他类指标的相关性总和为6.8961334530789635
2024-11-11 15:56:02,392 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 15:56:02,895 - my_logger - INFO - 宏观类指标的相关性总和为2.610143318202318
2024-11-11 15:56:02,896 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 15:56:04,589 - my_logger - INFO - 库存类指标的相关性总和为39.740160565420304
2024-11-11 15:56:04,590 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 15:56:06,702 - my_logger - INFO - 期货市场类指标的相关性总和为75.37524469357547
2024-11-11 15:56:06,703 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 15:56:08,059 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.968000453540654
2024-11-11 15:56:08,060 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 15:56:08,376 - my_logger - INFO - 运输类指标的相关性总和为1.0271969814006003
2024-11-11 15:56:08,377 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 15:56:10,059 - my_logger - INFO - 进出口类指标的相关性总和为12.348350677681264
2024-11-11 15:56:10,061 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 15:56:11,782 - my_logger - INFO - 需求类指标的相关性总和为15.143296864285553
2024-11-11 15:56:11,783 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 15:56:12,621 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 15:56:16,489 - my_logger - INFO - 制作报告end
2024-11-11 15:56:16,489 - my_logger - INFO - 模型训练完成
2024-11-11 15:56:22,526 - my_logger - INFO - 邮件发送成功!
2024-11-11 15:59:13,816 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 15:59:13,817 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-11-04
2024-11-11 16:00:54,119 - my_logger - INFO - 删除两月不更新特征前数据量:(2500, 930)
2024-11-11 16:00:55,151 - my_logger - INFO - 删除两月不更新特征后数据量:(2500, 631)
2024-11-11 16:00:55,156 - my_logger - INFO - 删除预测列为空值的行后数据量:(1769, 631)
2024-11-11 16:00:55,161 - my_logger - INFO - 删除全为空值的列后数据量:(1769, 554)
2024-11-11 16:00:59,851 - my_logger - INFO - Libya列数据为空
2024-11-11 16:00:59,853 - my_logger - INFO - Malaysia列数据为空
2024-11-11 16:01:00,220 - my_logger - INFO - 日度(356) 周度(195)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 16:01:00,232 - my_logger - INFO - 特征信息总共有551个,日度(356),周度(195), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 16:01:00,233 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 16:01:01,799 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-04 00:00:00', y = '75.08' WHERE ds = '2024-11-04 00:00:00'
2024-11-11 16:01:01,813 - my_logger - INFO - 开始训练模型...
2024-11-11 16:01:01,833 - my_logger - INFO - Training set head:
2024-11-11 16:01:01,833 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 16:01:02,104 - my_logger - INFO -
Testing set head:
2024-11-11 16:01:02,105 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 16:09:47,370 - my_logger - INFO - 模型训练完成
2024-11-11 16:09:47,371 - my_logger - INFO - 训练数据绘图ing
2024-11-11 16:09:51,968 - my_logger - INFO - 训练数据绘图end
2024-11-11 16:09:51,968 - my_logger - INFO - 制作报告ing
2024-11-11 16:09:52,378 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 16:09:52,893 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.221630259837739
2024-11-11 16:09:52,894 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 16:09:55,080 - my_logger - INFO - 价格类指标的相关性总和为100.8177213870506
2024-11-11 16:09:55,082 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 16:09:57,470 - my_logger - INFO - 供应类指标的相关性总和为15.751983559777866
2024-11-11 16:09:57,471 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 16:09:57,886 - my_logger - INFO - 供应给类指标的相关性总和为1.5495088221527102
2024-11-11 16:09:57,887 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 16:09:59,916 - my_logger - INFO - 其他类指标的相关性总和为6.8959273889044255
2024-11-11 16:09:59,917 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 16:10:00,467 - my_logger - INFO - 宏观类指标的相关性总和为2.610117990660918
2024-11-11 16:10:00,468 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 16:10:02,313 - my_logger - INFO - 库存类指标的相关性总和为39.74375682053614
2024-11-11 16:10:02,314 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 16:10:04,547 - my_logger - INFO - 期货市场类指标的相关性总和为75.28709128062027
2024-11-11 16:10:04,548 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 16:10:05,974 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.966814969371906
2024-11-11 16:10:05,975 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 16:10:06,343 - my_logger - INFO - 运输类指标的相关性总和为1.0269980758599042
2024-11-11 16:10:06,344 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 16:10:08,128 - my_logger - INFO - 进出口类指标的相关性总和为12.351745161425429
2024-11-11 16:10:08,129 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 16:10:09,969 - my_logger - INFO - 需求类指标的相关性总和为15.14321970540906
2024-11-11 16:10:09,970 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 16:10:10,406 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 16:10:14,764 - my_logger - INFO - 制作报告end
2024-11-11 16:10:14,765 - my_logger - INFO - 模型训练完成
2024-11-11 16:10:20,985 - my_logger - INFO - 邮件发送成功!
2024-11-11 16:14:34,662 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-11 16:14:34,663 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-11-05
2024-11-11 16:16:05,250 - my_logger - INFO - 删除两月不更新特征前数据量:(2501, 930)
2024-11-11 16:16:06,271 - my_logger - INFO - 删除两月不更新特征后数据量:(2501, 631)
2024-11-11 16:16:06,276 - my_logger - INFO - 删除预测列为空值的行后数据量:(1770, 631)
2024-11-11 16:16:06,280 - my_logger - INFO - 删除全为空值的列后数据量:(1770, 554)
2024-11-11 16:16:11,057 - my_logger - INFO - Libya列数据为空
2024-11-11 16:16:11,059 - my_logger - INFO - Malaysia列数据为空
2024-11-11 16:16:11,428 - my_logger - INFO - 日度(356) 周度(195)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
351 C2403150124
352 FVHCM1 INDEX
353 lmcads03 lme comdty
354 GC1 COMB Comdty
355 C2404167855
[356 rows x 2 columns]
2024-11-11 16:16:11,439 - my_logger - INFO - 特征信息总共有551个,日度(356),周度(195), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 16:16:11,441 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 16:16:13,017 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-05 00:00:00', y = '75.03' WHERE ds = '2024-11-05 00:00:00'
2024-11-11 16:16:13,032 - my_logger - INFO - 开始训练模型...
2024-11-11 16:16:13,054 - my_logger - INFO - Training set head:
2024-11-11 16:16:13,055 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 16:16:13,333 - my_logger - INFO -
Testing set head:
2024-11-11 16:16:13,334 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1999 2019-05-17 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
1993 2019-05-23 36227.0 732.4702 -174.619 66003.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 569 columns]
2024-11-11 16:25:04,182 - my_logger - INFO - 模型训练完成
2024-11-11 16:25:04,183 - my_logger - INFO - 训练数据绘图ing
2024-11-11 16:25:08,594 - my_logger - INFO - 训练数据绘图end
2024-11-11 16:25:08,595 - my_logger - INFO - 制作报告ing
2024-11-11 16:25:09,044 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-11 16:25:09,574 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2236571537180296
2024-11-11 16:25:09,575 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 16:25:11,452 - my_logger - INFO - 价格类指标的相关性总和为100.80713663445724
2024-11-11 16:25:11,453 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 16:25:13,566 - my_logger - INFO - 供应类指标的相关性总和为15.751831492683399
2024-11-11 16:25:13,568 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-11 16:25:13,902 - my_logger - INFO - 供应给类指标的相关性总和为1.5495964178756472
2024-11-11 16:25:13,903 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 16:25:15,675 - my_logger - INFO - 其他类指标的相关性总和为6.895715573826763
2024-11-11 16:25:15,676 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-11 16:25:16,198 - my_logger - INFO - 宏观类指标的相关性总和为2.6100894874418974
2024-11-11 16:25:16,198 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 16:25:17,952 - my_logger - INFO - 库存类指标的相关性总和为39.747273125745146
2024-11-11 16:25:17,954 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-11 16:25:20,058 - my_logger - INFO - 期货市场类指标的相关性总和为75.2309809650446
2024-11-11 16:25:20,060 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-11 16:25:21,468 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.965636774751343
2024-11-11 16:25:21,469 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-11 16:25:21,799 - my_logger - INFO - 运输类指标的相关性总和为1.0268007380121404
2024-11-11 16:25:21,800 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 16:25:23,460 - my_logger - INFO - 进出口类指标的相关性总和为12.355097996621248
2024-11-11 16:25:23,461 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 16:25:25,712 - my_logger - INFO - 需求类指标的相关性总和为15.143199077722528
2024-11-11 16:25:25,713 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 16:25:26,169 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 16:25:30,117 - my_logger - INFO - 制作报告end
2024-11-11 16:25:30,118 - my_logger - INFO - 模型训练完成
2024-11-11 16:25:36,479 - my_logger - INFO - 邮件发送成功!
2024-11-11 16:36:30,904 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 16:36:30,904 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 16:36:30,906 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-27
2024-11-11 16:36:30,906 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-27
2024-11-11 16:37:22,896 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 355)
2024-11-11 16:37:22,896 - my_logger - INFO - 删除两月不更新特征前数据量:(2492, 355)
2024-11-11 16:37:23,629 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 312)
2024-11-11 16:37:23,629 - my_logger - INFO - 删除两月不更新特征后数据量:(2492, 312)
2024-11-11 16:37:23,634 - my_logger - INFO - 删除预测列为空值的行后数据量:(647, 312)
2024-11-11 16:37:23,634 - my_logger - INFO - 删除预测列为空值的行后数据量:(647, 312)
2024-11-11 16:37:23,637 - my_logger - INFO - 删除全为空值的列后数据量:(647, 312)
2024-11-11 16:37:23,637 - my_logger - INFO - 删除全为空值的列后数据量:(647, 312)
2024-11-11 16:37:26,726 - my_logger - INFO - 日度(218) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
213 PVC期货主力
214 PE期货收盘价
215 PP连续-1月
216 PP连续-5月
217 PP连续-9月
[218 rows x 3 columns]
2024-11-11 16:37:26,726 - my_logger - INFO - 日度(218) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
213 PVC期货主力
214 PE期货收盘价
215 PP连续-1月
216 PP连续-5月
217 PP连续-9月
[218 rows x 3 columns]
2024-11-11 16:37:26,773 - my_logger - INFO - 特征信息总共有309个,日度(218),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 16:37:26,773 - my_logger - INFO - 特征信息总共有309个,日度(218),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 16:37:26,777 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 16:37:26,777 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 16:37:27,785 - my_logger - INFO - 开始训练模型...
2024-11-11 16:37:27,785 - my_logger - INFO - 开始训练模型...
2024-11-11 16:37:27,800 - my_logger - INFO - Training set head:
2024-11-11 16:37:27,800 - my_logger - INFO - Training set head:
2024-11-11 16:37:27,839 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) ... is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 ... 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 ... 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 ... 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 ... 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 ... 0.0 0.0 0.0 1
[5 rows x 327 columns]
2024-11-11 16:37:27,839 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) ... is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 ... 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 ... 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 ... 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 ... 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 ... 0.0 0.0 0.0 1
[5 rows x 327 columns]
2024-11-11 16:37:28,770 - my_logger - INFO -
Testing set head:
2024-11-11 16:37:28,770 - my_logger - INFO -
Testing set head:
2024-11-11 16:37:28,772 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) ... is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 ... 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 ... 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 ... 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 ... 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 ... 0.0 0.0 0.0 1
[5 rows x 327 columns]
2024-11-11 16:37:28,772 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) ... is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 ... 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 ... 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 ... 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 ... 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 ... 0.0 0.0 0.0 1
[5 rows x 327 columns]
2024-11-11 16:51:03,347 - my_logger - INFO - 模型训练完成
2024-11-11 16:51:03,347 - my_logger - INFO - 模型训练完成
2024-11-11 16:51:03,353 - my_logger - INFO - 训练数据绘图ing
2024-11-11 16:51:03,353 - my_logger - INFO - 训练数据绘图ing
2024-11-11 16:51:12,938 - my_logger - INFO - 训练数据绘图end
2024-11-11 16:51:12,938 - my_logger - INFO - 训练数据绘图end
2024-11-11 16:51:12,939 - my_logger - INFO - 制作报告ing
2024-11-11 16:51:12,939 - my_logger - INFO - 制作报告ing
2024-11-11 16:51:13,170 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 16:51:13,170 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 16:51:16,439 - my_logger - INFO - 价差类指标的相关性总和为8.78111058703142
2024-11-11 16:51:16,439 - my_logger - INFO - 价差类指标的相关性总和为8.78111058703142
2024-11-11 16:51:16,442 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 16:51:16,442 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 16:51:23,375 - my_logger - INFO - 价格类指标的相关性总和为91.03019288282806
2024-11-11 16:51:23,375 - my_logger - INFO - 价格类指标的相关性总和为91.03019288282806
2024-11-11 16:51:23,377 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 16:51:23,377 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 16:51:26,726 - my_logger - INFO - 供应类指标的相关性总和为16.606277422709045
2024-11-11 16:51:26,726 - my_logger - INFO - 供应类指标的相关性总和为16.606277422709045
2024-11-11 16:51:26,728 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 16:51:26,728 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 16:51:29,424 - my_logger - INFO - 其他类指标的相关性总和为10.924230164756004
2024-11-11 16:51:29,424 - my_logger - INFO - 其他类指标的相关性总和为10.924230164756004
2024-11-11 16:51:29,426 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 16:51:29,426 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 16:51:33,251 - my_logger - INFO - 库存类指标的相关性总和为12.204138937553148
2024-11-11 16:51:33,251 - my_logger - INFO - 库存类指标的相关性总和为12.204138937553148
2024-11-11 16:51:33,253 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 16:51:33,253 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 16:51:34,106 - my_logger - INFO - 进出口类指标的相关性总和为1.3233134167507297
2024-11-11 16:51:34,106 - my_logger - INFO - 进出口类指标的相关性总和为1.3233134167507297
2024-11-11 16:51:34,109 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 16:51:34,109 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 16:51:36,771 - my_logger - INFO - 需求类指标的相关性总和为6.569669770565007
2024-11-11 16:51:36,771 - my_logger - INFO - 需求类指标的相关性总和为6.569669770565007
2024-11-11 16:51:36,773 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 16:51:36,773 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 16:51:37,415 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 16:51:37,415 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 16:51:41,975 - my_logger - INFO - 制作报告end
2024-11-11 16:51:41,975 - my_logger - INFO - 制作报告end
2024-11-11 16:51:41,976 - my_logger - INFO - 模型训练完成
2024-11-11 16:51:41,976 - my_logger - INFO - 模型训练完成
2024-11-11 16:51:46,770 - my_logger - INFO - 邮件发送成功!
2024-11-11 16:51:46,770 - my_logger - INFO - 邮件发送成功!
2024-11-11 17:01:39,476 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 17:01:39,476 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 17:01:39,479 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-28
2024-11-11 17:01:39,479 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-28
2024-11-11 17:02:35,528 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 355)
2024-11-11 17:02:35,528 - my_logger - INFO - 删除两月不更新特征前数据量:(2493, 355)
2024-11-11 17:02:36,229 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 313)
2024-11-11 17:02:36,229 - my_logger - INFO - 删除两月不更新特征后数据量:(2493, 313)
2024-11-11 17:02:36,234 - my_logger - INFO - 删除预测列为空值的行后数据量:(648, 313)
2024-11-11 17:02:36,234 - my_logger - INFO - 删除预测列为空值的行后数据量:(648, 313)
2024-11-11 17:02:36,236 - my_logger - INFO - 删除全为空值的列后数据量:(648, 313)
2024-11-11 17:02:36,236 - my_logger - INFO - 删除全为空值的列后数据量:(648, 313)
2024-11-11 17:02:39,423 - my_logger - INFO - 日度(219) 周度(92) 105天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PVC期货主力
215 PE期货收盘价
216 PP连续-1月
217 PP连续-5月
218 PP连续-9月
[219 rows x 3 columns]
2024-11-11 17:02:39,423 - my_logger - INFO - 日度(219) 周度(92) 105天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PVC期货主力
215 PE期货收盘价
216 PP连续-1月
217 PP连续-5月
218 PP连续-9月
[219 rows x 3 columns]
2024-11-11 17:02:39,462 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),105天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 17:02:39,462 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),105天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 17:02:39,465 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 17:02:39,465 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 17:02:41,024 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '7420.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 17:02:41,024 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-28 00:00:00', y = '7420.0' WHERE ds = '2024-10-28 00:00:00'
2024-11-11 17:02:41,036 - my_logger - INFO - 开始训练模型...
2024-11-11 17:02:41,036 - my_logger - INFO - 开始训练模型...
2024-11-11 17:02:41,052 - my_logger - INFO - Training set head:
2024-11-11 17:02:41,052 - my_logger - INFO - Training set head:
2024-11-11 17:02:41,054 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 17:02:41,054 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 17:02:42,209 - my_logger - INFO -
Testing set head:
2024-11-11 17:02:42,209 - my_logger - INFO -
Testing set head:
2024-11-11 17:02:42,210 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 260.0 ... 0.0 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 17:02:42,210 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 260.0 ... 0.0 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 17:15:12,245 - my_logger - INFO - 模型训练完成
2024-11-11 17:15:12,245 - my_logger - INFO - 模型训练完成
2024-11-11 17:15:12,250 - my_logger - INFO - 训练数据绘图ing
2024-11-11 17:15:12,250 - my_logger - INFO - 训练数据绘图ing
2024-11-11 17:15:22,597 - my_logger - INFO - 训练数据绘图end
2024-11-11 17:15:22,597 - my_logger - INFO - 训练数据绘图end
2024-11-11 17:15:22,600 - my_logger - INFO - 制作报告ing
2024-11-11 17:15:22,600 - my_logger - INFO - 制作报告ing
2024-11-11 17:15:22,827 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 17:15:22,827 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 17:15:26,412 - my_logger - INFO - 价差类指标的相关性总和为8.773580695063941
2024-11-11 17:15:26,412 - my_logger - INFO - 价差类指标的相关性总和为8.773580695063941
2024-11-11 17:15:26,417 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 17:15:26,417 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 17:15:31,796 - my_logger - INFO - 价格类指标的相关性总和为91.95624486490597
2024-11-11 17:15:31,796 - my_logger - INFO - 价格类指标的相关性总和为91.95624486490597
2024-11-11 17:15:31,799 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 17:15:31,799 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 17:15:37,613 - my_logger - INFO - 供应类指标的相关性总和为16.611801889120876
2024-11-11 17:15:37,613 - my_logger - INFO - 供应类指标的相关性总和为16.611801889120876
2024-11-11 17:15:37,615 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 17:15:37,615 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 17:15:40,482 - my_logger - INFO - 其他类指标的相关性总和为10.922924390847362
2024-11-11 17:15:40,482 - my_logger - INFO - 其他类指标的相关性总和为10.922924390847362
2024-11-11 17:15:40,493 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 17:15:40,493 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 17:15:44,722 - my_logger - INFO - 库存类指标的相关性总和为12.191245403217088
2024-11-11 17:15:44,722 - my_logger - INFO - 库存类指标的相关性总和为12.191245403217088
2024-11-11 17:15:44,725 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 17:15:44,725 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 17:15:45,712 - my_logger - INFO - 进出口类指标的相关性总和为1.3223580338808216
2024-11-11 17:15:45,712 - my_logger - INFO - 进出口类指标的相关性总和为1.3223580338808216
2024-11-11 17:15:45,714 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 17:15:45,714 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 17:15:48,670 - my_logger - INFO - 需求类指标的相关性总和为6.560304653319002
2024-11-11 17:15:48,670 - my_logger - INFO - 需求类指标的相关性总和为6.560304653319002
2024-11-11 17:15:48,672 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 17:15:48,672 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 17:15:49,294 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 17:15:49,294 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 17:15:53,866 - my_logger - INFO - 制作报告end
2024-11-11 17:15:53,866 - my_logger - INFO - 制作报告end
2024-11-11 17:15:53,867 - my_logger - INFO - 模型训练完成
2024-11-11 17:15:53,867 - my_logger - INFO - 模型训练完成
2024-11-11 17:15:58,880 - my_logger - INFO - 邮件发送成功!
2024-11-11 17:15:58,880 - my_logger - INFO - 邮件发送成功!
2024-11-11 17:58:26,088 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 17:58:26,088 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 17:58:26,091 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-29
2024-11-11 17:58:26,091 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-29
2024-11-11 17:59:18,845 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 355)
2024-11-11 17:59:18,845 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 355)
2024-11-11 17:59:19,532 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 313)
2024-11-11 17:59:19,532 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 313)
2024-11-11 17:59:19,536 - my_logger - INFO - 删除预测列为空值的行后数据量:(649, 313)
2024-11-11 17:59:19,536 - my_logger - INFO - 删除预测列为空值的行后数据量:(649, 313)
2024-11-11 17:59:19,540 - my_logger - INFO - 删除全为空值的列后数据量:(649, 313)
2024-11-11 17:59:19,540 - my_logger - INFO - 删除全为空值的列后数据量:(649, 313)
2024-11-11 17:59:22,558 - my_logger - INFO - 日度(219) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PVC期货主力
215 PE期货收盘价
216 PP连续-1月
217 PP连续-5月
218 PP连续-9月
[219 rows x 3 columns]
2024-11-11 17:59:22,558 - my_logger - INFO - 日度(219) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PVC期货主力
215 PE期货收盘价
216 PP连续-1月
217 PP连续-5月
218 PP连续-9月
[219 rows x 3 columns]
2024-11-11 17:59:22,598 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 17:59:22,598 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 17:59:22,602 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 17:59:22,602 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 17:59:23,744 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '7440.0' WHERE ds = '2024-10-29 00:00:00'
2024-11-11 17:59:23,744 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '7440.0' WHERE ds = '2024-10-29 00:00:00'
2024-11-11 17:59:23,757 - my_logger - INFO - 开始训练模型...
2024-11-11 17:59:23,757 - my_logger - INFO - 开始训练模型...
2024-11-11 17:59:23,774 - my_logger - INFO - Training set head:
2024-11-11 17:59:23,774 - my_logger - INFO - Training set head:
2024-11-11 17:59:23,775 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 17:59:23,775 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 17:59:24,909 - my_logger - INFO -
Testing set head:
2024-11-11 17:59:24,909 - my_logger - INFO -
Testing set head:
2024-11-11 17:59:24,911 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 260.0 ... 0.0 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 17:59:24,911 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 260.0 ... 0.0 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 18:11:07,017 - my_logger - INFO - 模型训练完成
2024-11-11 18:11:07,017 - my_logger - INFO - 模型训练完成
2024-11-11 18:11:07,023 - my_logger - INFO - 训练数据绘图ing
2024-11-11 18:11:07,023 - my_logger - INFO - 训练数据绘图ing
2024-11-11 18:11:13,953 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '7423.5', Informer = '7440.3647', LSTM = '7481.942', iTransformer = '7322.3667', TSMixer = '7439.5015', TSMixerx = '7300.1787', PatchTST = '7414.331', RNN = '7480.0415', GRU = '7456.8594', TCN = '7499.217', BiTCN = '7399.776', DilatedRNN = '7475.95', MLP = '7368.301', DLinear = '7418.6167', NLinear = '7451.4243', TFT = '7431.189', FEDformer = '7458.764', StemGNN = '7456.659', MLPMultivariate = '7375.3394', TiDE = '7427.4683', DeepNPTS = '7425.104' WHERE ds = '2024-10-30 00:00:00'
2024-11-11 18:11:13,953 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '7423.5', Informer = '7440.3647', LSTM = '7481.942', iTransformer = '7322.3667', TSMixer = '7439.5015', TSMixerx = '7300.1787', PatchTST = '7414.331', RNN = '7480.0415', GRU = '7456.8594', TCN = '7499.217', BiTCN = '7399.776', DilatedRNN = '7475.95', MLP = '7368.301', DLinear = '7418.6167', NLinear = '7451.4243', TFT = '7431.189', FEDformer = '7458.764', StemGNN = '7456.659', MLPMultivariate = '7375.3394', TiDE = '7427.4683', DeepNPTS = '7425.104' WHERE ds = '2024-10-30 00:00:00'
2024-11-11 18:11:17,203 - my_logger - INFO - 训练数据绘图end
2024-11-11 18:11:17,203 - my_logger - INFO - 训练数据绘图end
2024-11-11 18:11:17,205 - my_logger - INFO - 制作报告ing
2024-11-11 18:11:17,205 - my_logger - INFO - 制作报告ing
2024-11-11 18:11:17,429 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 18:11:17,429 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 18:11:21,041 - my_logger - INFO - 价差类指标的相关性总和为8.767762209641482
2024-11-11 18:11:21,041 - my_logger - INFO - 价差类指标的相关性总和为8.767762209641482
2024-11-11 18:11:21,045 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 18:11:21,045 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 18:11:27,760 - my_logger - INFO - 价格类指标的相关性总和为91.95281242548083
2024-11-11 18:11:27,760 - my_logger - INFO - 价格类指标的相关性总和为91.95281242548083
2024-11-11 18:11:27,763 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 18:11:27,763 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 18:11:31,232 - my_logger - INFO - 供应类指标的相关性总和为16.613277063356406
2024-11-11 18:11:31,232 - my_logger - INFO - 供应类指标的相关性总和为16.613277063356406
2024-11-11 18:11:31,235 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 18:11:31,235 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 18:11:34,099 - my_logger - INFO - 其他类指标的相关性总和为10.922251253893403
2024-11-11 18:11:34,099 - my_logger - INFO - 其他类指标的相关性总和为10.922251253893403
2024-11-11 18:11:34,102 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 18:11:34,102 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 18:11:40,147 - my_logger - INFO - 库存类指标的相关性总和为12.181794013196976
2024-11-11 18:11:40,147 - my_logger - INFO - 库存类指标的相关性总和为12.181794013196976
2024-11-11 18:11:40,154 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 18:11:40,154 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 18:11:41,131 - my_logger - INFO - 进出口类指标的相关性总和为1.3214777062569736
2024-11-11 18:11:41,131 - my_logger - INFO - 进出口类指标的相关性总和为1.3214777062569736
2024-11-11 18:11:41,133 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 18:11:41,133 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 18:11:43,798 - my_logger - INFO - 需求类指标的相关性总和为6.552429570275352
2024-11-11 18:11:43,798 - my_logger - INFO - 需求类指标的相关性总和为6.552429570275352
2024-11-11 18:11:43,800 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 18:11:43,800 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 18:11:44,426 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 18:11:44,426 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 18:11:49,132 - my_logger - INFO - 制作报告end
2024-11-11 18:11:49,132 - my_logger - INFO - 制作报告end
2024-11-11 18:11:49,134 - my_logger - INFO - 模型训练完成
2024-11-11 18:11:49,134 - my_logger - INFO - 模型训练完成
2024-11-11 18:11:54,059 - my_logger - INFO - 邮件发送成功!
2024-11-11 18:11:54,059 - my_logger - INFO - 邮件发送成功!
2024-11-11 18:14:10,105 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 18:14:10,105 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-11 18:14:10,108 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-30
2024-11-11 18:14:10,108 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date 2024-10-30
2024-11-11 18:15:04,803 - my_logger - INFO - 删除两月不更新特征前数据量:(2495, 355)
2024-11-11 18:15:04,803 - my_logger - INFO - 删除两月不更新特征前数据量:(2495, 355)
2024-11-11 18:15:05,492 - my_logger - INFO - 删除两月不更新特征后数据量:(2495, 313)
2024-11-11 18:15:05,492 - my_logger - INFO - 删除两月不更新特征后数据量:(2495, 313)
2024-11-11 18:15:05,497 - my_logger - INFO - 删除预测列为空值的行后数据量:(650, 313)
2024-11-11 18:15:05,497 - my_logger - INFO - 删除预测列为空值的行后数据量:(650, 313)
2024-11-11 18:15:05,500 - my_logger - INFO - 删除全为空值的列后数据量:(650, 313)
2024-11-11 18:15:05,500 - my_logger - INFO - 删除全为空值的列后数据量:(650, 313)
2024-11-11 18:15:08,542 - my_logger - INFO - 日度(219) 周度(92) 105天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PVC期货主力
215 PE期货收盘价
216 PP连续-1月
217 PP连续-5月
218 PP连续-9月
[219 rows x 3 columns]
2024-11-11 18:15:08,542 - my_logger - INFO - 日度(219) 周度(92) 105天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PVC期货主力
215 PE期货收盘价
216 PP连续-1月
217 PP连续-5月
218 PP连续-9月
[219 rows x 3 columns]
2024-11-11 18:15:08,583 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),105天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 18:15:08,583 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),105天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-11 18:15:08,586 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 18:15:08,586 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-11 18:15:09,622 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', y = '7350.0' WHERE ds = '2024-10-30 00:00:00'
2024-11-11 18:15:09,622 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', y = '7350.0' WHERE ds = '2024-10-30 00:00:00'
2024-11-11 18:15:09,624 - my_logger - INFO - 开始训练模型...
2024-11-11 18:15:09,624 - my_logger - INFO - 开始训练模型...
2024-11-11 18:15:09,641 - my_logger - INFO - Training set head:
2024-11-11 18:15:09,641 - my_logger - INFO - Training set head:
2024-11-11 18:15:09,642 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 18:15:09,642 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
958 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
957 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
954 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
953 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
952 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 18:15:10,819 - my_logger - INFO -
Testing set head:
2024-11-11 18:15:10,819 - my_logger - INFO -
Testing set head:
2024-11-11 18:15:10,821 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 260.0 ... 0.0 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 18:15:10,821 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
770 2022-09-28 113.4056 260.0 180.0 260.0 ... 0.0 0.0 0.0 0.0 1
769 2022-09-29 300.7149 171.0 21.0 191.0 ... 0.0 0.0 0.0 0.0 1
768 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
760 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
759 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-11 18:27:13,111 - my_logger - INFO - 模型训练完成
2024-11-11 18:27:13,111 - my_logger - INFO - 模型训练完成
2024-11-11 18:27:13,118 - my_logger - INFO - 训练数据绘图ing
2024-11-11 18:27:13,118 - my_logger - INFO - 训练数据绘图ing
2024-11-11 18:27:19,432 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', NHITS = '7365.5396', Informer = '7426.6055', LSTM = '7465.0933', iTransformer = '7265.2915', TSMixer = '7415.8325', TSMixerx = '7356.929', PatchTST = '7313.451', RNN = '7390.1045', GRU = '7444.3335', TCN = '7471.1367', BiTCN = '7350.23', DilatedRNN = '7516.696', MLP = '7333.1333', DLinear = '7421.061', NLinear = '7371.6426', TFT = '7332.3345', StemGNN = '7445.6953', MLPMultivariate = '7313.186', TiDE = '7401.6284', DeepNPTS = '7439.105' WHERE ds = '2024-10-31 00:00:00'
2024-11-11 18:27:19,432 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-31 00:00:00', NHITS = '7365.5396', Informer = '7426.6055', LSTM = '7465.0933', iTransformer = '7265.2915', TSMixer = '7415.8325', TSMixerx = '7356.929', PatchTST = '7313.451', RNN = '7390.1045', GRU = '7444.3335', TCN = '7471.1367', BiTCN = '7350.23', DilatedRNN = '7516.696', MLP = '7333.1333', DLinear = '7421.061', NLinear = '7371.6426', TFT = '7332.3345', StemGNN = '7445.6953', MLPMultivariate = '7313.186', TiDE = '7401.6284', DeepNPTS = '7439.105' WHERE ds = '2024-10-31 00:00:00'
2024-11-11 18:27:22,476 - my_logger - INFO - 训练数据绘图end
2024-11-11 18:27:22,476 - my_logger - INFO - 训练数据绘图end
2024-11-11 18:27:22,478 - my_logger - INFO - 制作报告ing
2024-11-11 18:27:22,478 - my_logger - INFO - 制作报告ing
2024-11-11 18:27:22,684 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 18:27:22,684 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-11 18:27:26,133 - my_logger - INFO - 价差类指标的相关性总和为8.76054891572355
2024-11-11 18:27:26,133 - my_logger - INFO - 价差类指标的相关性总和为8.76054891572355
2024-11-11 18:27:26,136 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 18:27:26,136 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-11 18:27:32,964 - my_logger - INFO - 价格类指标的相关性总和为91.94806167142295
2024-11-11 18:27:32,964 - my_logger - INFO - 价格类指标的相关性总和为91.94806167142295
2024-11-11 18:27:32,967 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 18:27:32,967 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-11 18:27:36,454 - my_logger - INFO - 供应类指标的相关性总和为16.62363698842531
2024-11-11 18:27:36,454 - my_logger - INFO - 供应类指标的相关性总和为16.62363698842531
2024-11-11 18:27:36,458 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 18:27:36,458 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-11 18:27:39,405 - my_logger - INFO - 其他类指标的相关性总和为10.92184765395231
2024-11-11 18:27:39,405 - my_logger - INFO - 其他类指标的相关性总和为10.92184765395231
2024-11-11 18:27:39,407 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 18:27:39,407 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-11 18:27:43,691 - my_logger - INFO - 库存类指标的相关性总和为12.17530808405985
2024-11-11 18:27:43,691 - my_logger - INFO - 库存类指标的相关性总和为12.17530808405985
2024-11-11 18:27:43,693 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 18:27:43,693 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-11 18:27:44,617 - my_logger - INFO - 进出口类指标的相关性总和为1.320273984455585
2024-11-11 18:27:44,617 - my_logger - INFO - 进出口类指标的相关性总和为1.320273984455585
2024-11-11 18:27:44,620 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 18:27:44,620 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-11 18:27:47,733 - my_logger - INFO - 需求类指标的相关性总和为6.542365113717947
2024-11-11 18:27:47,733 - my_logger - INFO - 需求类指标的相关性总和为6.542365113717947
2024-11-11 18:27:47,736 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 18:27:47,736 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-11 18:27:48,356 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 18:27:48,356 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-11 18:27:53,004 - my_logger - INFO - 制作报告end
2024-11-11 18:27:53,004 - my_logger - INFO - 制作报告end
2024-11-11 18:27:53,005 - my_logger - INFO - 模型训练完成
2024-11-11 18:27:53,005 - my_logger - INFO - 模型训练完成
2024-11-11 18:27:58,129 - my_logger - INFO - 邮件发送成功!
2024-11-11 18:27:58,129 - my_logger - INFO - 邮件发送成功!
2024-11-12 11:09:41,630 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 11:09:41,631 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 11:11:16,519 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 11:11:17,509 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 11:11:17,514 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 11:11:17,518 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 11:11:22,512 - my_logger - INFO - Libya列数据为空
2024-11-12 11:11:22,513 - my_logger - INFO - Malaysia列数据为空
2024-11-12 11:11:22,879 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 11:11:22,891 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 11:11:22,893 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 11:11:24,599 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 11:11:24,606 - my_logger - INFO - 开始训练模型...
2024-11-12 11:11:24,626 - my_logger - INFO - Training set head:
2024-11-12 11:11:24,626 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 558 columns]
2024-11-12 11:11:24,955 - my_logger - INFO -
Testing set head:
2024-11-12 11:11:24,955 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 558 columns]
2024-11-12 11:21:20,118 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 11:21:20,118 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 11:22:48,774 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 11:22:49,807 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 11:22:49,812 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 11:22:49,818 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 11:22:54,624 - my_logger - INFO - Libya列数据为空
2024-11-12 11:22:54,628 - my_logger - INFO - Malaysia列数据为空
2024-11-12 11:22:55,005 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 11:22:55,016 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 11:22:55,018 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 11:22:56,530 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 11:22:56,537 - my_logger - INFO - 开始训练模型...
2024-11-12 11:22:56,555 - my_logger - INFO - Training set head:
2024-11-12 11:22:56,556 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 558 columns]
2024-11-12 11:22:56,859 - my_logger - INFO -
Testing set head:
2024-11-12 11:22:56,859 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 558 columns]
2024-11-12 11:30:25,906 - my_logger - INFO - 模型训练完成
2024-11-12 11:30:25,907 - my_logger - INFO - 训练数据绘图ing
2024-11-12 11:30:28,260 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 11:30:30,020 - my_logger - INFO - 训练数据绘图end
2024-11-12 11:30:30,021 - my_logger - INFO - 制作报告ing
2024-11-12 11:30:30,399 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 11:30:30,890 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 11:30:30,891 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 11:30:32,752 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 11:30:32,753 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 11:30:35,023 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 11:30:35,025 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 11:30:35,392 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 11:30:35,393 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 11:30:37,161 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 11:30:37,162 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 11:30:37,688 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 11:30:37,689 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 11:30:39,634 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 11:30:39,636 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 11:30:41,918 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 11:30:41,919 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 11:30:43,446 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 11:30:43,448 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 11:30:43,794 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 11:30:43,795 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 11:30:45,637 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 11:30:45,639 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 11:30:47,571 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 11:30:47,572 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 11:30:47,994 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 11:30:52,450 - my_logger - INFO - 制作报告end
2024-11-12 11:30:52,450 - my_logger - INFO - 模型训练完成
2024-11-12 11:30:54,942 - my_logger - INFO - 邮件发送成功!
2024-11-12 11:33:52,370 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 11:33:52,370 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 11:35:20,859 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 11:35:21,857 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 11:35:21,862 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 11:35:21,866 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 11:35:26,695 - my_logger - INFO - Libya列数据为空
2024-11-12 11:35:26,698 - my_logger - INFO - Malaysia列数据为空
2024-11-12 11:35:27,072 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 11:35:27,083 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 11:35:27,085 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 11:35:28,602 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 11:35:28,609 - my_logger - INFO - 开始训练模型...
2024-11-12 11:35:28,609 - my_logger - INFO - 模型训练完成
2024-11-12 11:35:28,610 - my_logger - INFO - 训练数据绘图ing
2024-11-12 11:35:30,964 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 11:35:32,710 - my_logger - INFO - 训练数据绘图end
2024-11-12 11:35:32,711 - my_logger - INFO - 制作报告ing
2024-11-12 11:35:33,088 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 11:35:33,543 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 11:35:33,545 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 11:35:35,602 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 11:35:35,603 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 11:35:37,402 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 11:35:37,403 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 11:35:37,733 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 11:35:37,734 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 11:35:39,567 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 11:35:39,568 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 11:35:40,047 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 11:35:40,048 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 11:35:42,252 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 11:35:42,253 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 11:35:44,074 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 11:35:44,075 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 11:35:45,560 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 11:35:45,562 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 11:35:45,905 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 11:35:45,906 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 11:35:48,150 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 11:35:48,152 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 11:35:50,023 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 11:35:50,025 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 11:35:50,423 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 11:35:54,411 - my_logger - INFO - 制作报告end
2024-11-12 11:35:54,412 - my_logger - INFO - 模型训练完成
2024-11-12 11:35:56,941 - my_logger - INFO - 邮件发送成功!
2024-11-12 11:42:40,202 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 11:42:40,203 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 11:44:07,725 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 11:44:08,751 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 11:44:08,757 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 11:44:08,762 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 11:44:13,589 - my_logger - INFO - Libya列数据为空
2024-11-12 11:44:13,592 - my_logger - INFO - Malaysia列数据为空
2024-11-12 11:44:13,969 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 11:44:13,982 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 11:44:13,983 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 11:44:15,438 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 11:44:15,445 - my_logger - INFO - 开始训练模型...
2024-11-12 11:44:15,446 - my_logger - INFO - 模型训练完成
2024-11-12 11:44:15,446 - my_logger - INFO - 训练数据绘图ing
2024-11-12 11:44:17,802 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 11:44:19,573 - my_logger - INFO - 训练数据绘图end
2024-11-12 11:44:19,573 - my_logger - INFO - 制作报告ing
2024-11-12 11:44:19,941 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 11:44:20,396 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 11:44:20,398 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 11:44:22,468 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 11:44:22,469 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 11:44:24,323 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 11:44:24,324 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 11:44:24,660 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 11:44:24,661 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 11:44:26,441 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 11:44:26,442 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 11:44:26,995 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 11:44:26,996 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 11:44:29,167 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 11:44:29,169 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 11:44:31,034 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 11:44:31,036 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 11:44:32,523 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 11:44:32,524 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 11:44:32,877 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 11:44:32,878 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 11:44:35,105 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 11:44:35,107 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 11:44:36,896 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 11:44:36,897 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 11:44:37,319 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 11:44:41,459 - my_logger - INFO - 制作报告end
2024-11-12 11:44:41,460 - my_logger - INFO - 模型训练完成
2024-11-12 11:44:44,220 - my_logger - INFO - 邮件发送成功!
2024-11-12 11:47:03,425 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 11:47:03,425 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 11:48:29,427 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 11:48:30,437 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 11:48:30,442 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 11:48:30,448 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 11:48:35,101 - my_logger - INFO - Libya列数据为空
2024-11-12 11:48:35,104 - my_logger - INFO - Malaysia列数据为空
2024-11-12 11:48:35,485 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 11:48:35,495 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 11:48:35,497 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 11:48:36,930 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 11:48:36,938 - my_logger - INFO - 开始训练模型...
2024-11-12 11:48:36,938 - my_logger - INFO - 模型训练完成
2024-11-12 11:48:36,939 - my_logger - INFO - 训练数据绘图ing
2024-11-12 11:48:39,130 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 11:48:40,837 - my_logger - INFO - 训练数据绘图end
2024-11-12 11:48:40,838 - my_logger - INFO - 制作报告ing
2024-11-12 11:48:41,186 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 11:48:41,656 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 11:48:41,658 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 11:48:43,648 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 11:48:43,648 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 11:48:45,399 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 11:48:45,400 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 11:48:45,707 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 11:48:45,707 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 11:48:47,440 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 11:48:47,441 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 11:48:47,909 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 11:48:47,910 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 11:48:49,998 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 11:48:49,999 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 11:48:51,766 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 11:48:51,767 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 11:48:53,175 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 11:48:53,176 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 11:48:53,511 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 11:48:53,512 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 11:48:55,669 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 11:48:55,670 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 11:48:57,432 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 11:48:57,433 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 11:48:57,820 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 11:49:01,781 - my_logger - INFO - 制作报告end
2024-11-12 11:49:01,781 - my_logger - INFO - 模型训练完成
2024-11-12 11:49:04,303 - my_logger - INFO - 邮件发送成功!
2024-11-12 12:42:29,327 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 12:42:29,328 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 12:43:59,575 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 12:44:00,607 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 12:44:00,612 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 12:44:00,617 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 12:44:05,416 - my_logger - INFO - Libya列数据为空
2024-11-12 12:44:05,418 - my_logger - INFO - Malaysia列数据为空
2024-11-12 12:44:05,792 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 12:44:05,803 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 12:44:05,805 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 12:44:07,283 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 12:44:07,290 - my_logger - INFO - 开始训练模型...
2024-11-12 12:44:07,291 - my_logger - INFO - 模型训练完成
2024-11-12 12:44:07,292 - my_logger - INFO - 训练数据绘图ing
2024-11-12 12:44:09,655 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 12:44:11,398 - my_logger - INFO - 训练数据绘图end
2024-11-12 12:44:11,398 - my_logger - INFO - 制作报告ing
2024-11-12 12:44:11,751 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 12:44:12,212 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 12:44:12,214 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 12:44:14,258 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 12:44:14,259 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 12:44:16,172 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 12:44:16,173 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 12:44:16,553 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 12:44:16,554 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 12:44:18,476 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 12:44:18,477 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 12:44:18,990 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 12:44:18,991 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 12:44:21,151 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 12:44:21,152 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 12:44:23,194 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 12:44:23,195 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 12:44:24,692 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 12:44:24,694 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 12:44:25,069 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 12:44:25,070 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 12:44:27,352 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 12:44:27,354 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 12:44:29,135 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 12:44:29,136 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 12:44:29,549 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 12:44:33,629 - my_logger - INFO - 制作报告end
2024-11-12 12:44:33,630 - my_logger - INFO - 模型训练完成
2024-11-12 12:44:36,117 - my_logger - INFO - 邮件发送成功!
2024-11-12 12:45:26,855 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 12:45:26,856 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 12:46:53,436 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 12:46:54,440 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 12:46:54,445 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 12:46:54,450 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 12:46:59,172 - my_logger - INFO - Libya列数据为空
2024-11-12 12:46:59,173 - my_logger - INFO - Malaysia列数据为空
2024-11-12 12:46:59,532 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 12:46:59,543 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 12:46:59,545 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 12:47:01,010 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 12:47:01,017 - my_logger - INFO - 开始训练模型...
2024-11-12 12:47:01,017 - my_logger - INFO - 模型训练完成
2024-11-12 12:47:01,018 - my_logger - INFO - 训练数据绘图ing
2024-11-12 12:47:03,346 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 12:47:05,053 - my_logger - INFO - 训练数据绘图end
2024-11-12 12:47:05,054 - my_logger - INFO - 制作报告ing
2024-11-12 12:47:05,405 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 12:47:05,869 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 12:47:05,871 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 12:47:07,876 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 12:47:07,877 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 12:47:09,649 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 12:47:09,651 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 12:47:09,977 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 12:47:09,978 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 12:47:11,732 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 12:47:11,734 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 12:47:12,214 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 12:47:12,215 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 12:47:14,321 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 12:47:14,323 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 12:47:16,092 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 12:47:16,093 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 12:47:17,537 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 12:47:17,538 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 12:47:17,869 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 12:47:17,870 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 12:47:20,079 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 12:47:20,080 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 12:47:21,883 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 12:47:21,884 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 12:47:22,270 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 12:47:26,249 - my_logger - INFO - 制作报告end
2024-11-12 12:47:26,250 - my_logger - INFO - 模型训练完成
2024-11-12 12:47:29,091 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:38:20,428 - my_logger - INFO - 从eta获取数据...
2024-11-12 13:38:20,428 - my_logger - INFO - 从eta获取数据...
2024-11-12 13:39:11,878 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-12 13:39:11,878 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-12 13:39:11,879 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-12 13:39:11,879 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-12 13:39:11,880 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-12 13:39:11,880 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-12 13:39:37,581 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-12 13:39:37,581 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-12 13:39:37,582 - my_logger - INFO - lmcads03 lme comdty
2024-11-12 13:39:37,582 - my_logger - INFO - lmcads03 lme comdty
2024-11-12 13:39:38,062 - my_logger - INFO - GC1 COMB Comdty
2024-11-12 13:39:38,062 - my_logger - INFO - GC1 COMB Comdty
2024-11-12 13:39:38,856 - my_logger - INFO - C2404171822
2024-11-12 13:39:38,856 - my_logger - INFO - C2404171822
2024-11-12 13:39:39,663 - my_logger - INFO - dxy curncy
2024-11-12 13:39:39,663 - my_logger - INFO - dxy curncy
2024-11-12 13:39:40,383 - my_logger - INFO - S5443199
2024-11-12 13:39:40,383 - my_logger - INFO - S5443199
2024-11-12 13:39:40,756 - my_logger - INFO - S5479800
2024-11-12 13:39:40,756 - my_logger - INFO - S5479800
2024-11-12 13:39:41,076 - my_logger - INFO - S5443108
2024-11-12 13:39:41,076 - my_logger - INFO - S5443108
2024-11-12 13:39:41,462 - my_logger - INFO - H7358586
2024-11-12 13:39:41,462 - my_logger - INFO - H7358586
2024-11-12 13:39:41,686 - my_logger - INFO - LC3FM1 INDEX
2024-11-12 13:39:41,686 - my_logger - INFO - LC3FM1 INDEX
2024-11-12 13:39:42,024 - my_logger - INFO - CNY REGN Curncy
2024-11-12 13:39:42,024 - my_logger - INFO - CNY REGN Curncy
2024-11-12 13:39:43,050 - my_logger - INFO - s0105897
2024-11-12 13:39:43,050 - my_logger - INFO - s0105897
2024-11-12 13:39:43,643 - my_logger - INFO - M0067419
2024-11-12 13:39:43,643 - my_logger - INFO - M0067419
2024-11-12 13:39:44,085 - my_logger - INFO - M0066351
2024-11-12 13:39:44,085 - my_logger - INFO - M0066351
2024-11-12 13:39:44,584 - my_logger - INFO - S0266372
2024-11-12 13:39:44,584 - my_logger - INFO - S0266372
2024-11-12 13:39:44,926 - my_logger - INFO - S0266438
2024-11-12 13:39:44,926 - my_logger - INFO - S0266438
2024-11-12 13:39:45,326 - my_logger - INFO - S0266506
2024-11-12 13:39:45,326 - my_logger - INFO - S0266506
2024-11-12 13:39:45,732 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
949 2024-11-12 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
951 2024-11-08 NaN NaN NaN NaN NaN ... 3848.42 5393.0 NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-12 13:39:45,732 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
949 2024-11-12 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
951 2024-11-08 NaN NaN NaN NaN NaN ... 3848.42 5393.0 NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-12 13:40:42,958 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:40:42,958 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:40:43,352 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:40:43,352 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:40:43,355 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:40:43,355 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:40:43,357 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:40:43,357 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:40:45,059 - my_logger - INFO - 日度(222) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:40:45,059 - my_logger - INFO - 日度(222) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:40:45,081 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:40:45,081 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:40:45,084 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:40:45,084 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:40:45,831 - my_logger - INFO - 开始训练模型...
2024-11-12 13:40:45,831 - my_logger - INFO - 开始训练模型...
2024-11-12 13:40:45,833 - my_logger - INFO - 模型训练完成
2024-11-12 13:40:45,833 - my_logger - INFO - 模型训练完成
2024-11-12 13:40:45,834 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:40:45,834 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:40:47,030 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 13:40:47,030 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '72.46164', LSTM = '72.14615', iTransformer = '70.44636', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.41043', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.84215', MLPMultivariate = '72.57026', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 13:40:48,753 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:40:48,753 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:40:48,754 - my_logger - INFO - 制作报告ing
2024-11-12 13:40:48,754 - my_logger - INFO - 制作报告ing
2024-11-12 13:40:48,862 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:40:48,862 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:40:50,779 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:40:50,779 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:40:50,781 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:40:50,781 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:40:52,609 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:40:52,609 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:40:52,611 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:40:52,611 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:40:54,395 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:40:54,395 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:40:54,396 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:40:54,396 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:40:57,361 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:40:57,361 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:40:57,362 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:40:57,362 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:40:59,077 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:40:59,077 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:40:59,079 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:40:59,079 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:40:59,549 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:40:59,549 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:40:59,551 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:40:59,551 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:41:01,081 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:41:01,081 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:41:01,083 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:41:01,083 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:41:01,427 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:41:01,427 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:41:04,142 - my_logger - INFO - 制作报告end
2024-11-12 13:41:04,142 - my_logger - INFO - 制作报告end
2024-11-12 13:41:04,143 - my_logger - INFO - 模型训练完成
2024-11-12 13:41:04,143 - my_logger - INFO - 模型训练完成
2024-11-12 13:41:06,389 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:41:06,389 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:41:38,988 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:41:38,988 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:41:38,989 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:41:38,989 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:42:07,237 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:42:07,237 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:42:07,626 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:42:07,626 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:42:07,629 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:42:07,629 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:42:07,631 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:42:07,631 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:42:09,227 - my_logger - INFO - 日度(222) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:42:09,227 - my_logger - INFO - 日度(222) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:42:09,251 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:42:09,251 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:42:09,254 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:42:09,254 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:42:09,830 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:42:09,830 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:42:09,832 - my_logger - INFO - 开始训练模型...
2024-11-12 13:42:09,832 - my_logger - INFO - 开始训练模型...
2024-11-12 13:42:09,842 - my_logger - INFO - Training set head:
2024-11-12 13:42:09,842 - my_logger - INFO - Training set head:
2024-11-12 13:42:09,844 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
964 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
963 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
960 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
959 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
958 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 13:42:09,844 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
964 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
963 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
960 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
959 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
958 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 13:42:10,461 - my_logger - INFO -
Testing set head:
2024-11-12 13:42:10,461 - my_logger - INFO -
Testing set head:
2024-11-12 13:42:10,462 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
774 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
766 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
765 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
764 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
763 2022-10-11 416.4173 208.0 178.0 228.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 13:42:10,462 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
774 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
766 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
765 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
764 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
763 2022-10-11 416.4173 208.0 178.0 228.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 13:48:29,918 - my_logger - INFO - 模型训练完成
2024-11-12 13:48:29,918 - my_logger - INFO - 模型训练完成
2024-11-12 13:48:29,920 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:48:29,920 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:48:32,979 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:48:32,979 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:48:32,980 - my_logger - INFO - 制作报告ing
2024-11-12 13:48:32,980 - my_logger - INFO - 制作报告ing
2024-11-12 13:48:33,109 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:48:33,109 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:48:34,968 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:48:34,968 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:48:34,970 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:48:34,970 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:48:37,724 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:48:37,724 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:48:37,725 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:48:37,725 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:48:39,505 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:48:39,505 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:48:39,506 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:48:39,506 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:48:40,932 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:48:40,932 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:48:40,934 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:48:40,934 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:48:43,125 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:48:43,125 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:48:43,127 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:48:43,127 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:48:43,608 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:48:43,608 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:48:43,609 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:48:43,609 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:48:45,118 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:48:45,118 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:48:45,120 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:48:45,120 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:48:45,418 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:48:45,418 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:48:48,142 - my_logger - INFO - 制作报告end
2024-11-12 13:48:48,142 - my_logger - INFO - 制作报告end
2024-11-12 13:48:48,143 - my_logger - INFO - 模型训练完成
2024-11-12 13:48:48,143 - my_logger - INFO - 模型训练完成
2024-11-12 13:48:52,788 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:48:52,788 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:52:16,085 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:52:16,085 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:52:16,086 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:52:16,086 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:52:44,446 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:52:44,446 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:52:44,850 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:52:44,850 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:52:44,853 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:52:44,853 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:52:44,855 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:52:44,855 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:52:46,427 - my_logger - INFO - 日度(222) 周度(92) 21天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:52:46,427 - my_logger - INFO - 日度(222) 周度(92) 21天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:52:46,453 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),21天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:52:46,453 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),21天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:52:46,455 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:52:46,455 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:52:47,092 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:52:47,092 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:52:47,094 - my_logger - INFO - 开始训练模型...
2024-11-12 13:52:47,094 - my_logger - INFO - 开始训练模型...
2024-11-12 13:52:47,095 - my_logger - INFO - 模型训练完成
2024-11-12 13:52:47,095 - my_logger - INFO - 模型训练完成
2024-11-12 13:52:47,096 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:52:47,096 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:52:48,070 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', NHITS = '7398.797', Informer = '7320.773', LSTM = '7467.5005', iTransformer = '7432.581', TSMixer = '7400.115', TSMixerx = '7528.0947', PatchTST = '7375.8677', RNN = '7412.4224', GRU = '7459.679', TCN = '7495.7354', BiTCN = '7361.142', DilatedRNN = '7518.6387', MLP = '7422.416', DLinear = '7423.825', NLinear = '7378.564', TFT = '7393.4556', StemGNN = '7409.818', MLPMultivariate = '7438.1733', TiDE = '7374.864', DeepNPTS = '7400.03' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 13:52:48,070 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', NHITS = '7398.797', Informer = '7320.773', LSTM = '7467.5005', iTransformer = '7432.581', TSMixer = '7400.115', TSMixerx = '7528.0947', PatchTST = '7375.8677', RNN = '7412.4224', GRU = '7459.679', TCN = '7495.7354', BiTCN = '7361.142', DilatedRNN = '7518.6387', MLP = '7422.416', DLinear = '7423.825', NLinear = '7378.564', TFT = '7393.4556', StemGNN = '7409.818', MLPMultivariate = '7438.1733', TiDE = '7374.864', DeepNPTS = '7400.03' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 13:52:49,835 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:52:49,835 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:52:49,836 - my_logger - INFO - 制作报告ing
2024-11-12 13:52:49,836 - my_logger - INFO - 制作报告ing
2024-11-12 13:52:49,949 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:52:49,949 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:52:51,995 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:52:51,995 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:52:51,998 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:52:51,998 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:52:53,833 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:52:53,833 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:52:53,834 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:52:53,834 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:52:55,666 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:52:55,666 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:52:55,668 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:52:55,668 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:52:57,326 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:52:57,326 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:52:57,328 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:52:57,328 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:52:59,150 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:52:59,150 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:52:59,151 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:52:59,151 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:52:59,656 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:52:59,656 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:52:59,658 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:52:59,658 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:53:01,158 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:53:01,158 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:53:01,159 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:53:01,159 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:53:01,470 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:53:01,470 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:53:04,158 - my_logger - INFO - 制作报告end
2024-11-12 13:53:04,158 - my_logger - INFO - 制作报告end
2024-11-12 13:53:04,159 - my_logger - INFO - 模型训练完成
2024-11-12 13:53:04,159 - my_logger - INFO - 模型训练完成
2024-11-12 13:53:06,187 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:53:06,187 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:54:47,268 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:54:47,268 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:54:47,269 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:54:47,269 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:55:16,163 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:55:16,163 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:55:16,582 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:55:16,582 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:55:16,585 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:55:16,585 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:55:16,587 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:55:16,587 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:55:18,267 - my_logger - INFO - 日度(222) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:55:18,267 - my_logger - INFO - 日度(222) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:55:18,292 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:55:18,292 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:55:18,294 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:55:18,294 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:55:18,859 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:55:18,859 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:55:18,862 - my_logger - INFO - 开始训练模型...
2024-11-12 13:55:18,862 - my_logger - INFO - 开始训练模型...
2024-11-12 13:55:18,863 - my_logger - INFO - 模型训练完成
2024-11-12 13:55:18,863 - my_logger - INFO - 模型训练完成
2024-11-12 13:55:18,864 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:55:18,864 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:55:22,372 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', NHITS = '7398.797', Informer = '7320.773', LSTM = '7467.5005', iTransformer = '7432.581', TSMixer = '7400.115', TSMixerx = '7528.0947', PatchTST = '7375.8677', RNN = '7412.4224', GRU = '7459.679', TCN = '7495.7354', BiTCN = '7361.142', DilatedRNN = '7518.6387', MLP = '7422.416', DLinear = '7423.825', NLinear = '7378.564', TFT = '7393.4556', StemGNN = '7409.818', MLPMultivariate = '7438.1733', TiDE = '7374.864', DeepNPTS = '7400.03' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 13:55:22,372 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', NHITS = '7398.797', Informer = '7320.773', LSTM = '7467.5005', iTransformer = '7432.581', TSMixer = '7400.115', TSMixerx = '7528.0947', PatchTST = '7375.8677', RNN = '7412.4224', GRU = '7459.679', TCN = '7495.7354', BiTCN = '7361.142', DilatedRNN = '7518.6387', MLP = '7422.416', DLinear = '7423.825', NLinear = '7378.564', TFT = '7393.4556', StemGNN = '7409.818', MLPMultivariate = '7438.1733', TiDE = '7374.864', DeepNPTS = '7400.03' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 13:55:24,190 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:55:24,190 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:55:24,191 - my_logger - INFO - 制作报告ing
2024-11-12 13:55:24,191 - my_logger - INFO - 制作报告ing
2024-11-12 13:55:24,304 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:55:24,304 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:55:26,279 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:55:26,279 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:55:26,281 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:55:26,281 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:55:28,196 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:55:28,196 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:55:28,198 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:55:28,198 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:55:29,973 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:55:29,973 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:55:29,974 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:55:29,974 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:55:31,617 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:55:31,617 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:55:31,619 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:55:31,619 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:55:33,418 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:55:33,418 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:55:33,420 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:55:33,420 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:55:33,928 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:55:33,928 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:55:33,929 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:55:33,929 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:55:35,419 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:55:35,419 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:55:35,420 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:55:35,420 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:55:35,744 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:55:35,744 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:55:38,379 - my_logger - INFO - 制作报告end
2024-11-12 13:55:38,379 - my_logger - INFO - 制作报告end
2024-11-12 13:55:38,380 - my_logger - INFO - 模型训练完成
2024-11-12 13:55:38,380 - my_logger - INFO - 模型训练完成
2024-11-12 13:55:40,455 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:55:40,455 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:57:20,974 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:57:20,974 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 13:57:20,975 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:57:20,975 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 13:57:49,234 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:57:49,234 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 13:57:49,634 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:57:49,634 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 13:57:49,636 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:57:49,636 - my_logger - INFO - 删除预测列为空值的行后数据量:(658, 316)
2024-11-12 13:57:49,638 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:57:49,638 - my_logger - INFO - 删除全为空值的列后数据量:(658, 316)
2024-11-12 13:57:51,333 - my_logger - INFO - 日度(222) 周度(92) 154天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:57:51,333 - my_logger - INFO - 日度(222) 周度(92) 154天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 13:57:51,358 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),154天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:57:51,358 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),154天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 13:57:51,360 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:57:51,360 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 13:57:51,921 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:57:51,921 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-11 00:00:00', y = '7400.0' WHERE ds = '2024-11-11 00:00:00'
2024-11-12 13:57:51,924 - my_logger - INFO - 开始训练模型...
2024-11-12 13:57:51,924 - my_logger - INFO - 开始训练模型...
2024-11-12 13:57:51,925 - my_logger - INFO - 模型训练完成
2024-11-12 13:57:51,925 - my_logger - INFO - 模型训练完成
2024-11-12 13:57:51,925 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:57:51,925 - my_logger - INFO - 训练数据绘图ing
2024-11-12 13:57:55,447 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', NHITS = '7398.797', Informer = '7320.773', LSTM = '7467.5005', iTransformer = '7432.581', TSMixer = '7400.115', TSMixerx = '7528.0947', PatchTST = '7375.8677', RNN = '7412.4224', GRU = '7459.679', TCN = '7495.7354', BiTCN = '7361.142', DilatedRNN = '7518.6387', MLP = '7422.416', DLinear = '7423.825', NLinear = '7378.564', TFT = '7393.4556', StemGNN = '7409.818', MLPMultivariate = '7438.1733', TiDE = '7374.864', DeepNPTS = '7400.03' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 13:57:55,447 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', NHITS = '7398.797', Informer = '7320.773', LSTM = '7467.5005', iTransformer = '7432.581', TSMixer = '7400.115', TSMixerx = '7528.0947', PatchTST = '7375.8677', RNN = '7412.4224', GRU = '7459.679', TCN = '7495.7354', BiTCN = '7361.142', DilatedRNN = '7518.6387', MLP = '7422.416', DLinear = '7423.825', NLinear = '7378.564', TFT = '7393.4556', StemGNN = '7409.818', MLPMultivariate = '7438.1733', TiDE = '7374.864', DeepNPTS = '7400.03' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 13:57:57,249 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:57:57,249 - my_logger - INFO - 训练数据绘图end
2024-11-12 13:57:57,250 - my_logger - INFO - 制作报告ing
2024-11-12 13:57:57,250 - my_logger - INFO - 制作报告ing
2024-11-12 13:57:57,380 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:57:57,380 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 13:57:59,430 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:57:59,430 - my_logger - INFO - 价差类指标的相关性总和为9.467054643765925
2024-11-12 13:57:59,432 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:57:59,432 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 13:58:01,292 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:58:01,292 - my_logger - INFO - 价格类指标的相关性总和为93.82902326716311
2024-11-12 13:58:01,294 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:58:01,294 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 13:58:03,133 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:58:03,133 - my_logger - INFO - 供应类指标的相关性总和为16.677298538903486
2024-11-12 13:58:03,135 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:58:03,135 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 13:58:04,786 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:58:04,786 - my_logger - INFO - 其他类指标的相关性总和为10.915018658220134
2024-11-12 13:58:04,788 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:58:04,788 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 13:58:06,576 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:58:06,576 - my_logger - INFO - 库存类指标的相关性总和为12.152485298912673
2024-11-12 13:58:06,577 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:58:06,577 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 13:58:07,074 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:58:07,074 - my_logger - INFO - 进出口类指标的相关性总和为1.3119601190928074
2024-11-12 13:58:07,076 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:58:07,076 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 13:58:08,604 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:58:08,604 - my_logger - INFO - 需求类指标的相关性总和为6.460910227818368
2024-11-12 13:58:08,606 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:58:08,606 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 13:58:08,904 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:58:08,904 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 13:58:11,566 - my_logger - INFO - 制作报告end
2024-11-12 13:58:11,566 - my_logger - INFO - 制作报告end
2024-11-12 13:58:11,567 - my_logger - INFO - 模型训练完成
2024-11-12 13:58:11,567 - my_logger - INFO - 模型训练完成
2024-11-12 13:58:13,542 - my_logger - INFO - 邮件发送成功!
2024-11-12 13:58:13,542 - my_logger - INFO - 邮件发送成功!
2024-11-12 14:13:43,578 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 14:13:43,579 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 14:15:13,224 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 14:15:14,252 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 14:15:14,257 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 14:15:14,262 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 14:15:19,150 - my_logger - INFO - Libya列数据为空
2024-11-12 14:15:19,153 - my_logger - INFO - Malaysia列数据为空
2024-11-12 14:15:19,511 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 14:15:19,523 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 14:15:19,525 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 14:15:21,007 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 14:15:21,015 - my_logger - INFO - 开始训练模型...
2024-11-12 14:15:21,034 - my_logger - INFO - Training set head:
2024-11-12 14:15:21,035 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2499 2018-01-02 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2498 2018-01-03 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2497 2018-01-04 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2496 2018-01-05 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
2493 2018-01-08 37951.0 732.4702 205.1905 61698.0 66675.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 558 columns]
2024-11-12 14:15:21,376 - my_logger - INFO -
Testing set head:
2024-11-12 14:15:21,377 - my_logger - INFO - ds EIA美国油品需求 中国汽柴油表需 DOE-美国汽油产量超季节性/3年 美国汽油表需(周度) 美国汽油产量(周度) ... is_month_end is_quarter_start is_quarter_end is_year_start is_year_end unique_id
2000 2019-05-16 36130.0 732.4702 -199.1429 64036.0 69384.0 ... 0.0 0.0 0.0 0.0 0.0 1
1999 2019-05-17 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1996 2019-05-20 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1995 2019-05-21 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
1994 2019-05-22 36227.0 732.4702 -174.6190 66003.0 69181.0 ... 0.0 0.0 0.0 0.0 0.0 1
[5 rows x 558 columns]
2024-11-12 14:22:54,265 - my_logger - INFO - 模型训练完成
2024-11-12 14:22:54,266 - my_logger - INFO - 训练数据绘图ing
2024-11-12 14:22:56,607 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 14:22:58,355 - my_logger - INFO - 训练数据绘图end
2024-11-12 14:22:58,355 - my_logger - INFO - 制作报告ing
2024-11-12 14:22:58,724 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 14:22:59,224 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 14:22:59,225 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 14:23:01,107 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 14:23:01,108 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 14:23:03,234 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 14:23:03,236 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 14:23:03,564 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 14:23:03,565 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 14:23:05,327 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 14:23:05,328 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 14:23:05,833 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 14:23:05,834 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 14:23:07,639 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 14:23:07,640 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 14:23:09,935 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 14:23:09,936 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 14:23:11,371 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 14:23:11,372 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 14:23:11,712 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 14:23:11,713 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 14:23:13,453 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 14:23:13,455 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 14:23:15,307 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 14:23:15,308 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 14:23:15,736 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 14:23:20,324 - my_logger - INFO - 制作报告end
2024-11-12 14:23:20,325 - my_logger - INFO - 模型训练完成
2024-11-12 14:23:26,331 - my_logger - INFO - 邮件发送成功!
2024-11-12 14:27:05,481 - my_logger - INFO - 从eta获取数据...
2024-11-12 14:27:06,272 - my_logger - INFO - 跳过指标 美国:东海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 14:27:06,557 - my_logger - INFO - 跳过指标 美国:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 14:27:06,761 - my_logger - INFO - 跳过指标 美国:洛基山地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 14:27:06,979 - my_logger - INFO - 跳过指标 美国:墨西哥湾沿岸:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 14:27:07,183 - my_logger - INFO - 跳过指标 美国:西海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 14:27:07,410 - my_logger - INFO - 跳过指标 美国:中西部地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 14:27:07,722 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):IPE布油
2024-11-12 14:27:07,723 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):NYMEX轻质原油
2024-11-12 14:27:07,723 - my_logger - INFO - 跳过指标 期货成交量(连续):IPE布油
2024-11-12 14:27:07,724 - my_logger - INFO - 跳过指标 期货成交量(连续):NYMEX轻质原油
2024-11-12 14:27:07,724 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓
2024-11-12 14:27:07,725 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量
2024-11-12 14:27:07,725 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量
2024-11-12 14:27:07,725 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量
2024-11-12 14:27:07,726 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量
2024-11-12 14:27:07,726 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量
2024-11-12 14:27:07,727 - my_logger - INFO - 跳过指标 Brent原油期货总持仓
2024-11-12 14:27:07,727 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量
2024-11-12 14:27:07,727 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量
2024-11-12 14:27:07,729 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量
2024-11-12 14:27:07,729 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量
2024-11-12 14:27:07,729 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量占比
2024-11-12 14:27:07,730 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量占比
2024-11-12 14:27:07,730 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量占比
2024-11-12 14:27:07,731 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量占比
2024-11-12 14:27:07,731 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量占比
2024-11-12 14:27:07,731 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量占比
2024-11-12 14:27:07,732 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量占比
2024-11-12 14:27:07,732 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量占比
2024-11-12 14:27:07,733 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量占比
2024-11-12 14:27:07,733 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):交易者数量合计
2024-11-12 14:27:07,733 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:交易者数量
2024-11-12 14:27:07,734 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:交易者数量
2024-11-12 14:27:07,734 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:交易者数量
2024-11-12 14:27:07,735 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:交易者数量
2024-11-12 14:27:07,735 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:交易者数量
2024-11-12 14:27:07,736 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:交易者数量
2024-11-12 14:27:07,737 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:交易者数量
2024-11-12 14:27:07,737 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量:周环比增减
2024-11-12 14:27:07,738 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量:周环比增减
2024-11-12 14:27:07,738 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量:周环比增减
2024-11-12 14:27:07,738 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量:周环比增减
2024-11-12 14:27:07,739 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量:周环比增减
2024-11-12 14:27:07,739 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 14:27:07,740 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 14:27:07,740 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 14:27:07,741 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 14:27:07,741 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前4名占比
2024-11-12 14:27:07,741 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前4名占比
2024-11-12 14:27:07,742 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前8名占比
2024-11-12 14:27:07,743 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前8名占比
2024-11-12 14:27:07,743 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前4名占比
2024-11-12 14:27:07,744 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前4名占比
2024-11-12 14:27:07,744 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前8名占比
2024-11-12 14:27:07,745 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前8名占比
2024-11-12 14:27:07,745 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓
2024-11-12 14:27:08,557 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量
2024-11-12 14:27:08,558 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量
2024-11-12 14:27:08,558 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量
2024-11-12 14:27:08,559 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量
2024-11-12 14:27:08,559 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量
2024-11-12 14:27:08,560 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量
2024-11-12 14:27:08,560 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金多头持仓:持仓数量:周环比增减
2024-11-12 14:27:08,560 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金空头持仓:持仓数量:周环比增减
2024-11-12 14:27:08,561 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金套利持仓:持仓数量:周环比增减
2024-11-12 14:27:08,561 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量:周环比增减
2024-11-12 14:27:08,561 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量:周环比增减
2024-11-12 14:27:08,562 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 14:27:08,562 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 14:27:08,563 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量:周环比增减
2024-11-12 14:27:08,563 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量:周环比增减
2024-11-12 14:27:09,351 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量占比
2024-11-12 14:27:09,352 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量占比
2024-11-12 14:27:09,353 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量占比
2024-11-12 14:27:09,353 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量占比
2024-11-12 14:27:09,354 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量占比
2024-11-12 14:27:09,354 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量占比
2024-11-12 14:27:09,354 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:交易商数量合计
2024-11-12 14:27:10,173 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:交易商数量
2024-11-12 14:27:10,174 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:交易商数量
2024-11-12 14:27:10,175 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:交易商数量
2024-11-12 14:27:10,175 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:交易商数量
2024-11-12 14:27:10,175 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前4名占比
2024-11-12 14:27:10,176 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前4名占比
2024-11-12 14:27:10,176 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前8名占比
2024-11-12 14:27:10,177 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前8名占比
2024-11-12 14:27:10,177 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前4名占比
2024-11-12 14:27:10,178 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前4名占比
2024-11-12 14:27:10,178 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前8名占比
2024-11-12 14:27:10,179 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前8名占比
2024-11-12 14:27:10,179 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓
2024-11-12 14:27:10,179 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 14:27:10,180 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 14:27:10,180 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓
2024-11-12 14:27:10,181 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓
2024-11-12 14:27:10,181 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓
2024-11-12 14:27:10,795 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓
2024-11-12 14:27:10,796 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓
2024-11-12 14:27:10,796 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓
2024-11-12 14:27:10,797 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓
2024-11-12 14:27:10,797 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓
2024-11-12 14:27:10,798 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓:环比增减
2024-11-12 14:27:10,798 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,799 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,799 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,799 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,800 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:10,801 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,801 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,802 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:10,802 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,802 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,803 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:10,804 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,804 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:10,805 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 14:27:10,805 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 14:27:10,806 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量占比
2024-11-12 14:27:10,806 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量占比
2024-11-12 14:27:10,806 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量占比
2024-11-12 14:27:11,421 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:11,422 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:11,422 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 14:27:11,423 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:11,423 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:11,423 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):交易者数量合计
2024-11-12 14:27:11,424 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 14:27:11,424 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 14:27:11,425 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:交易者数量
2024-11-12 14:27:11,425 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:交易者数量
2024-11-12 14:27:11,426 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:交易者数量
2024-11-12 14:27:12,035 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 14:27:12,036 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 14:27:12,036 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 14:27:12,037 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓
2024-11-12 14:27:12,037 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 14:27:12,037 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 14:27:12,038 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓
2024-11-12 14:27:12,038 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓
2024-11-12 14:27:12,039 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓
2024-11-12 14:27:12,675 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓
2024-11-12 14:27:12,676 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓
2024-11-12 14:27:12,677 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓
2024-11-12 14:27:12,677 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓
2024-11-12 14:27:12,678 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓
2024-11-12 14:27:12,678 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓:环比增减
2024-11-12 14:27:12,679 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:12,679 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:12,680 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:12,680 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:12,680 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:12,681 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:13,111 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:13,111 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:13,113 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 14:27:13,113 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:13,114 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:13,114 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):交易者数量合计
2024-11-12 14:27:13,115 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 14:27:13,115 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 14:27:13,116 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:交易者数量
2024-11-12 14:27:13,116 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:交易者数量
2024-11-12 14:27:13,116 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:交易者数量
2024-11-12 14:27:13,751 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 14:27:13,752 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 14:27:13,752 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 14:27:13,753 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓
2024-11-12 14:27:13,753 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓
2024-11-12 14:27:13,753 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓
2024-11-12 14:27:13,754 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓
2024-11-12 14:27:13,754 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓
2024-11-12 14:27:14,365 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓
2024-11-12 14:27:14,366 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓
2024-11-12 14:27:14,367 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓
2024-11-12 14:27:14,367 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓
2024-11-12 14:27:14,368 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓
2024-11-12 14:27:14,368 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 14:27:14,368 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 14:27:14,369 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:持仓数量占比
2024-11-12 14:27:14,369 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:持仓数量占比
2024-11-12 14:27:14,370 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:持仓数量占比
2024-11-12 14:27:14,966 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:14,967 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:14,967 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:持仓数量占比
2024-11-12 14:27:14,968 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:14,968 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:14,968 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:交易者数量合计
2024-11-12 14:27:14,969 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 14:27:14,969 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 14:27:14,970 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:交易者数量
2024-11-12 14:27:14,970 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:交易者数量
2024-11-12 14:27:14,971 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:交易者数量
2024-11-12 14:27:15,572 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:交易者数量
2024-11-12 14:27:15,573 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:交易者数量
2024-11-12 14:27:15,574 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:交易者数量
2024-11-12 14:27:15,574 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前4名占比
2024-11-12 14:27:15,575 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前4名占比
2024-11-12 14:27:15,575 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前8名占比
2024-11-12 14:27:15,576 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前8名占比
2024-11-12 14:27:15,576 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前4名占比
2024-11-12 14:27:15,576 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前4名占比
2024-11-12 14:27:15,577 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前8名占比
2024-11-12 14:27:15,577 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前8名占比
2024-11-12 14:27:15,578 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓
2024-11-12 14:27:15,578 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓
2024-11-12 14:27:15,579 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓
2024-11-12 14:27:15,579 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓
2024-11-12 14:27:15,579 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓
2024-11-12 14:27:15,580 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓
2024-11-12 14:27:16,196 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓
2024-11-12 14:27:16,196 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓
2024-11-12 14:27:16,197 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓
2024-11-12 14:27:16,197 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓
2024-11-12 14:27:16,198 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓
2024-11-12 14:27:16,198 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 14:27:16,199 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 14:27:16,199 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:持仓数量占比
2024-11-12 14:27:16,199 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:持仓数量占比
2024-11-12 14:27:16,200 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:持仓数量占比
2024-11-12 14:27:16,814 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:16,815 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:16,816 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓:持仓数量占比
2024-11-12 14:27:16,816 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:16,817 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:16,817 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:交易者数量合计
2024-11-12 14:27:16,818 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 14:27:16,818 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 14:27:16,819 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:交易者数量
2024-11-12 14:27:16,819 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:交易者数量
2024-11-12 14:27:16,819 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:交易者数量
2024-11-12 14:27:17,438 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓:交易者数量
2024-11-12 14:27:17,438 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓:交易者数量
2024-11-12 14:27:17,438 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓:交易者数量
2024-11-12 14:27:17,439 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓多头前4名占比
2024-11-12 14:27:17,439 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓空头前4名占比
2024-11-12 14:27:17,440 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓多头前8名占比
2024-11-12 14:27:17,440 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓空头前8名占比
2024-11-12 14:27:17,441 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓多头前4名占比
2024-11-12 14:27:17,441 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓空头前4名占比
2024-11-12 14:27:17,441 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓多头前8名占比
2024-11-12 14:27:17,441 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓空头前8名占比
2024-11-12 14:27:17,443 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):总持仓
2024-11-12 14:27:17,443 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 14:27:17,444 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 14:27:17,444 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓
2024-11-12 14:27:17,445 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓
2024-11-12 14:27:17,445 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓
2024-11-12 14:27:18,088 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓
2024-11-12 14:27:18,089 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓
2024-11-12 14:27:18,089 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓
2024-11-12 14:27:18,090 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:多头持仓
2024-11-12 14:27:18,090 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:空头持仓
2024-11-12 14:27:18,090 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):总持仓:环比增减
2024-11-12 14:27:18,090 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,091 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,091 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,092 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,092 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:18,093 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,093 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,093 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:18,094 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,094 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,095 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:18,095 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,096 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:18,096 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 14:27:18,097 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 14:27:18,097 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓:持仓数量占比
2024-11-12 14:27:18,098 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓:持仓数量占比
2024-11-12 14:27:18,098 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓:持仓数量占比
2024-11-12 14:27:18,715 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:18,716 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:18,716 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 14:27:18,717 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:18,717 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:18,718 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 14:27:18,718 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 14:27:18,718 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓:交易者数量
2024-11-12 14:27:18,719 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓:交易者数量
2024-11-12 14:27:18,719 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓:交易者数量
2024-11-12 14:27:19,343 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 14:27:19,343 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 14:27:19,344 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 14:27:19,344 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):总持仓
2024-11-12 14:27:19,345 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 14:27:19,345 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 14:27:19,345 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓
2024-11-12 14:27:19,346 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓
2024-11-12 14:27:19,346 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓
2024-11-12 14:27:19,963 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓
2024-11-12 14:27:19,964 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓
2024-11-12 14:27:19,964 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓
2024-11-12 14:27:19,965 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:多头持仓
2024-11-12 14:27:19,965 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:空头持仓
2024-11-12 14:27:19,966 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):总持仓:环比增减
2024-11-12 14:27:19,966 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,967 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,967 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,968 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,968 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:19,968 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,968 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,970 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:19,970 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,971 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,971 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-12 14:27:19,972 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,972 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 14:27:19,973 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 14:27:19,973 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 14:27:19,973 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓:持仓数量占比
2024-11-12 14:27:19,974 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓:持仓数量占比
2024-11-12 14:27:19,974 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓:持仓数量占比
2024-11-12 14:27:20,604 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:20,604 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:20,605 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 14:27:20,605 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 14:27:20,606 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 14:27:20,606 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 14:27:20,607 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 14:27:20,607 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓:交易者数量
2024-11-12 14:27:20,608 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓:交易者数量
2024-11-12 14:27:20,608 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓:交易者数量
2024-11-12 14:27:21,224 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 14:27:21,224 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 14:27:21,225 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 14:27:22,087 - my_logger - INFO - 跳过指标 中国航班执行数/7DMA
2024-11-12 14:27:22,561 - my_logger - INFO - 跳过指标 美国汽油表需周度1周环差负值
2024-11-12 14:27:22,563 - my_logger - INFO - 跳过指标 美国汽油表需周度1周环差
2024-11-12 14:27:22,831 - my_logger - INFO - 跳过指标 美国汽油产量周度1周环差
2024-11-12 14:27:24,153 - my_logger - INFO - 跳过指标 美国原油周度表需/4WMA
2024-11-12 14:27:24,154 - my_logger - INFO - 跳过指标 美国油品表需/4WMA
2024-11-12 14:27:24,155 - my_logger - INFO - 跳过指标 美国油品表需4周环差
2024-11-12 14:27:24,384 - my_logger - INFO - 跳过指标 道琼斯旅游与休闲/标普500
2024-11-12 14:27:24,385 - my_logger - INFO - 跳过指标 DOE-柴油产量1周环差
2024-11-12 14:27:24,385 - my_logger - INFO - 跳过指标 DOE-美国汽油产量1周环差
2024-11-12 14:27:24,386 - my_logger - INFO - 跳过指标 美国航煤表需一周环差负值
2024-11-12 14:27:24,386 - my_logger - INFO - 跳过指标 美国馏分油表需一周环差负值
2024-11-12 14:27:24,387 - my_logger - INFO - 跳过指标 美国汽油表需一周环差负值
2024-11-12 14:27:24,387 - my_logger - INFO - 跳过指标 欧洲汽油裂差
2024-11-12 14:27:24,388 - my_logger - INFO - 跳过指标 欧洲柴油裂差
2024-11-12 14:27:24,800 - my_logger - INFO - 跳过指标 中国主营炼厂产能利用率1周环差
2024-11-12 14:27:25,363 - my_logger - INFO - 跳过指标 美国零售拥堵指数(周环比)/3WMA
2024-11-12 14:27:25,364 - my_logger - INFO - 跳过指标 美国炼厂原油输入量1周环差
2024-11-12 14:27:26,850 - my_logger - INFO - 跳过指标 美国炼厂原油输入量4周均值
2024-11-12 14:27:26,850 - my_logger - INFO - 跳过指标 美国:炼油厂:产能利用率:同比
2024-11-12 14:27:26,851 - my_logger - INFO - 跳过指标 美国:炼油厂:产能利用率:环比增减
2024-11-12 14:27:27,733 - my_logger - INFO - 跳过指标 炼油厂可运营能力利用率:4周平均值:美国
2024-11-12 14:27:29,861 - my_logger - INFO - 跳过指标 执行航班:德国:国内航班
2024-11-12 14:27:29,861 - my_logger - INFO - 跳过指标 执行航班:德国:国际航班
2024-11-12 14:27:29,862 - my_logger - INFO - 跳过指标 执行航班:法国:国内航班
2024-11-12 14:27:29,862 - my_logger - INFO - 跳过指标 执行航班:法国:国际航班
2024-11-12 14:27:29,863 - my_logger - INFO - 跳过指标 执行航班:英国:国内航班
2024-11-12 14:27:29,863 - my_logger - INFO - 跳过指标 执行航班:英国:国际航班
2024-11-12 14:27:29,864 - my_logger - INFO - 跳过指标 执行航班:印度:国内航班
2024-11-12 14:27:29,864 - my_logger - INFO - 跳过指标 执行航班:印度:国际航班
2024-11-12 14:27:30,845 - my_logger - INFO - 跳过指标 中国柴油4周平均表需
2024-11-12 14:27:30,846 - my_logger - INFO - 跳过指标 中国柴油4周平均库销比
2024-11-12 14:27:30,846 - my_logger - INFO - 跳过指标 中国汽油4周平均库销比
2024-11-12 14:27:30,846 - my_logger - INFO - 跳过指标 中国汽油4周平均表需
2024-11-12 14:27:31,509 - my_logger - INFO - 跳过指标 美国柴油4周平均表需
2024-11-12 14:27:31,510 - my_logger - INFO - 跳过指标 美国柴油4周平均库销比
2024-11-12 14:27:31,511 - my_logger - INFO - 跳过指标 美国成品油4周平均表需
2024-11-12 14:27:31,848 - my_logger - INFO - 跳过指标 美国航空燃料油4周平均表需
2024-11-12 14:27:32,185 - my_logger - INFO - 跳过指标 美国航空燃料油4周平均库销比
2024-11-12 14:27:32,185 - my_logger - INFO - 跳过指标 美国其他油品4周平均表需
2024-11-12 14:27:32,536 - my_logger - INFO - 跳过指标 美国汽油4周平均表需
2024-11-12 14:27:32,537 - my_logger - INFO - 跳过指标 美国汽油4周平均库销比
2024-11-12 14:27:32,866 - my_logger - INFO - 跳过指标 美国燃料油4周平均表需
2024-11-12 14:27:33,194 - my_logger - INFO - 跳过指标 美国商业原油4周平均库销比
2024-11-12 14:27:33,556 - my_logger - INFO - 跳过指标 美国丙烷和丙烯4周平均表需
2024-11-12 14:27:33,893 - my_logger - INFO - 跳过指标 美国柴油期货裂差
2024-11-12 14:27:33,893 - my_logger - INFO - 跳过指标 美国墨西哥湾柴油裂差
2024-11-12 14:27:34,029 - my_logger - INFO - 跳过指标 美国纽约港柴油裂差
2024-11-12 14:27:34,030 - my_logger - INFO - 跳过指标 欧洲柴油期货裂差
2024-11-12 14:27:34,030 - my_logger - INFO - 跳过指标 西北欧轻柴油裂差
2024-11-12 14:27:34,031 - my_logger - INFO - 跳过指标 新加坡柴油裂差
2024-11-12 14:27:34,031 - my_logger - INFO - 跳过指标 美国汽油期货裂差
2024-11-12 14:27:34,032 - my_logger - INFO - 跳过指标 美国墨西哥湾汽油裂差
2024-11-12 14:27:34,032 - my_logger - INFO - 跳过指标 美国纽约港汽油裂差
2024-11-12 14:27:34,033 - my_logger - INFO - 跳过指标 欧洲鹿特丹汽油裂差
2024-11-12 14:27:34,033 - my_logger - INFO - 跳过指标 新加坡汽油裂差
2024-11-12 14:27:38,516 - my_logger - INFO - 跳过指标 航煤4周平均表需
2024-11-12 14:27:39,092 - my_logger - INFO - 跳过指标 美国汽柴航煤4周平均表需
2024-11-12 14:27:41,456 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/5DMA5日环差/65DMA
2024-11-12 14:27:41,456 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/5DMA5日环差/65DMA
2024-11-12 14:27:41,457 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/65DMA
2024-11-12 14:27:41,457 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/65DMA
2024-11-12 14:27:41,458 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/5DMA5日环差
2024-11-12 14:27:41,458 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/5DMA5日环差
2024-11-12 14:27:41,459 - my_logger - INFO - 跳过指标 HO近12月合约均价裂解/5DMA
2024-11-12 14:27:41,459 - my_logger - INFO - 跳过指标 RBOB近12月合约均价裂解/5DMA
2024-11-12 14:27:45,851 - my_logger - INFO - 跳过指标 Brent连1合约价格/2DMA
2024-11-12 14:27:45,852 - my_logger - INFO - 跳过指标 Brent连1合约价格/7DMA
2024-11-12 14:27:45,852 - my_logger - INFO - 跳过指标 Brent连1合约价格/23DMA
2024-11-12 14:27:45,853 - my_logger - INFO - 跳过指标 库欣原油库存超季节性/5年拟合残差/WTI c1-c6
2024-11-12 14:27:45,853 - my_logger - INFO - 跳过指标 Brent连1合约价格/5DMA
2024-11-12 14:27:45,854 - my_logger - INFO - 跳过指标 Brent c1-c2超季节性/3年
2024-11-12 14:27:45,854 - my_logger - INFO - 跳过指标 PP主力收盘价拟合残差/期货收盘价(活跃):布伦特原油
2024-11-12 14:27:45,855 - my_logger - INFO - 跳过指标 Brent连1合约价格/11DMA
2024-11-12 14:27:45,855 - my_logger - INFO - 跳过指标 山东地炼柴油裂解价差拟合残差/期货结算价(活跃):布伦特原油
2024-11-12 14:27:45,856 - my_logger - INFO - 跳过指标 山东地炼汽油裂解价差拟合残差/
2024-11-12 14:27:45,856 - my_logger - INFO - 跳过指标 原油(中国胜利)拟合残差/布伦特原油
2024-11-12 14:27:45,857 - my_logger - INFO - 跳过指标 Brent连1合约价格/21DMA
2024-11-12 14:27:45,857 - my_logger - INFO - 跳过指标 Brent连1合约价格/14DMA
2024-11-12 14:27:45,858 - my_logger - INFO - 跳过指标 Brent连1合约价格/15DMA
2024-11-12 14:27:45,858 - my_logger - INFO - 跳过指标 Brent连1-连12
2024-11-12 14:27:55,694 - my_logger - INFO - 跳过指标 WTI c1-c36
2024-11-12 14:27:55,694 - my_logger - INFO - 跳过指标 WTI c1-c24
2024-11-12 14:27:55,695 - my_logger - INFO - 跳过指标 WTI c1-c12
2024-11-12 14:27:59,056 - my_logger - INFO - 跳过指标 Brent c1-c36
2024-11-12 14:27:59,057 - my_logger - INFO - 跳过指标 Brent c1-c24
2024-11-12 14:27:59,057 - my_logger - INFO - 跳过指标 Brent c1-c12
2024-11-12 14:28:04,699 - my_logger - INFO - 跳过指标 Brent连1合约价格1日环差
2024-11-12 14:28:04,699 - my_logger - INFO - 跳过指标 Brent连1合约价格1日环比
2024-11-12 14:28:04,700 - my_logger - INFO - 跳过指标 WTI连1合约价格拟合残差/美国标普500指数
2024-11-12 14:28:06,491 - my_logger - INFO - 跳过指标 Dubai连2合约价格
2024-11-12 14:28:06,492 - my_logger - INFO - 跳过指标 Dubai连4合约价格
2024-11-12 14:28:07,050 - my_logger - INFO - 跳过指标 美国RBOB期货2212月份合约价格
2024-11-12 14:28:07,050 - my_logger - INFO - 跳过指标 美国RBOB期货2301月份合约价格
2024-11-12 14:28:07,051 - my_logger - INFO - 跳过指标 美国RBOB期货2306月份合约价格
2024-11-12 14:28:09,364 - my_logger - INFO - 跳过指标 Dubai连7合约价格
2024-11-12 14:28:09,365 - my_logger - INFO - 跳过指标 Dubai连9合约价格
2024-11-12 14:28:09,365 - my_logger - INFO - 跳过指标 迪拜连7-连9月差
2024-11-12 14:28:11,456 - my_logger - INFO - 跳过指标 Brent连2
2024-11-12 14:28:11,755 - my_logger - INFO - 跳过指标 WTI连2合约价格
2024-11-12 14:28:14,851 - my_logger - INFO - 跳过指标 WTI连4合约价格
2024-11-12 14:28:15,916 - my_logger - INFO - 跳过指标 Brent连4合约价格
2024-11-12 14:28:18,072 - my_logger - INFO - 跳过指标 WTI连7合约价格
2024-11-12 14:28:19,660 - my_logger - INFO - 跳过指标 WTI连12合约价格
2024-11-12 14:28:20,063 - my_logger - INFO - 跳过指标 布伦特连24合约价格
2024-11-12 14:28:21,120 - my_logger - INFO - 跳过指标 Brent连6合约价格
2024-11-12 14:28:21,121 - my_logger - INFO - 跳过指标 Brent连12合约价格
2024-11-12 14:28:21,121 - my_logger - INFO - 跳过指标 Brent连9合约
2024-11-12 14:28:21,122 - my_logger - INFO - 跳过指标 brent连3合约
2024-11-12 14:28:21,122 - my_logger - INFO - 跳过指标 Brent连5
2024-11-12 14:28:21,123 - my_logger - INFO - 跳过指标 Brent连10合约
2024-11-12 14:28:21,123 - my_logger - INFO - 跳过指标 Brent连11合约
2024-11-12 14:28:21,124 - my_logger - INFO - 跳过指标 WTI连3合约价格
2024-11-12 14:28:21,124 - my_logger - INFO - 跳过指标 Brent 连7合约价格
2024-11-12 14:28:21,125 - my_logger - INFO - 跳过指标 Brent连8合约价格
2024-11-12 14:28:21,125 - my_logger - INFO - 跳过指标 Brent连13
2024-11-12 14:28:21,912 - my_logger - INFO - 跳过指标 ICE Brent c15
2024-11-12 14:28:21,913 - my_logger - INFO - 跳过指标 ICE Brent c16
2024-11-12 14:28:21,913 - my_logger - INFO - 跳过指标 ICE Brent c17
2024-11-12 14:28:21,914 - my_logger - INFO - 跳过指标 ICE Brent c18
2024-11-12 14:28:21,914 - my_logger - INFO - 跳过指标 ICE Brent c19
2024-11-12 14:28:21,915 - my_logger - INFO - 跳过指标 ICE Brent c20
2024-11-12 14:28:22,278 - my_logger - INFO - 跳过指标 ICE Brent c21
2024-11-12 14:28:22,279 - my_logger - INFO - 跳过指标 ICE Brent c22
2024-11-12 14:28:22,279 - my_logger - INFO - 跳过指标 ICE Brent c23
2024-11-12 14:28:22,279 - my_logger - INFO - 跳过指标 ICE Brent c25
2024-11-12 14:28:22,279 - my_logger - INFO - 跳过指标 ICE Brent c26
2024-11-12 14:28:22,280 - my_logger - INFO - 跳过指标 ICE Brent c27
2024-11-12 14:28:22,280 - my_logger - INFO - 跳过指标 ICE Brent c28
2024-11-12 14:28:22,281 - my_logger - INFO - 跳过指标 ICE Brent c29
2024-11-12 14:28:22,281 - my_logger - INFO - 跳过指标 ICE Brent c30
2024-11-12 14:28:22,282 - my_logger - INFO - 跳过指标 ICE Brent c31
2024-11-12 14:28:22,282 - my_logger - INFO - 跳过指标 ICE Brent c32
2024-11-12 14:28:22,282 - my_logger - INFO - 跳过指标 ICE Brent c33
2024-11-12 14:28:22,283 - my_logger - INFO - 跳过指标 ICE Brent c34
2024-11-12 14:28:22,283 - my_logger - INFO - 跳过指标 ICE Brent c35
2024-11-12 14:28:22,284 - my_logger - INFO - 跳过指标 ICE Brent c36
2024-11-12 14:28:23,360 - my_logger - INFO - 跳过指标 NYMWX WTI c6
2024-11-12 14:28:23,360 - my_logger - INFO - 跳过指标 NYMWX WTI c8
2024-11-12 14:28:23,361 - my_logger - INFO - 跳过指标 NYMWX WTI c9
2024-11-12 14:28:23,361 - my_logger - INFO - 跳过指标 NYMWX WTI c10
2024-11-12 14:28:23,362 - my_logger - INFO - 跳过指标 NYMWX WTI c11
2024-11-12 14:28:23,362 - my_logger - INFO - 跳过指标 NYMWX WTI c13
2024-11-12 14:28:23,362 - my_logger - INFO - 跳过指标 NYMWX WTI c14
2024-11-12 14:28:23,363 - my_logger - INFO - 跳过指标 NYMWX WTI c15
2024-11-12 14:28:23,363 - my_logger - INFO - 跳过指标 NYMWX WTI c16
2024-11-12 14:28:23,364 - my_logger - INFO - 跳过指标 NYMWX WTI c17
2024-11-12 14:28:23,364 - my_logger - INFO - 跳过指标 NYMWX WTI c18
2024-11-12 14:28:23,365 - my_logger - INFO - 跳过指标 NYMWX WTI c19
2024-11-12 14:28:23,365 - my_logger - INFO - 跳过指标 NYMWX WTI c20
2024-11-12 14:28:23,366 - my_logger - INFO - 跳过指标 NYMWX WTI c21
2024-11-12 14:28:23,366 - my_logger - INFO - 跳过指标 NYMWX WTI c22
2024-11-12 14:28:23,367 - my_logger - INFO - 跳过指标 NYMWX WTI c23
2024-11-12 14:28:23,367 - my_logger - INFO - 跳过指标 NYMWX WTI c25
2024-11-12 14:28:23,368 - my_logger - INFO - 跳过指标 NYMWX WTI c26
2024-11-12 14:28:23,368 - my_logger - INFO - 跳过指标 NYMWX WTI c27
2024-11-12 14:28:23,369 - my_logger - INFO - 跳过指标 NYMWX WTI c28
2024-11-12 14:28:23,369 - my_logger - INFO - 跳过指标 NYMWX WTI c29
2024-11-12 14:28:23,370 - my_logger - INFO - 跳过指标 NYMWX WTI c30
2024-11-12 14:28:23,372 - my_logger - INFO - 跳过指标 NYMWX WTI c31
2024-11-12 14:28:23,372 - my_logger - INFO - 跳过指标 NYMWX WTI c32
2024-11-12 14:28:23,372 - my_logger - INFO - 跳过指标 NYMWX WTI c33
2024-11-12 14:28:23,373 - my_logger - INFO - 跳过指标 NYMWX WTI c34
2024-11-12 14:28:23,373 - my_logger - INFO - 跳过指标 NYMWX WTI c35
2024-11-12 14:28:23,374 - my_logger - INFO - 跳过指标 NYMWX WTI c36
2024-11-12 14:28:23,685 - my_logger - INFO - 跳过指标 INE SC c2
2024-11-12 14:28:23,686 - my_logger - INFO - 跳过指标 INE SC c3
2024-11-12 14:28:23,687 - my_logger - INFO - 跳过指标 INE SC c4
2024-11-12 14:28:23,687 - my_logger - INFO - 跳过指标 INE SC c5
2024-11-12 14:28:23,687 - my_logger - INFO - 跳过指标 INE SC c6
2024-11-12 14:28:23,688 - my_logger - INFO - 跳过指标 INE SC c7
2024-11-12 14:28:23,688 - my_logger - INFO - 跳过指标 INE SC c8
2024-11-12 14:28:23,689 - my_logger - INFO - 跳过指标 INE SC c9
2024-11-12 14:28:23,689 - my_logger - INFO - 跳过指标 INE SC c10
2024-11-12 14:28:23,690 - my_logger - INFO - 跳过指标 INE SC c11
2024-11-12 14:28:23,690 - my_logger - INFO - 跳过指标 INE SC c12
2024-11-12 14:28:23,691 - my_logger - INFO - 跳过指标 INE SC c13
2024-11-12 14:28:23,691 - my_logger - INFO - 跳过指标 INE SC c14
2024-11-12 14:28:23,692 - my_logger - INFO - 跳过指标 INE SC c15
2024-11-12 14:28:23,693 - my_logger - INFO - 跳过指标 INE SC c16
2024-11-12 14:28:23,693 - my_logger - INFO - 跳过指标 INE SC c17
2024-11-12 14:28:23,694 - my_logger - INFO - 跳过指标 INE SC c18
2024-11-12 14:28:23,694 - my_logger - INFO - 跳过指标 INE SC c19
2024-11-12 14:28:23,695 - my_logger - INFO - 跳过指标 INE SC c20
2024-11-12 14:28:23,695 - my_logger - INFO - 跳过指标 EFS c1
2024-11-12 14:28:23,696 - my_logger - INFO - 跳过指标 EFS c2
2024-11-12 14:28:23,696 - my_logger - INFO - 跳过指标 EFS c3
2024-11-12 14:28:23,697 - my_logger - INFO - 跳过指标 EFS c4
2024-11-12 14:28:23,697 - my_logger - INFO - 跳过指标 EFS c5
2024-11-12 14:28:23,698 - my_logger - INFO - 跳过指标 EFS c6
2024-11-12 14:28:23,698 - my_logger - INFO - 跳过指标 Dubai Swap c15
2024-11-12 14:28:23,699 - my_logger - INFO - 跳过指标 Dubai Swap c16
2024-11-12 14:28:23,699 - my_logger - INFO - 跳过指标 Dubai Swap c17
2024-11-12 14:28:23,700 - my_logger - INFO - 跳过指标 Dubai Swap c18
2024-11-12 14:28:23,700 - my_logger - INFO - 跳过指标 Dubai Swap c19
2024-11-12 14:28:23,700 - my_logger - INFO - 跳过指标 Dubai Swap c20
2024-11-12 14:28:23,701 - my_logger - INFO - 跳过指标 Dubai Swap c21
2024-11-12 14:28:23,701 - my_logger - INFO - 跳过指标 Dubai Swap c22
2024-11-12 14:28:23,971 - my_logger - INFO - 跳过指标 Oman Swap c2
2024-11-12 14:28:23,972 - my_logger - INFO - 跳过指标 Oman Swap c3
2024-11-12 14:28:23,972 - my_logger - INFO - 跳过指标 Oman Swap c4
2024-11-12 14:28:23,973 - my_logger - INFO - 跳过指标 Oman Swap c5
2024-11-12 14:28:23,973 - my_logger - INFO - 跳过指标 Oman Swap c6
2024-11-12 14:28:23,974 - my_logger - INFO - 跳过指标 Oman Swap c7
2024-11-12 14:28:23,974 - my_logger - INFO - 跳过指标 Oman Swap c8
2024-11-12 14:28:23,975 - my_logger - INFO - 跳过指标 Oman Swap c9
2024-11-12 14:28:23,975 - my_logger - INFO - 跳过指标 Oman Swap c10
2024-11-12 14:28:23,976 - my_logger - INFO - 跳过指标 Oman Swap c11
2024-11-12 14:28:23,976 - my_logger - INFO - 跳过指标 Oman Swap c12
2024-11-12 14:28:23,977 - my_logger - INFO - 跳过指标 Oman Swap c13
2024-11-12 14:28:23,977 - my_logger - INFO - 跳过指标 Oman Swap c14
2024-11-12 14:28:23,978 - my_logger - INFO - 跳过指标 Oman Swap c15
2024-11-12 14:28:23,978 - my_logger - INFO - 跳过指标 Oman Swap c16
2024-11-12 14:28:23,979 - my_logger - INFO - 跳过指标 Oman Swap c17
2024-11-12 14:28:23,979 - my_logger - INFO - 跳过指标 Oman Swap c18
2024-11-12 14:28:23,980 - my_logger - INFO - 跳过指标 Oman Swap c19
2024-11-12 14:28:23,980 - my_logger - INFO - 跳过指标 Oman Swap c20
2024-11-12 14:28:23,980 - my_logger - INFO - 跳过指标 Oman Swap c21
2024-11-12 14:28:23,981 - my_logger - INFO - 跳过指标 Oman Swap c22
2024-11-12 14:28:23,981 - my_logger - INFO - 跳过指标 Oman Swap c23
2024-11-12 14:28:23,981 - my_logger - INFO - 跳过指标 Oman Swap c24
2024-11-12 14:28:23,983 - my_logger - INFO - 跳过指标 Oman Swap c25
2024-11-12 14:28:23,983 - my_logger - INFO - 跳过指标 Oman Swap c26
2024-11-12 14:28:23,984 - my_logger - INFO - 跳过指标 Oman Swap c27
2024-11-12 14:28:23,984 - my_logger - INFO - 跳过指标 Oman Swap c28
2024-11-12 14:28:23,985 - my_logger - INFO - 跳过指标 Oman Swap c29
2024-11-12 14:28:23,985 - my_logger - INFO - 跳过指标 Oman Swap c30
2024-11-12 14:28:23,986 - my_logger - INFO - 跳过指标 Oman Swap c31
2024-11-12 14:28:23,986 - my_logger - INFO - 跳过指标 Oman Swap c32
2024-11-12 14:28:23,987 - my_logger - INFO - 跳过指标 Oman Swap c33
2024-11-12 14:28:23,987 - my_logger - INFO - 跳过指标 Oman Swap c34
2024-11-12 14:28:23,988 - my_logger - INFO - 跳过指标 Oman Swap c35
2024-11-12 14:28:23,988 - my_logger - INFO - 跳过指标 Oman Swap c36
2024-11-12 14:28:23,989 - my_logger - INFO - 跳过指标 Oman Swap c37
2024-11-12 14:28:23,989 - my_logger - INFO - 跳过指标 Oman Swap c38
2024-11-12 14:28:24,675 - my_logger - INFO - 跳过指标 DME Oman c2
2024-11-12 14:28:24,676 - my_logger - INFO - 跳过指标 DME Oman c3
2024-11-12 14:28:24,677 - my_logger - INFO - 跳过指标 DME Oman c4
2024-11-12 14:28:24,677 - my_logger - INFO - 跳过指标 DME Oman c5
2024-11-12 14:28:24,678 - my_logger - INFO - 跳过指标 DME Oman c6
2024-11-12 14:30:46,748 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 14:30:46,749 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 14:32:15,906 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 14:32:16,918 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 14:32:16,924 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 14:32:16,929 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 14:32:21,767 - my_logger - INFO - Libya列数据为空
2024-11-12 14:32:21,769 - my_logger - INFO - Malaysia列数据为空
2024-11-12 14:32:22,141 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 14:32:22,152 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 14:32:22,155 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 14:32:23,679 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 14:32:23,685 - my_logger - INFO - 开始训练模型...
2024-11-12 14:32:23,686 - my_logger - INFO - 模型训练完成
2024-11-12 14:32:23,687 - my_logger - INFO - 训练数据绘图ing
2024-11-12 14:32:24,517 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 14:32:26,309 - my_logger - INFO - 训练数据绘图end
2024-11-12 14:32:26,310 - my_logger - INFO - 制作报告ing
2024-11-12 14:32:26,663 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 14:32:27,148 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 14:32:27,150 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 14:32:29,271 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 14:32:29,273 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 14:32:31,055 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 14:32:31,056 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 14:32:31,378 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 14:32:31,379 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 14:32:33,180 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 14:32:33,181 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 14:32:33,681 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 14:32:33,682 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 14:32:35,821 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 14:32:35,823 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 14:32:37,661 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 14:32:37,662 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 14:32:39,174 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 14:32:39,175 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 14:32:39,491 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 14:32:39,492 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 14:32:41,623 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 14:32:41,624 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 14:32:43,354 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 14:32:43,355 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 14:32:43,776 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 14:32:47,797 - my_logger - INFO - 制作报告end
2024-11-12 14:32:47,798 - my_logger - INFO - 模型训练完成
2024-11-12 14:38:18,647 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 14:38:18,648 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 14:39:48,760 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 14:39:49,788 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 14:39:49,793 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 14:39:49,798 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 14:39:54,630 - my_logger - INFO - Libya列数据为空
2024-11-12 14:39:54,633 - my_logger - INFO - Malaysia列数据为空
2024-11-12 14:39:55,000 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 14:39:55,011 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 14:39:55,013 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 14:39:56,502 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 14:39:56,510 - my_logger - INFO - 开始训练模型...
2024-11-12 14:39:56,511 - my_logger - INFO - 模型训练完成
2024-11-12 14:39:56,511 - my_logger - INFO - 训练数据绘图ing
2024-11-12 14:39:57,360 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 14:39:59,180 - my_logger - INFO - 训练数据绘图end
2024-11-12 14:39:59,181 - my_logger - INFO - 制作报告ing
2024-11-12 14:39:59,538 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 14:40:00,044 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 14:40:00,046 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 14:40:02,166 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 14:40:02,167 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 14:40:03,939 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 14:40:03,940 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 14:40:04,291 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 14:40:04,292 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 14:40:06,149 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 14:40:06,150 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 14:40:06,630 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 14:40:06,631 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 14:40:08,845 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 14:40:08,847 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 14:40:10,695 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 14:40:10,696 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 14:40:12,125 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 14:40:12,127 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 14:40:12,471 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 14:40:12,472 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 14:40:14,752 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 14:40:14,754 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 14:40:16,549 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 14:40:16,550 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 14:40:16,947 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 14:40:20,984 - my_logger - INFO - 制作报告end
2024-11-12 14:40:20,985 - my_logger - INFO - 模型训练完成
2024-11-12 14:41:48,814 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 14:41:48,815 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 14:43:18,130 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 14:43:19,177 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 14:43:19,182 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 14:43:19,187 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 14:43:24,079 - my_logger - INFO - Libya列数据为空
2024-11-12 14:43:24,081 - my_logger - INFO - Malaysia列数据为空
2024-11-12 14:43:24,477 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 14:43:24,488 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 14:43:24,490 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 14:43:25,959 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 14:43:25,966 - my_logger - INFO - 开始训练模型...
2024-11-12 14:43:25,966 - my_logger - INFO - 模型训练完成
2024-11-12 14:43:25,967 - my_logger - INFO - 训练数据绘图ing
2024-11-12 14:43:28,311 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 14:43:30,105 - my_logger - INFO - 训练数据绘图end
2024-11-12 14:43:30,106 - my_logger - INFO - 制作报告ing
2024-11-12 14:43:30,461 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 14:43:30,932 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 14:43:30,933 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 14:43:33,058 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 14:43:33,059 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 14:43:34,850 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 14:43:34,852 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 14:43:35,245 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 14:43:35,246 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 14:43:37,023 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 14:43:37,025 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 14:43:37,565 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 14:43:37,566 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 14:43:39,739 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 14:43:39,740 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 14:43:41,526 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 14:43:41,527 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 14:43:43,055 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 14:43:43,057 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 14:43:43,396 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 14:43:43,397 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 14:43:45,542 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 14:43:45,544 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 14:43:47,293 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 14:43:47,295 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 14:43:47,747 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 14:43:51,863 - my_logger - INFO - 制作报告end
2024-11-12 14:43:51,863 - my_logger - INFO - 模型训练完成
2024-11-12 14:47:02,011 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 14:47:02,012 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 14:48:30,924 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 14:48:31,955 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 14:48:31,960 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 14:48:31,964 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 14:48:36,787 - my_logger - INFO - Libya列数据为空
2024-11-12 14:48:36,789 - my_logger - INFO - Malaysia列数据为空
2024-11-12 14:48:37,163 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 14:48:37,174 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 14:48:37,175 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 14:48:38,685 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 14:48:38,692 - my_logger - INFO - 开始训练模型...
2024-11-12 14:48:38,693 - my_logger - INFO - 模型训练完成
2024-11-12 14:48:38,694 - my_logger - INFO - 训练数据绘图ing
2024-11-12 14:48:41,106 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 14:48:42,885 - my_logger - INFO - 训练数据绘图end
2024-11-12 14:48:42,885 - my_logger - INFO - 制作报告ing
2024-11-12 14:48:43,255 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 14:48:43,731 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 14:48:43,733 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 14:48:45,813 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 14:48:45,814 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 14:48:47,599 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 14:48:47,600 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 14:48:47,927 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 14:48:47,928 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 14:48:49,794 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 14:48:49,796 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 14:48:50,263 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 14:48:50,264 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 14:48:52,457 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 14:48:52,458 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 14:48:54,293 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 14:48:54,295 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 14:48:55,709 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 14:48:55,711 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 14:48:56,087 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 14:48:56,088 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 14:48:58,297 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 14:48:58,298 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 14:49:00,100 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 14:49:00,101 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 14:49:00,522 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 14:49:04,529 - my_logger - INFO - 制作报告end
2024-11-12 14:49:04,529 - my_logger - INFO - 模型训练完成
2024-11-12 14:55:31,174 - my_logger - INFO - 读取本地数据dataset\原油指标数据.xlsx
2024-11-12 14:55:31,175 - my_logger - INFO - getdata接收dataset\原油指标数据.xlsx date 2024-10-29
2024-11-12 14:57:00,784 - my_logger - INFO - 删除两月不更新特征前数据量:(2494, 930)
2024-11-12 14:57:01,766 - my_logger - INFO - 删除两月不更新特征后数据量:(2494, 620)
2024-11-12 14:57:01,772 - my_logger - INFO - 删除预测列为空值的行后数据量:(1765, 620)
2024-11-12 14:57:01,777 - my_logger - INFO - 删除全为空值的列后数据量:(1765, 543)
2024-11-12 14:57:06,439 - my_logger - INFO - Libya列数据为空
2024-11-12 14:57:06,442 - my_logger - INFO - Malaysia列数据为空
2024-11-12 14:57:06,806 - my_logger - INFO - 日度(350) 周度(190)
0 西北欧炼厂加工Brent原油CDU利润 EIA美国油品需求
1 美墨湾炼厂加工WTI原油CDU利润 中国汽柴油表需
2 新加坡炼厂加工Dubai原油CDU利润 DOE-美国汽油产量超季节性/3年
3 西北欧炼厂加工Brent原油CDU利润 M2 美国汽油表需(周度)
4 美墨湾炼厂加工WTI原油CDU利润 M2 美国汽油产量(周度)
.. ... ...
345 C2403150124
346 FVHCM1 INDEX
347 lmcads03 lme comdty
348 GC1 COMB Comdty
349 C2404167855
[350 rows x 2 columns]
2024-11-12 14:57:06,817 - my_logger - INFO - 特征信息总共有540个,日度(350),周度(190), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 14:57:06,819 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 14:57:08,269 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-29 00:00:00', y = '70.73' WHERE ds = '2024-10-29 00:00:00'
2024-11-12 14:57:08,277 - my_logger - INFO - 开始训练模型...
2024-11-12 14:57:08,278 - my_logger - INFO - 模型训练完成
2024-11-12 14:57:08,279 - my_logger - INFO - 训练数据绘图ing
2024-11-12 14:57:10,583 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 14:57:12,290 - my_logger - INFO - 训练数据绘图end
2024-11-12 14:57:12,291 - my_logger - INFO - 制作报告ing
2024-11-12 14:57:12,641 - my_logger - INFO - 开始绘制Kpler数据--原油出口类指标的相关性直方图
2024-11-12 14:57:13,101 - my_logger - INFO - Kpler数据--原油出口类指标的相关性总和为1.2169389859283228
2024-11-12 14:57:13,103 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 14:57:15,104 - my_logger - INFO - 价格类指标的相关性总和为97.88886781911518
2024-11-12 14:57:15,105 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 14:57:16,871 - my_logger - INFO - 供应类指标的相关性总和为15.527125996889247
2024-11-12 14:57:16,872 - my_logger - INFO - 开始绘制供应给类指标的相关性直方图
2024-11-12 14:57:17,183 - my_logger - INFO - 供应给类指标的相关性总和为1.5496334422133744
2024-11-12 14:57:17,184 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 14:57:18,940 - my_logger - INFO - 其他类指标的相关性总和为6.898881952036334
2024-11-12 14:57:18,941 - my_logger - INFO - 开始绘制宏观类指标的相关性直方图
2024-11-12 14:57:19,413 - my_logger - INFO - 宏观类指标的相关性总和为2.610703149129728
2024-11-12 14:57:19,414 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 14:57:21,474 - my_logger - INFO - 库存类指标的相关性总和为39.74147842565216
2024-11-12 14:57:21,475 - my_logger - INFO - 开始绘制期货市场类指标的相关性直方图
2024-11-12 14:57:23,287 - my_logger - INFO - 期货市场类指标的相关性总和为74.65377381137546
2024-11-12 14:57:23,289 - my_logger - INFO - 开始绘制西北欧市场类指标的相关性直方图
2024-11-12 14:57:24,692 - my_logger - INFO - 西北欧市场类指标的相关性总和为5.9487154984116986
2024-11-12 14:57:24,693 - my_logger - INFO - 开始绘制运输类指标的相关性直方图
2024-11-12 14:57:25,025 - my_logger - INFO - 运输类指标的相关性总和为1.0275137294324261
2024-11-12 14:57:25,026 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 14:57:27,176 - my_logger - INFO - 进出口类指标的相关性总和为12.34340093640212
2024-11-12 14:57:27,178 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 14:57:28,985 - my_logger - INFO - 需求类指标的相关性总和为15.14273949600039
2024-11-12 14:57:28,986 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 14:57:29,375 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 14:57:33,348 - my_logger - INFO - 制作报告end
2024-11-12 14:57:33,348 - my_logger - INFO - 模型训练完成
2024-11-12 17:33:50,246 - my_logger - INFO - 从eta获取数据...
2024-11-12 17:33:50,246 - my_logger - INFO - 从eta获取数据...
2024-11-12 17:33:51,071 - my_logger - INFO - 跳过指标 美国:东海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,071 - my_logger - INFO - 跳过指标 美国:东海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,348 - my_logger - INFO - 跳过指标 美国:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,348 - my_logger - INFO - 跳过指标 美国:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,560 - my_logger - INFO - 跳过指标 美国:洛基山地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,560 - my_logger - INFO - 跳过指标 美国:洛基山地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,775 - my_logger - INFO - 跳过指标 美国:墨西哥湾沿岸:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,775 - my_logger - INFO - 跳过指标 美国:墨西哥湾沿岸:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,988 - my_logger - INFO - 跳过指标 美国:西海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:51,988 - my_logger - INFO - 跳过指标 美国:西海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:52,205 - my_logger - INFO - 跳过指标 美国:中西部地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:52,205 - my_logger - INFO - 跳过指标 美国:中西部地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-12 17:33:52,570 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):IPE布油
2024-11-12 17:33:52,570 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):IPE布油
2024-11-12 17:33:52,572 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):NYMEX轻质原油
2024-11-12 17:33:52,572 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):NYMEX轻质原油
2024-11-12 17:33:52,573 - my_logger - INFO - 跳过指标 期货成交量(连续):IPE布油
2024-11-12 17:33:52,573 - my_logger - INFO - 跳过指标 期货成交量(连续):IPE布油
2024-11-12 17:33:52,574 - my_logger - INFO - 跳过指标 期货成交量(连续):NYMEX轻质原油
2024-11-12 17:33:52,574 - my_logger - INFO - 跳过指标 期货成交量(连续):NYMEX轻质原油
2024-11-12 17:33:52,575 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓
2024-11-12 17:33:52,575 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓
2024-11-12 17:33:52,577 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量
2024-11-12 17:33:52,577 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量
2024-11-12 17:33:52,578 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量
2024-11-12 17:33:52,578 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量
2024-11-12 17:33:52,580 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量
2024-11-12 17:33:52,580 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量
2024-11-12 17:33:52,582 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量
2024-11-12 17:33:52,582 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量
2024-11-12 17:33:52,583 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量
2024-11-12 17:33:52,583 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量
2024-11-12 17:33:52,584 - my_logger - INFO - 跳过指标 Brent原油期货总持仓
2024-11-12 17:33:52,584 - my_logger - INFO - 跳过指标 Brent原油期货总持仓
2024-11-12 17:33:52,586 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量
2024-11-12 17:33:52,586 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量
2024-11-12 17:33:52,588 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量
2024-11-12 17:33:52,588 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量
2024-11-12 17:33:52,589 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量
2024-11-12 17:33:52,589 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量
2024-11-12 17:33:52,591 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量
2024-11-12 17:33:52,591 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量
2024-11-12 17:33:52,592 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量占比
2024-11-12 17:33:52,592 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量占比
2024-11-12 17:33:52,594 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量占比
2024-11-12 17:33:52,594 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量占比
2024-11-12 17:33:52,595 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量占比
2024-11-12 17:33:52,595 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量占比
2024-11-12 17:33:52,597 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量占比
2024-11-12 17:33:52,597 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量占比
2024-11-12 17:33:52,598 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量占比
2024-11-12 17:33:52,598 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量占比
2024-11-12 17:33:52,599 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量占比
2024-11-12 17:33:52,599 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量占比
2024-11-12 17:33:52,601 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量占比
2024-11-12 17:33:52,601 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量占比
2024-11-12 17:33:52,603 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量占比
2024-11-12 17:33:52,603 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量占比
2024-11-12 17:33:52,604 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量占比
2024-11-12 17:33:52,604 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量占比
2024-11-12 17:33:52,605 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):交易者数量合计
2024-11-12 17:33:52,605 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):交易者数量合计
2024-11-12 17:33:52,606 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:交易者数量
2024-11-12 17:33:52,606 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:交易者数量
2024-11-12 17:33:52,608 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:交易者数量
2024-11-12 17:33:52,608 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:交易者数量
2024-11-12 17:33:52,610 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:交易者数量
2024-11-12 17:33:52,610 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:交易者数量
2024-11-12 17:33:52,611 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:交易者数量
2024-11-12 17:33:52,611 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:交易者数量
2024-11-12 17:33:52,613 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:交易者数量
2024-11-12 17:33:52,613 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:交易者数量
2024-11-12 17:33:52,614 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:交易者数量
2024-11-12 17:33:52,614 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:交易者数量
2024-11-12 17:33:52,616 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:交易者数量
2024-11-12 17:33:52,616 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:交易者数量
2024-11-12 17:33:52,617 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,617 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,618 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,618 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,619 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量:周环比增减
2024-11-12 17:33:52,619 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量:周环比增减
2024-11-12 17:33:52,620 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,620 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,622 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,622 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量:周环比增减
2024-11-12 17:33:52,624 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,624 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,625 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,625 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,627 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,627 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,629 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,629 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:52,631 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前4名占比
2024-11-12 17:33:52,631 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前4名占比
2024-11-12 17:33:52,633 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前4名占比
2024-11-12 17:33:52,633 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前4名占比
2024-11-12 17:33:52,634 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前8名占比
2024-11-12 17:33:52,634 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前8名占比
2024-11-12 17:33:52,635 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前8名占比
2024-11-12 17:33:52,635 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前8名占比
2024-11-12 17:33:52,637 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前4名占比
2024-11-12 17:33:52,637 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前4名占比
2024-11-12 17:33:52,638 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前4名占比
2024-11-12 17:33:52,638 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前4名占比
2024-11-12 17:33:52,640 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前8名占比
2024-11-12 17:33:52,640 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前8名占比
2024-11-12 17:33:52,642 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前8名占比
2024-11-12 17:33:52,642 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前8名占比
2024-11-12 17:33:52,642 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓
2024-11-12 17:33:52,642 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓
2024-11-12 17:33:53,486 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量
2024-11-12 17:33:53,486 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量
2024-11-12 17:33:53,487 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量
2024-11-12 17:33:53,487 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量
2024-11-12 17:33:53,488 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量
2024-11-12 17:33:53,488 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量
2024-11-12 17:33:53,489 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量
2024-11-12 17:33:53,489 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量
2024-11-12 17:33:53,491 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量
2024-11-12 17:33:53,491 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量
2024-11-12 17:33:53,492 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量
2024-11-12 17:33:53,492 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量
2024-11-12 17:33:53,493 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金多头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,493 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金多头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,495 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金空头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,495 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金空头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,496 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金套利持仓:持仓数量:周环比增减
2024-11-12 17:33:53,496 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金套利持仓:持仓数量:周环比增减
2024-11-12 17:33:53,497 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,497 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,499 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,499 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量:周环比增减
2024-11-12 17:33:53,500 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:53,500 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:53,502 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:53,502 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:53,503 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:53,503 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量:周环比增减
2024-11-12 17:33:53,504 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:53,504 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量:周环比增减
2024-11-12 17:33:54,377 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量占比
2024-11-12 17:33:54,377 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量占比
2024-11-12 17:33:54,378 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量占比
2024-11-12 17:33:54,378 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量占比
2024-11-12 17:33:54,380 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量占比
2024-11-12 17:33:54,380 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量占比
2024-11-12 17:33:54,381 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量占比
2024-11-12 17:33:54,381 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量占比
2024-11-12 17:33:54,382 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量占比
2024-11-12 17:33:54,382 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量占比
2024-11-12 17:33:54,384 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量占比
2024-11-12 17:33:54,384 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量占比
2024-11-12 17:33:54,385 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:交易商数量合计
2024-11-12 17:33:54,385 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:交易商数量合计
2024-11-12 17:33:55,235 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:交易商数量
2024-11-12 17:33:55,235 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:交易商数量
2024-11-12 17:33:55,237 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:交易商数量
2024-11-12 17:33:55,237 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:交易商数量
2024-11-12 17:33:55,238 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:交易商数量
2024-11-12 17:33:55,238 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:交易商数量
2024-11-12 17:33:55,239 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:交易商数量
2024-11-12 17:33:55,239 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:交易商数量
2024-11-12 17:33:55,240 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前4名占比
2024-11-12 17:33:55,240 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前4名占比
2024-11-12 17:33:55,241 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前4名占比
2024-11-12 17:33:55,241 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前4名占比
2024-11-12 17:33:55,242 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前8名占比
2024-11-12 17:33:55,242 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前8名占比
2024-11-12 17:33:55,244 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前8名占比
2024-11-12 17:33:55,244 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前8名占比
2024-11-12 17:33:55,245 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前4名占比
2024-11-12 17:33:55,245 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前4名占比
2024-11-12 17:33:55,246 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前4名占比
2024-11-12 17:33:55,246 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前4名占比
2024-11-12 17:33:55,248 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前8名占比
2024-11-12 17:33:55,248 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前8名占比
2024-11-12 17:33:55,249 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前8名占比
2024-11-12 17:33:55,249 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前8名占比
2024-11-12 17:33:55,250 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓
2024-11-12 17:33:55,250 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓
2024-11-12 17:33:55,251 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:33:55,251 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:33:55,253 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:33:55,253 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:33:55,254 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓
2024-11-12 17:33:55,254 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓
2024-11-12 17:33:55,255 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓
2024-11-12 17:33:55,255 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓
2024-11-12 17:33:55,257 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓
2024-11-12 17:33:55,257 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓
2024-11-12 17:33:55,881 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓
2024-11-12 17:33:55,881 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓
2024-11-12 17:33:55,883 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓
2024-11-12 17:33:55,883 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓
2024-11-12 17:33:55,884 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓
2024-11-12 17:33:55,884 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓
2024-11-12 17:33:55,885 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓
2024-11-12 17:33:55,885 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓
2024-11-12 17:33:55,887 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓
2024-11-12 17:33:55,887 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓
2024-11-12 17:33:55,887 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓:环比增减
2024-11-12 17:33:55,887 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓:环比增减
2024-11-12 17:33:55,890 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,890 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,891 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,891 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,892 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,892 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,893 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,893 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,894 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:55,894 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:55,896 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,896 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,897 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,897 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,898 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:55,898 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:55,900 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,900 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,901 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,901 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,902 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:55,902 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:55,904 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,904 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,905 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,905 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:55,906 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 17:33:55,906 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 17:33:55,908 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 17:33:55,908 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 17:33:55,909 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量占比
2024-11-12 17:33:55,909 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量占比
2024-11-12 17:33:55,910 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量占比
2024-11-12 17:33:55,910 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量占比
2024-11-12 17:33:55,911 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量占比
2024-11-12 17:33:55,911 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量占比
2024-11-12 17:33:56,545 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:56,545 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:56,547 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:56,547 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:56,548 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:33:56,548 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:33:56,550 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:56,550 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:56,551 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:56,551 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:56,552 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):交易者数量合计
2024-11-12 17:33:56,552 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):交易者数量合计
2024-11-12 17:33:56,554 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:33:56,554 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:33:56,555 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:33:56,555 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:33:56,556 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:交易者数量
2024-11-12 17:33:56,556 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:交易者数量
2024-11-12 17:33:56,558 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:交易者数量
2024-11-12 17:33:56,558 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:交易者数量
2024-11-12 17:33:56,559 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:交易者数量
2024-11-12 17:33:56,559 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:交易者数量
2024-11-12 17:33:57,209 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 17:33:57,209 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 17:33:57,210 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 17:33:57,210 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 17:33:57,212 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 17:33:57,212 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 17:33:57,213 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓
2024-11-12 17:33:57,213 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓
2024-11-12 17:33:57,215 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:33:57,215 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:33:57,217 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:33:57,217 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:33:57,219 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓
2024-11-12 17:33:57,219 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓
2024-11-12 17:33:57,220 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓
2024-11-12 17:33:57,220 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓
2024-11-12 17:33:57,222 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓
2024-11-12 17:33:57,222 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓
2024-11-12 17:33:57,843 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓
2024-11-12 17:33:57,843 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓
2024-11-12 17:33:57,844 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓
2024-11-12 17:33:57,844 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓
2024-11-12 17:33:57,845 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓
2024-11-12 17:33:57,845 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓
2024-11-12 17:33:57,847 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓
2024-11-12 17:33:57,847 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓
2024-11-12 17:33:57,847 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓
2024-11-12 17:33:57,847 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓
2024-11-12 17:33:57,849 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓:环比增减
2024-11-12 17:33:57,849 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓:环比增减
2024-11-12 17:33:57,850 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,850 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,851 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,851 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,853 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,853 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,854 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,854 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,855 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:57,855 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-12 17:33:57,856 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:57,856 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-12 17:33:58,279 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:58,279 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:58,280 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:58,280 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:58,281 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:33:58,281 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:33:58,283 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:58,283 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:33:58,284 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:58,284 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:33:58,285 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):交易者数量合计
2024-11-12 17:33:58,285 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):交易者数量合计
2024-11-12 17:33:58,286 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:33:58,286 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:33:58,287 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:33:58,287 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:33:58,288 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:交易者数量
2024-11-12 17:33:58,288 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:交易者数量
2024-11-12 17:33:58,289 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:交易者数量
2024-11-12 17:33:58,289 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:交易者数量
2024-11-12 17:33:58,290 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:交易者数量
2024-11-12 17:33:58,290 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:交易者数量
2024-11-12 17:33:58,929 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 17:33:58,929 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:交易者数量
2024-11-12 17:33:58,930 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 17:33:58,930 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:交易者数量
2024-11-12 17:33:58,932 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 17:33:58,932 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:交易者数量
2024-11-12 17:33:58,933 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:33:58,933 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:33:58,934 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:33:58,934 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:33:58,935 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓
2024-11-12 17:33:58,935 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓
2024-11-12 17:33:58,936 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓
2024-11-12 17:33:58,936 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓
2024-11-12 17:33:58,938 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓
2024-11-12 17:33:58,938 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓
2024-11-12 17:33:59,578 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓
2024-11-12 17:33:59,578 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓
2024-11-12 17:33:59,580 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓
2024-11-12 17:33:59,580 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓
2024-11-12 17:33:59,581 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓
2024-11-12 17:33:59,581 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓
2024-11-12 17:33:59,582 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓
2024-11-12 17:33:59,582 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓
2024-11-12 17:33:59,584 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓
2024-11-12 17:33:59,584 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓
2024-11-12 17:33:59,585 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 17:33:59,585 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 17:33:59,586 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 17:33:59,586 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 17:33:59,587 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:持仓数量占比
2024-11-12 17:33:59,587 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:持仓数量占比
2024-11-12 17:33:59,589 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:持仓数量占比
2024-11-12 17:33:59,589 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:持仓数量占比
2024-11-12 17:33:59,591 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:持仓数量占比
2024-11-12 17:33:59,591 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:持仓数量占比
2024-11-12 17:34:00,233 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:00,233 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:00,235 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:00,235 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:00,236 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:34:00,236 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:34:00,238 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:00,238 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:00,239 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:00,239 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:00,241 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:交易者数量合计
2024-11-12 17:34:00,241 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:交易者数量合计
2024-11-12 17:34:00,242 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:34:00,242 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:34:00,243 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:34:00,243 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:34:00,244 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:交易者数量
2024-11-12 17:34:00,244 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:交易者数量
2024-11-12 17:34:00,246 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:交易者数量
2024-11-12 17:34:00,246 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:交易者数量
2024-11-12 17:34:00,247 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:交易者数量
2024-11-12 17:34:00,247 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:交易者数量
2024-11-12 17:34:00,867 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:交易者数量
2024-11-12 17:34:00,867 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:交易者数量
2024-11-12 17:34:00,870 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:交易者数量
2024-11-12 17:34:00,870 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:交易者数量
2024-11-12 17:34:00,870 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:交易者数量
2024-11-12 17:34:00,870 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:交易者数量
2024-11-12 17:34:00,872 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前4名占比
2024-11-12 17:34:00,872 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前4名占比
2024-11-12 17:34:00,873 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前4名占比
2024-11-12 17:34:00,873 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前4名占比
2024-11-12 17:34:00,874 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前8名占比
2024-11-12 17:34:00,874 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前8名占比
2024-11-12 17:34:00,875 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前8名占比
2024-11-12 17:34:00,875 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前8名占比
2024-11-12 17:34:00,876 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前4名占比
2024-11-12 17:34:00,876 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前4名占比
2024-11-12 17:34:00,877 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前4名占比
2024-11-12 17:34:00,877 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前4名占比
2024-11-12 17:34:00,878 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前8名占比
2024-11-12 17:34:00,878 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前8名占比
2024-11-12 17:34:00,880 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前8名占比
2024-11-12 17:34:00,880 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前8名占比
2024-11-12 17:34:00,882 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓
2024-11-12 17:34:00,882 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓
2024-11-12 17:34:00,883 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:34:00,883 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓
2024-11-12 17:34:00,884 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:34:00,884 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓
2024-11-12 17:34:00,885 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓
2024-11-12 17:34:00,885 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓
2024-11-12 17:34:00,887 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓
2024-11-12 17:34:00,887 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓
2024-11-12 17:34:00,888 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓
2024-11-12 17:34:00,888 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓
2024-11-12 17:34:01,527 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓
2024-11-12 17:34:01,527 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓
2024-11-12 17:34:01,530 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓
2024-11-12 17:34:01,530 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓
2024-11-12 17:34:01,531 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓
2024-11-12 17:34:01,531 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓
2024-11-12 17:34:01,532 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓
2024-11-12 17:34:01,532 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓
2024-11-12 17:34:01,534 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓
2024-11-12 17:34:01,534 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓
2024-11-12 17:34:01,535 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 17:34:01,535 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-12 17:34:01,536 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 17:34:01,536 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-12 17:34:01,537 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:持仓数量占比
2024-11-12 17:34:01,537 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:持仓数量占比
2024-11-12 17:34:01,539 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:持仓数量占比
2024-11-12 17:34:01,539 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:持仓数量占比
2024-11-12 17:34:01,540 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:持仓数量占比
2024-11-12 17:34:01,540 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:持仓数量占比
2024-11-12 17:34:02,162 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:02,162 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:02,163 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:02,163 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:02,164 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:34:02,164 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓:持仓数量占比
2024-11-12 17:34:02,165 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:02,165 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓:持仓数量占比
2024-11-12 17:34:02,167 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:02,167 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓:持仓数量占比
2024-11-12 17:34:02,168 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:交易者数量合计
2024-11-12 17:34:02,168 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:交易者数量合计
2024-11-12 17:34:02,169 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:34:02,169 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-12 17:34:02,170 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:34:02,170 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-12 17:34:02,171 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:交易者数量
2024-11-12 17:34:02,171 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:交易者数量
2024-11-12 17:34:02,172 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:交易者数量
2024-11-12 17:34:02,172 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:交易者数量
2024-11-12 17:34:02,174 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:交易者数量
2024-11-12 17:34:02,174 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:交易者数量
2024-11-12 17:36:42,992 - my_logger - INFO - 从eta获取数据...
2024-11-12 17:36:42,992 - my_logger - INFO - 从eta获取数据...
2024-11-12 17:37:37,334 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-12 17:37:37,334 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-12 17:37:37,336 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-12 17:37:37,336 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-12 17:37:37,338 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-12 17:37:37,338 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-12 17:38:04,321 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-12 17:38:04,321 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-12 17:38:04,323 - my_logger - INFO - lmcads03 lme comdty
2024-11-12 17:38:04,323 - my_logger - INFO - lmcads03 lme comdty
2024-11-12 17:38:04,835 - my_logger - INFO - GC1 COMB Comdty
2024-11-12 17:38:04,835 - my_logger - INFO - GC1 COMB Comdty
2024-11-12 17:38:05,570 - my_logger - INFO - C2404171822
2024-11-12 17:38:05,570 - my_logger - INFO - C2404171822
2024-11-12 17:38:06,444 - my_logger - INFO - dxy curncy
2024-11-12 17:38:06,444 - my_logger - INFO - dxy curncy
2024-11-12 17:38:07,195 - my_logger - INFO - S5443199
2024-11-12 17:38:07,195 - my_logger - INFO - S5443199
2024-11-12 17:38:07,571 - my_logger - INFO - S5479800
2024-11-12 17:38:07,571 - my_logger - INFO - S5479800
2024-11-12 17:38:07,918 - my_logger - INFO - S5443108
2024-11-12 17:38:07,918 - my_logger - INFO - S5443108
2024-11-12 17:38:08,296 - my_logger - INFO - H7358586
2024-11-12 17:38:08,296 - my_logger - INFO - H7358586
2024-11-12 17:38:08,518 - my_logger - INFO - LC3FM1 INDEX
2024-11-12 17:38:08,518 - my_logger - INFO - LC3FM1 INDEX
2024-11-12 17:38:08,853 - my_logger - INFO - CNY REGN Curncy
2024-11-12 17:38:08,853 - my_logger - INFO - CNY REGN Curncy
2024-11-12 17:38:09,851 - my_logger - INFO - s0105897
2024-11-12 17:38:09,851 - my_logger - INFO - s0105897
2024-11-12 17:38:10,422 - my_logger - INFO - M0067419
2024-11-12 17:38:10,422 - my_logger - INFO - M0067419
2024-11-12 17:38:10,921 - my_logger - INFO - M0066351
2024-11-12 17:38:10,921 - my_logger - INFO - M0066351
2024-11-12 17:38:11,424 - my_logger - INFO - S0266372
2024-11-12 17:38:11,424 - my_logger - INFO - S0266372
2024-11-12 17:38:11,784 - my_logger - INFO - S0266438
2024-11-12 17:38:11,784 - my_logger - INFO - S0266438
2024-11-12 17:38:12,160 - my_logger - INFO - S0266506
2024-11-12 17:38:12,160 - my_logger - INFO - S0266506
2024-11-12 17:38:12,615 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
949 2024-11-12 NaN NaN NaN NaN NaN ... 3773.96 5350.0 NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
951 2024-11-08 NaN NaN NaN NaN NaN ... 3848.42 5393.0 NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-12 17:38:12,615 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
949 2024-11-12 NaN NaN NaN NaN NaN ... 3773.96 5350.0 NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
951 2024-11-08 NaN NaN NaN NaN NaN ... 3848.42 5393.0 NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-12 17:39:59,130 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 17:39:59,130 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 17:39:59,883 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 17:39:59,883 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 17:39:59,889 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 17:39:59,889 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 17:39:59,897 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 17:39:59,897 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 17:40:03,044 - my_logger - INFO - 日度(222) 周度(92) 105天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 17:40:03,044 - my_logger - INFO - 日度(222) 周度(92) 105天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 17:40:03,085 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),105天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 17:40:03,085 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),105天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 17:40:03,089 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 17:40:03,089 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 17:40:04,237 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 17:40:04,237 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 17:40:04,244 - my_logger - INFO - 开始训练模型...
2024-11-12 17:40:04,244 - my_logger - INFO - 开始训练模型...
2024-11-12 17:40:04,245 - my_logger - INFO - 模型训练完成
2024-11-12 17:40:04,245 - my_logger - INFO - 模型训练完成
2024-11-12 17:40:04,248 - my_logger - INFO - 训练数据绘图ing
2024-11-12 17:40:04,248 - my_logger - INFO - 训练数据绘图ing
2024-11-12 17:40:10,653 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 17:40:10,653 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-10-30 00:00:00', NHITS = '72.72435', Informer = '71.30468', LSTM = '72.14615', iTransformer = '66.039246', TSMixer = '71.692444', TSMixerx = '71.3097', PatchTST = '72.42532', RNN = '52.32527', GRU = '72.71444', TCN = '72.69601', BiTCN = '72.40631', DilatedRNN = '70.29888', MLP = '73.403076', DLinear = '72.93471', NLinear = '70.93766', TFT = '70.80129', StemGNN = '74.78314', MLPMultivariate = '73.44013', TiDE = '71.79613', DeepNPTS = '73.43628' WHERE ds = '2024-10-30 00:00:00'
2024-11-12 17:40:14,061 - my_logger - INFO - 训练数据绘图end
2024-11-12 17:40:14,061 - my_logger - INFO - 训练数据绘图end
2024-11-12 17:40:14,063 - my_logger - INFO - 制作报告ing
2024-11-12 17:40:14,063 - my_logger - INFO - 制作报告ing
2024-11-12 17:40:14,278 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 17:40:14,278 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 17:40:17,647 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 17:40:17,647 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 17:40:17,651 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 17:40:17,651 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 17:40:21,379 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 17:40:21,379 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 17:40:21,381 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 17:40:21,381 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 17:40:24,803 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 17:40:24,803 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 17:40:24,806 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 17:40:24,806 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 17:40:58,872 - my_logger - INFO - 从eta获取数据...
2024-11-12 17:40:58,872 - my_logger - INFO - 从eta获取数据...
2024-11-12 17:41:53,215 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-12 17:41:53,215 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-12 17:41:53,217 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-12 17:41:53,217 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-12 17:41:53,218 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-12 17:41:53,218 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-12 17:42:19,344 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-12 17:42:19,344 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-12 17:42:19,346 - my_logger - INFO - lmcads03 lme comdty
2024-11-12 17:42:19,346 - my_logger - INFO - lmcads03 lme comdty
2024-11-12 17:42:19,805 - my_logger - INFO - GC1 COMB Comdty
2024-11-12 17:42:19,805 - my_logger - INFO - GC1 COMB Comdty
2024-11-12 17:42:20,622 - my_logger - INFO - C2404171822
2024-11-12 17:42:20,622 - my_logger - INFO - C2404171822
2024-11-12 17:42:21,494 - my_logger - INFO - dxy curncy
2024-11-12 17:42:21,494 - my_logger - INFO - dxy curncy
2024-11-12 17:42:22,202 - my_logger - INFO - S5443199
2024-11-12 17:42:22,202 - my_logger - INFO - S5443199
2024-11-12 17:42:22,584 - my_logger - INFO - S5479800
2024-11-12 17:42:22,584 - my_logger - INFO - S5479800
2024-11-12 17:42:22,914 - my_logger - INFO - S5443108
2024-11-12 17:42:22,914 - my_logger - INFO - S5443108
2024-11-12 17:42:23,318 - my_logger - INFO - H7358586
2024-11-12 17:42:23,318 - my_logger - INFO - H7358586
2024-11-12 17:42:23,544 - my_logger - INFO - LC3FM1 INDEX
2024-11-12 17:42:23,544 - my_logger - INFO - LC3FM1 INDEX
2024-11-12 17:42:23,878 - my_logger - INFO - CNY REGN Curncy
2024-11-12 17:42:23,878 - my_logger - INFO - CNY REGN Curncy
2024-11-12 17:42:24,927 - my_logger - INFO - s0105897
2024-11-12 17:42:24,927 - my_logger - INFO - s0105897
2024-11-12 17:42:25,484 - my_logger - INFO - M0067419
2024-11-12 17:42:25,484 - my_logger - INFO - M0067419
2024-11-12 17:42:25,941 - my_logger - INFO - M0066351
2024-11-12 17:42:25,941 - my_logger - INFO - M0066351
2024-11-12 17:42:26,499 - my_logger - INFO - S0266372
2024-11-12 17:42:26,499 - my_logger - INFO - S0266372
2024-11-12 17:42:26,912 - my_logger - INFO - S0266438
2024-11-12 17:42:26,912 - my_logger - INFO - S0266438
2024-11-12 17:42:27,337 - my_logger - INFO - S0266506
2024-11-12 17:42:27,337 - my_logger - INFO - S0266506
2024-11-12 17:42:27,799 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
949 2024-11-12 NaN NaN NaN NaN NaN ... 3773.96 5350.0 NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
951 2024-11-08 NaN NaN NaN NaN NaN ... 3848.42 5393.0 NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-12 17:42:27,799 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
949 2024-11-12 NaN NaN NaN NaN NaN ... 3773.96 5350.0 NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
951 2024-11-08 NaN NaN NaN NaN NaN ... 3848.42 5393.0 NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-12 17:44:12,141 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 17:44:12,141 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 17:44:12,796 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 17:44:12,796 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 17:44:12,800 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 17:44:12,800 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 17:44:12,802 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 17:44:12,802 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 17:44:16,002 - my_logger - INFO - 日度(222) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 17:44:16,002 - my_logger - INFO - 日度(222) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 17:44:16,037 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 17:44:16,037 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 17:44:16,040 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 17:44:16,040 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 17:44:17,176 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 17:44:17,176 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 17:44:17,181 - my_logger - INFO - 开始训练模型...
2024-11-12 17:44:17,181 - my_logger - INFO - 开始训练模型...
2024-11-12 17:44:17,200 - my_logger - INFO - Training set head:
2024-11-12 17:44:17,200 - my_logger - INFO - Training set head:
2024-11-12 17:44:17,202 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
631 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
630 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
629 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
628 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
627 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 17:44:17,202 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
631 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
630 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
629 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
628 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
627 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 17:44:18,309 - my_logger - INFO -
Testing set head:
2024-11-12 17:44:18,309 - my_logger - INFO -
Testing set head:
2024-11-12 17:44:18,311 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
502 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
1443 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
1442 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
501 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
500 2022-10-11 416.4173 208.0 178.0 228.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 17:44:18,311 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
502 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
1443 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
1442 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
501 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
500 2022-10-11 416.4173 208.0 178.0 228.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-12 17:55:01,811 - my_logger - INFO - 模型训练完成
2024-11-12 17:55:01,811 - my_logger - INFO - 模型训练完成
2024-11-12 17:55:01,816 - my_logger - INFO - 训练数据绘图ing
2024-11-12 17:55:01,816 - my_logger - INFO - 训练数据绘图ing
2024-11-12 17:55:14,024 - my_logger - INFO - 训练数据绘图end
2024-11-12 17:55:14,024 - my_logger - INFO - 训练数据绘图end
2024-11-12 17:55:14,027 - my_logger - INFO - 制作报告ing
2024-11-12 17:55:14,027 - my_logger - INFO - 制作报告ing
2024-11-12 17:55:14,267 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 17:55:14,267 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 17:55:17,685 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 17:55:17,685 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 17:55:17,690 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 17:55:17,690 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 17:55:32,582 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 17:55:32,582 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 17:55:32,584 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 17:55:32,584 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 17:55:35,856 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 17:55:35,856 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 17:55:35,859 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 17:55:35,859 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 17:55:38,258 - my_logger - INFO - 其他类指标的相关性总和为10.915768326614767
2024-11-12 17:55:38,258 - my_logger - INFO - 其他类指标的相关性总和为10.915768326614767
2024-11-12 17:55:38,261 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 17:55:38,261 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 17:55:41,586 - my_logger - INFO - 库存类指标的相关性总和为12.150150267234027
2024-11-12 17:55:41,586 - my_logger - INFO - 库存类指标的相关性总和为12.150150267234027
2024-11-12 17:55:41,589 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 17:55:41,589 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 17:55:42,947 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-12 17:55:42,947 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-12 17:55:42,950 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 17:55:42,950 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 17:55:45,564 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-12 17:55:45,564 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-12 17:55:45,566 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 17:55:45,566 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 17:55:46,100 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 17:55:46,100 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 17:55:52,612 - my_logger - INFO - 制作报告end
2024-11-12 17:55:52,612 - my_logger - INFO - 制作报告end
2024-11-12 17:55:52,613 - my_logger - INFO - 模型训练完成
2024-11-12 17:55:52,613 - my_logger - INFO - 模型训练完成
2024-11-12 18:21:20,676 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 18:21:20,676 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 18:21:20,680 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 18:21:20,680 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 18:22:12,975 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 18:22:12,975 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 18:22:13,709 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 18:22:13,709 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 18:22:13,713 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 18:22:13,713 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 18:22:13,717 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 18:22:13,717 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 18:22:16,725 - my_logger - INFO - 日度(222) 周度(92) 14天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 18:22:16,725 - my_logger - INFO - 日度(222) 周度(92) 14天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 18:22:16,770 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),14天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 18:22:16,770 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),14天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 18:22:16,775 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 18:22:16,775 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 18:22:17,968 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 18:22:17,968 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 18:22:17,971 - my_logger - INFO - 开始训练模型...
2024-11-12 18:22:17,971 - my_logger - INFO - 开始训练模型...
2024-11-12 18:22:17,972 - my_logger - INFO - 模型训练完成
2024-11-12 18:22:17,972 - my_logger - INFO - 模型训练完成
2024-11-12 18:22:17,974 - my_logger - INFO - 训练数据绘图ing
2024-11-12 18:22:17,974 - my_logger - INFO - 训练数据绘图ing
2024-11-12 18:22:24,169 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7386.7344', Informer = '7310.425', LSTM = '7447.7866', iTransformer = '7445.1133', TSMixer = '7404.1206', TSMixerx = '7514.627', PatchTST = '7372.934', RNN = '7376.214', GRU = '7409.8135', TCN = '7480.045', BiTCN = '7381.597', DilatedRNN = '7470.5405', MLP = '7430.8306', DLinear = '7375.2573', NLinear = '7384.2637', TFT = '7420.292', StemGNN = '7402.9487', MLPMultivariate = '7398.2197', TiDE = '7363.6714', DeepNPTS = '7380.9243' WHERE ds = '2024-11-13 00:00:00'
2024-11-12 18:22:24,169 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7386.7344', Informer = '7310.425', LSTM = '7447.7866', iTransformer = '7445.1133', TSMixer = '7404.1206', TSMixerx = '7514.627', PatchTST = '7372.934', RNN = '7376.214', GRU = '7409.8135', TCN = '7480.045', BiTCN = '7381.597', DilatedRNN = '7470.5405', MLP = '7430.8306', DLinear = '7375.2573', NLinear = '7384.2637', TFT = '7420.292', StemGNN = '7402.9487', MLPMultivariate = '7398.2197', TiDE = '7363.6714', DeepNPTS = '7380.9243' WHERE ds = '2024-11-13 00:00:00'
2024-11-12 18:22:27,428 - my_logger - INFO - 训练数据绘图end
2024-11-12 18:22:27,428 - my_logger - INFO - 训练数据绘图end
2024-11-12 18:22:27,429 - my_logger - INFO - 制作报告ing
2024-11-12 18:22:27,429 - my_logger - INFO - 制作报告ing
2024-11-12 18:22:27,606 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 18:22:27,606 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 18:22:31,558 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 18:22:31,558 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 18:22:31,562 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 18:22:31,562 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 18:22:35,758 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 18:22:35,758 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 18:22:35,761 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 18:22:35,761 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 18:22:39,534 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 18:22:39,534 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 18:22:39,537 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 18:22:39,537 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 18:22:42,583 - my_logger - INFO - 其他类指标的相关性总和为10.915768326614767
2024-11-12 18:22:42,583 - my_logger - INFO - 其他类指标的相关性总和为10.915768326614767
2024-11-12 18:22:42,586 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 18:22:42,586 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 18:22:46,302 - my_logger - INFO - 库存类指标的相关性总和为12.150150267234027
2024-11-12 18:22:46,302 - my_logger - INFO - 库存类指标的相关性总和为12.150150267234027
2024-11-12 18:22:46,305 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 18:22:46,305 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 18:22:47,242 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-12 18:22:47,242 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-12 18:22:47,245 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 18:22:47,245 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 18:22:50,212 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-12 18:22:50,212 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-12 18:22:50,215 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 18:22:50,215 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 18:22:50,889 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 18:22:50,889 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 18:22:55,332 - my_logger - INFO - 制作报告end
2024-11-12 18:22:55,332 - my_logger - INFO - 制作报告end
2024-11-12 18:22:55,333 - my_logger - INFO - 模型训练完成
2024-11-12 18:22:55,333 - my_logger - INFO - 模型训练完成
2024-11-12 18:26:25,620 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 18:26:25,620 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-12 18:26:25,624 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 18:26:25,624 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-12 18:27:18,105 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 18:27:18,105 - my_logger - INFO - 删除两月不更新特征前数据量:(2508, 356)
2024-11-12 18:27:18,787 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 18:27:18,787 - my_logger - INFO - 删除两月不更新特征后数据量:(2508, 316)
2024-11-12 18:27:18,791 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 18:27:18,791 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-12 18:27:18,795 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 18:27:18,795 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-12 18:27:21,785 - my_logger - INFO - 日度(222) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 18:27:21,785 - my_logger - INFO - 日度(222) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-12 18:27:21,828 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 18:27:21,828 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-12 18:27:21,832 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 18:27:21,832 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-12 18:27:23,040 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 18:27:23,040 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-12 18:27:23,043 - my_logger - INFO - 开始训练模型...
2024-11-12 18:27:23,043 - my_logger - INFO - 开始训练模型...
2024-11-12 18:27:23,044 - my_logger - INFO - 模型训练完成
2024-11-12 18:27:23,044 - my_logger - INFO - 模型训练完成
2024-11-12 18:27:23,045 - my_logger - INFO - 训练数据绘图ing
2024-11-12 18:27:23,045 - my_logger - INFO - 训练数据绘图ing
2024-11-12 18:27:29,760 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7386.7344', Informer = '7310.425', LSTM = '7447.7866', iTransformer = '7445.1133', TSMixer = '7404.1206', TSMixerx = '7514.627', PatchTST = '7372.934', RNN = '7376.214', GRU = '7409.8135', TCN = '7480.045', BiTCN = '7381.597', DilatedRNN = '7470.5405', MLP = '7430.8306', DLinear = '7375.2573', NLinear = '7384.2637', TFT = '7420.292', StemGNN = '7402.9487', MLPMultivariate = '7398.2197', TiDE = '7363.6714', DeepNPTS = '7380.9243' WHERE ds = '2024-11-13 00:00:00'
2024-11-12 18:27:29,760 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7386.7344', Informer = '7310.425', LSTM = '7447.7866', iTransformer = '7445.1133', TSMixer = '7404.1206', TSMixerx = '7514.627', PatchTST = '7372.934', RNN = '7376.214', GRU = '7409.8135', TCN = '7480.045', BiTCN = '7381.597', DilatedRNN = '7470.5405', MLP = '7430.8306', DLinear = '7375.2573', NLinear = '7384.2637', TFT = '7420.292', StemGNN = '7402.9487', MLPMultivariate = '7398.2197', TiDE = '7363.6714', DeepNPTS = '7380.9243' WHERE ds = '2024-11-13 00:00:00'
2024-11-12 18:27:32,969 - my_logger - INFO - 训练数据绘图end
2024-11-12 18:27:32,969 - my_logger - INFO - 训练数据绘图end
2024-11-12 18:27:32,971 - my_logger - INFO - 制作报告ing
2024-11-12 18:27:32,971 - my_logger - INFO - 制作报告ing
2024-11-12 18:27:33,152 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 18:27:33,152 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-12 18:27:36,899 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 18:27:36,899 - my_logger - INFO - 价差类指标的相关性总和为9.461079742521818
2024-11-12 18:27:36,903 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 18:27:36,903 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-12 18:27:40,665 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 18:27:40,665 - my_logger - INFO - 价格类指标的相关性总和为93.8281693925716
2024-11-12 18:27:40,668 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 18:27:40,668 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-12 18:27:44,047 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 18:27:44,047 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-12 18:27:44,051 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 18:27:44,051 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-12 18:27:46,829 - my_logger - INFO - 其他类指标的相关性总和为10.915768326614767
2024-11-12 18:27:46,829 - my_logger - INFO - 其他类指标的相关性总和为10.915768326614767
2024-11-12 18:27:46,832 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 18:27:46,832 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-12 18:27:50,461 - my_logger - INFO - 库存类指标的相关性总和为12.150150267234027
2024-11-12 18:27:50,461 - my_logger - INFO - 库存类指标的相关性总和为12.150150267234027
2024-11-12 18:27:50,463 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 18:27:50,463 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-12 18:27:51,315 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-12 18:27:51,315 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-12 18:27:51,318 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 18:27:51,318 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-12 18:27:54,240 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-12 18:27:54,240 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-12 18:27:54,243 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 18:27:54,243 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-12 18:27:54,833 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 18:27:54,833 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-12 18:27:59,045 - my_logger - INFO - 制作报告end
2024-11-12 18:27:59,045 - my_logger - INFO - 制作报告end
2024-11-12 18:27:59,047 - my_logger - INFO - 模型训练完成
2024-11-12 18:27:59,047 - my_logger - INFO - 模型训练完成
2024-11-13 09:37:24,843 - my_logger - INFO - 从eta获取数据...
2024-11-13 09:37:24,843 - my_logger - INFO - 从eta获取数据...
2024-11-13 09:39:57,753 - my_logger - INFO - 从eta获取数据...
2024-11-13 09:39:57,753 - my_logger - INFO - 从eta获取数据...
2024-11-13 09:40:41,120 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-13 09:40:41,120 - my_logger - INFO - 跳过指标 PE多头与PP空头比例和
2024-11-13 09:40:41,122 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-13 09:40:41,122 - my_logger - INFO - 跳过指标 PP2409前20多单量
2024-11-13 09:40:41,123 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-13 09:40:41,123 - my_logger - INFO - 跳过指标 PP2409前20空单量
2024-11-13 09:41:02,212 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-13 09:41:02,212 - my_logger - INFO - ['lmcads03 lme comdty', 'GC1 COMB Comdty', 'C2404171822', 'dxy curncy', 'S5443199 ', 'S5479800', 'S5443108', 'H7358586', 'LC3FM1 INDEX', 'CNY REGN Curncy', 's0105897', 'M0067419', 'M0066351', 'S0266372', 'S0266438', 'S0266506']
2024-11-13 09:41:02,214 - my_logger - INFO - lmcads03 lme comdty
2024-11-13 09:41:02,214 - my_logger - INFO - lmcads03 lme comdty
2024-11-13 09:41:02,648 - my_logger - INFO - GC1 COMB Comdty
2024-11-13 09:41:02,648 - my_logger - INFO - GC1 COMB Comdty
2024-11-13 09:41:03,336 - my_logger - INFO - C2404171822
2024-11-13 09:41:03,336 - my_logger - INFO - C2404171822
2024-11-13 09:41:04,124 - my_logger - INFO - dxy curncy
2024-11-13 09:41:04,124 - my_logger - INFO - dxy curncy
2024-11-13 09:41:04,777 - my_logger - INFO - S5443199
2024-11-13 09:41:04,777 - my_logger - INFO - S5443199
2024-11-13 09:41:05,114 - my_logger - INFO - S5479800
2024-11-13 09:41:05,114 - my_logger - INFO - S5479800
2024-11-13 09:41:05,415 - my_logger - INFO - S5443108
2024-11-13 09:41:05,415 - my_logger - INFO - S5443108
2024-11-13 09:41:05,755 - my_logger - INFO - H7358586
2024-11-13 09:41:05,755 - my_logger - INFO - H7358586
2024-11-13 09:41:05,941 - my_logger - INFO - LC3FM1 INDEX
2024-11-13 09:41:05,941 - my_logger - INFO - LC3FM1 INDEX
2024-11-13 09:41:06,239 - my_logger - INFO - CNY REGN Curncy
2024-11-13 09:41:06,239 - my_logger - INFO - CNY REGN Curncy
2024-11-13 09:41:07,157 - my_logger - INFO - s0105897
2024-11-13 09:41:07,157 - my_logger - INFO - s0105897
2024-11-13 09:41:07,648 - my_logger - INFO - M0067419
2024-11-13 09:41:07,648 - my_logger - INFO - M0067419
2024-11-13 09:41:08,078 - my_logger - INFO - M0066351
2024-11-13 09:41:08,078 - my_logger - INFO - M0066351
2024-11-13 09:41:08,525 - my_logger - INFO - S0266372
2024-11-13 09:41:08,525 - my_logger - INFO - S0266372
2024-11-13 09:41:08,860 - my_logger - INFO - S0266438
2024-11-13 09:41:08,860 - my_logger - INFO - S0266438
2024-11-13 09:41:09,192 - my_logger - INFO - S0266506
2024-11-13 09:41:09,192 - my_logger - INFO - S0266506
2024-11-13 09:41:09,559 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
6815 2024-11-13 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
949 2024-11-12 NaN NaN NaN NaN NaN ... 3773.96 5350.0 NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-13 09:41:09,559 - my_logger - INFO - date PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) 聚丙烯品类价差:共聚与拉丝(华东) ... 南华工业品指数 PVC期货主力 PE期货收盘价 PP连续-1月 PP连续-5月 PP连续-9月
6815 2024-11-13 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
949 2024-11-12 NaN NaN NaN NaN NaN ... 3773.96 5350.0 NaN NaN NaN NaN
950 2024-11-11 NaN NaN NaN NaN NaN ... 3806.98 5335.0 NaN NaN NaN NaN
6551 2024-11-10 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
6552 2024-11-09 NaN NaN NaN NaN NaN ... NaN NaN NaN NaN NaN NaN
[5 rows x 356 columns]
2024-11-13 09:42:06,672 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 356)
2024-11-13 09:42:06,672 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 356)
2024-11-13 09:42:07,089 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 316)
2024-11-13 09:42:07,089 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 316)
2024-11-13 09:42:07,092 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-13 09:42:07,092 - my_logger - INFO - 删除预测列为空值的行后数据量:(659, 316)
2024-11-13 09:42:07,095 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-13 09:42:07,095 - my_logger - INFO - 删除全为空值的列后数据量:(659, 316)
2024-11-13 09:42:08,635 - my_logger - INFO - 日度(222) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-13 09:42:08,635 - my_logger - INFO - 日度(222) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
217 PVC期货主力
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
[222 rows x 3 columns]
2024-11-13 09:42:08,658 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 09:42:08,658 - my_logger - INFO - 特征信息总共有313个,日度(222),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 09:42:08,660 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 09:42:08,660 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 09:42:09,437 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 09:42:09,437 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7380.0' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 09:42:09,439 - my_logger - INFO - 开始训练模型...
2024-11-13 09:42:09,439 - my_logger - INFO - 开始训练模型...
2024-11-13 09:42:09,451 - my_logger - INFO - Training set head:
2024-11-13 09:42:09,451 - my_logger - INFO - Training set head:
2024-11-13 09:42:09,452 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
631 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
630 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
629 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
628 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
627 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-13 09:42:09,452 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
631 2022-03-24 -92.4870 51.0 -89.0 -19.0 ... 0.0 0.0 0.0 0.0 1
630 2022-03-25 -64.3131 -12.0 -192.0 -142.0 ... 0.0 0.0 0.0 0.0 1
629 2022-03-28 174.6488 -21.0 -171.0 -91.0 ... 0.0 0.0 0.0 0.0 1
628 2022-03-29 94.9766 -49.0 -219.0 -79.0 ... 0.0 0.0 0.0 0.0 1
627 2022-03-30 -7.7663 -49.0 -159.0 -79.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-13 09:42:10,046 - my_logger - INFO -
Testing set head:
2024-11-13 09:42:10,046 - my_logger - INFO -
Testing set head:
2024-11-13 09:42:10,047 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
502 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
1443 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
1442 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
501 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
500 2022-10-11 416.4173 208.0 178.0 228.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-13 09:42:10,047 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
502 2022-09-30 345.7571 178.0 28.0 198.0 ... 0.0 1.0 0.0 0.0 1
1443 2022-10-08 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
1442 2022-10-09 345.7571 178.0 28.0 198.0 ... 0.0 0.0 0.0 0.0 1
501 2022-10-10 527.6122 166.0 116.0 196.0 ... 0.0 0.0 0.0 0.0 1
500 2022-10-11 416.4173 208.0 178.0 228.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 331 columns]
2024-11-13 09:47:57,480 - my_logger - INFO - 模型训练完成
2024-11-13 09:47:57,480 - my_logger - INFO - 模型训练完成
2024-11-13 09:47:57,483 - my_logger - INFO - 训练数据绘图ing
2024-11-13 09:47:57,483 - my_logger - INFO - 训练数据绘图ing
2024-11-13 09:48:01,286 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7386.7344', Informer = '7309.8403', LSTM = '7447.7866', iTransformer = '7447.9053', TSMixer = '7404.1206', TSMixerx = '7514.627', PatchTST = '7372.934', RNN = '7376.214', GRU = '7409.8135', TCN = '7480.045', BiTCN = '7381.593', DilatedRNN = '7470.5405', MLP = '7430.8306', DLinear = '7375.2573', NLinear = '7384.2637', TFT = '7420.292', StemGNN = '7413.1167', MLPMultivariate = '7411.7354', TiDE = '7363.6714', DeepNPTS = '7380.9243' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 09:48:01,286 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7386.7344', Informer = '7309.8403', LSTM = '7447.7866', iTransformer = '7447.9053', TSMixer = '7404.1206', TSMixerx = '7514.627', PatchTST = '7372.934', RNN = '7376.214', GRU = '7409.8135', TCN = '7480.045', BiTCN = '7381.593', DilatedRNN = '7470.5405', MLP = '7430.8306', DLinear = '7375.2573', NLinear = '7384.2637', TFT = '7420.292', StemGNN = '7413.1167', MLPMultivariate = '7411.7354', TiDE = '7363.6714', DeepNPTS = '7380.9243' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 09:48:03,095 - my_logger - INFO - 训练数据绘图end
2024-11-13 09:48:03,095 - my_logger - INFO - 训练数据绘图end
2024-11-13 09:48:03,096 - my_logger - INFO - 制作报告ing
2024-11-13 09:48:03,096 - my_logger - INFO - 制作报告ing
2024-11-13 09:48:03,241 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 09:48:03,241 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 09:48:05,068 - my_logger - INFO - 价差类指标的相关性总和为9.46239865052728
2024-11-13 09:48:05,068 - my_logger - INFO - 价差类指标的相关性总和为9.46239865052728
2024-11-13 09:48:05,070 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 09:48:05,070 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 09:48:15,603 - my_logger - INFO - 价格类指标的相关性总和为93.82816637779308
2024-11-13 09:48:15,603 - my_logger - INFO - 价格类指标的相关性总和为93.82816637779308
2024-11-13 09:48:15,604 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 09:48:15,604 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 09:48:17,373 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-13 09:48:17,373 - my_logger - INFO - 供应类指标的相关性总和为16.685310725542738
2024-11-13 09:48:17,375 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 09:48:17,375 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 09:48:18,965 - my_logger - INFO - 其他类指标的相关性总和为10.915850605839259
2024-11-13 09:48:18,965 - my_logger - INFO - 其他类指标的相关性总和为10.915850605839259
2024-11-13 09:48:18,967 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 09:48:18,967 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 09:48:20,785 - my_logger - INFO - 库存类指标的相关性总和为12.150758991462931
2024-11-13 09:48:20,785 - my_logger - INFO - 库存类指标的相关性总和为12.150758991462931
2024-11-13 09:48:20,787 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 09:48:20,787 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 09:48:21,619 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-13 09:48:21,619 - my_logger - INFO - 进出口类指标的相关性总和为1.3109105185907945
2024-11-13 09:48:21,622 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 09:48:21,622 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 09:48:23,065 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-13 09:48:23,065 - my_logger - INFO - 需求类指标的相关性总和为6.451009274746452
2024-11-13 09:48:23,066 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 09:48:23,066 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 09:48:23,383 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 09:48:23,383 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 09:48:26,065 - my_logger - INFO - 制作报告end
2024-11-13 09:48:26,065 - my_logger - INFO - 制作报告end
2024-11-13 09:48:26,066 - my_logger - INFO - 模型训练完成
2024-11-13 09:48:26,066 - my_logger - INFO - 模型训练完成
2024-11-13 10:04:37,180 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:04:37,180 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:04:37,182 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:04:37,182 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:05:56,358 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 356)
2024-11-13 10:05:56,358 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 356)
2024-11-13 10:05:57,229 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 316)
2024-11-13 10:05:57,229 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 316)
2024-11-13 10:09:22,206 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:09:22,206 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:09:22,208 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:09:22,208 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:13:20,722 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:13:20,722 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:13:20,724 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:13:20,724 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:16:08,411 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:16:08,411 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:16:09,272 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:16:09,272 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:16:09,277 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 317)
2024-11-13 10:16:09,277 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 317)
2024-11-13 10:16:09,280 - my_logger - INFO - 删除全为空值的列后数据量:(767, 317)
2024-11-13 10:16:09,280 - my_logger - INFO - 删除全为空值的列后数据量:(767, 317)
2024-11-13 10:16:13,541 - my_logger - INFO - 日度(223) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
222 y
[223 rows x 3 columns]
2024-11-13 10:16:13,541 - my_logger - INFO - 日度(223) 周度(92) 168天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
222 y
[223 rows x 3 columns]
2024-11-13 10:16:13,598 - my_logger - INFO - 特征信息总共有314个,日度(223),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 10:16:13,598 - my_logger - INFO - 特征信息总共有314个,日度(223),周度(92),168天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 10:16:13,602 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 10:16:13,602 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 10:16:14,588 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7333.333333333333' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 10:16:14,588 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7333.333333333333' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 10:16:14,594 - my_logger - INFO - 开始训练模型...
2024-11-13 10:16:14,594 - my_logger - INFO - 开始训练模型...
2024-11-13 10:16:14,620 - my_logger - INFO - Training set head:
2024-11-13 10:16:14,620 - my_logger - INFO - Training set head:
2024-11-13 10:16:14,621 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1121 2021-10-19 -165.5689 57.0 -93.0 -43.0 ... 0.0 0.0 0.0 0.0 1
1120 2021-10-20 -165.5689 198.0 48.0 148.0 ... 0.0 0.0 0.0 0.0 1
1119 2021-10-21 -165.5689 215.0 -75.0 35.0 ... 0.0 0.0 0.0 0.0 1
1118 2021-10-22 -165.5689 177.0 -63.0 27.0 ... 0.0 0.0 0.0 0.0 1
1115 2021-10-25 -165.5689 298.0 -2.0 48.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:16:14,621 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1121 2021-10-19 -165.5689 57.0 -93.0 -43.0 ... 0.0 0.0 0.0 0.0 1
1120 2021-10-20 -165.5689 198.0 48.0 148.0 ... 0.0 0.0 0.0 0.0 1
1119 2021-10-21 -165.5689 215.0 -75.0 35.0 ... 0.0 0.0 0.0 0.0 1
1118 2021-10-22 -165.5689 177.0 -63.0 27.0 ... 0.0 0.0 0.0 0.0 1
1115 2021-10-25 -165.5689 298.0 -2.0 48.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:16:16,221 - my_logger - INFO -
Testing set head:
2024-11-13 10:16:16,221 - my_logger - INFO -
Testing set head:
2024-11-13 10:16:16,223 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
897 2022-05-31 638.7137 -22.0 -152.0 -82.0 ... 0.0 0.0 0.0 0.0 1
896 2022-06-01 621.7030 22.0 -178.0 -78.0 ... 0.0 0.0 0.0 0.0 1
895 2022-06-02 552.9803 40.0 -160.0 -60.0 ... 0.0 0.0 0.0 0.0 1
891 2022-06-06 603.3724 74.0 -96.0 24.0 ... 0.0 0.0 0.0 0.0 1
890 2022-06-07 637.3217 65.0 -105.0 -5.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:16:16,223 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
897 2022-05-31 638.7137 -22.0 -152.0 -82.0 ... 0.0 0.0 0.0 0.0 1
896 2022-06-01 621.7030 22.0 -178.0 -78.0 ... 0.0 0.0 0.0 0.0 1
895 2022-06-02 552.9803 40.0 -160.0 -60.0 ... 0.0 0.0 0.0 0.0 1
891 2022-06-06 603.3724 74.0 -96.0 24.0 ... 0.0 0.0 0.0 0.0 1
890 2022-06-07 637.3217 65.0 -105.0 -5.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:22:06,869 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:22:06,869 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:22:06,870 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:22:06,870 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:22:34,996 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:22:34,996 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:22:35,420 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:22:35,420 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:22:35,423 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 317)
2024-11-13 10:22:35,423 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 317)
2024-11-13 10:22:35,425 - my_logger - INFO - 删除全为空值的列后数据量:(767, 317)
2024-11-13 10:22:35,425 - my_logger - INFO - 删除全为空值的列后数据量:(767, 317)
2024-11-13 10:22:37,239 - my_logger - INFO - 日度(223) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
222 y
[223 rows x 3 columns]
2024-11-13 10:22:37,239 - my_logger - INFO - 日度(223) 周度(92) 84天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
222 y
[223 rows x 3 columns]
2024-11-13 10:22:37,262 - my_logger - INFO - 特征信息总共有314个,日度(223),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 10:22:37,262 - my_logger - INFO - 特征信息总共有314个,日度(223),周度(92),84天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 10:22:37,265 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 10:22:37,265 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 10:22:37,896 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7316.666666666667' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 10:22:37,896 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7316.666666666667' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 10:22:37,901 - my_logger - INFO - 开始训练模型...
2024-11-13 10:22:37,901 - my_logger - INFO - 开始训练模型...
2024-11-13 10:22:37,912 - my_logger - INFO - Training set head:
2024-11-13 10:22:37,912 - my_logger - INFO - Training set head:
2024-11-13 10:22:37,913 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1121 2021-10-19 -165.5689 57.0 -93.0 -43.0 ... 0.0 0.0 0.0 0.0 1
1120 2021-10-20 -165.5689 198.0 48.0 148.0 ... 0.0 0.0 0.0 0.0 1
1119 2021-10-21 -165.5689 215.0 -75.0 35.0 ... 0.0 0.0 0.0 0.0 1
1118 2021-10-22 -165.5689 177.0 -63.0 27.0 ... 0.0 0.0 0.0 0.0 1
1115 2021-10-25 -165.5689 298.0 -2.0 48.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:22:37,913 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1121 2021-10-19 -165.5689 57.0 -93.0 -43.0 ... 0.0 0.0 0.0 0.0 1
1120 2021-10-20 -165.5689 198.0 48.0 148.0 ... 0.0 0.0 0.0 0.0 1
1119 2021-10-21 -165.5689 215.0 -75.0 35.0 ... 0.0 0.0 0.0 0.0 1
1118 2021-10-22 -165.5689 177.0 -63.0 27.0 ... 0.0 0.0 0.0 0.0 1
1115 2021-10-25 -165.5689 298.0 -2.0 48.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:22:38,508 - my_logger - INFO -
Testing set head:
2024-11-13 10:22:38,508 - my_logger - INFO -
Testing set head:
2024-11-13 10:22:38,509 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
897 2022-05-31 638.7137 -22.0 -152.0 -82.0 ... 0.0 0.0 0.0 0.0 1
896 2022-06-01 621.7030 22.0 -178.0 -78.0 ... 0.0 0.0 0.0 0.0 1
895 2022-06-02 552.9803 40.0 -160.0 -60.0 ... 0.0 0.0 0.0 0.0 1
891 2022-06-06 603.3724 74.0 -96.0 24.0 ... 0.0 0.0 0.0 0.0 1
890 2022-06-07 637.3217 65.0 -105.0 -5.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:22:38,509 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
897 2022-05-31 638.7137 -22.0 -152.0 -82.0 ... 0.0 0.0 0.0 0.0 1
896 2022-06-01 621.7030 22.0 -178.0 -78.0 ... 0.0 0.0 0.0 0.0 1
895 2022-06-02 552.9803 40.0 -160.0 -60.0 ... 0.0 0.0 0.0 0.0 1
891 2022-06-06 603.3724 74.0 -96.0 24.0 ... 0.0 0.0 0.0 0.0 1
890 2022-06-07 637.3217 65.0 -105.0 -5.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 332 columns]
2024-11-13 10:30:12,715 - my_logger - INFO - 模型训练完成
2024-11-13 10:30:12,715 - my_logger - INFO - 模型训练完成
2024-11-13 10:30:12,716 - my_logger - INFO - 训练数据绘图ing
2024-11-13 10:30:12,716 - my_logger - INFO - 训练数据绘图ing
2024-11-13 10:30:16,466 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7325.033', Informer = '7314.576', LSTM = '7270.242', iTransformer = '7350.085', TSMixer = '7330.8755', TSMixerx = '7381.4727', PatchTST = '7348.6206', RNN = '7315.8696', GRU = '7304.2344', TCN = '7377.363', BiTCN = '7358.735', DilatedRNN = '7332.886', MLP = '7389.868', DLinear = '7344.1216', NLinear = '7305.1855', TFT = '7282.7104', StemGNN = '7360.6147', MLPMultivariate = '7392.56', TiDE = '7332.4766', DeepNPTS = '7381.8154' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 10:30:16,466 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7325.033', Informer = '7314.576', LSTM = '7270.242', iTransformer = '7350.085', TSMixer = '7330.8755', TSMixerx = '7381.4727', PatchTST = '7348.6206', RNN = '7315.8696', GRU = '7304.2344', TCN = '7377.363', BiTCN = '7358.735', DilatedRNN = '7332.886', MLP = '7389.868', DLinear = '7344.1216', NLinear = '7305.1855', TFT = '7282.7104', StemGNN = '7360.6147', MLPMultivariate = '7392.56', TiDE = '7332.4766', DeepNPTS = '7381.8154' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 10:30:18,216 - my_logger - INFO - 训练数据绘图end
2024-11-13 10:30:18,216 - my_logger - INFO - 训练数据绘图end
2024-11-13 10:30:18,217 - my_logger - INFO - 制作报告ing
2024-11-13 10:30:18,217 - my_logger - INFO - 制作报告ing
2024-11-13 10:30:18,343 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 10:30:18,343 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 10:30:20,117 - my_logger - INFO - 价差类指标的相关性总和为10.896651741961374
2024-11-13 10:30:20,117 - my_logger - INFO - 价差类指标的相关性总和为10.896651741961374
2024-11-13 10:30:20,119 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 10:30:20,119 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 10:30:22,300 - my_logger - INFO - 价格类指标的相关性总和为95.94765575810419
2024-11-13 10:30:22,300 - my_logger - INFO - 价格类指标的相关性总和为95.94765575810419
2024-11-13 10:30:22,302 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 10:30:22,302 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 10:30:24,124 - my_logger - INFO - 供应类指标的相关性总和为19.48890581057575
2024-11-13 10:30:24,124 - my_logger - INFO - 供应类指标的相关性总和为19.48890581057575
2024-11-13 10:30:24,125 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 10:30:24,125 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 10:30:25,909 - my_logger - INFO - 其他类指标的相关性总和为12.09450184141281
2024-11-13 10:30:25,909 - my_logger - INFO - 其他类指标的相关性总和为12.09450184141281
2024-11-13 10:30:25,911 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 10:30:25,911 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 10:30:28,150 - my_logger - INFO - 库存类指标的相关性总和为11.057522362449376
2024-11-13 10:30:28,150 - my_logger - INFO - 库存类指标的相关性总和为11.057522362449376
2024-11-13 10:30:28,152 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 10:30:28,152 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 10:30:28,659 - my_logger - INFO - 进出口类指标的相关性总和为1.6295223883259644
2024-11-13 10:30:28,659 - my_logger - INFO - 进出口类指标的相关性总和为1.6295223883259644
2024-11-13 10:30:28,660 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 10:30:28,660 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 10:30:30,016 - my_logger - INFO - 需求类指标的相关性总和为6.8062809048515005
2024-11-13 10:30:30,016 - my_logger - INFO - 需求类指标的相关性总和为6.8062809048515005
2024-11-13 10:30:30,017 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 10:30:30,017 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 10:30:30,340 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 10:30:30,340 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 10:30:33,181 - my_logger - INFO - 制作报告end
2024-11-13 10:30:33,181 - my_logger - INFO - 制作报告end
2024-11-13 10:30:33,182 - my_logger - INFO - 模型训练完成
2024-11-13 10:30:33,182 - my_logger - INFO - 模型训练完成
2024-11-13 10:33:55,522 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:33:55,522 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:33:55,524 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:33:55,524 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:34:26,356 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:34:26,356 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:34:26,781 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:34:26,781 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:36:15,115 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:36:15,115 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 10:36:15,116 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:36:15,116 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 10:36:43,606 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:36:43,606 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 357)
2024-11-13 10:36:44,011 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:36:44,011 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 317)
2024-11-13 10:36:44,014 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 317)
2024-11-13 10:36:44,014 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 317)
2024-11-13 10:36:44,016 - my_logger - INFO - 删除全为空值的列后数据量:(767, 317)
2024-11-13 10:36:44,016 - my_logger - INFO - 删除全为空值的列后数据量:(767, 317)
2024-11-13 10:36:45,798 - my_logger - INFO - 日度(223) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
222 y
[223 rows x 3 columns]
2024-11-13 10:36:45,798 - my_logger - INFO - 日度(223) 周度(92) 49天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
218 PE期货收盘价
219 PP连续-1月
220 PP连续-5月
221 PP连续-9月
222 y
[223 rows x 3 columns]
2024-11-13 10:36:45,820 - my_logger - INFO - 特征信息总共有314个,日度(223),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 10:36:45,820 - my_logger - INFO - 特征信息总共有314个,日度(223),周度(92),49天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 10:36:45,823 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 10:36:45,823 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 10:36:46,532 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7316.666666666667' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 10:36:46,532 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7316.666666666667' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 10:36:46,534 - my_logger - INFO - 开始训练模型...
2024-11-13 10:36:46,534 - my_logger - INFO - 开始训练模型...
2024-11-13 10:36:46,535 - my_logger - INFO - 模型训练完成
2024-11-13 10:36:46,535 - my_logger - INFO - 模型训练完成
2024-11-13 10:36:46,536 - my_logger - INFO - 训练数据绘图ing
2024-11-13 10:36:46,536 - my_logger - INFO - 训练数据绘图ing
2024-11-13 10:36:50,333 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7325.033', Informer = '7314.576', LSTM = '7270.242', iTransformer = '7350.085', TSMixer = '7330.8755', TSMixerx = '7381.4727', PatchTST = '7348.6206', RNN = '7315.8696', GRU = '7304.2344', TCN = '7377.363', BiTCN = '7358.735', DilatedRNN = '7332.886', MLP = '7389.868', DLinear = '7344.1216', NLinear = '7305.1855', TFT = '7282.7104', StemGNN = '7360.6147', MLPMultivariate = '7392.56', TiDE = '7332.4766', DeepNPTS = '7381.8154' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 10:36:50,333 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7325.033', Informer = '7314.576', LSTM = '7270.242', iTransformer = '7350.085', TSMixer = '7330.8755', TSMixerx = '7381.4727', PatchTST = '7348.6206', RNN = '7315.8696', GRU = '7304.2344', TCN = '7377.363', BiTCN = '7358.735', DilatedRNN = '7332.886', MLP = '7389.868', DLinear = '7344.1216', NLinear = '7305.1855', TFT = '7282.7104', StemGNN = '7360.6147', MLPMultivariate = '7392.56', TiDE = '7332.4766', DeepNPTS = '7381.8154' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 10:36:52,248 - my_logger - INFO - 训练数据绘图end
2024-11-13 10:36:52,248 - my_logger - INFO - 训练数据绘图end
2024-11-13 10:36:52,249 - my_logger - INFO - 制作报告ing
2024-11-13 10:36:52,249 - my_logger - INFO - 制作报告ing
2024-11-13 10:36:52,386 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 10:36:52,386 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 10:36:54,504 - my_logger - INFO - 价差类指标的相关性总和为10.896651741961374
2024-11-13 10:36:54,504 - my_logger - INFO - 价差类指标的相关性总和为10.896651741961374
2024-11-13 10:36:54,506 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 10:36:54,506 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 10:36:56,502 - my_logger - INFO - 价格类指标的相关性总和为95.94765575810419
2024-11-13 10:36:56,502 - my_logger - INFO - 价格类指标的相关性总和为95.94765575810419
2024-11-13 10:36:56,504 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 10:36:56,504 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 10:36:58,300 - my_logger - INFO - 供应类指标的相关性总和为19.48890581057575
2024-11-13 10:36:58,300 - my_logger - INFO - 供应类指标的相关性总和为19.48890581057575
2024-11-13 10:36:58,302 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 10:36:58,302 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 10:37:00,342 - my_logger - INFO - 其他类指标的相关性总和为12.09450184141281
2024-11-13 10:37:00,342 - my_logger - INFO - 其他类指标的相关性总和为12.09450184141281
2024-11-13 10:37:00,344 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 10:37:00,344 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 10:37:02,220 - my_logger - INFO - 库存类指标的相关性总和为11.057522362449376
2024-11-13 10:37:02,220 - my_logger - INFO - 库存类指标的相关性总和为11.057522362449376
2024-11-13 10:37:02,222 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 10:37:02,222 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 10:37:02,719 - my_logger - INFO - 进出口类指标的相关性总和为1.6295223883259644
2024-11-13 10:37:02,719 - my_logger - INFO - 进出口类指标的相关性总和为1.6295223883259644
2024-11-13 10:37:02,720 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 10:37:02,720 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 10:37:04,070 - my_logger - INFO - 需求类指标的相关性总和为6.8062809048515005
2024-11-13 10:37:04,070 - my_logger - INFO - 需求类指标的相关性总和为6.8062809048515005
2024-11-13 10:37:04,072 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 10:37:04,072 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 10:37:04,419 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 10:37:04,419 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 10:37:07,306 - my_logger - INFO - 制作报告end
2024-11-13 10:37:07,306 - my_logger - INFO - 制作报告end
2024-11-13 10:37:07,307 - my_logger - INFO - 模型训练完成
2024-11-13 10:37:07,307 - my_logger - INFO - 模型训练完成
2024-11-13 11:19:23,761 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 11:19:23,761 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 11:19:23,763 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 11:19:23,763 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 18:21:50,734 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 18:21:50,734 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-13 18:21:50,738 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 18:21:50,738 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-13 18:22:46,292 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 353)
2024-11-13 18:22:46,292 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 353)
2024-11-13 18:22:46,956 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 313)
2024-11-13 18:22:46,956 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 313)
2024-11-13 18:22:46,961 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 313)
2024-11-13 18:22:46,961 - my_logger - INFO - 删除预测列为空值的行后数据量:(767, 313)
2024-11-13 18:22:46,966 - my_logger - INFO - 删除全为空值的列后数据量:(767, 313)
2024-11-13 18:22:46,966 - my_logger - INFO - 删除全为空值的列后数据量:(767, 313)
2024-11-13 18:22:50,116 - my_logger - INFO - 日度(219) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PE期货收盘价
215 PP连续-1月
216 PP连续-5月
217 PP连续-9月
218 y
[219 rows x 3 columns]
2024-11-13 18:22:50,116 - my_logger - INFO - 日度(219) 周度(92) 112天(1)
0 PP主力收盘价拟合残差/丙烷 CP M1 PE注塑开工率/周 中国华东地区市场平均价BOPP厚光膜
1 华南聚丙烯基差(折盘面收盘价) PP看跌比例中国
2 华北聚丙烯基差(折盘面收盘价) PP看平比例中国
3 华东聚丙烯基差(折盘面收盘价) PP看升比例中国
4 煤制聚丙烯利润 PP看空情绪指数环差
.. ... ... ...
214 PE期货收盘价
215 PP连续-1月
216 PP连续-5月
217 PP连续-9月
218 y
[219 rows x 3 columns]
2024-11-13 18:22:50,151 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 18:22:50,151 - my_logger - INFO - 特征信息总共有310个,日度(219),周度(92),112天(1), 详看 附1、特征列表
数据特征工程:
1. 数据日期排序,新日期在最后
2. 删除空列,特征数据列没有值,就删除
3. 删除近两月不再更新值的指标
4. 非日度数据填充为日度数据,填充规则:
-- 向后填充,举例:假设周五出现一个周度指标数据,那么在这之前的数据用上周五的数据
-- 向前填充举例采集数据开始日期为2018年1月1日那么周度数据可能是2018年1月3日那么3日的数据向前填充使1日2日都有数值
数据特征相关性分析:
2024-11-13 18:22:50,155 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 18:22:50,155 - my_logger - INFO - ********************************************************************************************************************************************************************************************************
2024-11-13 18:22:51,357 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7316.666666666667' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 18:22:51,357 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-12 00:00:00', y = '7316.666666666667' WHERE ds = '2024-11-12 00:00:00'
2024-11-13 18:22:51,360 - my_logger - INFO - 开始训练模型...
2024-11-13 18:22:51,360 - my_logger - INFO - 开始训练模型...
2024-11-13 18:22:51,377 - my_logger - INFO - Training set head:
2024-11-13 18:22:51,377 - my_logger - INFO - Training set head:
2024-11-13 18:22:51,379 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1121 2021-10-19 -165.5689 57.0 -93.0 -43.0 ... 0.0 0.0 0.0 0.0 1
1120 2021-10-20 -165.5689 198.0 48.0 148.0 ... 0.0 0.0 0.0 0.0 1
1119 2021-10-21 -165.5689 215.0 -75.0 35.0 ... 0.0 0.0 0.0 0.0 1
1118 2021-10-22 -165.5689 177.0 -63.0 27.0 ... 0.0 0.0 0.0 0.0 1
1115 2021-10-25 -165.5689 298.0 -2.0 48.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-13 18:22:51,379 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
1121 2021-10-19 -165.5689 57.0 -93.0 -43.0 ... 0.0 0.0 0.0 0.0 1
1120 2021-10-20 -165.5689 198.0 48.0 148.0 ... 0.0 0.0 0.0 0.0 1
1119 2021-10-21 -165.5689 215.0 -75.0 35.0 ... 0.0 0.0 0.0 0.0 1
1118 2021-10-22 -165.5689 177.0 -63.0 27.0 ... 0.0 0.0 0.0 0.0 1
1115 2021-10-25 -165.5689 298.0 -2.0 48.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-13 18:22:52,387 - my_logger - INFO -
Testing set head:
2024-11-13 18:22:52,387 - my_logger - INFO -
Testing set head:
2024-11-13 18:22:52,389 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
897 2022-05-31 638.7137 -22.0 -152.0 -82.0 ... 0.0 0.0 0.0 0.0 1
896 2022-06-01 621.7030 22.0 -178.0 -78.0 ... 0.0 0.0 0.0 0.0 1
895 2022-06-02 552.9803 40.0 -160.0 -60.0 ... 0.0 0.0 0.0 0.0 1
891 2022-06-06 603.3724 74.0 -96.0 24.0 ... 0.0 0.0 0.0 0.0 1
890 2022-06-07 637.3217 65.0 -105.0 -5.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-13 18:22:52,389 - my_logger - INFO - ds PP主力收盘价拟合残差/丙烷 CP M1 华南聚丙烯基差(折盘面收盘价) 华北聚丙烯基差(折盘面收盘价) 华东聚丙烯基差(折盘面收盘价) ... is_quarter_start is_quarter_end is_year_start is_year_end unique_id
897 2022-05-31 638.7137 -22.0 -152.0 -82.0 ... 0.0 0.0 0.0 0.0 1
896 2022-06-01 621.7030 22.0 -178.0 -78.0 ... 0.0 0.0 0.0 0.0 1
895 2022-06-02 552.9803 40.0 -160.0 -60.0 ... 0.0 0.0 0.0 0.0 1
891 2022-06-06 603.3724 74.0 -96.0 24.0 ... 0.0 0.0 0.0 0.0 1
890 2022-06-07 637.3217 65.0 -105.0 -5.0 ... 0.0 0.0 0.0 0.0 1
[5 rows x 328 columns]
2024-11-13 18:37:57,621 - my_logger - INFO - 模型训练完成
2024-11-13 18:37:57,621 - my_logger - INFO - 模型训练完成
2024-11-13 18:37:57,628 - my_logger - INFO - 训练数据绘图ing
2024-11-13 18:37:57,628 - my_logger - INFO - 训练数据绘图ing
2024-11-13 18:38:04,189 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7325.033', Informer = '7313.848', LSTM = '7270.242', iTransformer = '7367.009', TSMixer = '7330.8755', TSMixerx = '7381.4727', PatchTST = '7348.6206', RNN = '7315.8696', GRU = '7304.2344', TCN = '7377.363', BiTCN = '7358.445', DilatedRNN = '7332.886', MLP = '7389.868', DLinear = '7344.1216', NLinear = '7305.1855', TFT = '7282.7104', StemGNN = '7333.7554', MLPMultivariate = '7371.4497', TiDE = '7332.4766', DeepNPTS = '7381.8154' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 18:38:04,189 - my_logger - INFO - 更新数据sqlUPDATE trueandpredict SET ds = '2024-11-13 00:00:00', NHITS = '7325.033', Informer = '7313.848', LSTM = '7270.242', iTransformer = '7367.009', TSMixer = '7330.8755', TSMixerx = '7381.4727', PatchTST = '7348.6206', RNN = '7315.8696', GRU = '7304.2344', TCN = '7377.363', BiTCN = '7358.445', DilatedRNN = '7332.886', MLP = '7389.868', DLinear = '7344.1216', NLinear = '7305.1855', TFT = '7282.7104', StemGNN = '7333.7554', MLPMultivariate = '7371.4497', TiDE = '7332.4766', DeepNPTS = '7381.8154' WHERE ds = '2024-11-13 00:00:00'
2024-11-13 18:38:07,050 - my_logger - INFO - 训练数据绘图end
2024-11-13 18:38:07,050 - my_logger - INFO - 训练数据绘图end
2024-11-13 18:38:07,052 - my_logger - INFO - 制作报告ing
2024-11-13 18:38:07,052 - my_logger - INFO - 制作报告ing
2024-11-13 18:38:07,299 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 18:38:07,299 - my_logger - INFO - 开始绘制价差类指标的相关性直方图
2024-11-13 18:38:10,252 - my_logger - INFO - 价差类指标的相关性总和为10.896651741961374
2024-11-13 18:38:10,252 - my_logger - INFO - 价差类指标的相关性总和为10.896651741961374
2024-11-13 18:38:10,255 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 18:38:10,255 - my_logger - INFO - 开始绘制价格类指标的相关性直方图
2024-11-13 18:38:16,555 - my_logger - INFO - 价格类指标的相关性总和为92.97169981445359
2024-11-13 18:38:16,555 - my_logger - INFO - 价格类指标的相关性总和为92.97169981445359
2024-11-13 18:38:16,557 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 18:38:16,557 - my_logger - INFO - 开始绘制供应类指标的相关性直方图
2024-11-13 18:38:19,289 - my_logger - INFO - 供应类指标的相关性总和为19.48890581057575
2024-11-13 18:38:19,289 - my_logger - INFO - 供应类指标的相关性总和为19.48890581057575
2024-11-13 18:38:19,291 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 18:38:19,291 - my_logger - INFO - 开始绘制其他类指标的相关性直方图
2024-11-13 18:38:22,191 - my_logger - INFO - 其他类指标的相关性总和为12.09450184141281
2024-11-13 18:38:22,191 - my_logger - INFO - 其他类指标的相关性总和为12.09450184141281
2024-11-13 18:38:22,194 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 18:38:22,194 - my_logger - INFO - 开始绘制库存类指标的相关性直方图
2024-11-13 18:38:25,453 - my_logger - INFO - 库存类指标的相关性总和为11.057522362449376
2024-11-13 18:38:25,453 - my_logger - INFO - 库存类指标的相关性总和为11.057522362449376
2024-11-13 18:38:25,456 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 18:38:25,456 - my_logger - INFO - 开始绘制进出口类指标的相关性直方图
2024-11-13 18:38:26,282 - my_logger - INFO - 进出口类指标的相关性总和为1.6295223883259644
2024-11-13 18:38:26,282 - my_logger - INFO - 进出口类指标的相关性总和为1.6295223883259644
2024-11-13 18:38:26,284 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 18:38:26,284 - my_logger - INFO - 开始绘制需求类指标的相关性直方图
2024-11-13 18:38:28,373 - my_logger - INFO - 需求类指标的相关性总和为6.8062809048515005
2024-11-13 18:38:28,373 - my_logger - INFO - 需求类指标的相关性总和为6.8062809048515005
2024-11-13 18:38:28,375 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 18:38:28,375 - my_logger - INFO - 开始绘制相关性总和的气泡图
2024-11-13 18:38:28,939 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 18:38:28,939 - my_logger - INFO - 绘制相关性总和的气泡图结束
2024-11-13 18:38:33,281 - my_logger - INFO - 制作报告end
2024-11-13 18:38:33,281 - my_logger - INFO - 制作报告end
2024-11-13 18:38:33,283 - my_logger - INFO - 模型训练完成
2024-11-13 18:38:33,283 - my_logger - INFO - 模型训练完成
2024-11-14 10:53:31,018 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-14 10:53:31,018 - my_logger - INFO - 读取本地数据dataset\PP指标数据.xlsx
2024-11-14 10:53:31,020 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-14 10:53:31,020 - my_logger - INFO - getdata接收dataset\PP指标数据.xlsx date
2024-11-14 10:54:02,620 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 356)
2024-11-14 10:54:02,620 - my_logger - INFO - 删除两月不更新特征前数据量:(2509, 356)
2024-11-14 10:54:03,048 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 316)
2024-11-14 10:54:03,048 - my_logger - INFO - 删除两月不更新特征后数据量:(2509, 316)
2024-11-14 10:55:21,343 - my_logger - INFO - 从eta获取数据...
2024-11-14 10:55:21,858 - my_logger - INFO - 跳过指标 美国:东海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-14 10:55:22,087 - my_logger - INFO - 跳过指标 美国:炼油厂的投入与使用情况:开工率:四周均值
2024-11-14 10:55:22,267 - my_logger - INFO - 跳过指标 美国:洛基山地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-14 10:55:22,449 - my_logger - INFO - 跳过指标 美国:墨西哥湾沿岸:炼油厂的投入与使用情况:开工率:四周均值
2024-11-14 10:55:22,638 - my_logger - INFO - 跳过指标 美国:西海岸地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-14 10:55:22,819 - my_logger - INFO - 跳过指标 美国:中西部地区:炼油厂的投入与使用情况:开工率:四周均值
2024-11-14 10:55:23,059 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):IPE布油
2024-11-14 10:55:23,059 - my_logger - INFO - 跳过指标 期货成交量(活跃合约):NYMEX轻质原油
2024-11-14 10:55:23,060 - my_logger - INFO - 跳过指标 期货成交量(连续):IPE布油
2024-11-14 10:55:23,060 - my_logger - INFO - 跳过指标 期货成交量(连续):NYMEX轻质原油
2024-11-14 10:55:23,061 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓
2024-11-14 10:55:23,061 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量
2024-11-14 10:55:23,062 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量
2024-11-14 10:55:23,062 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量
2024-11-14 10:55:23,063 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量
2024-11-14 10:55:23,063 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量
2024-11-14 10:55:23,063 - my_logger - INFO - 跳过指标 Brent原油期货总持仓
2024-11-14 10:55:23,064 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量
2024-11-14 10:55:23,064 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量
2024-11-14 10:55:23,064 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量
2024-11-14 10:55:23,065 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量
2024-11-14 10:55:23,065 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量占比
2024-11-14 10:55:23,066 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量占比
2024-11-14 10:55:23,066 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量占比
2024-11-14 10:55:23,066 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量占比
2024-11-14 10:55:23,067 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量占比
2024-11-14 10:55:23,067 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量占比
2024-11-14 10:55:23,068 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量占比
2024-11-14 10:55:23,068 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量占比
2024-11-14 10:55:23,069 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量占比
2024-11-14 10:55:23,069 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):交易者数量合计
2024-11-14 10:55:23,070 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:交易者数量
2024-11-14 10:55:23,070 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:交易者数量
2024-11-14 10:55:23,071 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:交易者数量
2024-11-14 10:55:23,071 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:交易者数量
2024-11-14 10:55:23,071 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:交易者数量
2024-11-14 10:55:23,072 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:交易者数量
2024-11-14 10:55:23,072 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:交易者数量
2024-11-14 10:55:23,073 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业多头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,073 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业空头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,074 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非商业套利持仓:持仓数量:周环比增减
2024-11-14 10:55:23,074 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业多头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,074 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):商业空头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,076 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸多头总持仓:持仓数量:周环比增减
2024-11-14 10:55:23,076 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):报告头寸空头总持仓:持仓数量:周环比增减
2024-11-14 10:55:23,077 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸多头总持仓:持仓数量:周环比增减
2024-11-14 10:55:23,077 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):非报告头寸空头总持仓:持仓数量:周环比增减
2024-11-14 10:55:23,078 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前4名占比
2024-11-14 10:55:23,078 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前4名占比
2024-11-14 10:55:23,079 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓多头前8名占比
2024-11-14 10:55:23,079 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):总持仓空头前8名占比
2024-11-14 10:55:23,080 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前4名占比
2024-11-14 10:55:23,081 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前4名占比
2024-11-14 10:55:23,081 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓多头前8名占比
2024-11-14 10:55:23,082 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):净持仓空头前8名占比
2024-11-14 10:55:23,082 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓
2024-11-14 10:55:23,755 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量
2024-11-14 10:55:23,755 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量
2024-11-14 10:55:23,756 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量
2024-11-14 10:55:23,756 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量
2024-11-14 10:55:23,757 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量
2024-11-14 10:55:23,757 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量
2024-11-14 10:55:23,758 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金多头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,758 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金空头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,758 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:基金套利持仓:持仓数量:周环比增减
2024-11-14 10:55:23,759 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,759 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量:周环比增减
2024-11-14 10:55:23,760 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量:周环比增减
2024-11-14 10:55:23,760 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量:周环比增减
2024-11-14 10:55:23,760 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量:周环比增减
2024-11-14 10:55:23,760 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量:周环比增减
2024-11-14 10:55:24,453 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:持仓数量占比
2024-11-14 10:55:24,454 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:持仓数量占比
2024-11-14 10:55:24,454 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:持仓数量占比
2024-11-14 10:55:24,455 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:持仓数量占比
2024-11-14 10:55:24,455 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸多头总持仓:持仓数量占比
2024-11-14 10:55:24,455 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:投机头寸空头总持仓:持仓数量占比
2024-11-14 10:55:24,456 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:交易商数量合计
2024-11-14 10:55:25,126 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业多头持仓:交易商数量
2024-11-14 10:55:25,127 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:商业空头持仓:交易商数量
2024-11-14 10:55:25,127 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸多头总持仓:交易商数量
2024-11-14 10:55:25,127 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:报告头寸空头总持仓:交易商数量
2024-11-14 10:55:25,128 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前4名占比
2024-11-14 10:55:25,128 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前4名占比
2024-11-14 10:55:25,128 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓多头前8名占比
2024-11-14 10:55:25,129 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:总持仓空头前8名占比
2024-11-14 10:55:25,129 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前4名占比
2024-11-14 10:55:25,130 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前4名占比
2024-11-14 10:55:25,130 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓多头前8名占比
2024-11-14 10:55:25,131 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油:期货和期权:净持仓空头前8名占比
2024-11-14 10:55:25,131 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓
2024-11-14 10:55:25,131 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-14 10:55:25,132 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-14 10:55:25,132 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓
2024-11-14 10:55:25,133 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓
2024-11-14 10:55:25,133 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓
2024-11-14 10:55:25,683 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓
2024-11-14 10:55:25,684 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓
2024-11-14 10:55:25,684 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓
2024-11-14 10:55:25,685 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓
2024-11-14 10:55:25,685 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓
2024-11-14 10:55:25,686 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):总持仓:环比增减
2024-11-14 10:55:25,686 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,687 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,687 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,687 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,688 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:25,688 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,689 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,689 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:25,690 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,690 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,690 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:25,691 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,691 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:25,692 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-14 10:55:25,692 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-14 10:55:25,693 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:持仓数量占比
2024-11-14 10:55:25,693 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:持仓数量占比
2024-11-14 10:55:25,694 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:持仓数量占比
2024-11-14 10:55:26,240 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:26,240 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:26,241 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-14 10:55:26,242 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:26,242 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:26,243 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):交易者数量合计
2024-11-14 10:55:26,243 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-14 10:55:26,244 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-14 10:55:26,244 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:多头持仓:交易者数量
2024-11-14 10:55:26,245 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:空头持仓:交易者数量
2024-11-14 10:55:26,245 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):掉期商:套利持仓:交易者数量
2024-11-14 10:55:26,773 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:多头持仓:交易者数量
2024-11-14 10:55:26,773 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:空头持仓:交易者数量
2024-11-14 10:55:26,774 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货(新版):其他报告头寸:套利持仓:交易者数量
2024-11-14 10:55:26,774 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓
2024-11-14 10:55:26,775 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-14 10:55:26,775 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-14 10:55:26,776 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓
2024-11-14 10:55:26,776 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓
2024-11-14 10:55:26,777 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓
2024-11-14 10:55:27,339 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓
2024-11-14 10:55:27,339 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓
2024-11-14 10:55:27,340 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓
2024-11-14 10:55:27,340 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓
2024-11-14 10:55:27,341 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓
2024-11-14 10:55:27,341 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):总持仓:环比增减
2024-11-14 10:55:27,342 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:27,342 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:27,343 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:27,343 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:27,343 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:27,344 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:27,704 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:27,704 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:27,705 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-14 10:55:27,705 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:27,706 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:27,706 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):交易者数量合计
2024-11-14 10:55:27,706 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-14 10:55:27,708 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-14 10:55:27,708 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:多头持仓:交易者数量
2024-11-14 10:55:27,708 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:空头持仓:交易者数量
2024-11-14 10:55:27,709 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):掉期商:套利持仓:交易者数量
2024-11-14 10:55:28,248 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:多头持仓:交易者数量
2024-11-14 10:55:28,248 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:空头持仓:交易者数量
2024-11-14 10:55:28,249 - my_logger - INFO - 跳过指标 NYMEX:轻质低硫原油(WTI原油):期货和期权(新版):其他报告头寸:套利持仓:交易者数量
2024-11-14 10:55:28,249 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓
2024-11-14 10:55:28,250 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓
2024-11-14 10:55:28,250 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓
2024-11-14 10:55:28,251 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓
2024-11-14 10:55:28,251 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓
2024-11-14 10:55:28,775 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓
2024-11-14 10:55:28,775 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓
2024-11-14 10:55:28,777 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓
2024-11-14 10:55:28,777 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓
2024-11-14 10:55:28,777 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓
2024-11-14 10:55:28,778 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-14 10:55:28,778 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-14 10:55:28,778 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:持仓数量占比
2024-11-14 10:55:28,779 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:持仓数量占比
2024-11-14 10:55:28,779 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:持仓数量占比
2024-11-14 10:55:29,328 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:29,328 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:29,329 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:持仓数量占比
2024-11-14 10:55:29,329 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:29,330 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:非报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:29,330 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:交易者数量合计
2024-11-14 10:55:29,331 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-14 10:55:29,331 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-14 10:55:29,331 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:多头持仓:交易者数量
2024-11-14 10:55:29,332 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:空头持仓:交易者数量
2024-11-14 10:55:29,332 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:掉期商:套利持仓:交易者数量
2024-11-14 10:55:29,872 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:多头持仓:交易者数量
2024-11-14 10:55:29,873 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:空头持仓:交易者数量
2024-11-14 10:55:29,873 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:其他报告头寸:套利持仓:交易者数量
2024-11-14 10:55:29,874 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前4名占比
2024-11-14 10:55:29,874 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前4名占比
2024-11-14 10:55:29,875 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓多头前8名占比
2024-11-14 10:55:29,875 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:总持仓空头前8名占比
2024-11-14 10:55:29,876 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前4名占比
2024-11-14 10:55:29,876 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前4名占比
2024-11-14 10:55:29,877 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓多头前8名占比
2024-11-14 10:55:29,877 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货:净持仓空头前8名占比
2024-11-14 10:55:29,877 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓
2024-11-14 10:55:29,878 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓
2024-11-14 10:55:29,878 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓
2024-11-14 10:55:29,879 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓
2024-11-14 10:55:29,879 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓
2024-11-14 10:55:29,880 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓
2024-11-14 10:55:30,441 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓
2024-11-14 10:55:30,441 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓
2024-11-14 10:55:30,442 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓
2024-11-14 10:55:30,442 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓
2024-11-14 10:55:30,443 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓
2024-11-14 10:55:30,443 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-14 10:55:30,444 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-14 10:55:30,444 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:持仓数量占比
2024-11-14 10:55:30,445 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:持仓数量占比
2024-11-14 10:55:30,445 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:持仓数量占比
2024-11-14 10:55:30,987 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:30,987 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:30,987 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓:持仓数量占比
2024-11-14 10:55:30,989 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:30,989 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:非报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:30,990 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:交易者数量合计
2024-11-14 10:55:30,990 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-14 10:55:30,990 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-14 10:55:30,991 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:多头持仓:交易者数量
2024-11-14 10:55:30,991 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:空头持仓:交易者数量
2024-11-14 10:55:30,992 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:掉期商:套利持仓:交易者数量
2024-11-14 10:55:31,547 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:多头持仓:交易者数量
2024-11-14 10:55:31,547 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:空头持仓:交易者数量
2024-11-14 10:55:31,548 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:其他报告头寸:套利持仓:交易者数量
2024-11-14 10:55:31,548 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓多头前4名占比
2024-11-14 10:55:31,549 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓空头前4名占比
2024-11-14 10:55:31,549 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓多头前8名占比
2024-11-14 10:55:31,550 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:总持仓空头前8名占比
2024-11-14 10:55:31,550 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓多头前4名占比
2024-11-14 10:55:31,551 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓空头前4名占比
2024-11-14 10:55:31,551 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓多头前8名占比
2024-11-14 10:55:31,551 - my_logger - INFO - 跳过指标 ICE:IPE:原油:期货和期权:净持仓空头前8名占比
2024-11-14 10:55:31,552 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):总持仓
2024-11-14 10:55:31,552 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-14 10:55:31,553 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-14 10:55:31,553 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓
2024-11-14 10:55:31,555 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓
2024-11-14 10:55:31,555 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓
2024-11-14 10:55:32,090 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓
2024-11-14 10:55:32,092 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓
2024-11-14 10:55:32,093 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓
2024-11-14 10:55:32,093 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:多头持仓
2024-11-14 10:55:32,093 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:空头持仓
2024-11-14 10:55:32,094 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):总持仓:环比增减
2024-11-14 10:55:32,094 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,095 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,095 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,096 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,096 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:32,096 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,097 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,097 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:32,098 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,098 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,099 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:32,099 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,099 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:32,100 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-14 10:55:32,103 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-14 10:55:32,103 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓:持仓数量占比
2024-11-14 10:55:32,104 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓:持仓数量占比
2024-11-14 10:55:32,104 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓:持仓数量占比
2024-11-14 10:55:32,644 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:32,645 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:32,645 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-14 10:55:32,646 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:32,646 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:32,646 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-14 10:55:32,647 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-14 10:55:32,647 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:多头持仓:交易者数量
2024-11-14 10:55:32,648 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:空头持仓:交易者数量
2024-11-14 10:55:32,648 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):掉期商:套利持仓:交易者数量
2024-11-14 10:55:33,185 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:多头持仓:交易者数量
2024-11-14 10:55:33,186 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:空头持仓:交易者数量
2024-11-14 10:55:33,186 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货(新版):其他报告头寸:套利持仓:交易者数量
2024-11-14 10:55:33,187 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):总持仓
2024-11-14 10:55:33,187 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓
2024-11-14 10:55:33,188 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓
2024-11-14 10:55:33,188 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓
2024-11-14 10:55:33,189 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓
2024-11-14 10:55:33,189 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓
2024-11-14 10:55:33,728 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓
2024-11-14 10:55:33,728 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓
2024-11-14 10:55:33,729 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓
2024-11-14 10:55:33,729 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:多头持仓
2024-11-14 10:55:33,730 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:空头持仓
2024-11-14 10:55:33,730 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):总持仓:环比增减
2024-11-14 10:55:33,730 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,731 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,731 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,732 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,732 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:33,733 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):管理基金:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,733 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):管理基金:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,734 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):管理基金:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:33,734 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,734 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,735 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓:持仓数量:周环比增减
2024-11-14 10:55:33,735 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:多头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,736 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:空头持仓:持仓数量:周环比增减
2024-11-14 10:55:33,736 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:持仓数量占比
2024-11-14 10:55:33,737 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:持仓数量占比
2024-11-14 10:55:33,737 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓:持仓数量占比
2024-11-14 10:55:33,738 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓:持仓数量占比
2024-11-14 10:55:33,738 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓:持仓数量占比
2024-11-14 10:55:34,295 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:34,296 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:34,296 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓:持仓数量占比
2024-11-14 10:55:34,297 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:多头持仓:持仓数量占比
2024-11-14 10:55:34,298 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):非报告头寸:空头持仓:持仓数量占比
2024-11-14 10:55:34,298 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:多头持仓:交易者数量
2024-11-14 10:55:34,298 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):生产商/贸易商/加工商/用户:空头持仓:交易者数量
2024-11-14 10:55:34,299 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:多头持仓:交易者数量
2024-11-14 10:55:34,299 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:空头持仓:交易者数量
2024-11-14 10:55:34,300 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):掉期商:套利持仓:交易者数量
2024-11-14 10:55:34,830 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:多头持仓:交易者数量
2024-11-14 10:55:34,830 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:空头持仓:交易者数量
2024-11-14 10:55:34,831 - my_logger - INFO - 跳过指标 IPE:WTI原油:期货和期权(新版):其他报告头寸:套利持仓:交易者数量
2024-11-14 10:55:35,539 - my_logger - INFO - 跳过指标 中国航班执行数/7DMA
2024-11-14 10:55:35,975 - my_logger - INFO - 跳过指标 美国汽油表需周度1周环差负值
2024-11-14 10:55:35,976 - my_logger - INFO - 跳过指标 美国汽油表需周度1周环差
2024-11-14 10:55:36,209 - my_logger - INFO - 跳过指标 美国汽油产量周度1周环差
2024-11-14 10:55:37,401 - my_logger - INFO - 跳过指标 美国原油周度表需/4WMA
2024-11-14 10:55:37,401 - my_logger - INFO - 跳过指标 美国油品表需/4WMA
2024-11-14 10:55:37,402 - my_logger - INFO - 跳过指标 美国油品表需4周环差
2024-11-14 10:55:37,603 - my_logger - INFO - 跳过指标 道琼斯旅游与休闲/标普500
2024-11-14 10:55:37,603 - my_logger - INFO - 跳过指标 DOE-柴油产量1周环差
2024-11-14 10:55:37,604 - my_logger - INFO - 跳过指标 DOE-美国汽油产量1周环差
2024-11-14 10:55:37,604 - my_logger - INFO - 跳过指标 美国航煤表需一周环差负值
2024-11-14 10:55:37,605 - my_logger - INFO - 跳过指标 美国馏分油表需一周环差负值
2024-11-14 10:55:37,605 - my_logger - INFO - 跳过指标 美国汽油表需一周环差负值
2024-11-14 10:55:37,606 - my_logger - INFO - 跳过指标 欧洲汽油裂差
2024-11-14 10:55:37,606 - my_logger - INFO - 跳过指标 欧洲柴油裂差
2024-11-14 10:55:37,981 - my_logger - INFO - 跳过指标 中国主营炼厂产能利用率1周环差
2024-11-14 10:55:38,472 - my_logger - INFO - 跳过指标 美国零售拥堵指数(周环比)/3WMA