首页 > 其他分享 >data.py里的各个文件的生成

data.py里的各个文件的生成

时间:2023-05-26 11:14:38浏览次数:38  
标签:py 生成 train npy flush memmap data norm

data.py里的各个文件的生成

Load forcing data

ERA5_LAND_label_4_1990???哪生成的

ERA5-Land_forcing {sr} spatial resolution {year}.npy??哪来的

lat_{s}.npy #109

lon_{s}.npy#110

filter Glacial region

Mask with {sr} spatial resolution.npy#204

Determine whether to perform memmap mapping

# Memmap is to deal with the problem of excessive amount of data

forcing_memmap.npy???#120通过flush

Load land_surface data

ERA5-Land_land_surface {sr} spatial resolution {year}.npy??哪来的

land_surface_memmap.npy?哪生成的!#172通过flush

Load label data

# filter Glacial region

Mask with {sr} spatial resolution.npy#204

Load static_norm data

static_norm.npy#224

Partition and create datasets

Create a training dataset;

The default training data is 1990 to 2019.

x_train.npy???哪生成?通过memmap里的flush

y_train.npy#265

x_test.npy#275 通过flush

normalize

# Adopt maximum and minimum normalization
# There are two forms of normalization: region and gloabl

scaler_x.npy#303,flush

scaler_y.npy#304,flush

Save the normalized dataset

x_train_norm_shape.npy#383

x_test_norm_shape.npy#384

x_test_norm.npy#396

x_train_norm.npy#385,memmap

y_test_norm.npy#401

y_train_norm.npy#402

标签:py,生成,train,npy,flush,memmap,data,norm
From: https://www.cnblogs.com/xinxuann/p/17434181.html

相关文章

  • 如何让python程序在windows下开机启动
    说明简述:通过将启动脚本写入注册表\HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows\CurrentVersion\Run来实现开机自启问题:这种开机启动比较奇怪,运行路径是cmd.exe的路径,所以执行需要自启的程序时,读取其他相对路径的文件会有错误解决:执行启动前,切一下目录启动脚本importos......
  • Python工具箱系列(三十三)
    Timescaledb在物联网时代,出现了大量以时间为中心海量产生的传感器数据,称为时序数据。这类数据的特点是:数据记录总有一个时间戳。数据几乎总是追加,不更新也不删除。大量使用近期的数据。很少更新或者回填时间间隔的缺失数据。与时间间隔频率关系不大。但累积的数据量大,可能会有峰值......
  • Mybatis-Plus自动生成代码,自定义Controller
    MP网址:https://baomidou.com/pages/779a6e/#%E4%BD%BF%E7%94%A8直接copy官网代码修改成自己的:privatevoidgenerate(){FastAutoGenerator.create("jdbc:mysql://localhost:3306/test?serverTimezone=GMT%2b8","root","P@ss123.")......
  • python升级pip失败的最终解决办法
    玩点python卡在pip安装包上了,我用的是pycharm,在它的交互命令行里使用python-mpipinstall--upgradepip始终报错!Traceback(mostrecentcalllast):File"d:\soft\python3.7\lib\site-packages\pip\_vendor\urllib3\response.py",line331,in_error_catcheryield......
  • Python工具箱系列(三十三)
    Timescaledb在物联网时代,出现了大量以时间为中心海量产生的传感器数据,称为时序数据。这类数据的特点是:数据记录总有一个时间戳。数据几乎总是追加,不更新也不删除。大量使用近期的数据。很少更新或者回填时间间隔的缺失数据。与时间间隔频率关系不大。但累积的数据量......
  • Python图片与Base64相互转换
    importbase64#必须的pic=open("img.png","rb")#读取本地文件pic_base=base64.b64encode(pic.read())#本地文件转Base64数据,此时会出现编码带b'' 的情况pic_base=pic_base.decode('utf-8')#修正格式pic.close()#关闭importbase64pic=open("img.png&q......
  • Python 函数重载
    函数重载是指可以使用相同的函数名,但是函数参数类型和/或数量不同的多个函数。Python不支持函数重载,因为Python是一种动态类型语言,函数参数类型不需要在代码中声明,并且Python中的函数参数数量也可以是可变的。这意味着在同一个作用域内定义两个或两个以上具有相同名称但参数......
  • 疑难杂症(已解决) | 为什么出现python中tkinter创建界面需要一闪而过才进入主窗口?
    一、具体问题如图所示,我编写了一个主窗口的程序(如下所示,有兴趣的可以自己复制后运行),发现需要先进入第一个窗口再进入主界面,这不符合逻辑。 代码区域(完整代码):fromtkinterimport*classWinGUI(Tk):def__init__(self):super().__init__()self......
  • PyTorch-Forecasting一个新的时间序列预测库
    时间序列预测在金融、天气预报、销售预测和需求预测等各个领域发挥着至关重要的作用。PyTorch-forecasting是一个建立在PyTorch之上的开源Python包,专门用于简化和增强时间序列的工作。在本文中我们介绍PyTorch-Forecasting的特性和功能,并进行示例代码演示。完整文章:https://av......
  • Python 数据库Insert语句脚本生成工具(SQL Server)
    编写这个小工具,是因为平时部署项目的时候,需要导出一些公共的数据(权限、参数设置等),覆盖插入正式环境。话不多说,直接上代码:importpyodbcimportwarningsimportdecimalimportwinregimportosimportconfigparserimporttimeimportdatetimewarnings.filterwarnings('igno......