安装DapsHub
Pip安装dugshub
直接流出DapsHub数据
from dagshub.streaming import DagsHubFilesystem fs = DagsHubFilesystem(".", repo_url="//www.kkolawyers.com/DagsHub-Datasets/ncar-cesm-lens-dataset") fs.listdir("s3://ncar-cesm-lens")
描述性
社区地球系统模型大集合模拟数据集包括由40名成员组成的1920-2100年期间使用历史数据(1920-2005年)或假设RCP8.5温室气体浓度假设(2006-2100年)以及基于工业前条件的长期控制流数据由表2D和体积3D变量组成,分布于大气、海洋、陆地和冰域原创数据集总数据量为~500TB,传统上存储为~150 000个人CF/NetCDF文件,磁盘或磁带通过NCAR气候数据网关提供下载或网络服务NCAR向亚马逊S3复制CESMLENS子集数据(目前为~70TB),作为AWS公共数据集程序的一部分优化大规模解析,我们已经表示数据为~275Zarr存储器格式,可通过Python Xarray库访问每一Zarr存储器都包含单物理变量,用于给定模式运行类型和时间频率(月度、每日6小时)。
附加信息
更新频率
稀有LENS实验完全,但我们偶而复制从NCAR到AWS或修复AWS拷贝中发现的问题