lm-dataformat-master.zip

资源文件列表(大概)

文件名

大小

lm_dataformat-master/

lm_dataformat-master/.gitignore

21B

lm_dataformat-master/.travis.yml

210B

lm_dataformat-master/LICENSE

1.02KB

lm_dataformat-master/README.md

775B

lm_dataformat-master/lm_dataformat/

lm_dataformat-master/lm_dataformat/__init__.py

12.28KB

lm_dataformat-master/setup.py

592B

lm_dataformat-master/test/

lm_dataformat-master/test/blns.jsonl.zst.tar

26.5KB

lm_dataformat-master/test/blns.txt

29.12KB

lm_dataformat-master/test/blns.txt.tar.gz

10.69KB

lm_dataformat-master/test/blns.txt.zip

10.24KB

lm_dataformat-master/test/test_dat_archive_reader.py

4.17KB

lm_dataformat-master/test/testtarfile.tar

7KB

资源内容介绍

lm-dataformat-master.zip

# LM_Dataformat [![Build Status](https://travis-ci.org/leogao2/lm_dataformat.svg?branch=master)](https://travis-ci.org/leogao2/lm_dataformat) [![Coverage Status](https://coveralls.io/repos/github/leogao2/lm_dataformat/badge.svg?branch=master)](https://coveralls.io/github/leogao2/lm_dataformat?branch=master)Utilities for storing data for LM training.## Basic UsageTo write:```ar = Archive('output_dir')for x in something(): # do other stuff ar.add_data(somedocument, meta={ 'example': stuff, 'someothermetadata': [othermetadata, otherrandomstuff], 'otherotherstuff': True })# remember to commit at the end!ar.commit()```To read:```rdr = Reader('input_dir_or_file')for doc in rdr.stream_data(): # do something with the document```

用户评论 (0)

发表评论

您的昵称:

评分

评论内容:

验证码:

相关资源

ZGKJ统计年鉴Excel版（1991-2023年）.zip

在数字化时代的浪潮中，数据的重要性日益凸显。对于研究人员、政策制定者以及市场分析师而言，准确、全面的数据是他们分析和决策的基础。《中国科技统计年鉴Excel版（1991-2023年）》正是这样一个宝贵的数据资源，它为了解中国科技进步的脉络提供了一扇窗口。首先，让我们来了解一下《中国科技统计年鉴》的背景。《中国科技统计年鉴》是由中国国家统计局和科技部联合编纂的年度出版物，自1991年起每年发布一次，至今已有30多年的历史。该年鉴详细记录了中国科技活动的各个方面，包括研发经费投入、科技人才队伍、科研成果产出、技术市场交易等关键指标。随着信息技术的发展，数据的电子化、表格化成为趋势。《中国科技统计年鉴Excel版》应运而生，它将纸质版的年鉴内容转化为电子表格形式，极大地提高了数据的可访问性和可操作性。用户可以通过Excel软件轻松地检索、筛选、排序和分析数据，这无疑为研究人员提供了极大的便利。

373B10积分

Plain Craft Launcher 2.zip

2.05MB46积分

window运行pytorch失败

4.51MB30积分

PYNQ-Z1板卡，XILINX赛灵思，VIVADO,verilog

PYNQ-Z1板卡，XILINX赛灵思，VIVADO,verilogxc7z020clg400-1xc7z020clg400-2xc7z020clg400-3PYNQ-Z1板卡，XILINX赛灵思，VIVADO,verilogxc7z020clg400-1xc7z020clg400-2xc7z020clg400-3PYNQ-Z1板卡，XILINX赛灵思，VIVADO,verilogxc7z020clg400-1xc7z020clg400-2xc7z020clg400-3PYNQ-Z1板卡，XILINX赛灵思，VIVADO,verilogxc7z020clg400-1xc7z020clg400-2xc7z020clg400-3

9.89KB32积分