fastNLP

Commit Graph

Author	SHA1	Message	Date
yh	1d665c9480	unrepeatedSampler支持chunk_split	3 years ago
x54-729	f7b3fe6a06	small	3 years ago
x54-729	75a3278d69	1. 完成JittorSingleDriver的功能，并添加测试用例 2.在Sampler中添加属性num_samplers 用于动态获取dataset的长度 3.添加便于测试断点重训的数据集 4.修改jittor其它测试的一些bug，统一ArgMaxDataset 的命名	3 years ago
x54-729	a6cfc4086f	修改seq_len_to_mask的jittor实现及测试例中的一处传参错误	3 years ago
x54-729	999520e4b0	Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0	3 years ago
x54-729	28eb1a5836	添加了对tensor_to_numeric reduce 参数的测试	3 years ago
yh	7a7d75d100	Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0	3 years ago
yh	dcdd484eb2	增加seq_len_to_mask	3 years ago
Letian Li	005b0e055e	实现 jittor driver 多卡训练 (#418 )	3 years ago
Letian Li	5425095cac	[bugfix] 修复 tests/core/controllers/_test_trainer_jittor.py，使其可以正常运行 (#415 ) * 修复 tests/core/controllers/_test_trainer_jittor.py，使其可以正常运行 Trainer 并不接收 validate_dataloaders 参数，改为 evaluate_dataloaders 即可。 * jittor single driver 支持 cpu 和 gpu 的切换	3 years ago
x54-729	da0b747b30	修改test_mixdataloader中的工具函数名，防止被pytest执行	3 years ago
x54-729	756bd09d1a	1.删除不必要的测试标签 2.为test_mixdataloader添加torch标签	3 years ago
x54-729	f333090149	1.删掉不必要的temp标签 2.为test_mixdataloader添加torch标签	3 years ago
yh	ff50437702	1.修复数据处理的时候，多进程print会报错的问题;2.Trainer/Evaluator增加check_dataloader_legality	3 years ago
yh	099b5b598e	Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0	3 years ago
yh	653b129e60	Evaluator新增load_model函数	3 years ago
MorningForest	7ca1abfba5	Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0	3 years ago
MorningForest	9bb1ed4ccf	增加 mixdataloader 文档，修改mix_sampler, mixdataloader代码，增加相应测试用例	3 years ago
x54-729	f8015d050b	Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0	3 years ago
x54-729	06551964a3	paddle 不再为非fp16的driver加载fp16状态	3 years ago
yh	466e924d2e	1.修复classify_f1_pre_rec_metric在batch中target不包含某类class时的计算错误;2.增加对FairScale的支持, 同时修改TorchDriver以实现兼容	3 years ago
x54-729	5455663093	1.修改.Jenkinsfile移动html页面的步骤至post中 2.修改torch_dataloader/test_fdl.py的部分测试例 3.在torch版本较低时跳过worker_inif_function的测试	3 years ago
yh	c04fc2dc51	Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0	3 years ago
yh	4d3a93964f	修复ClassifyFPreRecMetric代码中的bug	3 years ago
x54-729	f183c59cce	修改torch_dataloader/test_fdl.py的test_Version_111测试例的参数；删除一处不必要的temp标签	3 years ago
x54-729	e21589a0d9	暂时跳过jittor的测试；增加torch1.11的共享内存	3 years ago
x54-729	3143cc76cc	修改dataloaders/test_utils.py	3 years ago
yh	0a5a4fde51	让DataLoader兼容1.6版本	3 years ago
x54-729	af36813296	1. test_fleet.py 和 test_ddp.py 中的 load_checkpoint 相关的测试例添加同步 2.修改 Jenkinsfile 中 Test Other 的 pytest 标签形式	3 years ago
x54-729	e9bc2bf4a6	1. 为test_paddle_utils添加paddle标签；2.修改test_set_backend测试例适应没有conda的情况	3 years ago
x54-729	60f98538fd	update jenkins	3 years ago
x54-729	c977d3be02	补充需要 _NEED_IMPORT_TORCH 的地方	3 years ago
x54-729	51a4439737	torch test_dist_utils.py中torch.full添加dtype以兼容不同的torchban蹦	3 years ago
yh	6d2dca421d	修改测试中需要超过2个gpu的	3 years ago
yh	e813aeaa6f	删掉一些测试内容	3 years ago
yh	d9e1991adb	merge	3 years ago
yh	b5b48d58e9	fix some bug	3 years ago
x54-729	a000c47748	减少部分测试的数据集大小和epochs以加快测试速度	3 years ago
yh	b1ba42e831	修复若干微小的bug	3 years ago
yh	6b56d8a082	merge callback test to speed up	3 years ago
yh	d4bccf3f6a	修复Evaluator的evaluate_use_dist_sampler在Trainer中的bug	3 years ago
x54-729	c4af9f21c6	paddle 和测试例跟进 set_dist_repro_dataloader 函数；修改test_trainer_wo_evaluator_torch.py的bug	3 years ago
x54-729	efaec85c57	1. 处理 topk_saver topk 参数为 None 的情况 2.Trainer on_exception 函数参数判断调整 3. 处理各类型 padder 中数据的 batch_size 为1 的情况 4. ReproducibleBatchSampler和ReproducibleSampler 对参数 length 的判断 5.TorchDataLoader 初始化参数调整 6.部分测试例跟进版本	3 years ago
x54-729	6e66fb899e	修正 JittorDataLoader 读取 jittor Dataset 无法进行索引的问题	3 years ago
yh	2423641010	新增TqdmProgressBar	3 years ago
MorningForest	6488f5e00f	修改fdl冲突	3 years ago
x54-729	655e48de99	1.修改torch测试例中多卡的driver参数 2.修改测试例中的driver.save driver.load为driver.save_checkpoint driver.load_checkpoint 3.添加lstm	3 years ago
yh_cc	97b504c020	修改Trainer.save/Driver.save为Trainer.save_checkpoint/Driver.save_checkpoint	3 years ago
MorningForest	2baedee74c	Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0	3 years ago
yh_cc	a470994686	print bug fix	3 years ago

1 2 3 4 5 ...

343 Commits (master)