yunfan
|
329a18976f
|
[update] distributed trainer, add evaluation part
|
6 years ago |
yunfan
|
606d63a5a4
|
[update] distributed trainer
|
6 years ago |
yunfan
|
861f5387a4
|
[add] very first version of distributed trainer
|
6 years ago |
xuyige
|
c2d687528e
|
fix bugs and add test codes for: 1. models.snli; 2. core.metrics.extractive_qa; 3. io.data_loader.mnli
|
6 years ago |
yh
|
22a8702d22
|
1. Trainer支持使用DistributedDataParallel训练; 但是还没有经过广泛测试,谨慎使用; 2. 修复import os bug; 3.FitlogCallback支持不传入任何DataSet; 4. NullOptimizer的construct_from_optimer返回self; 5. 修复Bert中pooled_cls的bug;“
|
6 years ago |
yh
|
39f3accace
|
增加Embedding的文档
|
6 years ago |
xuyige
|
defcaae4bd
|
将test_embed_loader的almost equal范围稍稍调大一些,以防止偶然的测试不通过
|
6 years ago |
xuyige
|
bedb792b3c
|
将test_embed_loader的almost equal范围稍稍调大一些,以防止偶然的测试不通过
|
6 years ago |
xuyige
|
65f92855ba
|
add testing code in stack embedding
|
6 years ago |
xuyige
|
327833a77f
|
fix bug in test code
|
6 years ago |
xuyige
|
570b214dfb
|
增加fastNLP.embeddings模块并修改对应的现有代码以适配fastNLP.embeddings
|
6 years ago |
xuyige
|
2eba991660
|
fix matching DataLoader test code
|
6 years ago |
xuyige
|
7d07b38e0a
|
fix bug in matching DataLoader
|
6 years ago |
yh_cc
|
1babf5384f
|
Vocabulary中no_create_entry的bug修复
|
6 years ago |
xuyige
|
a83cee0fbb
|
fix bug in load dataset test code
|
6 years ago |
xuyige
|
66a7cf084e
|
fix bug in test
|
6 years ago |
xuyige
|
089009f9f2
|
大幅度更新:
1、更新requirements以及README.md
2、更新DataLoader
3、更新loss
4、更新model/bert.py内容及适配的测试代码
5、更新reproduction/README.md
6、修复其他测试代码的报错的地方
|
6 years ago |
yh_cc
|
84b18890a1
|
1.增加AdamW的optimizer;2.修复Trainer中metric_key的bug;3.静态embedding初始化修改;4.CrossEntropyLoss增加对reduction的支持'
|
6 years ago |
yh_cc
|
e57b8e4fd3
|
seq_len_to_mask修复测试失败的问题
|
6 years ago |
yh_cc
|
8f7ed07441
|
1. 在vocabulary的from_dataset中增加no_create_entry_dataset选项,用于传递dev和test
2. 调整各种Embedding的实现,使得确保来自dev和test的未发现词使用unk的表示
3. 在Embedding中增加dropout_word的选项,使得可以随机drop掉词语
4. 以及其它若干小的bug
|
6 years ago |
yh
|
8a766f070b
|
seq_len_to_mask修改为直接使用max_len而不再和句中最大长度对比
|
6 years ago |
yh_cc
|
2f5d8967a3
|
1. 适配将Batch修改为pytorch的DataLoader的修改
2. 修改embedding.py中的bug
3. ConllReader默认跳过所有的DOCSTART标签
4. 交换bert的heavy lifting到_bert, 将BertEncoder在bert.py中暴露
5. crf中allow_transition的include_end_start修改为false,以与CRF的默认值适配
6. allow_transition与SpanMetric支持BIOES类型的tag
7. datainfo中增加打印格式化输出
|
6 years ago |
yh_cc
|
839d712467
|
增强field中的value_count支持对nested的field的支持
|
6 years ago |
yh_cc
|
17b5fd0066
|
1. 删除Trainer中对train_data必须为DataSet的assert
2. 删除Trainer的prefetch参数; 在注释中增加num_workers参数
3. Trainer中默认sampler为RandomSampler
|
6 years ago |
yunfan
|
efe3574014
|
Merge remote-tracking branch 'origin/dev0.5.0' into batch
|
6 years ago |
yunfan
|
7564818f4b
|
[unstable] change Batch to torch's DataLoader
|
6 years ago |
xuyige
|
1a4c3c2d20
|
fix some bugs in test
|
6 years ago |
Violet Yao
|
6a9ebd5a7a
|
Merge branch 'dev0.5.0' of https://github.com/violetyao/fastNLP into dev0.5.0
|
6 years ago |
Violet Yao
|
74925f8237
|
wrong folder
|
6 years ago |
Violet Yao
|
e1869ec057
|
Delete yelp_sample.json
transfer to reproduction folder
|
6 years ago |
Violet Yao
|
d17acd0cb1
|
remove ast
|
6 years ago |
yh
|
e90bbbb3f1
|
!!!重要更新,DataSet理论上支持任意类型的数据了,但是因为改动非常大,所以可能会有bug
|
6 years ago |
yh
|
0257dc6dde
|
修复Trainer无法捕获Exception的bug
|
6 years ago |
yh
|
e40447cc84
|
禁止travis测试非 test之外的文件
|
6 years ago |
yunfan
|
eddb8af45c
|
add sst loader tests
|
6 years ago |
xuyige
|
016f02be3b
|
fix bugs in model/bert.py and add testing codes
|
6 years ago |
ChenXin
|
ff1d695aa4
|
修改了 modules 模块的__all__ 和 import
|
6 years ago |
yh_cc
|
0a8f7c0e69
|
1. 修复metric中的bug; 2.增加metric测试
|
6 years ago |
yh_cc
|
38033ab8c3
|
修复无法通过test_utils.py的测试
|
6 years ago |
ChenXin
|
51b493d716
|
修改 io 的测试文件; 删除了一些过时的测试
|
6 years ago |
ChenXin
|
837cd6f890
|
cache_results 参数的修改
|
6 years ago |
ChenXin
|
63e023b2fa
|
删除了过时的教程和测试文件
|
6 years ago |
ChenXin
|
38c2ef7d74
|
修改 callback 的测试文件
|
6 years ago |
ChenXin
|
1c9a0b5875
|
把暂不发布的功能移到 legacy 文件夹
|
6 years ago |
ChenXin
|
6cb75104b8
|
修改 tutorials 的测试文件
|
6 years ago |
ChenXin
|
8a7bf58244
|
delete an old metric in test
|
6 years ago |
ChenXin
|
902a3a6bcd
|
修改了一些注释
|
6 years ago |
yh_cc
|
349194fe85
|
删除用于分词的metric,因为有可能引起错误
|
6 years ago |
yh_cc
|
56ff4ac7a1
|
统一不同位置的seq_len_to_mask, 现统一到core.utils.seq_len_to_mask
|
6 years ago |
yh_cc
|
af6a9da78d
|
Merge branch 'dev' of github.com:choosewhatulike/fastNLP-private into dev
|
6 years ago |