test/fastNLP
1
0
Fork 0
mirror of https://gitee.com/fastnlp/fastNLP.git synced 2024-11-29 18:59:01 +08:00
Code Issues Actions Packages Projects Releases Wiki Activity
2,255 Commits 3 Branches 13 Tags 25 MiB
b9be645ed0
Commit Graph

58 Commits

Author SHA1 Message Date
MorningForest
b161aa6c93 添加README.md 2022-04-11 18:50:36 +08:00
MorningForest
f81d2e0552 合并冲突 2022-04-11 18:43:30 +08:00
yh_cc
916a2d2c30 init dev0.8.0 2022-04-08 01:21:26 +08:00
WillQvQ
fb645d370f Merge branch 'dev' 
# Conflicts:
#	setup.py
 2021-12-06 19:37:15 +08:00
WillQvQ
449cf16bf5 更新了文档的链接 2021-12-06 17:27:48 +08:00
Xipeng Qiu
b127963f21
Update README.md 2021-07-13 13:14:00 +08:00
ChenXin
4557202023 更新了 ControlC 的 API 2020-04-14 10:51:23 +08:00
Xipeng Qiu
1cf0a76a1d Update README.md 2019-12-20 11:12:59 +08:00
Xipeng Qiu
4a8d40340b update readme 2019-12-20 11:09:11 +08:00
Xipeng Qiu
797828eacf
Update README.md 2019-10-12 10:57:10 +08:00
Xipeng Qiu
25c1de5475
Update README.md 2019-10-11 22:16:17 +08:00
Yige Xu
a5c63643f4 Update README.md 2019-10-11 16:15:36 +08:00
yh
e2208d44bd 修改seqence_labeling为sequence_labelling 2019-10-11 15:15:53 +08:00
yh
16bcb9af7d 更新自动下载地址 2019-09-28 19:26:27 +08:00
yhcc
dd94641a27
Update README.md 
更新readme错误换行
 2019-09-26 20:45:35 +08:00
yh
efe18a601c 添加对深脑云的致谢 2019-09-26 20:44:03 +08:00
Yige Xu
332f31902d update README.md 2019-09-25 19:55:33 +08:00
Yige Xu
5e6e35dbe3 update README.md 2019-09-11 02:13:12 +08:00
xuyige
78be840ab9 1.update README 2. fix a filename-bug in pretrain_static_file; 3. add Pipe to documents; 4. update documents in some loaders; 5. update tutorial 2 & 3 to adapt version 0.5.0 2019-08-26 01:56:20 +08:00
xuyige
98ebc3c0b1 在README.md添加版本说明 2019-07-12 14:12:13 +08:00
xuyige
76198acc5c update README.md: add description in fastNLP.embeddings 2019-07-12 04:09:27 +08:00
ChenXin
6c7009dded tutorials 标题 2019-07-11 15:12:31 +08:00
xuyige
83f9cb193f update README.md 2019-07-11 00:03:24 +08:00
xuyige
089009f9f2 大幅度更新： 
1、更新requirements以及README.md
2、更新DataLoader
3、更新loss
4、更新model/bert.py内容及适配的测试代码
5、更新reproduction/README.md
6、修复其他测试代码的报错的地方
 2019-07-06 01:08:55 +08:00
ChenXin
8dec821fad 修改了最新的文档 2019-05-24 01:58:04 +08:00
ChenXin
927d3867d4
把文档的链接放在上面 2019-05-22 20:40:16 +08:00
ChenXin
881ce01762
Dev0.4.0 (#149) 
* 1. CRF增加支持bmeso类型的tag 2. vocabulary中增加注释

* BucketSampler增加一条错误检测

* 1.修改ClipGradientCallback的bug；删除LRSchedulerCallback中的print，之后应该传入pbar进行打印;2.增加MLP注释

* update MLP module

* 增加metric注释；修改trainer save过程中的bug

* Update README.md

fix tutorial link

* Add ENAS (Efficient Neural Architecture Search)

* add ignore_type in DataSet.add_field

* * AutoPadder will not pad when dtype is None
* add ignore_type in DataSet.apply

* 修复fieldarray中padder潜在bug

* 修复crf中typo; 以及可能导致数值不稳定的地方

* 修复CRF中可能存在的bug

* change two default init arguments of Trainer into None

* Changes to Callbacks:
* 给callback添加给定几个只读属性
* 通过manager设置这些属性
* 代码优化，减轻@transfer的负担

* * 将enas相关代码放到automl目录下
* 修复fast_param_mapping的一个bug
* Trainer添加自动创建save目录
* Vocabulary的打印，显示内容

* * 给vocabulary添加遍历方法

* 修复CRF为负数的bug

* add SQuAD metric

* add sigmoid activate function in MLP

* - add star transformer model
- add ConllLoader, for all kinds of conll-format files
- add JsonLoader, for json-format files
- add SSTLoader, for SST-2 & SST-5
- change Callback interface
- fix batch multi-process when killed
- add README to list models and their performance

* - fix test

* - fix callback & tests

* - update README

* 修改部分bug；调整callback

* 准备发布0.4.0版本“

* update readme

* support parallel loss

* 防止多卡的情况导致无法正确计算loss“

* update advance_tutorial jupyter notebook

* 1. 在embedding_loader中增加新的读取函数load_with_vocab(), load_without_vocab, 比之前的函数改变主要在(1)不再需要传入embed_dim(2)自动判断当前是word2vec还是glove.
2. vocabulary增加from_dataset(), index_dataset()函数。避免需要多行写index dataset的问题。
3. 在utils中新增一个cache_result()修饰器，用于cache函数的返回值。
4. callback中新增update_every属性

* 1.DataSet.apply()报错时提供错误的index
2.Vocabulary.from_dataset(), index_dataset()提供报错时的vocab顺序
3.embedloader在embed读取时遇到不规则的数据跳过这一行.

* update attention

* doc tools

* fix some doc errors

* 修改为中文注释，增加viterbi解码方法

* 样例版本

* - add pad sequence for lstm
- add csv, conll, json filereader
- update dataloader
- remove useless dataloader
- fix trainer loss print
- fix tests

* - fix test_tutorial

* 注释增加

* 测试文档

* 本地暂存

* 本地暂存

* 修改文档的顺序

* - add document

* 本地暂存

* update pooling

* update bert

* update documents in MLP

* update documents in snli

* combine self attention module to attention.py

* update documents on losses.py

* 对DataSet的文档进行更新

* update documents on metrics

* 1. 删除了LSTM中print的内容; 2. 将Trainer和Tester的use_cuda修改为了device; 3.补充Trainer的文档

* 增加对Trainer的注释

* 完善了trainer，callback等的文档; 修改了部分代码的命名以使得代码从文档中隐藏

* update char level encoder

* update documents on embedding.py

* - update doc

* 补充注释，并修改部分代码

* - update doc
- add get_embeddings

* 修改了文档配置项

* 修改embedding为init_embed初始化

* 1.增加对Trainer和Tester的多卡支持;

* - add test
- fix jsonloader

* 删除了注释教程

* 给 dataset 增加了get_field_names

* 修复bug

* - add Const
- fix bugs

* 修改部分注释

* - add model runner for easier test models
- add model tests

* 修改了 docs 的配置和架构

* 修改了核心部分的一大部分文档，TODO：
1. 完善 trainer 和 tester 部分的文档
2. 研究注释样例与测试

* core部分的注释基本检查完成

* 修改了 io 部分的注释

* 全部改为相对路径引用

* 全部改为相对路径引用

* small change

* 1. 从安装文件中删除api/automl的安装
2. metric中存在seq_len的bug
3. sampler中存在命名错误，已修改

* 修复 bug ：兼容 cpu 版本的 PyTorch
TODO：其它地方可能也存在类似的 bug

* 修改文档中的引用部分

* 把 tqdm.autonotebook 换成tqdm.auto

* - fix batch & vocab

* 上传了文档文件 *.rst

* 上传了文档文件和若干 TODO

* 讨论并整合了若干模块

* core部分的测试和一些小修改

* 删除了一些冗余文档

* update init files

* update const files

* update const files

* 增加cnn的测试

* fix a little bug

* - update attention
- fix tests

* 完善测试

* 完成快速入门教程

* 修改了sequence_modeling 命名为 sequence_labeling 的文档

* 重新 apidoc 解决改名的遗留问题

* 修改文档格式

* 统一不同位置的seq_len_to_mask, 现统一到core.utils.seq_len_to_mask

* 增加了一行提示

* 在文档中展示 dataset_loader

* 提示 Dataset.read_csv 会被 CSVLoader 替换

* 完成 Callback 和 Trainer 之间的文档

* index更新了部分

* 删除冗余的print

* 删除用于分词的metric，因为有可能引起错误

* 修改文档中的中文名称

* 完成了详细介绍文档

* tutorial 的 ipynb 文件

* 修改了一些介绍文档

* 修改了 models 和 modules 的主页介绍

* 加上了 titlesonly 这个设置

* 修改了模块文档展示的标题

* 修改了 core 和 io 的开篇介绍

* 修改了 modules 和 models 开篇介绍

* 使用 .. todo:: 隐藏了可能被抽到文档中的 TODO 注释

* 修改了一些注释

* delete an old metric in test

* 修改 tutorials 的测试文件

* 把暂不发布的功能移到 legacy 文件夹

* 删除了不能运行的测试

* 修改 callback 的测试文件

* 删除了过时的教程和测试文件

* cache_results 参数的修改

* 修改 io 的测试文件; 删除了一些过时的测试

* 修复bug

* 修复无法通过test_utils.py的测试

* 修复与pytorch1.1中的padsequence的兼容问题; 修改Trainer的pbar

* 1. 修复metric中的bug; 2.增加metric测试

* add model summary

* 增加别名

* 删除encoder中的嵌套层

* 修改了 core 部分 import 的顺序，__all__ 暴露的内容

* 修改了 models 部分 import 的顺序，__all__ 暴露的内容

* 修改了文件名

* 修改了 modules 模块的__all__ 和 import

* fix var runn

* 增加vocab的clear方法

* 一些符合 PEP8 的微调

* 更新了cache_results的例子

* 1. 对callback中indices潜在None作出提示;2.DataSet支持通过List进行index

* 修改了一个typo

* 修改了 README.md

* update documents on bert

* update documents on encoder/bert

* 增加一个fitlog callback，实现与fitlog实验记录

* typo

* - update dataset_loader

* 增加了到 fitlog 文档的链接。

* 增加了 DataSet Loader 的文档

* - add star-transformer reproduction
 2019-05-22 18:43:56 +08:00
Xipeng Qiu
b8214f548d Update README.md 2019-05-03 10:30:06 +08:00
Xipeng Qiu
cc900a0e01 Update README.md 2019-05-03 10:29:14 +08:00
Xipeng Qiu
0f8bed739c Update README.md 2019-04-08 20:14:46 +08:00
Xipeng Qiu
c344f7deac Update README.md 2019-04-08 20:14:12 +08:00
Xipeng Qiu
667b3126a9 Update README.md 2019-04-08 20:11:47 +08:00
Coet
3fa95b6cfc
Update README.md 
fix tutorial link
 2019-01-14 09:31:35 +08:00
FengZiYjun
806364b5be * update travis config 
* update README
 2019-01-11 20:14:18 +08:00
Yige XU
f15bd5aacd
update README.md 
update requirements in README.md
 2018-12-07 22:28:20 +08:00
Yige XU
baac45a741
update README.md 
move the first table to the right place
 2018-12-07 22:17:23 +08:00
Yige XU
2793273737
update README.md 
update requirements
 2018-12-07 22:09:58 +08:00
FengZiYjun
117b12a698 * update README.md 
* remove torchvision in requirements.txt
 2018-11-29 23:27:15 +08:00
FFTYYY
1f15b52216 update readme, for requirements changed 2018-11-09 21:21:57 +08:00
Coet
5f4b182504
Update README.md 2018-10-20 14:27:05 +08:00
FengZiYjun
cc15588a77 - add progress bar for data set loading 
- improve metrics codes
- fix validator bugs in trainer; remove early saving
- run CWS codes
- improve README.md
 2018-10-01 20:33:29 +08:00
Coet
49ad966c5f
Merge pull request #60 from KuNyaa/master 
add tensorboardX for loss visualization
 2018-09-06 09:56:14 +08:00
Coet
a13b8e5c82
Merge branch 'master' into pos_tag_service 2018-09-04 09:25:46 +08:00
KuNya
baf17892a7 add tensorboardX for loss visualization 2018-09-03 19:37:44 +08:00
lyhuang
34c78cb9de update docs 
move example to docs
 2018-09-02 20:08:17 +08:00
Coet
e82ec43b37
Update README.md 2018-09-02 15:23:13 +08:00
FengZiYjun
57911f771a - clean up unused codes 
- improve code comments
- BaseLoader & its subclasses does not need a data name any more
- update file tree
- add setup.py
 2018-09-02 13:32:57 +08:00
FengZiYjun
32a036e8e6 [fix] drop "data" in Tester.make_batch; correct spelling of "show_metrics" 
[add] PeopleDailyCorpusLoader, to parse PeopleDaily Corpus
[update] add CWS + POS_tag interface at FastNLP, see example in test_fastNLP.py
[update] modify README.md and readme_example.py to the latest version.
 2018-09-01 21:33:28 +08:00
Xipeng Qiu
47ddb24d1d modify readme example 2018-08-24 11:52:13 +08:00
Ke Zhen
3ab8950d8d Update metrics and figure in readme. 2018-08-20 14:51:10 +08:00