!560 公网URL声明

Merge pull request !560 from MingzhenWang/public_url
This commit is contained in:
MingzhenWang 2024-01-29 13:51:27 +00:00 committed by i-robot
parent c0e684cb24
commit 1e68a8cf52

View File

@ -57,3 +57,38 @@
| 开源代码引入 | https://github.com/NVIDIA/Megatron-LM/blob/main/megatron/data/dataset_utils.py | megatron/data/dataset_utils.py:265 | https://arxiv.org/pdf/1907.10529.pdf | 参考论文地址 |
| 开源代码引入 | https://github.com/NVIDIA/Megatron-LM/blob/main/megatron/data/image_folder.py | megatron/data/image_folder.py:32 | https://github.com/pytorch/vision/blob/main/torchvision/datasets/folder.py | 参考代码地址 |
| 开源代码引入 | https://github.com/NVIDIA/Megatron-LM/blob/main/megatron/data/image_folder.py | megatron/data/image_folder.py:238 | https://github.com/python-pillow/Pillow/issues/835 | 详情地址 |
| 开源代码引入 | 不涉及 | tests/ut/module/test_fold_schedules.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tests/ut/module/test_auto_recomputing.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tests/ut/module/test_triangle_attn.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tests/st/test_bloom/run_bloom_ptd.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tests/st/test_bloom/run_llama_ptd.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tests/st/test_bloom/run_gpt_ptd.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | setup.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | setup.py:85 | https://packaging.python.org/en/latest/single_source_version.html | 详情地址 |
| 开源代码引入 | 不涉及 | tools/retro/utils.py:6 | https://github.com/NVIDIA/Megatron-LM/blob/main/tools/retro/utils.py | 源代码地址 |
| 开源代码引入 | 不涉及 | tools/preprocess_data.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tools/checkpoint/saver_megatron.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tools/checkpoint/util.py:8 | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tools/checkpoint/loader_llama2_hf.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/text_generation/beam_utils.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/text_generation/utils.py | https://medium.com/huggingface/how-to-build-a-state-of-the-art-conversational-ai-with-transfer | 源代码地址 |
| 开源代码引入 | 不涉及 | modellink/__init__.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/adapter_lora/__init__.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/tokenizer/__init__.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/tokenizer/tokenizer.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/utils.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/model/module.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/error_utils.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/data/prompter.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | modellink/data/data_handler.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_api/chat.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_api/dataset_eval.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/evaluation_llama.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/agi_eval.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/bbh_eval.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/boolq_eval.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/ceval_exam.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/gsm8k_eval.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/human_eval.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/mmlu_eval.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |
| 开源代码引入 | 不涉及 | tasks/evaluation/eval_impl/template.py | http://www.apache.org/licenses/LICENSE-2.0 | License地址 |