2024-10-22 14:30:00

Author: wizardforcel

SUMMARY.md

@@ -9,6 +9,8 @@
 +   [GLM-4v-9B 源码解析](docs/chatglm4v-9b/README.md)
 +   [ChatHaruhi 源码解析](docs/ChatHaruhi/README.md)
 +   [ChatRWKV 源码解析](docs/chatrwkv-ai/README.md)
++   [CogVideo & CogVideoX 微调代码源码解析](docs/cogvideo-finetune/README.md)
++   [CogView3 & CogView-3Plus 微调代码源码解析](docs/cogview3-finetune/README.md)
 +   [Comic Translate 源码解析](docs/comic-trans/README.md)
 +   [DB-GPT 源码解析](docs/db-gpt/README.md)
 +   [diffusers 源码解析](docs/diffusers/README.md)

docs/cogvideo-finetune/.github----PULL_REQUEST_TEMPLATE----pr_template.md

@@ -0,0 +1,34 @@
+#  Raise valuable PR / 提出有价值的PR
+
+## Caution / 注意事项:
+Users should keep the following points in mind when submitting PRs:
+
+1. Ensure that your code meets the requirements in the [specification](../../resources/contribute.md).
+2. the proposed PR should be relevant, if there are multiple ideas and optimizations, they should be assigned to different PRs.
+
+用户在提交PR时候应该注意以下几点:
+
+1. 确保您的代码符合 [规范](../../resources/contribute_zh.md) 中的要求。
+2. 提出的PR应该具有针对性，如果具有多个不同的想法和优化方案，应该分配到不同的PR中。
+
+## 不应该提出的PR / PRs that should not be proposed
+
+If a developer proposes a PR about any of the following, it may be closed or Rejected.
+
+1. those that don't describe improvement options.
+2. multiple issues of different types combined in one PR.
+3. The proposed PR is highly duplicative of already existing PRs.
+
+如果开发者提出关于以下方面的PR，则可能会被直接关闭或拒绝通过。
+
+1. 没有说明改进方案的。
+2. 多个不同类型的问题合并在一个PR中的。
+3. 提出的PR与已经存在的PR高度重复的。
+
+
+# 检查您的PR
+- [ ] Have you read the Contributor Guidelines, Pull Request section? / 您是否阅读了贡献者指南、Pull Request 部分？
+- [ ] Has this been discussed/approved via a Github issue or forum? If so, add a link. / 是否通过 Github 问题或论坛讨论/批准过？如果是，请添加链接。
+- [ ] Did you make sure you updated the documentation with your changes? Here are the Documentation Guidelines, and here are the Documentation Formatting Tips. /您是否确保根据您的更改更新了文档？这里是文档指南，这里是文档格式化技巧。
+- [ ] Did you write new required tests? / 您是否编写了新的必要测试？
+- [ ]  Are your PRs for only one issue / 您的PR是否仅针对一个问题

docs/cogvideo-finetune/README.md

@@ -0,0 +1,120 @@
++   [CogVideo & CogVideoX 微调代码源码解析](README.md)
++   [Raise valuable PR / 提出有价值的PR](.github----PULL_REQUEST_TEMPLATE----pr_template.md)
++   [CogVideoX diffusers Fine-tuning Guide](finetune----README.md)
++   [CogVideoX diffusers 微調整方法](finetune----README_ja.md)
++   [CogVideoX diffusers 微调方案](finetune----README_zh.md)
++   [`.\cogvideo-finetune\finetune\train_cogvideox_image_to_video_lora.py`](finetune----train_cogvideox_image_to_video_lora.py.md)
++   [`.\cogvideo-finetune\finetune\train_cogvideox_lora.py`](finetune----train_cogvideox_lora.py.md)
++   [`.\cogvideo-finetune\inference\cli_demo.py`](inference----cli_demo.py.md)
++   [`.\cogvideo-finetune\inference\cli_demo_quantization.py`](inference----cli_demo_quantization.py.md)
++   [`.\cogvideo-finetune\inference\cli_vae_demo.py`](inference----cli_vae_demo.py.md)
++   [`.\cogvideo-finetune\inference\convert_demo.py`](inference----convert_demo.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\app.py`](inference----gradio_composite_demo----app.py.md)
++   [Gradio Composite Demo](inference----gradio_composite_demo----README.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\IFNet.py`](inference----gradio_composite_demo----rife----IFNet.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\IFNet_2R.py`](inference----gradio_composite_demo----rife----IFNet_2R.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\IFNet_HDv3.py`](inference----gradio_composite_demo----rife----IFNet_HDv3.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\IFNet_m.py`](inference----gradio_composite_demo----rife----IFNet_m.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\laplacian.py`](inference----gradio_composite_demo----rife----laplacian.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\loss.py`](inference----gradio_composite_demo----rife----loss.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\pytorch_msssim\__init__.py`](inference----gradio_composite_demo----rife----pytorch_msssim----__init__.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\refine.py`](inference----gradio_composite_demo----rife----refine.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\refine_2R.py`](inference----gradio_composite_demo----rife----refine_2R.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\RIFE.py`](inference----gradio_composite_demo----rife----RIFE.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\RIFE_HDv3.py`](inference----gradio_composite_demo----rife----RIFE_HDv3.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\warplayer.py`](inference----gradio_composite_demo----rife----warplayer.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife\__init__.py`](inference----gradio_composite_demo----rife----__init__.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\rife_model.py`](inference----gradio_composite_demo----rife_model.py.md)
++   [`.\cogvideo-finetune\inference\gradio_composite_demo\utils.py`](inference----gradio_composite_demo----utils.py.md)
++   [`.\cogvideo-finetune\inference\gradio_web_demo.py`](inference----gradio_web_demo.py.md)
++   [CogVideo & CogVideoX](README_ja.md)
++   [CogVideo & CogVideoX](README_zh.md)
++   [Contribution Guide](resources----contribute.md)
++   [コントリビューションガイド](resources----contribute_ja.md)
++   [贡献指南](resources----contribute_zh.md)
++   [CogVideoX-5B](resources----galary_prompt.md)
++   [`.\cogvideo-finetune\sat\arguments.py`](sat----arguments.py.md)
++   [`.\cogvideo-finetune\sat\data_video.py`](sat----data_video.py.md)
++   [`.\cogvideo-finetune\sat\diffusion_video.py`](sat----diffusion_video.py.md)
++   [`.\cogvideo-finetune\sat\dit_video_concat.py`](sat----dit_video_concat.py.md)
++   [SAT CogVideoX-2B](sat----README.md)
++   [SAT CogVideoX-2B](sat----README_ja.md)
++   [SAT CogVideoX-2B](sat----README_zh.md)
++   [`.\cogvideo-finetune\sat\sample_video.py`](sat----sample_video.py.md)
++   [`.\cogvideo-finetune\sat\sgm\lr_scheduler.py`](sat----sgm----lr_scheduler.py.md)
++   [`.\cogvideo-finetune\sat\sgm\models\autoencoder.py`](sat----sgm----models----autoencoder.py.md)
++   [`.\cogvideo-finetune\sat\sgm\models\__init__.py`](sat----sgm----models----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\attention.py`](sat----sgm----modules----attention.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\losses\discriminator_loss.py`](sat----sgm----modules----autoencoding----losses----discriminator_loss.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\losses\lpips.py`](sat----sgm----modules----autoencoding----losses----lpips.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\losses\video_loss.py`](sat----sgm----modules----autoencoding----losses----video_loss.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\losses\__init__.py`](sat----sgm----modules----autoencoding----losses----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\lpips\loss\lpips.py`](sat----sgm----modules----autoencoding----lpips----loss----lpips.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\lpips\loss\__init__.py`](sat----sgm----modules----autoencoding----lpips----loss----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\lpips\model\model.py`](sat----sgm----modules----autoencoding----lpips----model----model.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\lpips\model\__init__.py`](sat----sgm----modules----autoencoding----lpips----model----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\lpips\util.py`](sat----sgm----modules----autoencoding----lpips----util.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\lpips\vqperceptual.py`](sat----sgm----modules----autoencoding----lpips----vqperceptual.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\lpips\__init__.py`](sat----sgm----modules----autoencoding----lpips----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\magvit2_pytorch.py`](sat----sgm----modules----autoencoding----magvit2_pytorch.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\regularizers\base.py`](sat----sgm----modules----autoencoding----regularizers----base.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\regularizers\finite_scalar_quantization.py`](sat----sgm----modules----autoencoding----regularizers----finite_scalar_quantization.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\regularizers\lookup_free_quantization.py`](sat----sgm----modules----autoencoding----regularizers----lookup_free_quantization.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\regularizers\quantize.py`](sat----sgm----modules----autoencoding----regularizers----quantize.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\regularizers\__init__.py`](sat----sgm----modules----autoencoding----regularizers----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\temporal_ae.py`](sat----sgm----modules----autoencoding----temporal_ae.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\vqvae\movq_dec_3d.py`](sat----sgm----modules----autoencoding----vqvae----movq_dec_3d.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\vqvae\movq_dec_3d_dev.py`](sat----sgm----modules----autoencoding----vqvae----movq_dec_3d_dev.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\vqvae\movq_enc_3d.py`](sat----sgm----modules----autoencoding----vqvae----movq_enc_3d.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\vqvae\movq_modules.py`](sat----sgm----modules----autoencoding----vqvae----movq_modules.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\vqvae\quantize.py`](sat----sgm----modules----autoencoding----vqvae----quantize.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\vqvae\vqvae_blocks.py`](sat----sgm----modules----autoencoding----vqvae----vqvae_blocks.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\autoencoding\__init__.py`](sat----sgm----modules----autoencoding----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\cp_enc_dec.py`](sat----sgm----modules----cp_enc_dec.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\denoiser.py`](sat----sgm----modules----diffusionmodules----denoiser.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\denoiser_scaling.py`](sat----sgm----modules----diffusionmodules----denoiser_scaling.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\denoiser_weighting.py`](sat----sgm----modules----diffusionmodules----denoiser_weighting.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\discretizer.py`](sat----sgm----modules----diffusionmodules----discretizer.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\guiders.py`](sat----sgm----modules----diffusionmodules----guiders.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\lora.py`](sat----sgm----modules----diffusionmodules----lora.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\loss.py`](sat----sgm----modules----diffusionmodules----loss.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\model.py`](sat----sgm----modules----diffusionmodules----model.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\openaimodel.py`](sat----sgm----modules----diffusionmodules----openaimodel.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\sampling.py`](sat----sgm----modules----diffusionmodules----sampling.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\sampling_utils.py`](sat----sgm----modules----diffusionmodules----sampling_utils.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\sigma_sampling.py`](sat----sgm----modules----diffusionmodules----sigma_sampling.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\util.py`](sat----sgm----modules----diffusionmodules----util.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\wrappers.py`](sat----sgm----modules----diffusionmodules----wrappers.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\diffusionmodules\__init__.py`](sat----sgm----modules----diffusionmodules----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\distributions\distributions.py`](sat----sgm----modules----distributions----distributions.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\distributions\__init__.py`](sat----sgm----modules----distributions----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\ema.py`](sat----sgm----modules----ema.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\encoders\modules.py`](sat----sgm----modules----encoders----modules.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\encoders\__init__.py`](sat----sgm----modules----encoders----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\video_attention.py`](sat----sgm----modules----video_attention.py.md)
++   [`.\cogvideo-finetune\sat\sgm\modules\__init__.py`](sat----sgm----modules----__init__.py.md)
++   [`.\cogvideo-finetune\sat\sgm\util.py`](sat----sgm----util.py.md)
++   [`.\cogvideo-finetune\sat\sgm\webds.py`](sat----sgm----webds.py.md)
++   [`.\cogvideo-finetune\sat\sgm\__init__.py`](sat----sgm----__init__.py.md)
++   [`.\cogvideo-finetune\sat\train_video.py`](sat----train_video.py.md)
++   [`.\cogvideo-finetune\sat\vae_modules\attention.py`](sat----vae_modules----attention.py.md)
++   [`.\cogvideo-finetune\sat\vae_modules\autoencoder.py`](sat----vae_modules----autoencoder.py.md)
++   [`.\cogvideo-finetune\sat\vae_modules\cp_enc_dec.py`](sat----vae_modules----cp_enc_dec.py.md)
++   [`.\cogvideo-finetune\sat\vae_modules\ema.py`](sat----vae_modules----ema.py.md)
++   [`.\cogvideo-finetune\sat\vae_modules\regularizers.py`](sat----vae_modules----regularizers.py.md)
++   [`.\cogvideo-finetune\sat\vae_modules\utils.py`](sat----vae_modules----utils.py.md)
++   [Video Caption](tools----caption----README.md)
++   [ビデオキャプション](tools----caption----README_ja.md)
++   [视频Caption](tools----caption----README_zh.md)
++   [`.\cogvideo-finetune\tools\caption\video_caption.py`](tools----caption----video_caption.py.md)
++   [`.\cogvideo-finetune\tools\convert_weight_sat2hf.py`](tools----convert_weight_sat2hf.py.md)
++   [`.\cogvideo-finetune\tools\export_sat_lora_weight.py`](tools----export_sat_lora_weight.py.md)
++   [`.\cogvideo-finetune\tools\llm_flux_cogvideox\gradio_page.py`](tools----llm_flux_cogvideox----gradio_page.py.md)
++   [`.\cogvideo-finetune\tools\llm_flux_cogvideox\llm_flux_cogvideox.py`](tools----llm_flux_cogvideox----llm_flux_cogvideox.py.md)
++   [`.\cogvideo-finetune\tools\load_cogvideox_lora.py`](tools----load_cogvideox_lora.py.md)
++   [`.\cogvideo-finetune\tools\parallel_inference\parallel_inference_xdit.py`](tools----parallel_inference----parallel_inference_xdit.py.md)
++   [`.\cogvideo-finetune\tools\replicate\predict_i2v.py`](tools----replicate----predict_i2v.py.md)
++   [`.\cogvideo-finetune\tools\replicate\predict_t2v.py`](tools----replicate----predict_t2v.py.md)
++   [Enhance CogVideoX Generated Videos with VEnhancer](tools----venhancer----README.md)
++   [VEnhancer で CogVideoX によって生成されたビデオを強化する](tools----venhancer----README_ja.md)
++   [使用 VEnhancer 对 CogVdieoX 生成视频进行增强](tools----venhancer----README_zh.md)