opensource/WeClone
3
0
Fork 0
mirror of https://github.com/ooyinet/WeClone.git synced 2026-08-29 09:21:56 +08:00
Code Issues Packages Projects Releases Wiki Activity

Commit Graph

  • 78b7d2abff Update README.md master ooyinet 2026-06-16 01:53:26 +02:00
  • d71710eb4a Update README.md ooyinet 2026-02-21 23:03:15 +01:00
  • 3fda9965ae Update README.md ooyinet 2026-02-21 20:53:00 +01:00
  • 56d7d78a08 Commit 2.2.1 ooyinet 2025-05-18 02:03:29 +02:00
  • 3aa28128ba Merge pull request #68 from songhahaha66/master 小铭 2025-05-15 09:12:27 +08:00
  • f4d0d05ac8 Update README.md songhahaha66 2025-05-15 09:10:18 +08:00
  • 1da26350b7 Merge pull request #65 from RockChinQ/master 小铭 2025-05-15 08:54:35 +08:00
  • 5bb483df10 doc(README): add LangBot Junyan Qin (Chin) 2025-05-14 17:26:21 +08:00
  • baf63a0195 doc: add LangBot integration Junyan Qin 2025-05-14 17:23:04 +08:00
  • 4e12e225c1 Merge pull request #57 from xming521/xming521-patch-2 小铭 2025-05-14 09:50:14 +08:00
  • 9f2865f74d Update README.md 小铭 2025-05-14 09:50:00 +08:00
  • 537a221324 Merge pull request #52 from xming521/xming521-patch-1 小铭 2025-05-11 19:57:08 +08:00
  • d76ddf0348 Create LICENSE 小铭 2025-05-11 19:56:53 +08:00
  • 4dfe42f8e7 Merge pull request #50 from xming521/dev 小铭 2025-05-11 19:54:00 +08:00
  • b16bd303e3 更新.gitignore以忽略输出文件，更新README.md以优化文本描述，修改vllm_infer.py和strategies.py以支持自定义禁用词配置。 xming521 2025-05-11 19:37:08 +08:00
  • 3246361c97 更新README.md。 xming521 2025-05-11 16:06:22 +08:00
  • 25c45b9103 修改dataset/test_data.json，增加对话内容并删除部分冗余问题。 xming521 2025-05-10 22:44:05 +08:00
  • 6500b3f8a1 更新README.md，添加DeepWiki链接并修改测试结果描述；在train_sft.py中增加日志记录微调配置。 xming521 2025-05-10 15:30:28 +08:00
  • bc8c9b392b 更新README.md。 xming521 2025-05-09 21:53:36 +08:00
  • c86173209b 更新README.md。 xming521 2025-05-09 20:41:06 +08:00
  • c4caaa27f9 更新README.md。 xming521 2025-05-09 20:39:00 +08:00
  • 592fd8711d 更新README.md。 xming521 2025-05-08 22:11:04 +08:00
  • a18e474720 禁用词配置改到settings.json。 xming521 2025-05-08 20:44:32 +08:00
  • 03636d4a37 更新README.md。 xming521 2025-05-07 22:33:37 +08:00
  • d966e8490b 更新README.md。 xming521 2025-05-07 21:49:46 +08:00
  • 08b1640698 更新README.md和cli.py，简化命令行调用，修正文档中的命令格式。 xming521 2025-05-07 21:44:31 +08:00
  • 3bdcb3b8ac fixi 多卡length_cdf。 xming521 2025-05-06 22:35:10 +08:00
  • 528de9970b 固定length_cdf 单卡运行；去掉vllm_infer.py并行推理。 xming521 2025-05-05 22:48:45 +08:00
  • 91286029e1 fix vllm xming521 2025-05-05 21:29:28 +08:00
  • 5a48ab4ceb 修改vllm_infer.py以支持禁用\n，调整strategies.py以引入重复惩罚参数。 xming521 2025-05-05 20:35:24 +08:00
  • d7b77483a5 update llm judge xming521 2025-05-05 19:52:29 +08:00
  • 631c1731ed 重构vllm_infer.py以支持新的输入类型和引入引导解码参数，新增QaPairScore模型以支持评分功能，实现大模型对数据评分。 xming521 2025-05-04 22:52:09 +08:00
  • fec538fea6 在pyproject.toml中添加langchain依赖，并在strategies.py中引入PromptTemplate以支持数据清洗功能的实现。 xming521 2025-05-03 22:57:36 +08:00
  • 810ca43f45 将配置文件名从settings.json更改为settings.jsonc xming521 2025-05-03 14:50:22 +08:00
  • 319aaa1814 修改qa_generator.py以支持QaPair对象 xming521 2025-05-02 22:34:41 +08:00
  • 035d138d8d 更新pyproject.toml版本至0.2.2，优化vllm_infer函数以支持前缀缓存，调整qa_generator.py以处理结果并保存为JSON格式。 xming521 2025-05-01 23:04:37 +08:00
  • 5fea291883 更新版本至0.2.2，增加llm清洗数据配置，更新README.md以添加HelloGitHub推荐链接，调整settings.template.json以支持数据清洗功能，增强cli.py以打印配置文件更新日志。 xming521 2025-05-01 20:51:27 +08:00
  • aec5f4cfa2 注释掉evaluate命令的帮助信息 xming521 2025-05-01 19:52:27 +08:00
  • 20904b0202 更新vllm依赖版本至0.8.2 xming521 2025-05-01 19:39:15 +08:00
  • 9827a24929 更新依赖项版本，提升torch和torchaudio至2.6.0，更新openai至1.52.0 相应更新test_model，调整pytorch源为cu124。 xming521 2025-04-29 22:47:02 +08:00
  • ad39b21ca9 更新pyproject.toml以添加配置版本和更新日志，更新README.md，增强cli.py以检查项目根目录和版本一致性，配置文件改为模板提供。 xming521 2025-04-29 21:36:40 +08:00
  • 241e7b713b 删除settings.json配置文件 xming521 2025-04-29 21:30:00 +08:00
  • 2c9659611a 支持cli xming521 2025-04-26 22:02:09 +08:00
  • 920c1d02a8 Merge pull request #45 from xming521/dev 小铭 2025-04-26 21:18:21 +08:00
  • 63fab6d20d update xming521 2025-04-26 21:17:38 +08:00
  • 6ecf2c8144 添加计算cutoff_len xming521 2025-04-26 21:03:10 +08:00
  • 545f266bc5 fix history 模板使用 xming521 2025-04-26 19:08:32 +08:00
  • ac3cc5e83e 更新README.md。 xming521 2025-04-25 22:45:01 +08:00
  • 25267305f6 Merge pull request #44 from xming521/dev 小铭 2025-04-24 22:51:24 +08:00
  • 3503d42d60 fix 语音消息提取 zym 2025-04-24 22:49:44 +08:00
  • 00e5ff6e87 Merge pull request #41 from xming521/dev2 小铭 2025-04-24 21:34:27 +08:00
  • 72d9d23879 更新settings.json。 xming521 2025-04-24 20:57:34 +08:00
  • 4df2cbc98c 更新README.md。 xming521 2025-04-24 20:39:24 +08:00
  • 9ca9b0a4df 删除img。 xming521 2025-04-23 21:14:24 +08:00
  • 890a076397 Update README.md 小铭 2025-04-23 21:11:52 +08:00
  • 345c82cb05 更新README.md。 xming521 2025-04-23 21:04:20 +08:00
  • 42fce46a9a 更新README.md以修正数据集路径说明，调整settings.json中的deepspeed配置注释，增强测试脚本中的Checkpoint检查逻辑，增加默认超时时间至45秒。 xming521 2025-04-22 21:26:58 +08:00
  • 717b94c46b 修改pyproject.toml，更新README.md以修正WeClone-audio链接和增强说明，调整settings.json中的保存步骤和添加deepspeed配置。 xming521 2025-04-22 20:20:57 +08:00
  • b360606763 更新tests 和 dataset xming521 2025-04-21 21:06:52 +08:00
  • 10c6890795 重构项目 xming521 2025-04-21 20:30:55 +08:00
  • ef9324307d 更新项目版本至0.2.0，修改依赖项以支持Python 3.10，重构数据集目录结构，更新README.md以反映新路径和模型信息，删除requirements.txt文件，优化设置文件中的参数配置。 xming521 2025-04-21 20:12:59 +08:00
  • e27eb15cca 删除WeClone-audio模块中的多个文件，包括README.md、源代码和数据文件，准备重构。 xming521 2025-04-21 15:50:00 +08:00
  • 9172a94590 Merge pull request #34 from xming521/Refactoring-Data-Processing 小铭 2025-04-17 17:56:18 +08:00
  • 4b5563071d Merge branch 'master' into Refactoring-Data-Processing 小铭 2025-04-16 22:39:16 +08:00
  • b46f1c6cf8 更新pyproject.toml以添加新的依赖项和开发工具，修改README.md以增强项目说明和使用指导，ruff优化格式。 xming521 2025-04-16 22:28:43 +08:00
  • 2aad88ccc8 Merge pull request #29 from xming521/Refactoring-Data-Processing 小铭 2025-04-14 22:59:11 +08:00
  • 26f1ccfcea 更新README.md。 xming521 2025-04-14 22:50:45 +08:00
  • 4ea00ae781 更新pyproject.toml以添加新的依赖项，修改README.md以鼓励贡献代码，删除不再使用的dataset_info-with-his.json文件，并在dataset_info.json中添加相应的历史数据集信息，同时重构config.py以优化配置加载逻辑。 xming521 2025-04-14 22:38:47 +08:00
  • 70864d641d Merge pull request #26 from xming521/xming521-patch-1 小铭 2025-04-14 16:50:32 +08:00
  • 5d2e6ffe36 Update README.md 小铭 2025-04-14 16:50:19 +08:00
  • 9d269e2971 Merge pull request #25 from xming521/xming521-patch-3 小铭 2025-04-13 19:50:07 +08:00
  • ecbd814354 Update README.md 小铭 2025-04-13 19:49:55 +08:00
  • cdb54d3824 Merge pull request #23 from xming521/Refactoring-Data-Processing 小铭 2025-04-13 19:48:12 +08:00
  • 84bc8dafc8 修正qa_generator.py中的os.path.dirname。 xming521 2025-04-13 19:44:06 +08:00
  • 969abd10bc 在README.md中添加关于Windows环境未进行测试的说明。 xming521 2025-04-13 19:40:47 +08:00
  • 04c3582c83 更新README.md，优化数据预处理部分的说明，确保信息更加清晰易懂。 xming521 2025-04-13 19:35:44 +08:00
  • f46b873f92 更新pyproject.toml以调整类型检查配置，修改README.md以改善数据预处理说明，重构settings.json以优化数据集参数，更新qa_generator.py以支持新的消息处理逻辑，删除旧的测试文件test_old_csv_to_json copy.py并更新相关测试用例。 xming521 2025-04-13 19:14:27 +08:00
  • 6eec1ba8c4 更新README.md。 xming521 2025-04-13 15:34:33 +08:00
  • 94e3a54ff4 Merge remote-tracking branch 'origin/master' into Refactoring-Data-Processing xming521 2025-04-13 15:32:49 +08:00
  • 055fb01792 更新pyproject.toml以添加pyright类型检查配置，修改settings.json以调整数据集参数，重构qa_generator.py以支持新的消息处理策略，优化数据处理逻辑，更新测试用例以适应新功能。 xming521 2025-04-13 15:27:00 +08:00
  • 177267671a 清理未处理类型列表，移除对“粘贴的文本”的引用，并删除旧的测试文件test_old_qa.py以简化代码库。 xming521 2025-04-11 21:04:55 +08:00
  • d1925c9384 新增CutMessage类及相关处理逻辑，优化消息分组功能，更新数据处理流程以支持新类型消息。 xming521 2025-04-10 22:44:48 +08:00
  • af7922bc71 Merge pull request #20 from xming521/xming521-patch-1 小铭 2025-04-10 19:48:58 +08:00
  • ff86286c80 Update README.md 小铭 2025-04-10 19:48:39 +08:00
  • 4ec5cf8d22 Merge pull request #17 from xming521/astrBot 小铭 2025-04-09 23:09:13 +08:00
  • 2110eeec70 更新README文档 xming521 2025-04-09 23:06:30 +08:00
  • 019925f601 优化数据处理逻辑，重构消息合并功能。 xming521 2025-04-09 22:27:06 +08:00
  • 360ff7332d 更新pyproject.toml版本至0.1.3，添加commentjson依赖；更新settings.json；删除多个csv到json转换脚本；重构qa_generator.py xming521 2025-04-08 23:01:30 +08:00
  • ae36aa1f2d Merge remote-tracking branch 'origin/master' into Refactoring-Data-Processing xming521 2025-04-07 23:02:38 +08:00
  • 1e53ba5451 引入tts server xming521 2025-04-07 22:46:50 +08:00
  • f62e22b13e 更新README文档 xming521 2025-04-07 22:34:54 +08:00
  • 9d8bf51f25 Merge pull request #15 from xming521/astrBot 小铭 2025-04-07 21:44:08 +08:00
  • 786ec373d4 Update README.md 小铭 2025-04-07 21:40:31 +08:00
  • 4c83444735 更新README文档 xming521 2025-04-07 21:38:48 +08:00
  • 7194639f3a 更新README文档，移除聊天机器人后续使用的提示，优化AstrBot部署步骤，明确工具调用关闭指令，并添加已弃用itchat方案的折叠说明。 xming521 2025-04-07 21:33:02 +08:00
  • dde95129d8 更新README文档中的安装命令，修复deepspeed安装语法错误 xming521 2025-04-07 20:11:01 +08:00
  • 69280f0194 更新README文档，重构AstrBot部署说明，添加使用步骤和链接，确保用户更易于理解和操作。 xming521 2025-04-07 20:09:30 +08:00
  • 569ba84f3e 更新pyproject.toml，移除不必要的可选依赖；更新README文档，调整聊天机器人部署说明并添加AstrBot信息；修改API服务端口为8005 xming521 2025-04-05 20:39:19 +08:00
  • 4361a0954d Merge pull request #13 from xming521/dependencies1 小铭 2025-04-03 20:41:38 +08:00
  • cf62b5e37e 更新README文档，修正语音消息描述并添加训练与推理配置说明 xming521 2025-04-03 20:40:10 +08:00