Code

feat: 模块内部管控调用迁移到 V2#853

Code

Open

Dobiichi-Origami wants to merge 35 commits intomainbaidubce/bce-qianfan-sdk:mainfrom dataset_calling_v2_updatebaidubce/bce-qianfan-sdk:dataset_calling_v2_updateCopy head branch name to clipboard

+2,054-1,146

Commits

Commits on Oct 29, 2024

• 更新 Redis 依赖未安装的 Warning 信息

  Dobiichi-Origami

  committed
  be3d0d8

  Copy full SHA for be3d0d8

Commits on Oct 31, 2024

• 初步迁移 Dataset 到 V2

  Dobiichi-Origami

  committed
  5326d24

  Copy full SHA for 5326d24

Commits on Nov 4, 2024

• Merge branch 'main' into dataset_calling_v2_update

  Dobiichi-Origami

  committed
  34dfb20

  Copy full SHA for 34dfb20

• 修改单测以适配新的 V2 Dataset

  Dobiichi-Origami

  committed
  aeab72a

  Copy full SHA for aeab72a

Commits on Nov 5, 2024

• Evaluation 迁移 V2

  Dobiichi-Origami

  committed
  6c3a42e

  Copy full SHA for 6c3a42e

Commits on Nov 12, 2024

• Merge branch 'main' into dataset_calling_v2_update

  Dobiichi-Origami

  committed
  1388dfe

  Copy full SHA for 1388dfe

Commits on Nov 13, 2024

• 修改文档，迁移模型发布功能到 v2

  Dobiichi-Origami

  committed
  eeafede

  Copy full SHA for eeafede

• 模型发布功能 Bugfix

  Dobiichi-Origami

  committed
  79d7fa6

  Copy full SHA for 79d7fa6

Commits on Nov 14, 2024

• 修复由于接口文档与实际返回不对导致的 Bug

  Dobiichi-Origami

  committed
  e697c8b

  Copy full SHA for e697c8b

Commits on Nov 15, 2024

• 修复单测问题

  Dobiichi-Origami

  committed
  88152b4

  Copy full SHA for 88152b4

Commits on Nov 18, 2024

• 修改函数入参

  Dobiichi-Origami

  committed
  f595b74

  Copy full SHA for f595b74

Commits on Nov 25, 2024

• 修复了 create_from_bos_file 的 bug

  Dobiichi-Origami

  committed
  c6aaec9

  Copy full SHA for c6aaec9

Commits on Nov 27, 2024

• 本地数据集兼容具有字段缺失的情况

  Dobiichi-Origami

  committed
  c3a12f8

  Copy full SHA for c3a12f8

Commits on Nov 29, 2024

• 从 QianfanDataSource 中删除 ak, sk 字段，支持 SFT 数据集清洗

  Dobiichi-Origami

  committed
  24929cc

  Copy full SHA for 24929cc

Commits on Dec 2, 2024

• 支持 PromptImageResponse 类型数据集

  Dobiichi-Origami

  committed
  d757050

  Copy full SHA for d757050

Commits on Dec 3, 2024

• 修复单测错误

  Dobiichi-Origami

  committed
  3388226

  Copy full SHA for 3388226

• Merge branch 'main' into dataset_calling_v2_update

  Dobiichi-Origami

  committed
  4b2c477

  Copy full SHA for 4b2c477

• 模型服务部署参数更新

  Dobiichi-Origami

  committed
  e454abf

  Copy full SHA for e454abf

• FakePyarrow 添加 Schema

  Dobiichi-Origami

  committed
  0e16daa

  Copy full SHA for 0e16daa

• 创建服务 reservation 参数错误

  Dobiichi-Origami

  committed
  2409ce2

  Copy full SHA for 2409ce2

• 正则表达式匹配 bos 路径时不强制要求尾随左下划线

  Dobiichi-Origami

  committed
  f699e5e

  Copy full SHA for f699e5e

• 模型压缩任务参数 config 更名为 comp_config

  Dobiichi-Origami

  committed
  ce6ac05

  Copy full SHA for ce6ac05

• 在未安装 pyarrow 且需要直接上传数据集的时候统一上传前后的文件拓展名

  Dobiichi-Origami

  committed
  09a896a

  Copy full SHA for 09a896a

Commits on Dec 4, 2024

• 刷新文档参数

  Dobiichi-Origami

  committed
  45ceb70

  Copy full SHA for 45ceb70

• 管控接口调用在检查到接口返回失败时打印日志

  Dobiichi-Origami

  committed
  4a3105f

  Copy full SHA for 4a3105f

• 修改 _get_transmission_bos_info 以确保返回的 bos 路径以 / 开头

  Dobiichi-Origami

  committed
  1e355f0

  Copy full SHA for 1e355f0

Commits on Dec 5, 2024

• 更新 cookbook 中的传参

  Dobiichi-Origami

  committed
  c170435

  Copy full SHA for c170435

• 支持手动设置覆盖千帆数据集上传时的文件格式

  Dobiichi-Origami

  committed
  eddc2d4

  Copy full SHA for eddc2d4

Commits on Dec 9, 2024

• save 到千帆数据源时支持传入备用 ak sk

  Dobiichi-Origami

  committed
  35691ca

  Copy full SHA for 35691ca

Commits on Dec 10, 2024

• bug 修复，支持在传入 dataset_version_id 时指定文件格式

  Dobiichi-Origami

  committed
  f3b4ec0

  Copy full SHA for f3b4ec0

• 使用 _extract_all_with_utf8 来替换 zipfile 对象的 extractall 方法以解决 cp437 默认编码的问题

  Dobiichi-Origami

  committed
  84945cb

  Copy full SHA for 84945cb

Commits on Dec 12, 2024

• 移除从分享链接上传 Bos 的方式，修改 text 类型数据集的打包方式

  Dobiichi-Origami

  committed
  5ae29fc

  Copy full SHA for 5ae29fc

• 移除 csv.DictReader 构造函数中的 kwargs

  Dobiichi-Origami

  committed
  a0c074d

  Copy full SHA for a0c074d

Commits on Dec 18, 2024

• 更新文档

  Dobiichi-Origami

  committed
  07d7577

  Copy full SHA for 07d7577

• 当不能使用 cp437 解码时回退到 utf8

  Dobiichi-Origami

  committed
  5d66312

  Copy full SHA for 5d66312