Skip to content

使用自定义多模态标准messages格式数据 可以正常训练推理,评测无法跑起来 #6391

@wengchunlei

Description

@wengchunlei

自定义 多模态 数据类似如下(训练和测试数据格式一致):
{"messages": [{"role": "user", "content": "两张图片有什么区别"}, {"role": "assistant", "content": "前一张是小猫,后一张是小狗"}], "images": ["/xxx/x.jpg", "/xxx/x.png"]}

使用swift sft 训练正常;
使用swift infer 可以正常推理并存储结果
想计算 blue rough ,使用 swift eval 一直无法正常调用起来
老师,能否提供一个例子,

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions