飞桨AI Studio可以玩多模态了？MiniGPT4实战演练！

MiniGPT4是基于GPT3的改进版本，它的参数量比GPT3少了一个数量级，但是在多项自然语言处理任务上的表现却不逊于GPT3。项目作者以MiniGPT4-7B作为实战演练项目。

创作者：衍哲

飞桨AI Studio-视觉语言多模态大模型MiniGPT4-7B

一键fork

fork该项目并运行，运行环境建议至少选择A100(40G)及以上配置

安装相关模块

引用相关模块

下载miniGPT4权重或配置文件

实例化miniGPT4模型和处理器

模型推理

输入图像url+prompt(单张图片+单轮对话)

另有本地上传图像形式，请进入项目查看

将图像上传到本地后的file_path+prompt(多张图片+单轮对话)

效果展示

输入：描述这张图片，使用中文

输出：这张图片显示了一个女性角色，穿着红色和白色的服装，手持一根金色的剑。她的头发是白色的，眼睛是红色的。她站在一张草地上，手持剑的柄子。这个角色看起来像是一个英雄，她的服装和装备显示出她的力量和勇气

更多玩法，可一键fork该项目进行模型微调。