清华KEG实验室近日和智谱AI合作,联合推出了新一代图像理解大模型CogAgent。
该模型基于此前推出的CogVLM,通过视觉GUI Agent,使用视觉模态(而非文本)对GUI界面进行更全面直接的感知,从而作出规划和决策。
CogAgent可以接受1120×1120的高分辨率图像输入,具备视觉问答、视觉定位(Grounding)、GUI Agent等多种能力,在9个经典的图像理解榜单上(含 VQAv2,STVQA, DocVQA,TextVQA,MM-VET,POPE 等)取得了通用能力第一的成绩。
例如,用户输入一张关于CogVLM项目的GitHub的图片,然后询问如何给这个项目点“Star”,然后CogAgent就会反馈出结果。
例如用户输入一张原神游戏的截图,可以询问“当前任务中的队友是谁?”,CogAgent会给出相关的回答。
女教练变成女助教 为什么不批判福利姬的囧图
破5亿下载!博德之门3成人|体验|美化mod玩家太爱
《三国杀》黑丝美女新武将!最丑皇后变御姐玉足贴脸
黑皮巨雷"太诱惑了"!玩家欲罢不能 祈求不要削弱
《黑神话:悟空》新史低官宣!全平台七折限时两周
反派很“色”!《鬼武者:剑之道》官方亲自认领