第 10 课共 24 课 · 4 格漫画 · 课后一题

多模态:不只是文字

GeminiGemini讲解MiMoMiMo提问

一句话能看图、听声音,也能画图、做视频。

  1. 第 1 格:MiMo「它连我拍的照片都看得懂?」,Gemini「文字、图片、声音,我都能接!」

    只处理文字的模型,输入和输出都是文字。多模态模型能处理多种形式的信息:看懂图片和截图,听懂语音,读懂视频。

  2. 第 2 格:MiMo「还能画画、配乐?」,Gemini「那是生成模型的活儿!」

    反过来,也有专门生成图片、视频、语音和音乐的模型。新闻里的“图像模型”“视频模型”“语音模型”说的就是它们。

  3. 第 3 格:MiMo「直接跟它聊天?」,Gemini「听完就答,不用打字!」

    有的产品把这些能力合在一起:你说一句话,它听懂、回答,再用声音读出来,中间不再转成文字。

  4. 第 4 格:MiMo「哪张是真的?」,Gemini「所以要贴个标识!」

    生成的图片和视频越来越逼真,所以很多平台会给 AI 生成的内容加标识。

课后一题下面哪件事用到了多模态能力?

这一课的名词

在编年史里只看图像、视频模型 →