专栏名称: AIGC Research
AIGC Research|AI for Creativity Plan (AI4C Plan)|from ShanghaiTech University|致力于探索AIGC赋能创意智能|保持卓越学术品位和极致艺术追求
今天看啥  ›  专栏  ›  AIGC Research

215-B1|检索增强个性化助手,网页文本丰富视觉理解,中国图像隐喻理解,视觉上下文表示;通用AI生图检测器,非自回归说话头视频

AIGC Research  · 公众号  ·  · 2024-10-19 23:30
    

文章预览

AIGC   Research 主编| 庄才林(Cailin Zhuang) 技术支持|胡耀淇(Yaoqi Hu) Topic: Multi-modal| 1. Retrieval-Augmented Personalization 2. WebUI Text-Rich Visual Understanding 3. Chinese Images Deep Implication 4. Visual Context Representation Remember, Retrieve and Generate: Understanding Infinite Visual Concepts as Your Personalized Assistant 2024-10-17|CUHK MMLab, NJU, BIT http://arxiv.org/abs/2410.13360v1 https://github.com/Hoar012/RAP-MLLM 概述 在本研究中,作者提出了一种名为 检索增强个性化(RAP)的框架,旨在改善多模态大语言模型(MLLM)作为个性化助手的能力 。尽管现有的大语言模型在语言处理和生成方面表现出色,但缺乏用户特定的知识限制了它们在日常生活中的应用。RAP框架通过三个步骤实现个性化:记忆用户相关信息、检索相关信息并生成个性化响应。该框架允许实时编辑概念,通过更新外部数据库来增强模型的生成 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览