
作者:吴琦
页数:244
出版社:电子工业出版社
出版日期:2024
ISBN:9787121475313
电子书格式:pdf/epub/txt
内容简介
视觉问答任务要求机器根据指定的视觉图像内容, 对单轮或多轮的自然语言问题进行作答。其本质上是一个多学科的研究问题,涉及计算机视觉、自然语言处理、知识表示与推理等。本书共5 部分,第1 部分介绍在计算机视觉和自然语言处理领域广泛使用的基本方法和技术,包括卷积神经网络、序列建模和注意力机制等。本书将视觉问答分为图像和视频方法。第2 部分将图像视觉问答进一步分为五类,即联合嵌入、注意力机制、记忆网络、组合推理和图神经网络。此外,概述基于图像的其他视觉问答任务,例如基于知识的视觉问答、视觉问答的视觉和语言预训练。第3 部分讨论基于视频的视觉问答及其相关模型。第4 部分讨论与视觉问答相关的高级任务,包括具身视觉问答、医学视觉问答、基于文本的视觉问答、视觉问题生成、视觉对话和指代表达理解,它们是视觉问答任务的扩展。第5 部分对该领域进行总结和展望,讨论视觉问答领域的未来研究方向。
作者简介
吴琦,澳大利亚阿德莱德大学高级讲师(副教授),博士生导师,澳大利亚青年学者基金获得者 (Australian Research Council DECRA Fellow),澳大利亚机器人视觉研究中心(ACRV)vision-language课题组组长,澳大利亚科学院罗素奖获得者。吴琦博士于2015年在英国巴斯大学获得博士学位,致力于计算机视觉领域研究,尤其关注于计算机视觉-自然语言相关领域的研究。吴琦博士在CVPR,ICCV,ECCV, NeurIPS, TPAMI等多个国际会议和期刊发表论文七十余篇,吴琦博士亦担任TPAMI,IJCV,TIP,CVPR,NIPS,ACL等学术期刊会议审稿人以及ICCV2021 领域主席。
目录
第1 章简介…………………………………………………………1
1.1 视觉问答的动机………………………………………………..1
1.2 人工智能任务中的视觉问答…………………………………….4
1.3 视觉问答类别………………………………………………….5
1.3.1 数据分类驱动………………………………………………6
1.3.2 任务分类驱动………………………………………………7
1.3.3 其他……………………………………………………..7
参考文献……………………………………………………………8
第1 部分基础理论
第2 章深度学习基础………………………………………………15
2.1 神经网络………………………………………………………15
2.2 卷积神经网络………………………………………………….17
2.3 循环神经网络及变体……………………………………………18
2.4 编码器-解码器结构…………………………………………….20
2.5 注意力机制…………………………………………………















