跨媒体移动应用理论与实践 课件 1.1 什么是跨媒体.pptx

1第一章 什么是跨媒体1.1 什么是跨媒体 2移动应用中的媒体形式跨媒体——过渡与融合跨媒体技术的重要性与价值意义在移动应用中，每一个单一媒体各具优势与价值，但不同媒体的内容之间又存在着隔阂与壁垒。因此“跨媒体”是为了综合单一媒体的优势、创造新价值，而突破不同媒体壁垒的过程也充满挑战。 3移动应用中的媒体形式文本图像音频视频 4移动应用中的媒体形式——文本普及程度高制作成本低传输效率高 文本媒体简介移动应用中的文本媒体文本媒体的跨媒体发展移动社交基本载体文字“博客”：初期自媒体主要形式OCR文本识别技术：打破文本与图像的边界语音识别技术：打破语音与文本的边界自然语言处理技术：使实现智能对话动态字幕、智能字体设计与排版：艺术化具象化 5移动应用中的媒体形式——图像视觉体验直观信息传达具象使用范围广创作方式简化图像媒体简介移动应用中的图像媒体图像媒体的跨媒体发展二维码：代替文本链接，扫一扫获取内容 图片分享：图片自媒体表情包：更生动的移动社交图像识别技术：识别图像中的物品、场景、人物、情感图像处理技术：实现智能拍摄、一键修图等功能人脸识别：取代账号密码，身份验证不再繁琐 6移动应用中的媒体形式——音频打破全视觉互联网媒体格局开启听觉交互与娱乐以语音和音乐为主要形式 音频媒体简介移动应用中的音频媒体音频媒体的跨媒体发展语音通讯：改变沉默式移动社交，增加沟通便利 语音内容制作：开创了声音文学的先河，解放双眼移动音乐平台：集成海量音乐，获取更便捷功能性音频：白噪声助眠等智能语音识别：能够将音频转化为文字 音频可视化技术：创作与音乐同步的动画智能作曲技术：以歌词、视频等为素材进行音乐创作 7移动应用中的媒体形式——视频融合图像、音频、文本整合了视听信息更丰富的感官体验 视频媒体简介移动应用中的视频媒体视频媒体的跨媒体发展综合视频平台：移动观影视频自媒体模式：短视频、Vlog移动视频制作工具：视频剪辑智能视频特效：将人脸识别、智能滤镜运用到视频中 智能字幕：将语音识别技术运用到视频制作中智能视频剪辑与智能转场：结合音频分析与图像识别技术 8跨媒体——过渡与融合最早的跨媒体相关概念：跨媒体是一种借助多媒体形式开展的叙事是一种基于协同创作、集体智慧的文化活动如何定义跨媒体：涉及多种媒体形式化这些媒体存在同一个叙事目的：表达同一个事件、主题、思想计算机领域的跨媒体：不同媒体形式之间的合作、补充、互动与协调跨媒体技术的核心：对不同媒体进行融合分析更全面的组织与构建信息对相同内容的媒体进行交叉整合传播移动应用中的跨媒体体现为两种主要的形式过渡与融合 9跨媒体——过渡跨媒体检索跨媒体生成指人工智能艺术创作基于大数据和深度学习技术通过交叉理解，将非同类媒体数据变成创作的素材类似于人在创作时会受到其他形式作品的启发“过渡，即从一种媒体形态转化到另一种媒体形态。”利用不同媒体形式之间的“语义相关性”通过一种模态的媒体对象检索出另外一种或几种基于相同语义的不同模态的媒体对象 10跨媒体检索的优势跨媒体检索：自动识别媒体形式之间的“语义相关性”，对不同类型媒体进行检索。通过文本描述检索：所有音、图、视频都需要添加相应的文本信息，且描述足够准确。 11跨媒体：生成与检索之对比跨媒体检索：检索是基于已有的数据建立联系跨媒体生成：生成是通过联系，建立规则，实现创作，尽可能创造最优解 12跨媒体——融合 “文本+音乐”：歌词MV“文本+视频”：动态字幕“语音音频+文学作品”：有声读物“音频+漫画”：有声漫画跨媒体融合，即将多种媒体形式结合，形成多维度的新媒体形式 13跨媒体技术的重要性与价值意义 开启更全面的信息互联互通例：身份验证方式的演变独立媒体时代跨媒体时代账号、密码等文本信息输入过程复杂记忆负担重指纹识别人脸识别语音唤醒交互简便、快捷不同的媒体互相补充完备的多媒体信息网信息与服务随用户而动移动操作全面渗透移动生活全面互联跨媒体互联生活趋势 14跨媒体技术的重要性与价值意义 优化人与计算机之间的交互方式人认知逻辑计算机运算逻辑跨媒体整理信息，通感联想如：语言到文字无障碍转化不同媒体分别处理如：语言是音频，文字是文本传统交互方法执行逻辑语言文本/代码用户计算机翻译输入跨媒体交互综合分析语音用户计算机多元反馈更符合预期更方便快捷更容易理解导致进化图像文本 15跨媒体技术的重要性与价值意义 为移动应用创造新的市场机会跨媒体短视频平台新平台新功能新模式跨媒体声音平台UGC用户创作即时拍摄上传个性化视频流推荐智能特效辅助视频+社交视频+电商视频+直播有声文学个性化音频创作声音功能分类声音+知识传播声音+社交声音+直播音乐+视频创作 16跨媒体技术的重要性与价值意义 身份识别交互方式创作模式市场格局用户体验单媒体 移动应用账号密码手动操作文字命令专业人员学习成本高创