时间:2023-03-08 14:54:50
绪论:在寻找写作灵感吗?爱发表网为您精选了8篇媒体技术,愿这些内容能够启迪您的思维,激发您的创作热情,欢迎您的阅读与分享!
推送式广播和点播式服务
作为DAB的升级服务,DMB可谓是“起了个大早,赶了个晚集”。虽然早在2001年DMB业务就开始在广东地区进行试点,并随后扩展到北京、天津、上海等地区。以北京为例,DMB就提供了15套数字广播和6套电视节目。但当国家广电总局确定将“自主知识产权”的数字多媒体广播作为发展方向,尤其是CMMB被确立为行业标准并开始全国性布局和商业化运营后,DMB在完成2008年服务奥运的任务之后基本处于发展停顿状态。
在视频升级之路难以走通的情况下,“DAB的发展还是要回到音频本身。”北京人民广播电台悦龙数字广播传媒科技有限公司CEO秦学刚说。作为国内最大的DAB运营方,北京悦龙广播已经开始在北京地区布局新的DAB业务模式,就是基于推送式广播的点播服务。
所谓推送式广播是应用数字广播技术推出的全新业务模式,它是将音频节目、图片、文字等多媒体内容以文件方式传输并自动储存到DAB用户的接收终端上,用户可以自主选择时间、地点和所喜欢的节目点播收听,并可将节目收藏后反复收听,以此打破传统广播“我播你听”的服务模式,可以为用户提供更为灵活的收听方式。
“受播出时间和广告经营等限制,传统广播的节目安排很难做到用户细分。但是推送式广播在节目方面可以最大限度满足不同群体的需求,提供更为专业化、个性化的服务。”秦学刚说。同时,推送式广播技术还可以实现对团体用户的节目接收控制,即可以控制不同节目的接收用户范围,也可以控制用户接收的时间期限,从而实现为集团客户提供定向信息和广告服务。
悦龙广播之所以能够推出点播式的服务,很大程度上是依托了北京人民广播电台规模庞大的数字音频节目库。目前DAB每日下发节目时长约1500分钟,通过推送式广播接收终端――听立方,听众可以储存约160个小时的节目。节目内容涵盖流行音乐、古典音乐、娱乐、教育,以及精彩节目回放等。而且除了自有版权节目外,DAB还集成了国际广播电台等其他广播机构大量的节目。
在终端方面,由悦龙广播开发的“听立方”已经在北京批量上市,并开始逐步在各类电子卖场和3C卖场上进行铺货和销售。
广告和付费两条腿走路
对于推送式广播业务的研究,悦龙广播是从2009年开始着手的。通过一年的自主开发与创新,已经基本完成了推送式广播服务的前端系统研发与测试,以及接收终端的研发与定制。
根据参与北京电台推送式广播技术研发、测试等工作的广科院高级工程师高鹏介绍,现在非实时的推送式广播服务各技术环节已经基本成熟。在经数字压缩编码后,利用DAB技术推送1500分钟节目只需要耗时不到100分钟,完全可以实现较短开机时间内大量节目的传输。而且点播服务接收终端可自动储存广播节目9600分钟,各个栏目存储的期限由前端播控系统设定,自动删除覆盖。
高鹏透露,通过电子钱包和DRM(数字版权保护技术),推送式广播已经开始实现控制播放次数及限制拷贝,不允许对内容进行转发和复制,对版权进行了有力的保护,并具有了开展付费服务的条件。下一步,DAB还将在如何与传统广播节目进行关联和互动,以及如何与电信网络融合方面进行尝试和探索。
对于推送式广播今后的盈利模式,秦学刚表示会是广告和付费两条腿走路,目前则是以广告业务为主。“通过推送式广播,可以使传统的广播广告形式由单一音频广告发展为音频、文字、图片等多种形式。而且推送式广播可以使受众更为细分,广告目标客户更为明确。”现在,悦龙广播正尝试在节目播出时,插入音频、文字和图片广告,并为广告客户提供定向广告推送服务。
除广告外,其他形式的数据服务也成为推送式广播的另一盈利方向。目前,除了传输广播节目外,悦龙广播每天还通过DAB传输文字新闻、天气预报等公用信息。此外,悦龙广播和新浪合作,推出了一档名为“新浪股指”的数据信息服务业务。秦学刚表示,更多的数据信息服务模式正在开发中。
关键词:流媒体;传输协议;系统结构
流媒体(Streaming Media)是指采用流式传输的方式在Internet播放的多媒体格式。在流媒体出现之前,人们在互联网上获取音视频信息的唯一方式就是将音视频文件下载到本地计算机进行观看。而流媒体技术把连续的影像和声音信息以数据流的方式实时,即边下边播的方式,使得用户无需等待下载或只需少量时间缓冲即可观看,大大提高了音视频信息的可观赏性,节约用户时间及系统资源。
自从1995年progressive Network公司(即RealNetwork公司)第一个流产品以来,流媒体得到巨大的发展,已经成为目前互联网上呈现音、视频信息的主要方式。
1. 流媒体传输的方法
流媒体传输技术分为两类::顺序流传输(Progressive streaming )和实时流传输(Realtime streaming)。
顺序流方式又叫渐进式下载,其传输方式是顺序下载,在下载文件的同时用户可观看在线内容,用户只能观看已下载的部分,而不能跳到还未下载的部分。由于标准的HTTP服务器可发送顺序流式传输的文件,也不需要其他特殊协议,所以顺序流式传输经常被称作HTTP流式传输。
实时流方式:实时流式传输使媒体可被实时观看到,特别适合现场广播并提供VCR 功能,具备交互性,可以在播放的过程中响应用户的快进或后退等操作。实时流式传输必须匹配网络带宽,其出错的部分一般被忽略,传输质量特别时低带宽时的质量要比顺序传输的差。实时流传输需要专门的流媒体服务器和流传输协议。
2. 流媒体技术原理
流式传输方式是指通过特定算法将音频和视频等多媒体文件分解成多个小的数据包,由服务器向客户端连续传送,用户可播放已经接收到的数据包,而不需要将整个文件下载到客户端。由于TCP协议不太适合传输多媒体数据,故在实时流媒体方案中,一般采用HTTP/TCP来传输控制信息,而用RTP/UDP来传输实时数据。
3. 流媒体技术的系统结构
目前不同公司的流媒体解决方案各不相同。但就其本质来说,一个完整的流媒体系统至少包括三个组件:编码工具、服务器及播放器。这三个组件间通过特定的通信协议相互联系,按特定的格式相互交换数据。
4. 传输协议
流媒体系统各组件通过传输协议相互通信。对于顺序流传输,可采用HTTP协议进行传输。但HTTP协议并不适合传输实时流数据。在流式传输的实现方案中,一般采用HTTP/TCP来传输控制信息,而用RTP/UDP来传输实时多媒体数据。传输协议是流媒体技术的一个重要组成部分,也是基础组成部分。它包括"RSVP(资源预留协议)"、"RTP(实时传输协议)"、"R T C P (实时传输控制协议)" 和"RTSP(实时流协议)",这四种协议构成了"rea1-time"服务的基础。
4.1 资源预留协议RSVP (Resource Reserve Protocol)
RSVP是Internet上的资源预订协议,使用RSVP可以让流数据的接收者主动请求流数据上的路由器,为该数据流预留一分网络资源(即带宽),在一定程度上为流媒体的传输提供服务质量。
4.2 实时传输协议RTP与RTCP
RTP是用于Internet/Intranet针对多媒体数据流的一种传输协议。RTP被定义为在一对一或一对多传输的情况下工作,其目的是提供时间信息和实现流同步。RTP通常使用UDP来传送数据,但它本身并不能为按顺序传送数据包提供可靠的传送机制,也不提供流量控制或拥塞控制,它依靠RTCP提供这些服务。RTCP和RTP一起提供流量控制和拥塞控制服务。RTP和RTCP配合使用,能以有效的反馈和最小的开销使传输效率最佳化,特别适合传送网上的实时数据。
4.3 实时流协议RTSP
RTSP是由Real Networks和Netscape共同提出的,该协议定义了一对多应用程序如何有效地通过IP网络传送多媒体数据。RTSP在体系结构上位于RTP和RTCP之上,它使用TCP或RTP完成数据传输。RTSP 是应用级协议,它以底层的RTP和RSVP为依托,控制实时数据的发送,它提供了可扩展框架,使实时数据的受控、点播成为可能。在客户端应用程序中对流式多媒体内容的播放、暂停等操作都是通过RTSP协议实现的。
4.4 MMS协议(Microsoft Media Server Protocol)
与QuickTime和Realsystem流媒体技术采用RTSP协议进行传输不同,微软采用专用协议MMS进行流式传输。
MMS协议是用来访问并且流式接收Windows Media服务器中流媒体文件(asf或 wmv)的一种协议。MMS协议是访问Windows Media点上的单播内容的默认方法。观众在 Windows Media Player 中必须使用 MMS 协议才能引用该流。
5. 主要的流媒体技术
5.1 四大流媒体技术
目前,互联网上流媒体主要流媒体技术方案有Real Networks公司的Real System方案,微软公司的Windows Media流式媒体解决方案,Apple公司的QuickTime流式媒体解决方案及Adobe公司的Flash流媒体解决方案。
5.1.1 Real System
Real Networks是Internet上流媒体传输的先驱者和领导者。其流媒体文件包括RealAudio,Real Video,Real Presentation和RealFlash4类文件。
5.1.2 Windows Media
Windows Media的前身是微软公司的Netshow产品,随着流媒体的广泛应用,微软推出了整套的流媒体制作、和播放产品。由于Windows Media的成本较低且简单易学,支持屏幕录制等功能,故在教育方面应用较广。其流媒体文件包括视频文件WMV/ASF,音频文件WMA等。
5.1.3 QuickTime流式媒体解决方案
Apple的QuickTime是一个跨平台的解决方法,同时支持苹果系统及Windows,其播放器支持多达40种的格式,交互性较强。由于大部分QuickTime编码器和服务器软件均运行在苹果操作系统中,故QuickTime流式媒体在PC机上应用较少。
5.2 新型流媒体技术
5.2.1 HTTP流式媒体
传统的顺序流传输(Progressive streaming )由于采用传统的HTTP协议传输,并不支持现场直播等实时流传输。而随着网络技术的发展,最新的流媒体技术已经支持采用HTTP协议传输流媒体文件和进行实时流传输。HTTP流式媒体的代表有Microsoft公司 IIS平滑流式媒体(IIS Smooth St reaming)、APPLE公司HTTP流媒体直播(HTTP Live streaming),Adobe公司最新的Flash Media Server 4.5也支持HTTP流式媒体传输。
5.2.2 P2P流媒体
P2P流媒体技术并不是一个崭新的流媒体技术。他是P2P技术同流媒体技术结合的产物。基于P2P 的流媒体服务系统并不改变现有的流媒体服务架构, 只是在现有系统的基础上, 改变传统模式下的服务方式和数据传输路径, 使请求同一媒体流的客户端组成一个P2P 网络, 使服务器只须向这个P2P 网络中的少数节点发送数据, 而这些节点可以把得到的数据共享给其余的节点。
6.总结
截至2011年6月,我国的网民人数已经达到4.85亿,其中中国家庭电脑宽带上网网民规模达到3.90亿人。如此巨大的网民数量,为流媒体的发展带来了前所未有的机遇发展机遇。随着互联网的飞速发展,人们对互联网内容多样化的需求也越来越强烈,流媒体业务的需求与只俱增。目前,流媒体已经广泛应用于网络电视,远程教育,移动设备,数字电视,安防监控,视频会议等多个领域。今后流媒体的发展趋势是:①随着流媒体技术的进步、网络带宽的增加及新型高质量编码方式的出现,流媒体的质量进一步提高,高清流媒体将成为主流。②流媒体技术的应用更加广泛。基于流媒体技术的数字电视将取代传统有线电视成为主流;同时随着3G网络基础设施的完善和移动终端功能的增强,融合语音、文字、图像等多种形态的移动实时流媒体业务,如手机流媒体直播、移动网络会议等,将使流媒体的应用达到一个新的高度。
参考文献:
[1]庄捷.流媒体原理与应用 [M].北京:中国广播电视出版社,2007:21-41.
[2]齐俊杰,胡洁,麻信洛.流媒体技术入门与提高[M].2.北京:国防工业出版社,2009:1-30.
【关键词】流媒体技术;流式传输;多媒体
1.前言
从最初在网络上传播的文字、图片到现在传播的各种形式的网络视频、三维动画,人们从网络上获取的信息形式越来越多样化。然而,需求的不断提高、上网人数的不断增加以及网络硬件设备的局限性使文件的大小成为网络传输中必须要考虑的因素,一个经常困扰大家的问题是下载文件时受到网络带宽的限制。人们不得不面临这样的尴尬:
一方面,希望能在网络上看到生动、清晰的多媒体演示;
另一方面,缓慢的网络速度又使文件下载需要很长的时间。为了解决这个矛盾,“流媒体技术”应运而生。
2.流媒体技术的概念
网络技术的发展给人们提供了丰富的资源与机遇。随着网络宽带化的进一步发展,人们不再满足在信息高速公路中仅有文本、图像和声音,而希望得到声、文、图及视频流媒体信息。以前,多媒体文件需要从服务器上下载后才能播放,因而在一定程度上限制了人们在计算机和互联网上使用多媒体数据进行交流。
流媒体技术是网络音、视频技术和移动通信技术发展到一定阶段的产物,它是融合很多网络技术后产生的新技术。流媒体技术的主要特点是以流的形式在有线Internet/Intranet上进行多媒体数据的传输。连续的影像和声音信息经过压缩处理后通过网络传输,并在客户端播放缓存区中已经收到的信息且将播放过的数据丢弃;与此同时,多媒体视频数据的剩余部分将持续不断地从服务器传送到客户端,从而形成稳定的、连续的传输流和回放流,不仅使启动延时呈十倍、百倍地缩短,而且也不需要太大的缓存容量,避免了用户必须等待整个文件全部从网上下载完成后才能观看的缺点,最终使得人们在低带宽的环境下也能获得高质量的音频和视频信息。
目前在网络上传输音频/视频(Audio/Video,简称A/V)等多媒体文件时,基本上只有下载和流式传输两种方式。通常说来,A/V文件占据的存储空间都比较大,在带宽受限的网络环境中下载可能要耗费数分钟甚至数小时,所以这种处理方法的延迟很大。如果换用流式传输的话,声音、影像、动画等多媒体文件将由专门的流媒体服务器负责向用户连续、实时地发送,这样用户可以不必等到整个文件全部下载完毕,而只需要经过几秒钟的启动延时就可以了,当这些多媒体数据在客户机上播放时,文件的剩余部分将继续从流媒体服务器下载。
3.流媒体系统的组成
流媒体是由各种不同的互相通信交互的软件系统构成的,一个最基本的流媒体系统必须包括编码器(En-coder)、服务器(Server)和播放器(Player)三个模块,三者缺一不可。这三个模块之间分工明确,其中,编码器负责创建、捕捉和编辑多媒体数据,使其成为能够在Internet上传输的流媒体格式,并以互动方式呈现;服务器管理并且大量传送经过编码处理的多媒体内容;播放器在用户端的PC机上播放接收到的多媒体信息。
4.流媒体技术的特点
流媒体技术与传统播放技术的区别在于:
1)节约空间。与传统播放技术相比,流媒体技术由于采用了特殊的数据压缩与解压缩技术,使得其音、视频文件只有传统WAV和AVI文件的3%-5%,且不影响文件播放质量。同时流媒体技术采用了流式传输方式,边下载边播放,所以对缓存的要求降低,占用空间很小,这样可以使用较小的磁盘空间存放大量的资源,节约了存储资源。
2)节省时间。流媒体技术采用了流媒体传输方式,将整个多媒体文件压缩解析成多个压缩数据包,向客户端实时地顺序传送,用户只需经过几秒或十几秒的启动延时即可进行观看,不用等待所有内容下载到硬盘上才开始浏览,从而节省了用户的时间。
3)内容丰富。流媒体技术改变了传统互联网的呆板形象,丰富了互联网的功能,使之成为一种有强大吸引力的新媒体。毫无疑问,这种技术将会在新闻出版、证券、娱乐以及电子商务、远程培训、视频会议等领域得到广泛的应用。
5.流媒体技术的应用
1)流媒体点播业务
随着计算机技术的发展,流媒体技术越来越广泛地应用于视频点播系统。现在,很多大型的新闻娱乐媒体,如央视和一些地方台,都在互联网上提供了基于流媒体技术的点播业务。在这种业务中,内容提供商将预先通过压缩编码制作好的多媒体内容存放在服务器上,然后对多媒体信息的内容进行描述,用户根据自己的兴趣,进行点播。国内主流的视频网站如奇艺、优酷、土豆等等,均提供这种业务。
2)流媒体直播业务
是指内容提供商将实时信号编码并压缩成相应的媒体格式,通过流媒体服务器发送到用户的终端播放器上进行播放。实现了在低带宽的环境下的高质量影音传输,其中的智能流技术保证不同连接速率下的用户都可以随时随地应用流媒体技术在网络上观看多媒体信息。
除了视频直播外,流媒体直播业务还包括远程监控。它通过摄像头或其它影像设备,将拍摄到的视频信息通过通过网络以流媒体的形式传输传送到客户端,并在客户端播放,因此,更为方便灵活。这种方式最主要的应用是视频会议和各种监控,比如家庭防盗系统的监控、道路监控等等。从2003年至今,视频会议被列为电子政务工程中重要的环节得到切实的应用和推广。视频会议可以是双方的,也可以是多方的,它是典型的具有交互性的流媒体应用。
3)远程教育
Internet的使用开创了远程教育的里程碑,它促进了远程教育中的教学传递日趋现代化,这种教育形式能跨越校界、区界甚至国界。在远程教育中,可以采用多种模式,甚至混合的方式实现。例如可以采用点播的方式传送教学节目,以会议的方式进行课堂交流等。远程教育以应用对象明确、内容丰富实用、运营模式成熟,成为商业上较为成功的流媒体应用。流媒体技术的应用突破了传统的远程教育以文本为主、没有声音和视频,解决了教学模式单一、交互性差的问题。大型企业可以利用基于流媒体技术的远程教育对员工进行培训。
6.结束语
技术在进步,用户的需求也在日益增长。我们一方面要在这个领域不断寻求自己的兴趣点,开发可以进步的空间,吸引越来越多的企业参与竞争,赚取利润;另一方面也期待着流媒体技术将会在未来的互联网应用中带给用户更多的享受!
参考文献
[1]李莹.流媒体技术简析[J].大众科技,2010,3.
[2]张敏芳,单文生,陈福民.流式媒体服务平台的建立[J].计算机工程,2003(12).
[3]李育林.基于流媒体技术的远程教学[J].广播与电视技术,2006(07).
一、研究内容
(一)投影仪+黑板的使用与原来单一使用黑板对课堂教学带来的影响。采用问卷调查的方法,制作不同的问卷调查表,分别对学生和教师进行问卷调查。建议被调查教师人群年龄在40岁以上,被调查学生最好是小城镇或农村中学以上人群,因为这些人应该同时经历过使用投影仪+黑板和单一使用黑板的教学方式和学习方式,使研究结果更具有客观性。
(二)MOOC的产生对自主学习、成人学习、终身学习的学习理念带来的影响;针对MOOC对自主学习理念带来的影响同样采用问卷调查的方法分别针对不同年龄段的人群进行问卷调查;针对MOOC对成人学习、终身学习理念带来的影响则采用访谈或网上问卷调查的方式进行,可使调查的范围扩大,有利于结果更接近现实。
(三)新媒体和新媒体技术应具备怎样的特征,采用采访的方式,调查学习者对新媒体和新媒体技术使用的优缺点的观点和是否会使用这些新媒体和新媒体技术的原因,找到已有新媒体和新媒体技术应该改进的地方,提出对改进新媒体和新媒体技术自己的建议和对未来新媒体和新媒体技术的预测。
二、研究思路
(一)被调查地区教育局统筹、领导,专业研究机构具体指导、组织实施。教育局和专家的指导能保证研究调查内容更加合理和科学化,调查表更加完备,被调查人群更加全面;学校的参与则保证了调查研究的可行性和实用性。
(二)分别制定投影仪+黑板和单一黑板学生表、投影仪+黑板和单一黑板教师表、MOOC对自主学习学习理念影响表三个不同的调查表,针对不同的问题采用不同的问卷调查表。并按照一定的比例针对各个年龄段、各个人群采取调查,保证调查结果不片面,不真实。
(三)在进行采访和访谈的调查方式时对不同职位的人群进行调查,调查结果至少应包括20种不同职业的人群,每个职业应调查不同年龄、不同性别的人大于或等于20个。才能保证调查结果具有客观性、科学性和可参考性。对于一些职业的被调查者我们应该提前预约,在保证不影响他们正常工作和生活的前提下,才能把调查更好的进行下去,这也是我们对别人进行调查研究的基本礼貌。
三、研究方法与步骤
(一)研究方法
1.行动研究:行动研究是指在实际情景中,有实际工作者和专家共同合作,针对实际问题提出改进计划,通过在实践中实施、验证、修正而得到研究结果的一种研究方法。本研究在三个不同的问卷调查表的制作、改进和访谈问题的制定,被调查人员的范围选定等方面采用行动研究法。
2.质的研究:质的研究是一种以研究者本人作为研究工具,凭借自身的洞察力在与被研究者的互动中理解和解释其研究行为和意义建构。整个研究过程在自然情景下以多种方法收集资料,最终使用归纳法分析资料,形成理论或描述并呈现一个情景,达到对教育问题进行整体性探究的目的。在本次研究中,选择符合条件的20种不同职业的不同人群进行访谈、观察等手段收集的研究资料,对此进行描述性分析和解释,从中归纳总结出新媒体和新媒体技术对教育产生的影响。
3.量的研究:量的研究指通过实验、调查、测验、结构观察以及已有的数量化资料,对教育现象进行客观研究,并将所得结果作相应的统计推断,使研究结果具有普遍适应性的一种活动。在本次研究中所采用的量的研究方法主要体现在对投影仪+黑板的使用与原来单一使用黑板对课堂教学带来的影响和针对MOOC对自主学习理念带来的影响采用问卷调查的方式中。
(二)研究步骤
成立课题组,对各个城镇及农村进行调查分析,和当地政府、教育部、学校等教育机构进行沟通,确定被调查人群的区域;绘制问卷调查表的初步模型和问题类型,讨论要调查的问题并记录。大致绘制好问卷调查表后向专家请教,请专家对问卷调查表进行改进;课题组内所有成员一起根据被访谈人员的划分,制定出问题;根据课题组成员的工作划分,每个成员根据自己的工作任务分别同时进行不同工作的调查,对于调查中出现的突发状况能立即解决的就立即解决,但最后需要把突发状况及解决方案记录下来,对于自己无法解决的突发状况,在小组内总结时提出并进行全员讨论解决,必要时请教这个方面的专家或自己的导师进行解决;将调查完成后的问卷调查表数据和访谈结果进行整理,总结中各种情况的问卷结果,对结果进行量化分析;根据数据整理的结果进行分析,得出结论,把新媒体和新媒体技术对教育的影响划分为几个方面进行记录;总结性评价,总结这个调查的不足和需要改进的地方,以及调查中干扰变量可能会对调查结果造成的影响分析,还有就是对以后再进行研究调查时需要注意的方面和需要改进的不足。
关键词:多媒体;视频智能编辑;视频感兴趣区;图像视频场景分析
中图分类号:TP37 文献标识码:A文章编号:1007-9599(2012)01-0000-02
Multimedia Technology Study
Du Pengxiang,Huang Shanshi
(China Telecom Co.,Ltd.,Wenzhou Branch,Wenzhou325000,China)
Abstract:This article is from the macro summarizes the development and application point of the current image video of the underlying technology from the perspective of an image of video algorithms researchers talk about the understanding of this area.The field of image and video business applications, multimedia entertainment,the Internet, intelligent monitoring,industrial machine vision,OCR,biometrics, medical image processing,as well as military defense in several areas, multimedia areas is an important branch of a lot of image field of video the new algorithms and new theories are often the first application in the multimedia field.
Keywords:Multimedia;Video intelligent editing;Video interest region;Image video scene analysis
多媒体领域主要集中了MicroSoft、Adobe、MITSUBISHI、Cyberlink、Muvee、Autodesk、Corel、Sony、2D3、MotionDSP等一批公司,以及与之相关的PAMI、IJCV、CVPR、ICCV、ECCV、SIGRAPH等众多多高水平的学术期刊和学术会议。多媒体领域的研究方向比较杂,包括但不限于下面几类,视频智能编辑、视频感兴趣区、图像视频场景分析、图像视频修复及后处理、人脸系列技术、非真实感渲染(NPL)系列技术、3D系列技术、人机交互技术等。
主要包括视频镜头边界检测以及在此基础上的视频自动故事片生成、视频广告检测、视频废镜头检测等。视频镜头边界检测在经历了一段时间的发展之后,检测率也达到一定的程度,目前基本上不再有新的文章出现。视频自动故事片生成往往需要音视频技术的结合,并且由于缺乏有效的评级机制,最近几年已经不是研究的热点,但是相信各个视频编辑领域的公司仍在研究或者开发过程之中。视频中的广告检测作为其中的一个小的分支,可能因为没有很大的商业价值,研究的并不多,但想要真正实现高的检测率,仍然有很多值得研究的地方。视频废镜头检测其实是视频修复的一部分,包括检测视频中的抖动片段、模糊片段、过曝过暗片段等,从而达到视频修复的目的。
(一)视频感兴趣区的研究
最近是一个热点方向,感兴趣区提取和跟踪可以用来做视频智能缩放,可以用来指导视频编辑中的精彩视频片段选择,还可以在片源采集时就用来指导摄像机捕捉精彩片段。人脸、人物、车辆、小动物、房屋、花草树木等在特定的场景下等都可以作为感兴趣区,感兴趣区提取的方式方法也比较多,但除了人脸、人物检测技术上还比较成熟之外,其他目标的检测很难达到满意的准确度。人物检测基础上的精细分割抠像技术,也是图像领域的一个基础研究方向,准确的抠像,是换背景等智能化效果的基础。
(二)图像视频场景分析
主要用在视频管理和视频按场景选择和编辑。通过对不同的场景的特征进行分析设计分类器进行分类,对于视频管理这种不要求很高精度的应用点可以满足要求。照片和视频按场景内容管理,跟基于人脸识别技术的照片管理,是基于内容管理的两个方式,相信今后的多媒体编辑和管理软件都会逐步增加这个功能。
(三)图像视频的修复及后处理
主要包括视频抖动修复、图像视频去模糊、视频过曝过暗修复、视频去雾化、老电影旧照片修复、马赛克修复、视频图像超分辨率、视频图像智能变比例缩放、视频帧插值、图像视频去噪等。
视频抖动修复关键是摄像机轨迹的检测,确定了摄像机的移动轨迹,视频修复就有了基础的指导。通过寻找视频中的特征点,然后对特征点进行跟踪,通过分析每个特征点的轨迹,确定摄像机的整体轨迹。如果假定视频中的内容都是一个平面上,只考虑摄像机在2D平面的轨迹,事情要容易的多,但事实上摄像机的轨迹应该是3D的,这就变成了一个“Structure from Motion”的问题,处理起来就比较复杂,但如果想得到理想的稳像效果,得出摄像机3D轨迹是必须的。另外,摄像机3D轨迹的求取,也是其他基于3D的视频应用的基础,这个后面再讲。
图像视频去模糊,这个的关键是寻找模糊核,也就是拍摄的瞬间摄像机或相机的运动轨迹,在这个运动轨迹上反卷积,就可以恢复摄像机不动情况下拍摄的视频、图像,也就是不模糊的视频、图像了。所以,对视频的去模糊,比起对图像的去模糊,手段要多一些,因为视频去模糊可以通过视频序列的信息来得到摄像机的运动轨迹。而图像的去模糊,这个运动轨迹只能是通过对图像内部结构的分析进行估计。考虑到轨迹估计和反卷积的运算量,不管是图像去模糊还是视频去模糊,目前都不算很成熟,但是成熟的产品应该会在短期内出现。
视频过曝过暗修复,如果视频质量不是太差,直方图被挤压的不是太厉害,还可以通过直方图均衡化的方式进行简单修复,但是如果直方图被挤压的很严重,那就只能删除了。
视频、图像去雾化,简单点说,就是把被雾化的图像建模为一个正常的无雾的图像与纯雾的图像的合成,因为拍摄得到图像中雾的灰度值与景深有关,所以好的去雾算法,应该是以准确的景深估计为基础的,3D景深估计也是一个很热的方向。
老电影旧照片修复,大概包括色彩的修复和一些划痕修复,色彩修复,可以以类似去雾的建模方式,也可以简单的做色调调节,问题都不大。划痕修复就比较复杂,除了要把划痕检测到,还要用周围的像素来填充划痕的像素,比较典型的全变分方法可以用来处理这类问题。
马赛克修复,马赛克修复基本上还是要从产生的原因入手,如果是编解码层的问题,可以对编解码的数据尝试修复。如果到了解码后的图像数据,想要修复就是一个无中生有的问题了,只能是依靠边缘纹理来去掉马赛克的效果,但是想要恢复图像内容,除非后台有一个强大的针对特定目标的数据库来支持虚构类似的内容,否则毫无办法。
视频、图像超分辨率,超分辨率的方法,总体来说两种思路,一种是挖掘图像的边缘信息,在图像放大的时候,尽量保边缘,这类方法以NEDI方法为典型,缺点是速度比较慢。另一类是基于Patch的方法,首先建立一个低分辨率Patch对应高分辨率Patch的映射表,前期先把这个映射关系建立好,然后就只需要通过查找映射表来进行超分辨率操作了。如果建立的映射表足够大,那就可以得到比较理想的超分辨率结果,理论上讲不论速度还是质量都比前一种方法要好。
视频图像智能变比例缩放,是指通过分析图像视频中的内容,在图像、视频缩放的过程中,保留有内容的关键区域比例不变,而压缩、扩展不重要的区域,这样看起来缩放后的图像、视频主要内容不会变形。基于图像的智能缩放算法比较成熟,基于视频的由于要考虑视频序列的前后帧的连续性,必须加入时间轴的约束,因此效果不如图像理想,做的不好会引出视频的抖动问题。
视频帧插值,可以用来解决帧率变化的情况下,出现的视频抖动问题,主要是一个视频的全局运动,类似于视频抖动检测,应该说技术上不复杂,但是视频中的局部运动会干扰全局的运动估计,这样插值出来的帧就会存在一定的瑕疵。
图像视频去噪,方法很多,简单点通过滤波高频信号的方法如高斯滤波,或者简单的中值滤波都可以有一定的效果,但是目前看来,最理想的方法还是非局部均值(NLM)方法。其他的一些例如偏微分方程的方法也可以尝试。
五、人脸系列技术
包括人脸检测、跟踪,人脸特征点定位,人脸识别,人脸的表情识别,人的年龄、性别识别,人脸的美化,人脸卡通效果,人脸的变形效果,人脸的3D重建等以及与此相关的眼睛检测和红眼修复等。
六、非真实感渲染(NPL)系列技术
包括水墨画、水彩画、油画、漫画效果等人工画效果,风、雪、雨、烟、雾、火焰、海浪等一些自然环境的模拟效果。
人工画效果的实现主要是基于Stroke的方式,难点在于图像的解析,一个好的人工画效果,需要正确的将图像分解为不同的区域,并分析不同区域的结构特点来确定用笔方式、Stroke的精细度等参数。
对自然环境的模拟,主要是一些粒子的模拟,可以采用基于物理模型的方式研究粒子的受力及运动方式,流体力学的相关方法是这个领域的核心。
NPL技术,除了用于对图像、视频的特效上,另外像一些烟雾效果和水墨画效果用于艺术字的特效也是不错的选择。
七、3D系列技术
3D技术在视频中的应用点,可以看到的有3D稳像、3D对象嵌入等等,这里的关键是获取摄像机的3D轨迹与视频中的特征点的3D深度信息,通过视频序列分析摄像机的3D轨迹的技术叫“Structure from Motion”,大量的文章可以参考。有了摄像机的3D轨迹与视频中的特征点的3D深度信息,2维的图像信息就一定程度扩展到了3维。全景图的拼接技术,本质上也利用了基于双目视觉3维重构的一部分技术。得到了3D摄像头轨迹,可以利用这个信息进行3D插帧,借此虚拟重构双目视觉画面,通过3D眼镜,就可以看到比较理想的3D场景了。3D的应用,可以想象的空间比较大,多了一维信息,总可以做出一些新的东西。
八、人机交互技术
人机交互是指通过摄像头捕捉人的手势、身体的姿态、面部表情、眼睛的移动等信息,代替传统的鼠标键盘来指导计算机做出相应的处理。技术层面主要涉及目标的检测、跟踪以及姿态的识别。相比之前提到的多媒体的各种方向,人机交互应该是最有市场前景的方向,应用点也非常多。
一、运用多媒体有利于创设教学情境,激发学习兴趣。
在多媒体教学环境下,创设情境,充分调动情感因素,为学生创设一个最佳的学习氛围。如教学余光中的诗歌《乡愁》时,课前播放费翔演唱的歌曲《故乡的云》,让学生在旋律中感受浓浓的思乡之情;欣赏陈铎朗诵的《乡愁》,指出诗节奏、重音的划分,体会诗歌内容,感受诗人的思想感情,进入诗歌的情境,也为学习打下一个良好的情感基础。这种学习氛围是传统的讲和读所无法实现的。教师教得积极,学生学得投入;学生的整个精神力量都受到了激发。
二、运用多媒体有利于丰富教学内容,拓宽信息传递渠道。
语文教学要提高质量,就是要大面积、大容量、高速率地使学生掌握更多的知识,从而发展智力、形成能力。用信息论的观点来看,就是在一定时间内给学生传导最多信息,使他们提高语文学习的效率。如教学鲁迅的《故乡》时,首先将该文的作者鲁迅的有关情况,包括生平、主要作品、在文学上的地位等,课文的写作背景及故乡的照片等利用多媒体呈现在学生的面前,使学生能深入理解课文的思想内含,感受作者的情感;在分析课文第一部分时,可以引导学生欣赏对此部分的配乐朗读,同时在屏幕上一一展现故乡的山水、故乡的村庄、故乡人的活动,让学生直观地感受故乡的气息、故乡的萧条与作者所着力渲染的意境。这样一来,教学内容丰富,学生掌握的知识量与密度增加,学生的学习情绪由此高涨。增加了语文课堂的教学容量;为学生的课外阅读指明了方向,调动了学生的学习兴趣,减轻了学生语文学习的负担,同时,也拓宽了信息传递的渠道,增大了课堂的语文信息容量。
三、运用多媒体有利于学生对教学内容的强化理解。
妙用多媒体技术,除了可以创设教学情趣,激发学生的学习兴趣;丰富教学内容,拓宽信息传递渠道;还可以帮助学生提高理解深度,实现学生自主学习。
如:在讲解《爱莲说》时,利用多媒体出示不同时空的荷花图片,并配以轻柔舒缓的乐曲,引导学生感受荷花的神韵,同时回忆自己关于荷花的所见所闻所感,完成第一个层次的联想想象。教师接着展示荷花、、牡丹花、玫瑰花等花卉,要求学生从中选出你最喜欢的花,并说出喜欢的原因。如此联想与想象,就打通了历史、眼前、生活和文本的界限,达到了第二个层次的联想和想象。
四、运用多媒体有利于解决教学重、难点,训练学生的听说读写能力。
【关键词】多媒体技术;营造氛围;取长补短;审美乐趣
随着以创新精神和实践能力为重点的素质教育的全面推进,多媒体技术作为新型的教学手段在课堂教学中所起的作用越来越明显。中学美术课同其他各学科一样,对多媒体技术在课堂教学中的依赖程度也越来越高,因为多媒体技术有许多得天独厚的优越性,有其他教学手段根本无法比肩的绝对优势。运用多媒体技术能在有限的时间内充分调动学生的视觉器官、听觉器官的功能,使学生在受到情感熏陶、品尝审美乐趣的同时,产生超越时空的想象和联想,从而激发他们求知的欲望,最大限度地挖掘他们的创新潜能,使学生的主体性得到充分的发挥,多媒体在美术教学中的作用是多方面的,具体说来,主要表现在如下三个方面:
一、将静止抽象的画面动态化、形象化
静止的抽象的画面可以使学生拍手叫好,却难以使学生知道“好”的原因,难以使学生了解这个“好”产生的整个过程,也难以产生一试身手的欲望。而一旦运用多媒体技术,静止的事物便能显示一个动态的发展过程;一个抽象的画面便能显示形象感人的效果,这样就能使学生轻而易举地理解和领悟所教内容,从而缩短了授课时间,提高了教学效率。例如绘画中的构图知识是学生比较难以掌握的,以往教学中,教师必须用大量的范图和讲解,仍很难让学生真正理解所绘物体在不同位置、不同大小时的不同视觉艺术效果,学生在作业中只能生搬硬套,“依样画葫芦”,这样的作业就缺乏生动性和创造性。利用多媒体技术后,效果便会大不相同。我们可以利用计算机中的软件,将要示例讲解的美术作品事先扫描好,显示在屏幕上,分别将作品中的主体、背景等物象进行分离处理,在演示时就可反映作品中表现的物象在不同位置的不同效果,也可把物象做拖动、放大、缩小处理,以展示物象大小变化对画面效果的影响,还可以在原作品中添加辅助线,说明几何形构图法。这样学生通过老师与计算机的“示范”,对构图的原理和重要作用就有一个完整的认识,达到事半功倍的教学效果。
二、营造教学气氛,激活学习兴趣
美国心理学家布鲁纳曾明确指出:“学习的最好刺激,乃是对所学教材的兴趣。”而这种兴趣的产生与教学氛围的营造效果有极为密切的关系。在多媒体技术未得以运用之前,教者为营造特定的教学氛围,可谓煞费苦心,多媒体技术广泛推广以后,教者营造某种教学氛围难度便大大降低了,鼠标一点,预先设计的各种画面便会渐次呈现在学生面前,而且形声兼备、色彩浓淡相宜。对学生来说,完全可以起到娱悦其耳目,激励其心灵,触发其情思,开发其智力的作用。如果教者想用江山如此多娇的画面来激发学生爱国的情思,描写祖国山河的欲望,轻点鼠标,便可轻而易举地将秀色可餐的桂林山水、多姿多彩的黄山云雾、美不胜收的九寨沟风景……逐一呈现在同学们眼前。如果教者想以祖国积淀深厚的人文景观来开拓学生智力的话,轻点鼠标,气势雄伟的万里长城、巍峨壮观的天安门城楼、构思奇妙,布局精巧的苏州园林、令国内外游人叹为观止的乐山大佛……便会逐一呈现在同学们眼前。这些人文景观凝聚着人类祖先的智慧、心血和汗水,更容易激起学生情感的涟漪。如果教者想用名家力作来让学生感受美术的魅力,轻点鼠标,一幅幅形神兼备的名家力作便会渐次跃入学生眼帘,使学生受到潜移默化的影响。威尼斯铁沁的《圣处女升天图》那风行水上的流动气韵会使学生赞不绝口;米洛斯维纳斯的雕塑那高贵典雅同丰满诱人的调和美会使学生情不自禁地拍案叫绝;徐悲鸿的“群马图”那风驰电掣,一往无前的气势会使学生热血沸腾,啧啧连声……
毋庸置疑,电脑屏幕上显示的多姿多彩的自然景观、构思精巧的人文景观、精妙绝伦的名人力作对营造愉悦的课堂氛围,激发学生学习美术的兴趣都有着不可低估的作用。
三、有利于集思广益、扬长避短
美术课与其它学科最大的不同点就在于要留出大部分课堂时间让学生根据教者的某一具体要求进行绘画实践活动,在多媒体技术未用于课堂教学之前,这种实践活动都是以个体行为的方式来完成的,别人的长处学不到,自己的短处也发现不了,也就是说很难收到集思广益、取长补短的效果。多媒体技术引入课堂教学之后,上述弊端便可克服了,因为在学生进行个体作业之前,教者可提请几位学生凭借电脑进行设计、操作图案的结构,图案色彩的对比度均由学生自行设计、自行操作完成,给予每位学生5分钟时间,一节课可以安排三位学生作示范式操作表演。每一位学生操作表演结束后,教者或学生都可以对其演示效果作一番评析。这样,对设计、操作的学生是一种激励、一种督促,对观看操作的绝大多数学生来说是一种启发、一种领悟。学生操作过程、师生评析过程实际上就是一个扬人之长、补己之短的过程。在此之后,学生再进行个体书面作业,其作业效果自然会大大提高。
多媒体技术的发展迅速,软件也在不断地更新,这就使舞台表现中计算机的应用越来越广泛,不仅如此,多媒体技术在舞美领域的应用,也为舞台的视觉和人们的审美观念都产生了很大的改变。由于多媒体技术的运用,舞美技术不断的突破了手工时代的封闭性和局限性,实现舞台的时间艺术与空间艺术的综合,不仅具有音乐与文学的听觉性和文学性,还有建筑与绘画的视觉性和空间性。另外,多媒体技术在舞美领域中运用的作用也是具有一定意义的,不仅能够将人们的视觉范围得到扩展,还在一定程度上促进人们思维能力的提升。在图形设计和舞美创作上,计算机起到了非常重要的主导作用,帮助我们开发新的思路,将计算机语言转换成舞台语言,从而激发出创意的火花。
二、多媒体技术在舞美中的运用
1、虚拟现实技术
计算机具有非常神奇的表现力,能够随心所欲地创造理想形态。计算机的三维技术,在仿真和创造上具有非常强的能力,可以在虚拟的空间里,创造出极其逼真的世界,还能够在想象力下创造出大自然的视野,在三维动画所表现的空间画面中,以超现实的表现力设计出动态的理想世界,而这些功能对于传统的材料工具和技法来说是很难实现和企及的。在传统的舞美设计中,首先要进行构思,做出初步的草图,在导演和相关部门协商之后,形成具体化的构思,然后做出效果图。而手绘图只能通过二维空间来表现三维空间,不能直观的显示出真实的场景。还有舞美中的灯光效果也不能仅仅通过手绘来显示,由于灯光变化很多,不能手绘出每一种灯光变化的效果图。另外在舞台上,所有的灯光、布景在安排设定完毕,一旦产生灯光和布景的问题是很难解决的,所以只有通过计算机三维技术来进行弥补。通过计算机灯光设计的相关软件,对于灯光的颜色、材质和影子以及相关的附加效果进行编辑和图像生成,从而真实地展现现场灯光效果。
2、新型影像设备
由于科学技术的发展,在舞台演出中也不断的应用种类更多、更加先进的影像设备,不仅提升了舞台效果,对于舞台演出艺术的进步和发展也有着一定的促进作用。LED电子显示屏作为一个先进的科技产品,具有非常强大的功能,在现代舞台中的应用也在日益的广泛。LED有着极其丰富的表现力,不仅能够模拟实景,将自然再现出来,还可以作为显示器显示一些效果图像和资料等。而传统布景与LED相比,灵活性和虚拟性远远不如LED,在灯光系统上也有着很大的差距,LED屏幕除了能够模拟出现实的空间造型,也能够很好地表现出灯光效果。而LED也在不断完善和发展,成为舞美中非常重要的组成部分。在演出过程中,大屏幕能够代替传统的布景,显示出搭配节目的画面,这种虚拟画面可以为我们提供想象的空间和真是的气氛。相对于实体布景来说,LED的制作成本更低,表现的效果更好。
3、视听特技
在视听技术中,应用于舞美领域中最为重要的就是舞台照明和舞台音响。舞台照明主要是在演出要求和整体构思下,通过灯光技术设备和相关手段与舞台人物和景物进行配合,使舞台表现出理想的视觉形象。传统的舞台灯光的工作是人工更换涤纶色纸,而这种手动操作的方式不仅程序繁琐,缺乏安全性,在演出过程中同一盏灯也不可以换色,不利于灯光设计的发展。在进行灯光设计时,必须紧扣舞台的主题,有针对性地对每一个节目进行灯光艺术创作,实现灯光表现形式与节目内容的高度统一。近年来我国文艺事业的发展对舞台灯光提出了更高的要求,必须逐步的实现舞台灯光的自动化、智能化以及科学化。舞台音响技术在舞台上也占有非常重要的地位,在当代传媒技术的影响下,音响技术也在不断的提升设计理念,使舞台表现更加完整。当前多维数字音响技术已经开始为人们所了解,并在不久的将来一定会得到创新和普及,这对于舞美来说无疑也是一个值得探究的领域。
三、结束语