|
|
计算机、掌上电脑、智能手机、嵌入式设备等产品在人们的日常生活与工作中起着越来越重要的作用。同时,有线网与无线网、局域网与广域网的带宽的增长极大地促进了跨平台的通信与交流。微软亚洲研究院多媒体通信组旨在开发引人入胜的应用程序与服务,以推动在不同网络条件下,跨平台的通信与协作技术的发展。
多媒体通信组凭借其在音频视频压缩、图像处理、网络、用户界面、数据库管理等学科的特长为消费者与信息工作者开发方便实用的应用程序与服务。研究组的成果可广泛应用于视频广播、即时通信、视频通信、流媒体对等传输等服务。研究组的部分技术已转移到微软公司产品之中。
“我的互联网电视台” 随着数字视频爆炸式增长,越来越多的用户正在由视频节目的受众变成视频节目的制作者。本项目旨在研究如何帮助普通用户建立自己的个人电视台,在互联网上进行实时视频广播。通过P2P技术,视频内容发布者只需具有普通的宽带连接,即可将本地的摄像头或视频文件在网上进行直播。此项技术使得广大草根用户可以轻松发布在线视频内容,共享生活体验。同时,企业和商户也可利用该技术吸引客户,进行在线培训,视频广告等多项业务。这项技术的普及,将为在线媒体和娱乐业带来无限商机。
演讲广播系统 演讲广播系统是一个基于P2P流媒体传输技术的视频直播系统. 它包括
- 与Outlook无缝结合的基于频道的节目调度和管理;
- 演讲现场的音视频流媒体节目实时采集和共享;
- 基于P2P流媒体传输技术的流媒体内容传输;
- 演讲幻灯片的实时捕获和上传;
- 音视频流与幻灯片在用户终端基于浏览器的同步播放.
演讲广播系统的软件包包括:演讲节目管理软件,音视频流媒体采集和传输软件,演讲幻灯片实时捕获软件以及客户终端的流媒体播放插件。 它可以作为构建演讲直播或远程教学系统的通用软件解决方案。
交互式多视角视频 交互式多视角视频是一种新型的视频捕捉系统和方法, 一种新型的视频压缩算法和一种新型的服务。交互多视角视频系统包括视频摄像机、控制电脑、服务器、网络组件以及客户端。我们在一个事件场所中布置几十至几百个视频摄像机。这些摄像机经过校准并由电脑控制。事件被不同方位的摄像机同时捕获。捕获的视频在控制电脑上被压缩并实时传送给服务器。 压缩的视频可以或者被实时地传送给最终用户或者通过去除时间和空间冗余被进一步压缩。用户能够连接到服务器,并且订阅新型的服务。这种服务能够使用户交互地接受多视角视频。除了传统的播放控制外,用户还能控制摄像机的方位,选择观察方向,并且享受切换、扫视等特殊效果。交互多视角视频为观察事件提供了全新的用户体验。
微软肖像 微软肖像是一个移动视频通讯的研究原型。它支持个人电脑、掌上电脑、手持电脑以及智能电话上的.NET消息服务、会话发起协议以及因特网定位服务。它可运行于局域网、拨号网络甚至带宽为9.6千比特/秒的无线网络。如果用户只有低带宽网络,微软肖像传送黑白视频;而如果用户拥有宽带,微软肖像则传送真彩色的视频。在低带宽时,相比传统的视频技术而言,肖像视频能够提供更清晰的轮廓、更流畅的运动、具有更短的延时以及更低的计算消耗。微软肖像追求在任何时刻、任何地点,在任何设备上提供在线提示和聊天/语音/视频功能。
数字聚会和数字地铁
数字聚会是一个多方音频及视频通讯的研究原型。它支持多达五人的音频及视频会议。数字聚会利用了我们的应用层多播技术——数字地铁,在有限的带宽下能够提供最好的音频及视频体验。 数字地铁是一种适用于小型、即时视频会议的应用层多播技术。数字地铁突破了传统的使用共享树来处理多路数据的思维模式。数字地铁把数据传送路由组织成源头树组。该源头树组首先由局部贪心算法生成;然后由全局优化过程逐步改进。大量模拟实验证实了这两种算法的有效性。数字地铁能够处理不同视频码率,并对于音频及视频流提供不同优先级的服务。
- A Multiparty Videoconferencing System Over an Application-Level Multicast Protocol
Chong Luo, Wei Wang, Jian Tang, Jun Sun, and Jiang Li, A Multiparty Videoconferencing System Over an Application-Level Multicast Protocol, IEEE Transactions on Multimedia, Volume 9, Issue 8, Dec. 2007. - Distributed Density Estimation Using Non-parametric Statistics
Yusuo Hu, Hua Chen, Jian-Guang Lou, and Jiang Li, Distributed Density Estimation Using Non-parametric Statistics, The 27th International Conference on Distributed Computing Systems, 25-27, June 2007. - An Epipolar Geometry-Based Fast Disparity Estimation Algorithm for Multiview Image and Video Coding
Jiangbo Lu, Hua Cai, Jian-Guang Lou, and Jiang Li, An Epipolar Geometry-Based Fast Disparity Estimation Algorithm for Multiview Image and Video Coding, IEEE Transactions on Circuits and Systems for Video Technology, Volume 17, Issue 6, Pages 737-750, June 2007. - Color Image Coding by using Inter-Color Correlation
Xing San, Hua Cai, and Jiang Li, Color Image Coding by Inter-color Correlation, IEEE International Conference on Image Processing, Atlanta, GA, USA, 8-11 October, 2006. - An Effective Epipolar Geometry Assisted Motion Estimation Technique for Multi-View Image and Video Coding
Jiangbo Lu, Hua Cai, Jian-Guang Lou, and Jiang Li, An Effective Epipolar Geometry Assisted Motion Estimation Technique for Multi-View Image and Video Coding, 2006 IEEE International Conference on Image Processing, Atlanta, GA, USA, Pages 1089-1092, 8-11 October 2006. - Multicast Of Real-time Multi-view Video
Li Zuo, Jian-Guang Lou, Hua Cai, and Jiang Li, Multicast of Real-time Multi-view Video, 2006 IEEE International Conference on Multimedia & Expo, Toronto, Ontario, Canada, 9-12 July, 2006 - Estimating Available Bandwidth Using Multiple Overloading Streams
Minjian Zhang, Chong Luo, and Jiang Li, Estimating Available Bandwidth Using Multiple Overloading Streams, IEEE International Conference on Communications, Istanbul, Turkey, 11-15 June 2006. - 一个新的基于模式的肖像视频压缩码流控制方法
Keman Yu, Jiang Li, Cuizhu Shi, and Shipeng Li, A Novel Model-Based Rate-Control Method for Portrait Video Coding, IEEE Transactions on Circuits and Systems for Video Technology, Vol. 15, No. 12, December 2005, pages: 1545-1556. - 一个实时交互式多视角视频服务系统
Jian-Guang Lou, Hua Cai, Jiang Li, “A RealTime Interactive MultiView Video System”, in the 13th ACM International Conference on Multimedia, Singapore, Nov. 06-11, 2005. - 基于上下文分类和量化的嵌入图像压缩
Hua Cai, Xing San, and Jiang Li, "Embedded Image Coding With Context Partitioning and Quantization," 2005 IEEE International Conference on Image Processing (ICIP 2005), Genova, Italy, Sept. 11-14, 2005.
- 基于幅度级别树形编码的无损图像压缩
Hua Cai and Jiang Li, "Lossless Image Compression With Tree Coding of Magnitude Levels," 2005 IEEE International Conference on Multimedia & Expo (ICME 2005), Amsterdam, The Netherlands, July 6-8, 2005.
- 一个细粒度计算复杂可变运动估计平台
Zhi Yang, Hua Cai, and Jiang Li, A Framework for Fine-granular Computational-complexity Scalable Motion Estimation, The 2005 IEEE International Symposium on Circuits and Systems (ISCAS2005), Kobe, Japan, 23-26 May, 2005. - 一个用于H.264视频编码的块尺寸可变的快速终止算法
Libo Yang, Keman Yu, Jiang Li, and Shipeng Li. "An Effective Variable Block-Size Early Termination Algorithm for H.264 Video Coding". IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY, VOL. 15, NO. 6, JUNE 2005. P784-788 - 一个低复杂度的运动补偿帧插值方法
Jiefu Zhai, Keman Yu, Jiang Li, and Shipeng Li, A Low Complexity Motion Compensated Frame Interpolation Method, The 2005 IEEE International Symposium on Circuits and Systems (ISCAS2005), Kobe, Japan, 23-26 May, 2005 - 可用于H.264视频压缩的基于预测的方向性分像素运动估计
Libo Yang, Keman Yu, Jiang Li, and Shipeng Li, Prediction-based Directional Fractional Pixel Motion Estimation for H.264 Video Coding, 2005 IEEE International Conference on Acoustics, Speech, and Signal Processing (ICASSP2005), Philadelphia, PA, USA, 18-23 March, 2005 - 一个为小型视频会议设计的应用层组播系统
Chong Luo, Jiang Li, and Shipeng Li, "DigiMetro – An Application-Level Multicast System for Multi-party Video Conferencing", in IEEE Globecom 2004 - 一个分布式多方视频会议系统
Ling Chen, Chong Luo, Jiang Li, Shipeng Li, "DigiParty– A Decentralized Multi-party Video Conferencing System", in IEEE International Conference on Multimedia & Expo (ICME), 2004
|
|
|