如何实现web与android之间的视频通话

UIRectEdge 发布于 2012/02/16 19:45
阅读 10K+
收藏 6

我们想做一个产品,实现随机视频聊天功能,现在已经做好了web版本,使用的adobe的RTMP和RTMFP,但是adobe的这个技术无法使用在安卓版本上。想问下如何实现安卓、iphone于网站上的用户进行视频通话?求解决方案。谢谢

加载中
0
键人唐
键人唐
使用FFMPEG开源类库进行视频的编解码吧,不过要使用到Android NDK,功能很强大并且很完整,支持很多种格式的视频和音频文件
0
Jack_李志
Jack_李志

引用来自“唐昱春”的答案

使用FFMPEG开源类库进行视频的编解码吧,不过要使用到Android NDK,功能很强大并且很完整,支持很多种格式的视频和音频文件
这位仁兄对视频与音频的编解码了解的如何?有什么技术书籍与论坛,或者帖子可以分享的吗
0
键人唐
键人唐

引用来自“Jack_李志”的答案

引用来自“唐昱春”的答案

使用FFMPEG开源类库进行视频的编解码吧,不过要使用到Android NDK,功能很强大并且很完整,支持很多种格式的视频和音频文件
这位仁兄对视频与音频的编解码了解的如何?有什么技术书籍与论坛,或者帖子可以分享的吗

呵呵,我也是刚刚开始搞,今年整整学习了一个学期,现在的成果是:可以支持一对多的视频通话,在局域网下测试时,视频还是蛮清晰的,不过音视频同步这一块搞得有点头大,流媒体数据是以H264格式发送,使用的RTP协议,发送给服务器,服务器再转发给客户端,客户端使用FFMPEG解码,,将H264解码为YUV420P格式,最后转化为RGB565,再显示在Android的SurfaceView上,我现在可以一秒钟解码20帧,不过问题就是视频显示的有点慢,因为是直接绘图的,今天正式开始使用OpenGL直接在底层绘图,这样视频显示帧率应该至少能达到30 FPS,不过都是底层的,有点复杂。

建议

1.先简单学习一下NDK的开发,会写简单的Android.mk文件,然后要会移植FFMPEG,网上的很多教程都是基于NDK-r4的,有些老了,我的是使用NDK-r7的,编译好多次,最后成功了,我稍候会在博客上写下简单编译的过程,希望能对你有所帮助!

2.视频的话,建议直接看YUV420P,和RGB565,注意光YUV格式就有很多种,建议只看YUV420P,我稍候会在博客上写出来,这里有一篇博客http://blog.csdn.net/SearchSun/article/details/2443867,还有一个YUV的英文详述http://www.fourcc.org/yuv.php 建议先看看。

3.学习FFMPEG吧,看这里http://dranger.com/ffmpeg/tutorial01.html,注意,这个教程有点老,里面一些方法已经被替换了,我现在的FFMPEG都是8.0版本的了,建议你使用6.0。

4.音视频同步,这才是最难搞的一块,我也没有什么经验,现在没有做,用到时间戳概念,比较复杂,如果你有什么好办法,@一下我哈

5.视频的显示,我之前是解码出来的RGB 比特数组,直接在SurfaceView的OnDraw方法里面drawBitmap,但是效果非常差,一秒钟最多播放5帧,后来又使用Android的Hanler通知去刷新,最高也只能到13帧,很无奈,现在又准备移植SDL,还是依靠底层,使用OpenGL来渲染视频,学习中~

多多交流,有什么好的建议,希望给我一些指点!

0000000000
0000000000
回复 @键人唐 : 好的,谢谢
键人唐
键人唐
回复 @谁用了zzy : https://www.ffmpeg.org/legal.html 这个是ffmpeg的使用协议,是GPL协议+LGPL协议的,法律上没有问题,只不过它要求讲核心代码公示出来,不过像暴风影音,qq影音都使用的这个协议,没有公示代码被放到了黑名单上
0000000000
0000000000
你好,ffmpeg商用会有问题么?
0
Jack_李志
Jack_李志

引用来自“唐昱春”的答案

引用来自“Jack_李志”的答案

引用来自“唐昱春”的答案

使用FFMPEG开源类库进行视频的编解码吧,不过要使用到Android NDK,功能很强大并且很完整,支持很多种格式的视频和音频文件
这位仁兄对视频与音频的编解码了解的如何?有什么技术书籍与论坛,或者帖子可以分享的吗

呵呵,我也是刚刚开始搞,今年整整学习了一个学期,现在的成果是:可以支持一对多的视频通话,在局域网下测试时,视频还是蛮清晰的,不过音视频同步这一块搞得有点头大,流媒体数据是以H264格式发送,使用的RTP协议,发送给服务器,服务器再转发给客户端,客户端使用FFMPEG解码,,将H264解码为YUV420P格式,最后转化为RGB565,再显示在Android的SurfaceView上,我现在可以一秒钟解码20帧,不过问题就是视频显示的有点慢,因为是直接绘图的,今天正式开始使用OpenGL直接在底层绘图,这样视频显示帧率应该至少能达到30 FPS,不过都是底层的,有点复杂。

建议

1.先简单学习一下NDK的开发,会写简单的Android.mk文件,然后要会移植FFMPEG,网上的很多教程都是基于NDK-r4的,有些老了,我的是使用NDK-r7的,编译好多次,最后成功了,我稍候会在博客上写下简单编译的过程,希望能对你有所帮助!

2.视频的话,建议直接看YUV420P,和RGB565,注意光YUV格式就有很多种,建议只看YUV420P,我稍候会在博客上写出来,这里有一篇博客http://blog.csdn.net/SearchSun/article/details/2443867,还有一个YUV的英文详述http://www.fourcc.org/yuv.php 建议先看看。

3.学习FFMPEG吧,看这里http://dranger.com/ffmpeg/tutorial01.html,注意,这个教程有点老,里面一些方法已经被替换了,我现在的FFMPEG都是8.0版本的了,建议你使用6.0。

4.音视频同步,这才是最难搞的一块,我也没有什么经验,现在没有做,用到时间戳概念,比较复杂,如果你有什么好办法,@一下我哈

5.视频的显示,我之前是解码出来的RGB 比特数组,直接在SurfaceView的OnDraw方法里面drawBitmap,但是效果非常差,一秒钟最多播放5帧,后来又使用Android的Hanler通知去刷新,最高也只能到13帧,很无奈,现在又准备移植SDL,还是依靠底层,使用OpenGL来渲染视频,学习中~

多多交流,有什么好的建议,希望给我一些指点!

你学的很深入啊,手头也有项目做,我也要抓紧学习了。谢谢分享啊!
0
w
wondfull

恩。正在学习中,交流Q:1049568282

海盗船长123
海盗船长123
学习你妈逼
返回顶部
顶部