如何对无人机遥控器传出的视频数据进行处理显示

发表于2015-11-11

           大疆的图传系统，可以将拍到的视频实时传回到地面的遥控器，遥控器上HDMI接口可以直接将视频输出到显示屏上进行显示。现在问题来了，对于拍到的视频数据，我需要做模式识别，因此不能使用现成的播放器。不仅要显示视频，也要对视频进行存储再处理。由于笔记本的hdmi接口只能输出，所以使用台式机并在主板上扩展HDMI采集卡。       通过在网上查找了一些资料，我所了解到有两种解决方案。一是使用Directshow流媒体解决方案，结合VS就可以自己编写程序进行处理了。但我在网上看到有人说，这种方法实时性不太好，不知道是不是这样。第二种是用类似VLC的开源播放器，做一个自己的流媒体播放器。看到一些说法，这种方案用于测试的比较多，稳定性不太好。另外，大疆的技术人员说经遥控器传出的视频采用h.264编码，可自行选择是否输出源流，因此可省去解码步骤。
       不知道各位大神有没有处理过这类问题，以上两种方案都有什么优缺点，或者有没有其他方法？第一次接触很多东西不懂，希望和大家多多交流。

lanyusea · lanyusea Inspire 1认证用户 2015-11-11 3^#

可不可以具体一下机型和图传。

你单说图传系统不知道你讲的是哪个。

楼主 · 楼主 2015-11-11 4^#

lanyusea 发表于 2015-11-11 11:51
可不可以具体一下机型和图传。

你单说图传系统不知道你讲的是哪个。

机型就是经纬M100，这个机子的团传是Lightbridge高清图像传输系统

lanyusea · lanyusea Inspire 1认证用户 2015-11-11 5^#

eva0564 发表于 2015-11-11 15:06
机型就是经纬M100，这个机子的团传是Lightbridge高清图像传输系统

去买一个manifold吧，应该能满足你的需求。

从x3相机里面读取图像并且再处理。比从hdmi口拿图像要快得多。

楼主 · 楼主 2015-11-11 6^#

lanyusea 发表于 2015-11-11 15:12
去买一个manifold吧，应该能满足你的需求。

从x3相机里面读取图像并且再处理。比从hdmi口拿图像要快得多 ...

这个是大疆自己研发的机载电脑吧，我需要实时地看到视频，这个机载电脑放到飞行器上恐怕不行吧。

lanyusea · lanyusea Inspire 1认证用户 2015-11-11 7^#

eva0564 发表于 2015-11-11 16:02
这个是大疆自己研发的机载电脑吧，我需要实时地看到视频，这个机载电脑放到飞行器上恐怕不行吧。 ...

你不是要做图像处理么？不是电脑处理难道自己眼睛处理么…… 干嘛一定要看到。一定要看的话就用dji go看

楼主 · 楼主 2015-11-11 8^#

lanyusea 发表于 2015-11-11 18:15
你不是要做图像处理么？不是电脑处理难道自己眼睛处理么…… 干嘛一定要看到。一定要看的话就用dji go看
...

这个说来话长，因为我们现在要做的项目要实现“意念”控制飞行器，人要实时看到图像之后大脑会做出相应的反应以进一步控制无人机的飞行姿态。至于图像处理主要指的是对采集到的图像要进行模式分析，提取目标物，是在采集到视频后进行处理，然后再显示出来。所以图像处理这块要在地面操作。

lanyusea · lanyusea Inspire 1认证用户 2015-11-11 9^#

eva0564 发表于 2015-11-11 19:49
这个说来话长，因为我们现在要做的项目要实现“意念”控制飞行器，人要实时看到图像之后大脑会做出相应的 ...

那这个延时很难搞唉…………

如果一定要在地面段看到图像的话，我觉得除了用hdmi那个口之外没有其他选择了，但是DJI并没有提供相关的关于hdmi输出图像的信息。

或者你可以搭载自己的摄像头和图传来从处理画面，这样对于图像处理这部分应该更方便一点，因为格式是你自己规定的。

tengxichao

笔记本的HDMI接口也可以输入的

297078628@qq.co

lanyusea 发表于 2015-11-11 15:12
去买一个manifold吧，应该能满足你的需求。

从x3相机里面读取图像并且再处理。比从hdmi口拿图像要快得多 ...

请问如果用M100做视频跟踪，用manifold是否推荐？也就是说manifold能不能做图像处理，然后根据图像处理结果来控制飞行路径

东南宋

eva05642015-11-11 19:49
这个说来话长，因为我们现在要做的项目要实现“意念”控制飞行器，人要实时看到图像之后大脑会做出相应的反应以进一步控制无人机的飞行姿态。至于图像处理主要指的是对采集到的图像要进行模式分析，提取目标物，是在采集到视频后进行处理，然后再显示出来。所以图像处理这块要在地面操作。

楼主，您好，我和您的需求是一样的，请问您解决了吗？可以分享吗