MATLAB - captura de secuencias de video (MJPEG, rtsp, mpeg)

Question

¿Alguien ha trabajado con la captura de transmisiones de video desde cámaras IP en MATLAB? Por ejemplo, para tomar marcos en MATLAB desde rtsp: //10.10.10.10: 554/live.sdp (flujo rtsp) o desde http://x.x.x.x/axis-cgi/mjpg/video.cgi (flujo mjpeg). La herramienta de adquisición de imágenes de MATLAB no es compatible con esto. Encontré 2 opciones: 1) usando mmread. Sin embargo, la lectura de flujo http no es compatible con MATLAB de 64 bits o 2) para escribir mi propia función C++ que atrape marcos (uso la biblioteca OpenCV) y luego compilarlo en la función MATLAB MEX. Cualquier sugerencia es apreciada.

Answer 1

Esta es la respuesta que obtuve de apoyo MATLAB:

Desafortunadamente, Tiene razón en que actualmente la adquisición de imágenes de la caja de herramientas no es compatible con cámaras IP. En cuanto a soluciones temporales: 1. Si mmread funciona para usted, quizás le sea factible instalar un MATLAB de 32 bits en su máquina de 64 bits. 2. Escribir su propio controlador MEX debería ser una opción posible. 3. IMREAD puede obtener marcos de cámaras IP. Es posible utilizar esta capacidad y crear una función que construya la transmisión de video. Aunque la velocidad de fotogramas puede ser un problema.

Le sugiero que implemente su propia función Matlab mex para captar marcos de video. Éstos son algunos consejos para hacerlo:

1. biblioteca OpenCV se utiliza para capturar secuencias de vídeo de las cámaras de red, consulte OpenCV with Network Cameras. Cada cámara IP puede tener una API diferente para acceder a las transmisiones de video (es decir, la dirección URL). Por ejemplo, http://10.10.10.10/axis-cgi/mjpg/video.cgi?resolution=800x600&.mjpg.

2. A continuación se muestra un enlace al kit de colección y desarrollo de funciones de matlab mex para la biblioteca OpenCV (gracias a Kota Yamaguchi): https://github.com/kyamagu/mexopencv. Esta biblioteca facilita la conversión entre los tipos de datos OpenCV y mxArray. Aquí está un ejemplo:

   #include "mexopencv.hpp" 
   void mexFunction(int nlhs, mxArray *plhs[], 
           int nrhs, const mxArray *prhs[]) 
       { 
       // Check arguments 
       if (nlhs!=1 || nrhs!=1) 
        mexErrMsgIdAndTxt("myfunc:invalidArgs", "Wrong number of arguments"); 
   
       // Convert MxArray to cv::Mat 
       cv::Mat mat = MxArray(prhs[0]).toMat(); 
   
       // Do whatever you want 
   
       // Convert cv::Mat back to mxArray* 
       plhs[0] = MxArray(mat); 
   } 
   

3. La aplicación puede hacerse asíncrona mediante el uso de roscas, donde hilo productor agarra marcos de la cámara y lo pone en una memoria intermedia circular. El hilo consumidor, por otro lado, recupera los marcos del búfer y los convierte en salida mxArray (matriz). Ver How to implement a circular buffer of cv::Mat objects (OpenCV)?. La memoria intermedia circular tendrá que estar segura para la rosca, ver Thread safe implementation of circular buffer.

Answer 2

Desde MATLAB R2015a se ha convertido en muy fácil con la función de la cámara IP :

cam = ipcam('http://172.28.17.193/video.mjpeg', 'admin', 'password'); 
% preview the camera 
preview(cam); 

% close preview 
closepreview(cam); 

% Or get a snapshop... 
img = snapshot(cam); 
imshow(img); 

% release camera 
clear cam; 

La primera vez que se llama a esa función MATLAB puede pedirle que descargarlo. La buena noticia es que la solución ni siquiera requiere una licencia para la caja de herramientas de adquisición de la cámara.