Дмитрий
Дмитрий24 грудня 2018 р. 08:25

Переинициализация cv::VideoWriter

OpenCV

Все привет!
Имею два компа, на которых подняты два сетевых интерфейса: локалку и LTE-модем (со статичными адресами).
Нужно перегонять видео с одного компа на другой, но при этом должна быть возможность смены канала передачи: т.е., если была трансляция по локалке, и скомандовали перейти на модем, то видео должно перейти на модем.
Для передачи использую связку cv::VideoWriter+GStreamer.

void Video_sender::onConnected(const std::string & ip)
{
    std::string gst = "appsrc ! videoconvert ! video/x-raw,format=YV12,width=";
    gst+=std::to_string(WIDTH)+",height="+std::to_string(HEIGHT)+" ! jpegenc ! rtpjpegpay ! udpsink host=";
    _ip = ip;
    gst += _ip + " port="+std::to_string(PORT_NUM);
    changeBroadcastingPath(gst);
}

void Video_sender::changeBroadcastingPath(const std::string &gstr_string)
{
    std::lock_guard<std::mutex> lock(mut_write_to_rmo);
    _gst = gstr_string;
    std::cout << "GSTREAMER STRING: " << _gst << std::endl;
    if(write_to_RMO!=nullptr)
    {
        write_to_RMO->release();
        bool res=write_to_RMO->open(_gst,  cv::CAP_GSTREAMER, 0, FPS, cv::Size(WIDTH,HEIGHT), true);
        std::cout << "write_to_RMO reinitialized: " << std::boolalpha << res << std::endl;
    }
    else
    {
        write_to_RMO = std::make_unique<cv::VideoWriter>(_gst, cv::CAP_GSTREAMER, 0, FPS, cv::Size(WIDTH,HEIGHT), true);
    }
}




Само считывание кадра из камеры и передача на второй комп происходит в отдельном потоке.

int Video_sender::ThreadMain()
{
/*Считывание кадра в cv::Mat из videoCapture*/

if(!inMat.empty())            {
                mut_write_to_rmo.lock();
                if(write_to_RMO != nullptr) /// если нет коннекта с РМО даже пытаться не будем что то передавать
                {
                    if(write_to_RMO->isOpened())
                    {
                        if(inMat.cols!=WIDTH && inMat.rows!=HEIGHT)//if(vec_frame[(xxx%(vec_p_cap.size()*100))/100.].cols != WIDTH && vec_frame[(xxx%(vec_p_cap.size()*100))/100.].rows != HEIGHT )
                        {
                            cv::Mat out;
                            //cv::resize(vec_frame[(xxx%(vec_p_cap.size()*100))/100.],out,cv::Size(WIDTH,HEIGHT)); /// изменим размер картинки на 720х1280, если он не соответствует
                            cv::resize(inMat, out, cv::Size(WIDTH,HEIGHT)); /// изменим размер картинки на 720х1280, если он не соответствует
                            //cv::imshow(" != ",out); cv::waitKey(1); /// debug
                            //std::cout << "sending frame to rmo after resizing..." << std::endl;
                            write_to_RMO->write(out);                                               /// отправка на РМО
                        }
                        else
                        {
                            //cv::imshow("640x480",inMat); cv::waitKey(1); /// debug

                            std::cout << "sending frame to rmo... " << _gst << std::endl;
                            write_to_RMO->write(inMat);      /// отпрака на  РМО
                        }
                    }
                    else
                    {
                        GetLog().log("write_to_rmo not opened");
                    }
                }
                else
                {
                    GetLog().log("write_to_rmo == nullptr");
                }
                mut_write_to_rmo.unlock();
}

По отдельности все работает. Но при попытке переключить канал, видео перестает передаваться. Хотя кадр отсылается. Текст в коде ниже выводится

std::cout << "sending frame to rmo... " << _gst << std::endl;

Можно было бы при переключении канала связи просто грохнуть поток и заново его создать, но чтение кадров из камеры не должно прерываться.

На приемном компе создается cv::VideoCapture, в который передается строка Gstreamer:

const std::string vrstr("udpsrc port=5000 ! application/x-rtp, media=video, clock-rate=90000, encoding-name=JPEG, payload=26 ! rtpjpegdepay ! jpegdec ! videoconvert ! video/x-raw, format=BGR ! appsink sync=0");

и в потоке кадры считываются из него.

В какую сторону копать? С opencv дело практически не имел.
В методе changeBroadcastingPath пробовал грохать write_to_RMO и создавать заново, но это тоже не помогло.

Рекомендуємо хостинг TIMEWEB
Рекомендуємо хостинг TIMEWEB
Стабільний хостинг, на якому розміщується соціальна мережа EVILEG. Для проектів на Django радимо VDS хостинг.

Вам це подобається? Поділіться в соціальних мережах!

5
Дмитрий
  • 24 грудня 2018 р. 08:44
  • (відредаговано)

на вход videoWriter на отправляющем компе подаются строки:

appsrc ! videoconvert ! video/x-raw,format=YV12,width=640,height=480 ! jpegenc ! rtpjpegpay ! udpsink host=YYY.YYY.YYY.YYY port=5000
При смене канала:

appsrc ! videoconvert ! video/x-raw,format=YV12,width=640,height=480 ! jpegenc ! rtpjpegpay ! udpsink host=XXX.XXX.XXX.XXX port=5000

т.е., строки отличаются только адресами, на который нужно слать видео

    qdron
    • 24 грудня 2018 р. 09:06

    Может вам стоит посмотреть в сторону QMediaPlayer с помощью него и других вспомогательных классов, вы сможете сделать трансляцию без GStreamer чисто на Qt

      Дмитрий
      • 24 грудня 2018 р. 09:09

      Боюсь, что он не поможет, т.к. нужно обрабатывать кадры с помощью opencv, да и на отправляющем компе проект без Qt.

        Evgenii Legotckoi
        • 24 грудня 2018 р. 09:09

        Если не ошибаюсь, то Qt тоже использует gstreamer с той лишь разницей, что напрямую к нему не придётся обращаться, поскольку он скрыт за фасадом Qt

          Дмитрий
          • 25 грудня 2018 р. 03:58
          • Відповідь була позначена як рішення.

          Проблема решилась. Сам ступил. При переключении канала отсылал видео не на тот адрес.

            Коментарі

            Only authorized users can post comments.
            Please, Log in or Sign up
            sf

            C++ - Тест 004. Указатели, Массивы и Циклы

            • Результат:90бали,
            • Рейтинг балів8
            МВ

            Qt - Тест 001. Сигналы и слоты

            • Результат:68бали,
            • Рейтинг балів-1
            ЛС

            C++ - Тест 001. Первая программа и типы данных

            • Результат:53бали,
            • Рейтинг балів-4
            Останні коментарі
            A
            ALO1ZE19 жовтня 2024 р. 05:19
            Читалка файлів fb3 на Qt Creator Подскажите как это запустить? Я не шарю в программировании и кодинге. Скачал и установаил Qt, но куча ошибок выдается и не запустить. А очень надо fb3 переконвертировать в html
            ИМ
            Игорь Максимов05 жовтня 2024 р. 04:51
            Django - Урок 064. Як написати розширення для Python Markdown Приветствую Евгений! У меня вопрос. Можно ли вставлять свои классы в разметку редактора markdown? Допустим имея стандартную разметку: <ul> <li></li> <li></l…
            d
            dblas505 липня 2024 р. 08:02
            QML - Урок 016. База даних SQLite та робота з нею в QML Qt Здравствуйте, возникает такая проблема (я новичок): ApplicationWindow неизвестный элемент. (М300) для TextField и Button аналогично. Могу предположить, что из-за более новой верси…
            k
            kmssr08 лютого 2024 р. 15:43
            Qt Linux - Урок 001. Автозапуск програми Qt під Linux как сделать автозапуск для флэтпака, который не даёт создавать файлы в ~/.config - вот это вопрос ))
            АК
            Анатолий Кононенко04 лютого 2024 р. 22:50
            Qt WinAPI - Урок 007. Робота з ICMP Ping в Qt Без строки #include <QRegularExpressionValidator> в заголовочном файле не работает валидатор.
            Тепер обговоріть на форумі
            J
            JacobFib17 жовтня 2024 р. 00:27
            добавить qlineseries в функции Пользователь может получить любые разъяснения по интересующим вопросам, касающимся обработки его персональных данных, обратившись к Оператору с помощью электронной почты https://topdecorpro.ru…
            ИМ
            Игорь Максимов03 жовтня 2024 р. 01:05
            Реализация навигации по разделам Спасибо Евгений!
            JW
            Jhon Wick01 жовтня 2024 р. 12:52
            Indian Food Restaurant In Columbus OH| Layla’s Kitchen Indian Restaurant If you're looking for a truly authentic https://www.laylaskitchenrestaurantohio.com/ , Layla’s Kitchen Indian Restaurant is your go-to destination. Located at 6152 Cleveland Ave, Colu…
            КГ
            Кирилл Гусарев27 вересня 2024 р. 06:09
            Не запускается программа на Qt: точка входа в процедуру не найдена в библиотеке DLL Написал программу на C++ Qt в Qt Creator, сбилдил Release с помощью MinGW 64-bit, бинарнику напихал dll-ки с помощью windeployqt.exe. При попытке запуска моей сбилженной программы выдаёт три оши…
            F
            Fynjy22 липня 2024 р. 01:15
            при создании qml проекта Kits есть но недоступны для выбора Поставил Qt Creator 11.0.2. Qt 6.4.3 При создании проекта Qml не могу выбрать Kits, они все недоступны, хотя настроены и при создании обычного Qt Widget приложения их можно выбрать. В чем может …

            Слідкуйте за нами в соціальних мережах