Дмитрий
Дмитрий24. Dezember 2018 08:25

Переинициализация cv::VideoWriter

OpenCV

Все привет!
Имею два компа, на которых подняты два сетевых интерфейса: локалку и LTE-модем (со статичными адресами).
Нужно перегонять видео с одного компа на другой, но при этом должна быть возможность смены канала передачи: т.е., если была трансляция по локалке, и скомандовали перейти на модем, то видео должно перейти на модем.
Для передачи использую связку cv::VideoWriter+GStreamer.

void Video_sender::onConnected(const std::string & ip)
{
    std::string gst = "appsrc ! videoconvert ! video/x-raw,format=YV12,width=";
    gst+=std::to_string(WIDTH)+",height="+std::to_string(HEIGHT)+" ! jpegenc ! rtpjpegpay ! udpsink host=";
    _ip = ip;
    gst += _ip + " port="+std::to_string(PORT_NUM);
    changeBroadcastingPath(gst);
}

void Video_sender::changeBroadcastingPath(const std::string &gstr_string)
{
    std::lock_guard<std::mutex> lock(mut_write_to_rmo);
    _gst = gstr_string;
    std::cout << "GSTREAMER STRING: " << _gst << std::endl;
    if(write_to_RMO!=nullptr)
    {
        write_to_RMO->release();
        bool res=write_to_RMO->open(_gst,  cv::CAP_GSTREAMER, 0, FPS, cv::Size(WIDTH,HEIGHT), true);
        std::cout << "write_to_RMO reinitialized: " << std::boolalpha << res << std::endl;
    }
    else
    {
        write_to_RMO = std::make_unique<cv::VideoWriter>(_gst, cv::CAP_GSTREAMER, 0, FPS, cv::Size(WIDTH,HEIGHT), true);
    }
}




Само считывание кадра из камеры и передача на второй комп происходит в отдельном потоке.

int Video_sender::ThreadMain()
{
/*Считывание кадра в cv::Mat из videoCapture*/

if(!inMat.empty())            {
                mut_write_to_rmo.lock();
                if(write_to_RMO != nullptr) /// если нет коннекта с РМО даже пытаться не будем что то передавать
                {
                    if(write_to_RMO->isOpened())
                    {
                        if(inMat.cols!=WIDTH && inMat.rows!=HEIGHT)//if(vec_frame[(xxx%(vec_p_cap.size()*100))/100.].cols != WIDTH && vec_frame[(xxx%(vec_p_cap.size()*100))/100.].rows != HEIGHT )
                        {
                            cv::Mat out;
                            //cv::resize(vec_frame[(xxx%(vec_p_cap.size()*100))/100.],out,cv::Size(WIDTH,HEIGHT)); /// изменим размер картинки на 720х1280, если он не соответствует
                            cv::resize(inMat, out, cv::Size(WIDTH,HEIGHT)); /// изменим размер картинки на 720х1280, если он не соответствует
                            //cv::imshow(" != ",out); cv::waitKey(1); /// debug
                            //std::cout << "sending frame to rmo after resizing..." << std::endl;
                            write_to_RMO->write(out);                                               /// отправка на РМО
                        }
                        else
                        {
                            //cv::imshow("640x480",inMat); cv::waitKey(1); /// debug

                            std::cout << "sending frame to rmo... " << _gst << std::endl;
                            write_to_RMO->write(inMat);      /// отпрака на  РМО
                        }
                    }
                    else
                    {
                        GetLog().log("write_to_rmo not opened");
                    }
                }
                else
                {
                    GetLog().log("write_to_rmo == nullptr");
                }
                mut_write_to_rmo.unlock();
}

По отдельности все работает. Но при попытке переключить канал, видео перестает передаваться. Хотя кадр отсылается. Текст в коде ниже выводится

std::cout << "sending frame to rmo... " << _gst << std::endl;

Можно было бы при переключении канала связи просто грохнуть поток и заново его создать, но чтение кадров из камеры не должно прерываться.

На приемном компе создается cv::VideoCapture, в который передается строка Gstreamer:

const std::string vrstr("udpsrc port=5000 ! application/x-rtp, media=video, clock-rate=90000, encoding-name=JPEG, payload=26 ! rtpjpegdepay ! jpegdec ! videoconvert ! video/x-raw, format=BGR ! appsink sync=0");

и в потоке кадры считываются из него.

В какую сторону копать? С opencv дело практически не имел.
В методе changeBroadcastingPath пробовал грохать write_to_RMO и создавать заново, но это тоже не помогло.

Рекомендуємо хостинг TIMEWEB
Рекомендуємо хостинг TIMEWEB
Stabiles Hosting des sozialen Netzwerks EVILEG. Wir empfehlen VDS-Hosting für Django-Projekte.

Magst du es? In sozialen Netzwerken teilen!

5
Дмитрий
  • 24. Dezember 2018 08:44
  • (bearbeitet)

на вход videoWriter на отправляющем компе подаются строки:

appsrc ! videoconvert ! video/x-raw,format=YV12,width=640,height=480 ! jpegenc ! rtpjpegpay ! udpsink host=YYY.YYY.YYY.YYY port=5000
При смене канала:

appsrc ! videoconvert ! video/x-raw,format=YV12,width=640,height=480 ! jpegenc ! rtpjpegpay ! udpsink host=XXX.XXX.XXX.XXX port=5000

т.е., строки отличаются только адресами, на который нужно слать видео

    qdron
    • 24. Dezember 2018 09:06

    Может вам стоит посмотреть в сторону QMediaPlayer с помощью него и других вспомогательных классов, вы сможете сделать трансляцию без GStreamer чисто на Qt

      Дмитрий
      • 24. Dezember 2018 09:09

      Боюсь, что он не поможет, т.к. нужно обрабатывать кадры с помощью opencv, да и на отправляющем компе проект без Qt.

        Evgenii Legotckoi
        • 24. Dezember 2018 09:09

        Если не ошибаюсь, то Qt тоже использует gstreamer с той лишь разницей, что напрямую к нему не придётся обращаться, поскольку он скрыт за фасадом Qt

          Дмитрий
          • 25. Dezember 2018 03:58
          • Die Antwort wurde als Lösung markiert.

          Проблема решилась. Сам ступил. При переключении канала отсылал видео не на тот адрес.

            Kommentare

            Nur autorisierte Benutzer können Kommentare posten.
            Bitte Anmelden oder Registrieren
            Letzte Kommentare
            ИМ
            Игорь Максимов5. Oktober 2024 07:51
            Django – Lektion 064. So schreiben Sie eine Python-Markdown-Erweiterung Приветствую Евгений! У меня вопрос. Можно ли вставлять свои классы в разметку редактора markdown? Допустим имея стандартную разметку: <ul> <li></li> <li></l…
            d
            dblas55. Juli 2024 11:02
            QML - Lektion 016. SQLite-Datenbank und das Arbeiten damit in QML Qt Здравствуйте, возникает такая проблема (я новичок): ApplicationWindow неизвестный элемент. (М300) для TextField и Button аналогично. Могу предположить, что из-за более новой верси…
            k
            kmssr8. Februar 2024 18:43
            Qt Linux - Lektion 001. Autorun Qt-Anwendung unter Linux как сделать автозапуск для флэтпака, который не даёт создавать файлы в ~/.config - вот это вопрос ))
            Qt WinAPI - Lektion 007. Arbeiten mit ICMP-Ping in Qt Без строки #include <QRegularExpressionValidator> в заголовочном файле не работает валидатор.
            EVA
            EVA25. Dezember 2023 10:30
            Boost - statisches Verknüpfen im CMake-Projekt unter Windows Ошибка LNK1104 часто возникает, когда компоновщик не может найти или открыть файл библиотеки. В вашем случае, это файл libboost_locale-vc142-mt-gd-x64-1_74.lib из библиотеки Boost для C+…
            Jetzt im Forum diskutieren
            J
            JacobFib17. Oktober 2024 03:27
            добавить qlineseries в функции Пользователь может получить любые разъяснения по интересующим вопросам, касающимся обработки его персональных данных, обратившись к Оператору с помощью электронной почты https://topdecorpro.ru…
            JW
            Jhon Wick1. Oktober 2024 15:52
            Indian Food Restaurant In Columbus OH| Layla’s Kitchen Indian Restaurant If you're looking for a truly authentic https://www.laylaskitchenrestaurantohio.com/ , Layla’s Kitchen Indian Restaurant is your go-to destination. Located at 6152 Cleveland Ave, Colu…
            КГ
            Кирилл Гусарев27. September 2024 09:09
            Не запускается программа на Qt: точка входа в процедуру не найдена в библиотеке DLL Написал программу на C++ Qt в Qt Creator, сбилдил Release с помощью MinGW 64-bit, бинарнику напихал dll-ки с помощью windeployqt.exe. При попытке запуска моей сбилженной программы выдаёт три оши…
            F
            Fynjy22. Juli 2024 04:15
            при создании qml проекта Kits есть но недоступны для выбора Поставил Qt Creator 11.0.2. Qt 6.4.3 При создании проекта Qml не могу выбрать Kits, они все недоступны, хотя настроены и при создании обычного Qt Widget приложения их можно выбрать. В чем может …

            Folgen Sie uns in sozialen Netzwerken