Дмитрий
Дмитрий24 декабря 2018 г. 19:25

Переинициализация cv::VideoWriter

OpenCV

Все привет!
Имею два компа, на которых подняты два сетевых интерфейса: локалку и LTE-модем (со статичными адресами).
Нужно перегонять видео с одного компа на другой, но при этом должна быть возможность смены канала передачи: т.е., если была трансляция по локалке, и скомандовали перейти на модем, то видео должно перейти на модем.
Для передачи использую связку cv::VideoWriter+GStreamer.

void Video_sender::onConnected(const std::string & ip)
{
    std::string gst = "appsrc ! videoconvert ! video/x-raw,format=YV12,width=";
    gst+=std::to_string(WIDTH)+",height="+std::to_string(HEIGHT)+" ! jpegenc ! rtpjpegpay ! udpsink host=";
    _ip = ip;
    gst += _ip + " port="+std::to_string(PORT_NUM);
    changeBroadcastingPath(gst);
}

void Video_sender::changeBroadcastingPath(const std::string &gstr_string)
{
    std::lock_guard<std::mutex> lock(mut_write_to_rmo);
    _gst = gstr_string;
    std::cout << "GSTREAMER STRING: " << _gst << std::endl;
    if(write_to_RMO!=nullptr)
    {
        write_to_RMO->release();
        bool res=write_to_RMO->open(_gst,  cv::CAP_GSTREAMER, 0, FPS, cv::Size(WIDTH,HEIGHT), true);
        std::cout << "write_to_RMO reinitialized: " << std::boolalpha << res << std::endl;
    }
    else
    {
        write_to_RMO = std::make_unique<cv::VideoWriter>(_gst, cv::CAP_GSTREAMER, 0, FPS, cv::Size(WIDTH,HEIGHT), true);
    }
}




Само считывание кадра из камеры и передача на второй комп происходит в отдельном потоке.

int Video_sender::ThreadMain()
{
/*Считывание кадра в cv::Mat из videoCapture*/

if(!inMat.empty())            {
                mut_write_to_rmo.lock();
                if(write_to_RMO != nullptr) /// если нет коннекта с РМО даже пытаться не будем что то передавать
                {
                    if(write_to_RMO->isOpened())
                    {
                        if(inMat.cols!=WIDTH && inMat.rows!=HEIGHT)//if(vec_frame[(xxx%(vec_p_cap.size()*100))/100.].cols != WIDTH && vec_frame[(xxx%(vec_p_cap.size()*100))/100.].rows != HEIGHT )
                        {
                            cv::Mat out;
                            //cv::resize(vec_frame[(xxx%(vec_p_cap.size()*100))/100.],out,cv::Size(WIDTH,HEIGHT)); /// изменим размер картинки на 720х1280, если он не соответствует
                            cv::resize(inMat, out, cv::Size(WIDTH,HEIGHT)); /// изменим размер картинки на 720х1280, если он не соответствует
                            //cv::imshow(" != ",out); cv::waitKey(1); /// debug
                            //std::cout << "sending frame to rmo after resizing..." << std::endl;
                            write_to_RMO->write(out);                                               /// отправка на РМО
                        }
                        else
                        {
                            //cv::imshow("640x480",inMat); cv::waitKey(1); /// debug

                            std::cout << "sending frame to rmo... " << _gst << std::endl;
                            write_to_RMO->write(inMat);      /// отпрака на  РМО
                        }
                    }
                    else
                    {
                        GetLog().log("write_to_rmo not opened");
                    }
                }
                else
                {
                    GetLog().log("write_to_rmo == nullptr");
                }
                mut_write_to_rmo.unlock();
}

По отдельности все работает. Но при попытке переключить канал, видео перестает передаваться. Хотя кадр отсылается. Текст в коде ниже выводится

std::cout << "sending frame to rmo... " << _gst << std::endl;

Можно было бы при переключении канала связи просто грохнуть поток и заново его создать, но чтение кадров из камеры не должно прерываться.

На приемном компе создается cv::VideoCapture, в который передается строка Gstreamer:

const std::string vrstr("udpsrc port=5000 ! application/x-rtp, media=video, clock-rate=90000, encoding-name=JPEG, payload=26 ! rtpjpegdepay ! jpegdec ! videoconvert ! video/x-raw, format=BGR ! appsink sync=0");

и в потоке кадры считываются из него.

В какую сторону копать? С opencv дело практически не имел.
В методе changeBroadcastingPath пробовал грохать write_to_RMO и создавать заново, но это тоже не помогло.

Рекомендуем хостинг TIMEWEB
Рекомендуем хостинг TIMEWEB
Стабильный хостинг, на котором располагается социальная сеть EVILEG. Для проектов на Django рекомендуем VDS хостинг.

Вам это нравится? Поделитесь в социальных сетях!

5
Дмитрий
  • 24 декабря 2018 г. 19:44
  • (ред.)

на вход videoWriter на отправляющем компе подаются строки:

appsrc ! videoconvert ! video/x-raw,format=YV12,width=640,height=480 ! jpegenc ! rtpjpegpay ! udpsink host=YYY.YYY.YYY.YYY port=5000
При смене канала:

appsrc ! videoconvert ! video/x-raw,format=YV12,width=640,height=480 ! jpegenc ! rtpjpegpay ! udpsink host=XXX.XXX.XXX.XXX port=5000

т.е., строки отличаются только адресами, на который нужно слать видео

    qdron
    • 24 декабря 2018 г. 20:06

    Может вам стоит посмотреть в сторону QMediaPlayer с помощью него и других вспомогательных классов, вы сможете сделать трансляцию без GStreamer чисто на Qt

      Дмитрий
      • 24 декабря 2018 г. 20:09

      Боюсь, что он не поможет, т.к. нужно обрабатывать кадры с помощью opencv, да и на отправляющем компе проект без Qt.

        Evgenii Legotckoi
        • 24 декабря 2018 г. 20:09

        Если не ошибаюсь, то Qt тоже использует gstreamer с той лишь разницей, что напрямую к нему не придётся обращаться, поскольку он скрыт за фасадом Qt

          Дмитрий
          • 25 декабря 2018 г. 14:58
          • Ответ был помечен как решение.

          Проблема решилась. Сам ступил. При переключении канала отсылал видео не на тот адрес.

            Комментарии

            Только авторизованные пользователи могут публиковать комментарии.
            Пожалуйста, авторизуйтесь или зарегистрируйтесь
            Ua

            Qt - Тест 001. Сигналы и слоты

            • Результат:84баллов,
            • Очки рейтинга4
            Ua

            Qt - Тест 001. Сигналы и слоты

            • Результат:42баллов,
            • Очки рейтинга-8
            ОК

            Qt - Тест 001. Сигналы и слоты

            • Результат:47баллов,
            • Очки рейтинга-6
            Последние комментарии
            ИМ
            Игорь Максимов22 ноября 2024 г. 21:51
            Django - Урок 017. Кастомизированная страница авторизации на Django Добрый вечер Евгений! Я сделал себе авторизацию аналогичную вашей, все работает, кроме возврата к предидущей странице. Редеректит всегда на главную, хотя в логах сервера вижу запросы на правильн…
            Evgenii Legotckoi
            Evgenii Legotckoi31 октября 2024 г. 23:37
            Django - Урок 064. Как написать расширение для Python Markdown Добрый день. Да, можно. Либо через такие же плагины, либо с постобработкой через python библиотеку Beautiful Soup
            A
            ALO1ZE19 октября 2024 г. 17:19
            Читалка fb3-файлов на Qt Creator Подскажите как это запустить? Я не шарю в программировании и кодинге. Скачал и установаил Qt, но куча ошибок выдается и не запустить. А очень надо fb3 переконвертировать в html
            ИМ
            Игорь Максимов5 октября 2024 г. 16:51
            Django - Урок 064. Как написать расширение для Python Markdown Приветствую Евгений! У меня вопрос. Можно ли вставлять свои классы в разметку редактора markdown? Допустим имея стандартную разметку: <ul> <li></li> <li></l…
            d
            dblas55 июля 2024 г. 20:02
            QML - Урок 016. База данных SQLite и работа с ней в QML Qt Здравствуйте, возникает такая проблема (я новичок): ApplicationWindow неизвестный элемент. (М300) для TextField и Button аналогично. Могу предположить, что из-за более новой верси…
            Сейчас обсуждают на форуме
            f
            firstlunoxod15 февраля 2025 г. 13:46
            Рисование на QGraphicsScene при зажатой кнопке мыши Подскажите, пожалуйста! Как данный класс можно дополнить, чтобы созданные объекты можно было перемещать мышкой по сцене?
            Дмитрий
            Дмитрий3 февраля 2025 г. 16:24
            Создание deb-пакета. Как создать ярлык на рабочем столе после установки собственного deb-пакета? Всем привет. Сделал свой deb-пакет с программой. Всё устанавливается и работает. Ставлю по пути /usr/bin/my_application. Как для пользователя при установке пакета сразу создать ярлык на раб…
            NW
            Nayo Wai30 января 2025 г. 19:22
            не запускается компьютер!!! Не запускается компьютер (точнее работает блок , но сам монитор вообще жесть)В общем я ничего с интернета не скачивала в последнее время. На компе никаких левых пр…
            n
            nkly3 января 2025 г. 12:52
            Нужно запретить перемещение только некоторых итемов, остальные перемещать можно. Вопрос решен. Узнать QModelIndex элемента на который мы перетаскиваем другой элемент, можно с помощью функции indexAt(event->position().toPoint()) представления QTreeViev вызываемой в переопр…
            M
            Marsel17 августа 2023 г. 0:26
            OAuth2.0 через VK, получение email Спасибо большое за помощь и простите за то что отнял время своей невнимательностью.

            Следите за нами в социальных сетях