KL
Dec. 20, 2016, 9:37 p.m.

Запрос позиций сайта в выдаче Google при помощи Qt

Qt, Google

Добрый день. Как при помощи Qt узнать позицию сайта в Google по запросу?
0

Do you like it? Share on social networks!

7
Evgenii Legotckoi
  • Dec. 21, 2016, 1:41 p.m.

День добрый.
Вопрос так вопрос… Смотря что Вы хотите получить..
Если хотите просматривать данные по своему сайту, то у Google Search Console и Google Analytics есть API.
Изучаете API и реализовываете запросы с помощью QNetworkAccessManager.

Если хотите искать инфу в поисковике по любому сайту, то можете посмотреть информацию по XML Custom Search API.

А как такового открытого API для проверок позиций сайта Google вроде бы не предоставляет… Иначе бы у всех этих сервисов проверки позиций сайта результаты были бы одинаковые.

То есть необходимо реализовывать систему запросов и обработки поисковой выдачи. Это немаленькая задача, но вполне реализуемая средствами Qt. Только не забывайте, что Google не приемлет автоматизированных средств запросов к поиску и довольно быстро попросит ввести каптчу.

    KL
    • Dec. 21, 2016, 11:26 p.m.
    При помощи парсинга выдачи Google возможно реализовать? Я могу спарсить html код страницы сайтов, которые не защищены.
    В Google стоит защита. Может, у вас есть подобная практика?
      Evgenii Legotckoi
      • Dec. 21, 2016, 11:35 p.m.
      Нет. Такой практики у меня нет.
      Но думаю, что при парсинге XML выдачи для кастомизированного поиска может что-нибудь получиться.
      Посмотрите описание XML API Reference
        KL
        • Dec. 22, 2016, 2:56 p.m.
        • The answer was marked as a solution.

        Евгений, большое спасибо. Ваша статья очень мне помогла, как и урок, который вы написали для работы с QNetworkAccessManager. Я не совсем понял зачем создавать отдельный класс downloade, почему нельзя создать все в widget. Но запрос составил и файл скачал. Запрос выглядит примерно так:
        QUrl url(“http://www.google.ru/search?hl=ru&q=платные+комментарии&oq=платные+комментарии&lr=lang_ru&cr=countryRU&xml_no_dtd;”); // URL, к которому будем получать данные

        Подскажите, при считывании из файла идет наложение текста выглядит это примерно так:

          Evgenii Legotckoi
          • Dec. 23, 2016, 11:43 a.m.

          Пожалуйста.
          Есть интерфейс, а есть логика работы с сетью… На мой взгляд логику работы с сетью лучше выносить в отдельный класс. Хотя вы правы, можно было сделать всё в widget`е.

          Видимо, в наложении текста должна была быть картинка. Прикрепите её во вложения.

            KL
            • Dec. 25, 2016, 1:58 a.m.

            Евгений, подскажите как загрузить массив фотографий при помощи QNetworkAccessManager.
            Вот моя реализация.
            GoogleQuery::GoogleQuery(QWidget *parent) :
            QWidget(parent),
            ui(new Ui::GoogleQuery)
            {
            ui->setupUi(this);
            connect(&pageYandexTic,SIGNAL(finished(QNetworkReply*)), SLOT(on_load(QNetworkReply*)));
            QStringList list;
            QStringList.append(UrlSite1);
            QStringList.append(UrlSite2);
            QStringList.append(UrlSite3);
            }
            void GoogleQuery::on_pushButton_clicked()
            {
            for(int i=0; i<list.size(); i++)
            {
            QNetworkRequest request;
            request.setUrl(list);
            pageYandexTic.get(request); // QNetworkAccessManager отправляем запрос с урлом картинки
            }
            }
            void GoogleQuery::on_load(QNetworkReply* reply)
            {
            QPixmap pixmap;
            pixmap.loadFromData(reply->readAll());
            ui->label->setPixmap(pixmap);
            }

            Проблема в том, что изначально выполняется цикл for, а затем on_load. Картинки не успевают загрузиться.

              Evgenii Legotckoi
              • Dec. 26, 2016, 2:21 p.m.

              Вам нужно запускать скачивание следующей картинки только тогда, когда скачалась предыдущая, а не сразу запихивать все запросы в кучку.
              Правильная реализация будет такая.

              #ifndef MAINWINDOW_H
              #define MAINWINDOW_H
               
              #include <QMainWindow>
              #include <QNetworkAccessManager>
              #include <QNetworkReply>
              #include <QNetworkRequest>
              #include <QLabel>
               
              namespace Ui {
              class MainWindow;
              }
               
              class MainWindow : public QMainWindow
              {
                  Q_OBJECT
               
              public:
                  explicit MainWindow(QWidget *parent = 0);
                  ~MainWindow();
               
              private slots:
                  void on_pushButton_clicked();
                  void onLoad(QNetworkReply* reply);
               
              private:
                  Ui::MainWindow *ui;
                  QStringList urlsList;
                  QNetworkAccessManager downloader;
              };
               
              #endif // MAINWINDOW_H
              #include "mainwindow.h"
              #include "ui_mainwindow.h"
               
              MainWindow::MainWindow(QWidget *parent) :
                  QMainWindow(parent),
                  ui(new Ui::MainWindow)
              {
                  ui->setupUi(this);
                  connect(&downloader, &QNetworkAccessManager::finished, this, &MainWindow::onLoad);
               
                  urlsList.append("https://www.alfaromeousa.com/content/alfausa/en/cars/alfa-romeo-giulia-quadrifoglio/_jcr_content/image.img.png/1461766810123.png");
                  urlsList.append("https://www.alfaromeousa.com/content/alfausa/en/cars/alfa-romeo-4c-spider/_jcr_content/image.img.png/1461766874697.png");
                  urlsList.append("http://buyersguide.caranddriver.com/media/assets/submodel/7063.jpg");
              }
               
              MainWindow::~MainWindow()
              {
                  delete ui;
              }
               
              void MainWindow::on_pushButton_clicked()
              {
                  if (!urlsList.isEmpty())
                  {
                      QNetworkRequest request;
                      request.setUrl(urlsList.first());
                      urlsList.removeFirst();
                      downloader.get(request);
                  }
              }
               
              void MainWindow::onLoad(QNetworkReply *reply)
              {
                  QPixmap image;
                  image.loadFromData(reply->readAll());
                  QLabel* label = new QLabel(this);
                  label->setPixmap(image);
                  ui->verticalLayout->addWidget(label);
                  on_pushButton_clicked();
              }

               

                Comments

                Only authorized users can post comments.
                Please, Log in or Sign up
                • Last comments
                • IscanderChe
                  April 12, 2025, 5:12 p.m.
                  Добрый день. Спасибо Вам за этот проект и отдельно за ответы на форуме, которые мне очень помогли в некоммерческих пет-проектах. Профессиональным программистом я так и не стал, но узнал мно…
                • AK
                  April 1, 2025, 11:41 a.m.
                  Добрый день. В данный момент работаю над проектом, где необходимо выводить звук из программы в определенное аудиоустройство (колонки, наушники, виртуальный кабель и т.д). Пишу на Qt5.12.12 поско…
                • Evgenii Legotckoi
                  March 9, 2025, 9:02 p.m.
                  К сожалению, я этого подсказать не могу, поскольку у меня нет необходимости в обходе блокировок и т.д. Поэтому я и не задавался решением этой проблемы. Ну выглядит так, что вам действитель…
                • VP
                  March 9, 2025, 4:14 p.m.
                  Здравствуйте! Я устанавливал Qt6 из исходников а также Qt Creator по отдельности. Все компоненты, связанные с разработкой для Android, установлены. Кроме одного... Когда пытаюсь скомпилиров…
                • ИМ
                  Nov. 22, 2024, 9:51 p.m.
                  Добрый вечер Евгений! Я сделал себе авторизацию аналогичную вашей, все работает, кроме возврата к предидущей странице. Редеректит всегда на главную, хотя в логах сервера вижу запросы на правильн…