D
18 января 2021 г. 16:53

Не получается prefetch_related на M2M полях

Приветствую! работаю над волонтерским проектом, изучаю django. Очень понравилась тема про оптимизацию запросов к БД и вообще весь сайт!
Но у меня в model- ManyToManyField через through модель, где 2 ForeignKey- все как обычно. На stackoverflow есть вопросы об этом, из которых вроде следует, что надо делать prefetch_related(Prefetch("поле м2м"), ThroughModel..select_related("поле foreign key"), но QuerySet.query показывает, что никакого join не происходит:( пробовал и поля указывать через model__field- тоже самое...

А еще пагинация... Изначальный запрос даже если и за-join-ится, то вернет ~50 тыщ рядов. Я хотел взять QuerySet после панинации для 1 page, на нем сделать select/prefetch related- может так меньше рядов потянет? я даже от отчаяния уже начал конвертить queryset в свои классы, в которые сам сделаю запросы в БД, как нужно, но это совсем не стандартно, и в Paginator такой класс не подсунуть.

Вот такая печаль... Можно код показать?

Вам это нравится? Поделитесь в социальных сетях!

3
Илья Чичак
  • 18 января 2021 г. 18:01
  • Ответ был помечен как решение.

join случается, если делать select_related

префетч делается в два запроса - сначала изначальный запрос, а потом связанные с ним объекты. мерж этих запросов происходит в рантайме

можно почитать тут: https://medium.com/better-programming/django-select-related-and-prefetch-related-f23043fd635d

    D
    • 23 января 2021 г. 18:17

    Благодарю Вас, Илья. Долго разбирался, стало понятно!
    Там самое сложное, что дальнейшие query не может быть filter или get- тогда prefetch не срабатывает. Сейчас пока я все сделал на select_related и своем cache.

      Илья Чичак
      • 23 января 2021 г. 23:25

      это да. и правильнее всего было бы сделать все фильтрации и только в самом конце вызвать prefetch_related

      например, если все это уходит в шаблон, я бы поступил следующим образом:

      1. def some_view(request, *args, **kwargs):
      2. qs = SomeModel.objects.filter(...)
      3. if ...:
      4. qs = qs.filter(...)
      5. else:
      6. qs = qs.filter(...)
      7. qs = qs.exclude(...)
      8. return render(request, 'template.html', {'objects': qs.prefetch_related()}

        Комментарии

        Только авторизованные пользователи могут публиковать комментарии.
        Пожалуйста, авторизуйтесь или зарегистрируйтесь
        • Последние комментарии
        • IscanderChe
          12 апреля 2025 г. 17:12
          Добрый день. Спасибо Вам за этот проект и отдельно за ответы на форуме, которые мне очень помогли в некоммерческих пет-проектах. Профессиональным программистом я так и не стал, но узнал мно…
        • AK
          1 апреля 2025 г. 11:41
          Добрый день. В данный момент работаю над проектом, где необходимо выводить звук из программы в определенное аудиоустройство (колонки, наушники, виртуальный кабель и т.д). Пишу на Qt5.12.12 поско…
        • Evgenii Legotckoi
          9 марта 2025 г. 21:02
          К сожалению, я этого подсказать не могу, поскольку у меня нет необходимости в обходе блокировок и т.д. Поэтому я и не задавался решением этой проблемы. Ну выглядит так, что вам действитель…
        • VP
          9 марта 2025 г. 16:14
          Здравствуйте! Я устанавливал Qt6 из исходников а также Qt Creator по отдельности. Все компоненты, связанные с разработкой для Android, установлены. Кроме одного... Когда пытаюсь скомпилиров…
        • ИМ
          22 ноября 2024 г. 21:51
          Добрый вечер Евгений! Я сделал себе авторизацию аналогичную вашей, все работает, кроме возврата к предидущей странице. Редеректит всегда на главную, хотя в логах сервера вижу запросы на правильн…