D
Jan. 18, 2021, 4:53 p.m.

Не получается prefetch_related на M2M полях

Приветствую! работаю над волонтерским проектом, изучаю django. Очень понравилась тема про оптимизацию запросов к БД и вообще весь сайт!
Но у меня в model- ManyToManyField через through модель, где 2 ForeignKey- все как обычно. На stackoverflow есть вопросы об этом, из которых вроде следует, что надо делать prefetch_related(Prefetch("поле м2м"), ThroughModel..select_related("поле foreign key"), но QuerySet.query показывает, что никакого join не происходит:( пробовал и поля указывать через model__field- тоже самое...

А еще пагинация... Изначальный запрос даже если и за-join-ится, то вернет ~50 тыщ рядов. Я хотел взять QuerySet после панинации для 1 page, на нем сделать select/prefetch related- может так меньше рядов потянет? я даже от отчаяния уже начал конвертить queryset в свои классы, в которые сам сделаю запросы в БД, как нужно, но это совсем не стандартно, и в Paginator такой класс не подсунуть.

Вот такая печаль... Можно код показать?

2
The question is asked by the articleDjango - Tutoral 049. Optimizing Django Performance with a Real Project

Do you like it? Share on social networks!

3
Илья Чичак
  • Jan. 18, 2021, 6:01 p.m.
  • The answer was marked as a solution.

join случается, если делать select_related

префетч делается в два запроса - сначала изначальный запрос, а потом связанные с ним объекты. мерж этих запросов происходит в рантайме

можно почитать тут: https://medium.com/better-programming/django-select-related-and-prefetch-related-f23043fd635d

    D
    • Jan. 23, 2021, 6:17 p.m.

    Благодарю Вас, Илья. Долго разбирался, стало понятно!
    Там самое сложное, что дальнейшие query не может быть filter или get- тогда prefetch не срабатывает. Сейчас пока я все сделал на select_related и своем cache.

      Илья Чичак
      • Jan. 23, 2021, 11:25 p.m.

      это да. и правильнее всего было бы сделать все фильтрации и только в самом конце вызвать prefetch_related

      например, если все это уходит в шаблон, я бы поступил следующим образом:

      1. def some_view(request, *args, **kwargs):
      2. qs = SomeModel.objects.filter(...)
      3. if ...:
      4. qs = qs.filter(...)
      5. else:
      6. qs = qs.filter(...)
      7. qs = qs.exclude(...)
      8. return render(request, 'template.html', {'objects': qs.prefetch_related()}

        Comments

        Only authorized users can post comments.
        Please, Log in or Sign up
        • Last comments
        • AK
          April 1, 2025, 11:41 a.m.
          Добрый день. В данный момент работаю над проектом, где необходимо выводить звук из программы в определенное аудиоустройство (колонки, наушники, виртуальный кабель и т.д). Пишу на Qt5.12.12 поско…
        • Evgenii Legotckoi
          March 9, 2025, 9:02 p.m.
          К сожалению, я этого подсказать не могу, поскольку у меня нет необходимости в обходе блокировок и т.д. Поэтому я и не задавался решением этой проблемы. Ну выглядит так, что вам действитель…
        • VP
          March 9, 2025, 4:14 p.m.
          Здравствуйте! Я устанавливал Qt6 из исходников а также Qt Creator по отдельности. Все компоненты, связанные с разработкой для Android, установлены. Кроме одного... Когда пытаюсь скомпилиров…
        • ИМ
          Nov. 22, 2024, 9:51 p.m.
          Добрый вечер Евгений! Я сделал себе авторизацию аналогичную вашей, все работает, кроме возврата к предидущей странице. Редеректит всегда на главную, хотя в логах сервера вижу запросы на правильн…
        • Evgenii Legotckoi
          Oct. 31, 2024, 11:37 p.m.
          Добрый день. Да, можно. Либо через такие же плагины, либо с постобработкой через python библиотеку Beautiful Soup