Reduce memory usage of targetlist SRFs.
authorAndres Freund <andres@anarazel.de>
Sun, 8 Oct 2017 22:08:25 +0000 (15:08 -0700)
committerAndres Freund <andres@anarazel.de>
Sun, 8 Oct 2017 22:08:25 +0000 (15:08 -0700)
commit84ad4b036d975ad1be0f52251bac3a06463c9811
tree452e84ebb7d11ba87b6ad257fec34d1782aa0a34
parent643c27e36ff38f40d256c2a05b51a14ae2b26077
Reduce memory usage of targetlist SRFs.

Previously nodeProjectSet only released memory once per input tuple,
rather than once per returned tuple. If the computation of an
individual returned tuple requires a lot of memory, that can lead to
problems.

Instead change things so that the expression context can be reset once
per output tuple, which requires a new memory context to store SRF
arguments in.

This is a longstanding issue, but was hard to fix before 9.6, due to
the way tSRFs where evaluated. But it's fairly easy to fix now. We
could backpatch this into 10, but given there've been fewc omplaints
that doesn't seem worth the risk so far.

Reported-By: Lucas Fairchild
Author: Andres Freund, per discussion with Tom Lane
Discussion: https://postgr.es/m/4514.1507318623@sss.pgh.pa.us
src/backend/executor/execSRF.c
src/backend/executor/nodeProjectSet.c
src/include/executor/executor.h
src/include/nodes/execnodes.h