]> granicus.if.org Git - postgresql/commit
Introduce WaitEventSet API.
authorAndres Freund <andres@anarazel.de>
Mon, 21 Mar 2016 08:56:39 +0000 (09:56 +0100)
committerAndres Freund <andres@anarazel.de>
Mon, 21 Mar 2016 11:22:54 +0000 (12:22 +0100)
commit98a64d0bd713cb89e61bef6432befc4b7b5da59e
tree7564700d6127821645da15ef3d70a7d82532cde3
parent72e2d21c1249b674496f97cd6009c0bda62f6b4d
Introduce WaitEventSet API.

Commit ac1d794 ("Make idle backends exit if the postmaster dies.")
introduced a regression on, at least, large linux systems. Constantly
adding the same postmaster_alive_fds to the OSs internal datastructures
for implementing poll/select can cause significant contention; leading
to a performance regression of nearly 3x in one example.

This can be avoided by using e.g. linux' epoll, which avoids having to
add/remove file descriptors to the wait datastructures at a high rate.
Unfortunately the current latch interface makes it hard to allocate any
persistent per-backend resources.

Replace, with a backward compatibility layer, WaitLatchOrSocket with a
new WaitEventSet API. Users can allocate such a Set across multiple
calls, and add more than one file-descriptor to wait on. The latter has
been added because there's upcoming postgres features where that will be
helpful.

In addition to the previously existing poll(2), select(2),
WaitForMultipleObjects() implementations also provide an epoll_wait(2)
based implementation to address the aforementioned performance
problem. Epoll is only available on linux, but that is the most likely
OS for machines large enough (four sockets) to reproduce the problem.

To actually address the aforementioned regression, create and use a
long-lived WaitEventSet for FE/BE communication.  There are additional
places that would benefit from a long-lived set, but that's a task for
another day.

Thanks to Amit Kapila, who helped make the windows code I blindly wrote
actually work.

Reported-By: Dmitry Vasilyev Discussion:
CAB-SwXZh44_2ybvS5Z67p_CDz=XFn4hNAD=CnMEF+QqkXwFrGg@mail.gmail.com
20160114143931.GG10941@awork2.anarazel.de
configure
configure.in
src/backend/libpq/be-secure.c
src/backend/libpq/pqcomm.c
src/backend/storage/ipc/latch.c
src/backend/utils/init/miscinit.c
src/include/libpq/libpq.h
src/include/pg_config.h.in
src/include/storage/latch.h
src/tools/pgindent/typedefs.list