Retry opening new segments in pg_xlogdump --folllow
authorMagnus Hagander <magnus@hagander.net>
Fri, 30 Sep 2016 09:19:30 +0000 (11:19 +0200)
committerMagnus Hagander <magnus@hagander.net>
Fri, 30 Sep 2016 09:22:32 +0000 (11:22 +0200)
There is a small window between when the server closes out the existing
segment and the new one is created. Put a loop around the open call in
this case to make sure we wait for the new file to actually appear.

src/bin/pg_xlogdump/pg_xlogdump.c

index dbaf727cd8095d2f49501fce1ed791d64e10dfba..49e9a34b5293eee19700f190c911db42ba50b407 100644 (file)
@@ -249,6 +249,7 @@ XLogDumpXLogRead(const char *directory, TimeLineID timeline_id,
        if (sendFile < 0 || !XLByteInSeg(recptr, sendSegNo))
        {
            char        fname[MAXFNAMELEN];
+           int         tries;
 
            /* Switch to another logfile segment */
            if (sendFile >= 0)
@@ -258,7 +259,30 @@ XLogDumpXLogRead(const char *directory, TimeLineID timeline_id,
 
            XLogFileName(fname, timeline_id, sendSegNo);
 
-           sendFile = fuzzy_open_file(directory, fname);
+           /*
+            * In follow mode there is a short period of time after the
+            * server has written the end of the previous file before the
+            * new file is available. So we loop for 5 seconds looking
+            * for the file to appear before giving up.
+            */
+           for (tries = 0; tries < 10; tries++)
+           {
+               sendFile = fuzzy_open_file(directory, fname);
+               if (sendFile >= 0)
+                   break;
+               if (errno == ENOENT)
+               {
+                   int         save_errno = errno;
+
+                   /* File not there yet, try again */
+                   pg_usleep(500 * 1000);
+
+                   errno = save_errno;
+                   continue;
+               }
+               /* Any other error, fall through and fail */
+               break;
+           }
 
            if (sendFile < 0)
                fatal_error("could not find file \"%s\": %s",