Как настроить Apache так, чтобы access.log или error.log были постоянно открыты для виртуальных хостов?

Многие открытые файлы обычно не являются проблемой. Существует системный лимит, который вы можете проверить с помощью команды sysctl fs.file-max - в моей системе CentOS 6 с 4 ГБ ОЗУ это 382299, что должно быть достаточно, а на 256 МБ виртуальной машины, которую я запустил, было 23539, что может быть слишком мало. Но вы можете легко увеличить этот предел, например, добавив к /etc/sysctl.conf:

fs.file-max = 500000

А потом работает sysctl -p или перезагрузка.

Вы можете написать программу, которая будет открывать, писать, закрывать файл журнала каждый раз, когда данные поступают от стандартного ввода, и использовать его следующим образом:

CustomLog "||open-write-close /var/log/httpd/access_log" common

но это не будет эффективным. И это будет нелегко, так как для этого потребуется использовать асинхронный ввод-вывод.

Я написал программу для этого на C:

#include <sys/types.h>
#include <sys/stat.h>
#include <unistd.h>
#include <fcntl.h>
#include <string.h>
#include <stdio.h>
#include <errno.h>
#include <limits.h>

int outfd;

int main(int argn, char* argv[])
{
    if (argn != 2) {
        fprintf(stderr, "Usage %s [output_file]\n", argv[0]);
        return 1;
    }

    {
        long stdinflags = fcntl(0,F_GETFL);
        if ( stdinflags == -1 ) {
            perror("fcntl: Can't read stdin status");
            return 2;
        }
        if ( fcntl(0,F_SETFL,stdinflags|O_NONBLOCK) == -1 ) {
            perror("fcntl: Can't set stdin to non-blocking mode");
            return 2;
        }
    }


    do {
        #define BUFSIZE PIPE_BUF
        char buf[BUFSIZE];
        ssize_t bytesread = read(0, buf, BUFSIZE);

        {
            fd_set select_fdset;
            FD_ZERO(&select_fdset);
            FD_SET(0, &select_fdset);
            if ( select(1, &select_fdset, NULL, NULL, NULL) == -1 ) {
                if ( errno != EINTR ) {
                    perror("select");
                    return 2;
                }
            };
        }
        if ( bytesread==-1 ) {
            perror("Can't read from stdin");
            return 2;
        }
        if ( bytesread == 0 ) break;
        outfd = open(argv[1],O_WRONLY|O_APPEND|O_CREAT);
        if ( outfd < 0 ) {
            fprintf(stderr, "Can't open file \"%s\": %s\n", argv[1], strerror(errno));
            return 2;
        }
        do {
            if ( write(outfd, buf, bytesread) == -1 ) {
                fprintf(stderr, "Can't write to file \"%s\": %s\n", argv[1], strerror(errno));
                return 2;
            };
            bytesread = read(0, buf, BUFSIZE);
            if ( bytesread==-1 ) {
                if ( errno==EAGAIN ) break;
                perror("Can't read from stdin");
            }
        } while ( bytesread>0 );
        if ( close(outfd) != 0) {
            fprintf(stderr, "Can't close file \"%s\": %s\n", argv[1], strerror(errno));
            return 2;
        }
    } while ( 1 );
    return 0;
}

Если у вас действительно большое количество vhosts с отдельными файлами журнала доступа, я предлагаю записать все в один файл (да, исключить CustomLog в каждом vhost), а затем использовать приложение split-logfile для их разделения. Вы можете присоединиться к нему с помощью сценария logresolve, чтобы разрешить имена DNS.

Чтобы разделить файл журнала, вам нужно установить первый столбец в CustomLog равным ServerName.