Оказывается опция nginx WITH_SYSLOG_SUPPORT очень злая. После её включения nginx начинает писать ВСЕ логи ТОЛЬКО в syslog!
А я-то думал, что только какие-нибудь выбранные. То-то я думал, куда подевались мои логи.