(Untitled)

[anight]

nginx_stub_status:

Active connections: 202710
server accepts handled requests
818910718 818910718 1860422242
Reading: 3330 Writing: 4 Waiting: 199376

при этом:

load average: 0.52, 0.18, 0.13

Comments

[mkevac]

Это DDoS или стандартная нагрузка?

[anight]

Это стандартная нагрузка, пик

[mkevac]

Почему такой дисбаланс между Reading и Writing? Медленные соединения?
Сколько всего серверов в кластере? Или это один и единственный?

[anight]

Скорее всего медленные соединения. Там проксируемые запросы как-то должны учитываться в этих цифрах, но не помню точно как.
Таких загруженных три сервера, в пиках каждый выдаёт до 500 мбит.

[mkevac]

А на сколько серверов они проксируют запросы?
Apache + PHP?

[anight]

На несколько десятков серверов. Нет, это всё статика, система хранения и раздачи фоток.

[mkevac]

Каким образом мапятся файлы к серверам? Ну т.е. что данный файл лежит на этом сервере?
Или там у вас какая-нибудь распределенная ФС?

Я не задолбал вопросами? :-)

[anight]

Из url фотки вырезается некий place_id. Конфигурация nginx хранит карту соответствий диапазонов place_id к серверам:
rangemap $place_id $proxy_photos {
...
162000 163999 photos25.mlan;
164000 165999 photos26.mlan;
166000 167999 photos27.mlan;
168000 169999 photos28.mlan;
...
}
Поддержку таких карт предоставляет ngx_http_rangemap_module, наша разработка.

[mkevac]

Какая-то избыточность есть или при смерти дисков некоторое время фотки не будут доступны?

[anight]

Есть, там физические диски в рейдах. Помимо этого, сами photos*.mlan машины могут дублировать друг друга при необходимости (позволяет Polyserve)