Внутренняя архитектура и устройство проекта Одноклассники

Статистика

• Более 25 млн. уникальных пользователей

в день

• 3.8 млн. пользователей в он-лайне в часы пик

• Более 250.000 web запросов в секунду в часы пик

• Сетевой траффик более 60 Gb/s

• Более 3300 серверов и устройств хранения данных

1

Сезонный рост активности

• Дневная аудитория Одноклассников (LI.RU)

2

Архитектура

3

Обработка и кеширование данных

4

Распределение и балансировка нагрузки

5

6

• Стандартная библиотека

• Временные базы

• DWH (MS SQL 2008, Reporting services)

• OLAP (MS SQL Analysis services)

Система статистики

7

• Общий объем данных без резервирования: 250+ TB

• Решения для хранения данных:

Хранение данных

8

Датацентры, Сеть

9

• Сервера : 1U, 1HDD, 8GB RAM; 4U, 24HDD

• Сетевое оборудование: Cisco (2960,3750,7609, Nexus 7000)

• Тестирование нового оборудования

• Стандарты оборудования

• Деплоймент и CMDB

Оборудование

10

• Что мы мониторим:

Активность и поведение пользователей

Сервисы и компоненты сайта

Инфраструктура

• Как мы мониторим:

Zabbix, Cacti, one-monitor, DWH, Support

• Команда

Мониторинг

11

• Анализ текущей ситуации

• Прогнозирование узких мест

• Планирование совместно с PM

• Управление резервами

• Внедрение системы автоматического прогноза узких мест в инфраструктуре

Управление IT ресурсами

Спасибо! Андрей Губа Системный администратор проекта Одноклассники