Рост курса валют vs рост числа пользователей. Как banki.ru...

Рост курса валют vs рост

числа пользователей

Как banki.ru пережил утроение нагрузки за неделю

Роман

Ивлиев

Директор по

информацинным

технологиям

Банки.ру

2002-....

• Тестировщик

• Разработчик

• Руководитель разработчиков

• Руководитель тестировщиков

• Руководитель проектов

• CTO

• CIO

Кто я?

Мы ходим по земле

• PHP 5.х + Symfony 2 + Yii

• Postgres(9.х)+MariaDB

• Memcache+Redis

• Rabbit

• Nginx + Apache

• Битрикс

• Зоопарк осей на 10 серверах (FreeBSD, CentOS и ещё)

Нам 10 лет, в департаменте ИТ 40 человек, мы принимаем 500К

уников в сутки, и мы выручили в 2014 почти 600КК рублей.

Это очень важно!

О чем расскажу?

• Как мы пережили скачок?



• Почему мы не сделали всё это раньше?




• А что мы делаем теперь?





• А что будет, если ЦБ повторит?





• А что будет, если ЦБ повторит?

• Немного выводов и мудрости

Знали ли мы про маневры ЦБ?

Глазами администратора


• Анализ логов и перенастройка серверов



• Включение/отключение логирования




• Включение/отключение статистик





• Ок, Гугл, выручай!

Окей, Гугл, выручай!





• Ок, Гугл, выручай!

• Управляемая деградация

Управляемая деградация


• «Ручное» регулирование числа

пользователей




• Отключение части функционала




• Отключение части функционала

• Напрягается саппорт, а не сервера

Прихвостни ЦБ!!!!

Пустите посмотреть курсы доллара!!!!



Вы это специально??!!!!





Да @БВАШ@Ь!!!!




Да стопудов это же вы так специально!!!!

Да @БВАШ@Ь!!!!


• Балансировка сервисов по серверам в

реальном времени




• Виртуализация под задачи




• Виртуализация под задачи

• Бонус-трек: Экстренный порт на линукс,

чтобы размножаться пачкованием.

Глазами разработчика


• Слоулоги (php, СУБД, web, zabbix)



• Память предков и личного состава



• Память предков и личного состава

• Летопись технического долга


• Битва с джойнами, индексами и

сортировками


• Битва с джойнами и сортировками

• Отложенные вычисления и предварительная

подготовка данных

Глазами менеджера


• «Ручное» управление



• Главный враг - паника




• Управляет процессом всегда кто-то один





• Быстрый откат





• Быстрый откат

• Все изменения в Вики.

Почему мы не сделали этого раньше?

Крутые отмазки:

• На самом деле планы были, но не такие

масштабные

• Бизнес не хочет тратиться на такой запас по

мощности

• Сильно-связный код

Почему мы не сделали этого раньше?

Менее крутые:

• Бизнесовые задачи кушают время лучших

умов

• Нет полноценной нагрузочной среды

• А надо ли это делать на два дня?

Вот пример последнего тезиса

А что мы делаем теперь?

• Постепенно выпиливаем то, что осталось с

учётом опыта тех дней




• Немного поменяли приоритеты в вопросах

замены сервисов






• Прикупили пару новых мощных железяк






• Прикупили пару новых мощных железяк

• Вкладываемся в SOA

А что мы сделаем, если повторится декабрь?

• Мы точно продержимся гораздо дольше



• Найдем новые узкие места




• Придумаем, как их убрать и




• Придумаем, как их убрать и

• Наверняка уберём

Выводы и мудрость

@dumtest

Роман

Ивлиев

Директор по

информационным

технологиям

Банки.ру

Спасибо!

Вопросы?

[email protected]

• http://www.percona.com/doc/percona-toolkit/2.2/pt-query-digest.html -

анализ логов MySQL

• https://github.com/dalibo/pgbadger - анализ логов PostgreSQL

• http://pinba.org – сбор данных о работе приложения

• https://github.com/intaro/pinboard - визуализатор для данных Pinba

• https://github.com/phacility/xhprof - PHP-профайлер

• http://www.zabbix.com/ru/ - мониторинг системы (физические и

логические характеристики)

• http://www.slideshare.net/dumtest/ss-32903174 - мой рассказ про

построение высоконагруженных систем с примерами

• https://github.com/elastic/kibana - анализ и визуализация логов

http://www.percona.com/doc/percona-toolkit/2.2/pt-query-digest.html

https://github.com/dalibo/pgbadger

http://pinba.org/

https://github.com/intaro/pinboard

https://github.com/phacility/xhprof

http://www.zabbix.com/ru/

http://www.slideshare.net/dumtest/ss-32903174

https://github.com/elastic/kibana

Рост курса валют vs рост числа пользователей. Как banki.ru...

Software

Transcript of Рост курса валют vs рост числа пользователей. Как banki.ru...