Иван Евтухович — Как перестать релизиться и начать жить
1 like1,477 views
Доклад Ивана Евтуховича на тему непрерывной поставки описывает проблемы и ошибки, возникающие в процессе релизов, а также предлагает принципы и практики для улучшения процессов доставки ПО. Основное внимание уделяется автоматизации, управлению конфигурацией и непрерывной интеграции, что приводит к снижению стресса и ошибок в командах. В конце документа приведены ресурсы для дальнейшего изучения темы.
Иван Евтухович — Как перестать релизиться и начать жить
- 1. Con$nuous Delivery как перестать релизиться и начать жить Иван Евтухович SECON’ 2013
- 3. План доклада • Неудачные истории из жизни • Принципы непрерывной поставки ПО • Управление конфигурацией • Непрерывная интеграция • Тестирование
- 5. Неудачные истории из жизни
- 6. Сломавшийся сервер 1. Плановая перезагрузка 2. Сервер не подымается 3. В 23 часа начинаем перенос 4. В 4 утра он все еще идет 5. Утром с 10 продолжаем
- 7. Что там было? 1. 10-‐15 скриптов в cron 2. у каждого скрипта свой набор ключей 3. 2 ключевых сервиса 4. все настройки умерли вместе с сервером
- 9. • Десятки и сотни единиц оборудования • Процесс первоначальной настройки: – Загружаемся с диска – Переставляем диск с образом – Записываем – Правим 3 параметра в системе • Сколько раз я ошибся в IP-‐адресах? • Сколько это занимало времени? • И это только настройка OS
- 10. Ошибки в конфигурации • MySQL 5.0 на produc$on, 5.1 на stage • php без модуля и вызов @funcname • database pool size в многопоточном приложении • Array.count в Ruby 1.8.7 (development) и 1.8.6 (produc$on) • Патчи для Ruby во FreeBSD и Hpricot
- 11. И еще… • Патч в gem $dy, который делали руками • Размер блока в md-‐устройстве • PostgreSQL мастер на Linux, слейв – FreeBSD • Выкатка через chef/capistrano • Версии PostgreSQL 9.0 – на stage, 9.1 в бою
- 12. Опрос
- 13. Как предотвратить подобные ситуации?
- 14. Принципы • Создать повторяемый и надежный процесс поставки ПО • Автоматизировать все, что можно • Хранить все в системе контроля версий • Совершенствоваться через повторения • Получать раннюю обратную связь
- 15. продолжение… • Встроенный контроль качества • Выполнено, значит зарелизилось • Каждый отвечает за процесс поставки ПО • Непрерывные улучшения
- 16. Преимущества • Понижение стресса • Уменьшение ошибок • Помощь команде • Гибкость выкатки
- 17. Сколько времени нужно, чтобы строчка кода попала в релиз? Сколько времени вам надо, чтобы развернуть ваше приложение?
- 18. Конвейер
- 19. Среда разработки CI QA Staging Produc$on
- 20. DevOps • Разработчики и QA – враги • QA и админы – враги • Разработчики и админы – враги • Это неправда!
- 21. Управление конфигурацией
- 22. Как хранить конфигурацию? Хранить образы всех серверов Минусы: – изменение в образе и на сервере – отсутствие контроля (кто и когда)
- 24. Что ценно на сервере? На боевом сервере размер папки /usr 730 Мб Дороги ли мне эти данные?
- 25. Минимальное количество данных, необходимое для того, чтобы повторяемо воспроизводить среду
- 26. • OS (версия, образ) • Список установленных пакетов (с версиями) • Настройки системы • Библиотеки приложения
- 27. Образ системы • Kiwi h•p://opensuse.github.com/kiwi/ • Cobbler h•p://cobbler.github.com/ • Spacewalk h•p://spacewalk.redhat.com/
- 28. Пакеты OBS -‐ Open Build Service h•ps://build.opensuse.org/
- 29. Системы управления конфигурацией • Chef h•p://www.opscode.com/chef/ • Puppet h•ps://puppetlabs.com/puppet/puppet-‐open-‐ source/ • CFEngine • Salt
- 30. Функции • Устанавливать нужные пакеты • Следить за файлами конфигурации • Запускать и перезапускать сервисы • Интеграция компонет
- 31. Opscode Chef Chef сервер db01 web01 web02
- 32. Выкатка • Повторяема • Полностью автоматизирована • Независима от локальных настроек • Независимые релизы (и конфигурация) • Откат отрепетирован • Например: capistrano, fabric
- 33. Библиотеки приложения • Maven для Java • Bundler для Ruby • Virtualenv/pip для Python
- 34. Bundler source 'h•p://rubygems.org’ gem 'rails', '3.1.10’ gem 'pg’ gem 'nokogiri' gem 'haml' gem 'devise', '1.5.0' gem 'russian', '~> 0.6.0' gem 'simple_form', '1.5.2' gem 'state_machine' gem 'globalize3', "~> 0.2.0.beta4”
- 35. При этом настройки Cobbler, OBS, Chef, Bundler лежат в системе контроля версий
- 36. Непрерывная интеграция (Con$nuous Integra$on)
- 37. При каждом изменении: • проект забирается из СКВ • проект собирается • прогоняются тесты • проходит выкатка на тестовый стенд (?) • рассылаются оповещения
- 38. • CruiseControl (CruiseControl.rb) • Jenkins • TeamCity от JetBrains • TravisCI
- 39. Проблема в людях
- 40. Практики
- 42. • создайте хорошее покрытие автоматическими тестами • сохраняйте время сборки и выполнения тестов небольшим • не вносите изменений, когда сборка сломана • прогоняйте тесты локально перед внесением изменений
- 43. • подождите прохождения тестов, а потом продолжайте работу • не уходите домой, если сборка сломана • будьте готовы откатить изменения • не комментируйте сломавшиеся тесты • берите на себя ответственность за свои изменения • пишите тесты перед кодом (TDD)
- 44. Тестирование
- 45. Бизнес Автоматические Ручные Приемочные Показы тесты Юзабилити Поддержка Критика Юнит тесты Нагрузочные Интеграционные Безопасности Выкатка Автоматические Ручные/Автоматические Технологии
- 46. Готовых рецептов нет • Думайте • Измеряйте • Экспериментируйте
- 47. Что почитать?
- 49. Спасибо за внимание! Вопросы и ответы [email protected] Twi•er: evtuhovich h•p://blog.evtuhovich.ru/