по стопам webkill'а » настройка и установка

backup с PGP шифрованием

lukmus — Tue, 23 Mar 2021 18:12:03 +0000

В продолжение постов про GPG и о геме Backup собираю все в одну статью и дополняю настройкой для автоматического шифрования резервных копий.

утилита GPG

Установка, естественно, от пользователя с root-правами.
На RedHat’ах:

yum install pgp

На Debian’ах:

apt-get install pgp

Для создания ключей все та же команда, выполнять которую можно от рядового пользователя.

gpg --gen-key

Далее понадобится экспорт ключей в текстовый файл. В командах ниже username@email, разумеется, надо заменить на почту указанную при генерации.

Экспорт публичного ключа:

gpg --output public.pgp --armor --export username@email

Экспорт закрытого (приватного) ключа:

gpg --output private.pgp --armor --export-secret-key username@email

Если требуется, после экспорта ключей их можно удалить. Сначала удаляется закрытый ключ:

gpg --delete-secret-keys username@email

Затем открытый:

gpg --delete-keys username@email

Вывести список всех импортированных ключей:

gpg --list-keys

gem backup и PGP-ключ

Установка гема:

gem install backup

Cоздание модели (в данном примере модель называется ekzample) для бекапа:

backup generate:model --trigger ekzample
Generated model file: '~/Backup/models/ekzample.rb'.

Далее, для настройки нужного бекапа, следует отредактировать ~/Backup/models/ekzample.rb.

В примере ниже показан конфиг для резервного копирования базы MySQL с последующим сжатием в tar и шифрованием архива PGP-ключом, после чего зашифрованный файл отправляется по SFTP на бекап-сервер.

# encoding: utf-8
 
##
# Backup Generated: ekzample
# Once configured, you can run the backup with the following command:
#
# $ backup perform -t ekzample [-c ]
#
# For more information about Backup's components, see the documentation at:
# http://backup.github.io/backup
#
Model.new(:ekzample, 'Description for ekzample') do
 
  split_into_chunks_of 500
 
  Encryptor::GPG.defaults do |encryption|
    encryption.keys = {}
    encryption.keys['username@email'] = <<-KEY
      -----BEGIN PGP PUBLIC KEY BLOCK-----
      ...it is place for PUBLIC KEY...
      -----END PGP PUBLIC KEY BLOCK----
    KEY
    encryption.recipients = 'username@email'
  end
 
  database MySQL do |db|
    db.name  = 'exampledb'
    db.username = 'exampleuser'
    db.password = 'examplepass'
  end
 
  compress_with Gzip
  encrypt_with GPG
 
  store_with SFTP do |server|
    server.username = 'backupuser'
    server.password = 'backuppass'
    server.ip       = '111.111.111.111'
    server.port     = 22
    server.path     = '~/'
    # Use a number or a Time object to specify how many backups to keep.
    server.keep     = 150
 
    # Additional options for the SSH connection.
    # server.ssh_options = {}
  end
 
end

Не стоит забывать вставить между <<-KEY и KEY созданный ранее ПУБЛИЧНЫЙ (открытый) ключ.

Для более тонкой настройки PGP-ключей, например, разные ключи для разных баз, следует воспользоваться официальной документацией.

Запускается создание бекапа командой:

backup perform -t ekzample

извлечение бекапа

Если в системе нет ключей, используемых данным бекапом, следует их импортировать:

gpg --import private.pgp
gpg --import public.gpg

Далее чтобы расшифровать резервную копию понадобится команда:

gpg -o ekzample.tar -d ekzample.tar.gpg

Для распаковки тарбола подойдет команда:

tar -xvf ekzample.tar

Backup на Яндекс.Диск

lukmus — Fri, 10 Jan 2014 01:54:06 +0000

Для того чтобы сливать бэкапы на сторонний сервер или в локальную директорию уже давным давно можно не писать самопальные скрипты, а воспользоваться гемом Backup. И то, что это гем и написан он на Ruby, совершенно не означает, что организовывать бэкапы он может только для Ruby.

Backup много чего умеет делать, работает с двумя вагонами СУБД (MySQL, PostgreSQL, MongoDB итд), может закачивать сами бэкапы на триллионы различных площадок (Dropbox, CloudFiles, S3 итд) используя килотонны всевозможных протоколов (SFTP, FTP, SCP итд), подробнее об этом давно уже расписано на Хабре. Одна беда у гема: он не поддерживает протокол WebDAV и площадку Яндекс.Диск. Ну, а почему собственно необходим Яндекс.Диск и чем он лучше всех остальных можно узнать перейдя по моей партнерской ссылке (новый шедевр скрытой рекламы).

установка backup

Тут ничего нового, все тоже самое, что и в официальной инструкции.
Сама установка:

# gem install backup

Генерация конфига:

$ backup generate:model --trigger my_backup
Generated model file: '~/Backup/models/my_backup.rb'.

В результате этих манипуляций возникнет директория ~/Backup с какой-то лабудой в ~/Backup/config.rb и собственно с конфигом одной из задач в ~/Backup/models/my_backup.rb.

интерфейс для Яндекс.Диска

Управлять ЯДом можно как через API, так и напрямую через WebDAV. Для взаимодействия по WebDAV есть отдельные специальные гемы, но нормально закачать что-нибудь вряд ли удастся т.к. для авторизации по WebDAV придется использовать пару логин:пароль, в то время как ЯД позволяет загружать только при авторизации по ключу приложения, насколько я понял.

К счастью существует гем yandex-disk, через который и будут заливаться бэкапы.

После установки гема:

# gem install yandex-disk

чтобы иметь права не только на чтение, необходимо получить токен от Яндекса. Для этого надо:

авторизоваться в Яндексе
выбрать имеющееся приложение или создать новое
получить токен пройдя по ссылке: https://oauth.yandex.ru/authorize?response_type=token&client_id=YOUR_APP_ID

настройка backup под Яндекс.Диск

Удивительно, но на странице гема yandex-disk в самом низу приведен конфиг модели под backup, лично для себя, я приведу указанную конфигурацию к mysql-евскому виду:

# encoding: utf-8
 
##
# Backup Generated: my_backup
# Once configured, you can run the backup with the following command:
#
# $ backup perform -t my_backup [-c ]
#
 
require 'yandex/disk/backup/storage'
 
Backup::Model.new(:my_backup, 'My backup DB to Yandex.Disk') do
  ##
  # Split [Splitter]
  #
  # Split the backup file in to chunks of 250 megabytes
  # if the backup file size exceeds 250 megabytes
  #
  split_into_chunks_of 500
 
  database MySQL do |db|
    db.name  = 'mydb'
    db.username = 'myuser'
    db.password = 'mypass'
  end
 
  compress_with Gzip
 
  store_with Yandex::Disk do |disk|
    disk.access_token = 'mysupersecretyandexapptoken'
    disk.path         = '/backups/'
    disk.keep = 5
  end
end

запуск

И вот казалось бы все готово, осталось только запустить backup:

$ backup perform -t my_backup
[2014/01/08 18:53:04][info] Performing Backup for 'My backup DB to Yandex.Disk (my_backup)'!
[2014/01/08 18:53:04][info] [ backup 3.4.0 : ruby 2.0.0p247 (2013-06-27 revision 41674) [x86_64-linux] ]
[2014/01/08 18:53:04][info] Database::MySQL Started...
[2014/01/08 18:53:04][info] Using Compressor::Gzip for compression.
[2014/01/08 18:53:04][info]   Command: '/bin/gzip'
[2014/01/08 18:53:04][info]   Ext: '.gz'
[2014/01/08 18:53:06][info] Database::MySQL Finished!
[2014/01/08 18:53:06][info] Packaging the backup files...
[2014/01/08 18:53:06][info] Splitter configured with a chunk size of 500MB.
[2014/01/08 18:53:06][info] Packaging Complete!
[2014/01/08 18:53:06][info] Cleaning up the temporary files...
[2014/01/08 18:53:06][info] Yandex::Disk Started...
[2014/01/08 18:53:06][error] ModelError: Backup for Backup OA DB to Yandex.Disk (oabackup) Failed!
[2014/01/08 18:53:06][error]   An Error occured which has caused this Backup to abort before completion.
[2014/01/08 18:53:06][error]   Reason: NoMethodError
[2014/01/08 18:53:06][error]   undefined method `present?' for "mysupersecretyandexapptoken":String
[2014/01/08 18:53:06][error] 
[2014/01/08 18:53:06][error] Backtrace:
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/yandex-disk-0.0.5/lib/yandex/disk/client.rb:17:in `block in initialize'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/faraday-0.8.8/lib/faraday/connection.rb:65:in `initialize'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/faraday-0.8.8/lib/faraday.rb:11:in `new'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/faraday-0.8.8/lib/faraday.rb:11:in `new'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/yandex-disk-0.0.5/lib/yandex/disk/client.rb:16:in `initialize'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/yandex-disk-0.0.5/lib/yandex/disk/backup/storage.rb:18:in `new'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/yandex-disk-0.0.5/lib/yandex/disk/backup/storage.rb:18:in `connection'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/yandex-disk-0.0.5/lib/yandex/disk/backup/storage.rb:22:in `transfer!'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/storage/base.rb:34:in `perform!'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/model.rb:242:in `each'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/model.rb:242:in `block in perform!'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/model.rb:240:in `each'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/model.rb:240:in `perform!'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/cli.rb:163:in `block in perform'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/cli.rb:162:in `each'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/lib/backup/cli.rb:162:in `perform'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/thor-0.18.1/lib/thor/command.rb:27:in `run'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/thor-0.18.1/lib/thor/invocation.rb:120:in `invoke_command'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/thor-0.18.1/lib/thor.rb:363:in `dispatch'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/thor-0.18.1/lib/thor/base.rb:439:in `start'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/backup-3.4.0/bin/backup:5:in `'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/bin/backup:23:in `load'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/bin/backup:23:in `'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/bin/ruby_executable_hooks:15:in `eval'
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/bin/ruby_executable_hooks:15:in `'
[2014/01/08 18:53:06][warn] CleanerError: Cleanup Warning
[2014/01/08 18:53:06][warn]   The temporary backup folder '~/Backup/.tmp'
[2014/01/08 18:53:06][warn]   appears to contain the backup files which were to be stored:
[2014/01/08 18:53:06][warn]  ~/Backup/.tmp/my_backup.tar
[2014/01/08 18:53:06][warn]   
[2014/01/08 18:53:06][warn]   Make sure you check these files before the next scheduled backup for
[2014/01/08 18:53:06][warn]   'My backup DB to Yandex.Disk (my_backup)'
[2014/01/08 18:53:06][warn]   These files will be removed at that time!
[2014/01/08 18:53:06][info] ModelError: If you have other Backup jobs (triggers) configured to run,
[2014/01/08 18:53:06][info]   Backup will now attempt to continue...

И, как уже догадался проницательный читатель, бэкап не залился на ЯД, но не стоит расстраиваться. Пристально и с презрением посмотрите на строки:

[2014/01/08 18:53:06][error]   undefined method `present?' for "mysupersecretyandexapptoken":String
[2014/01/08 18:53:06][error] 
[2014/01/08 18:53:06][error] Backtrace:
[2014/01/08 18:53:06][error]   /usr/local/rvm/gems/ruby-2.0.0-p247/gems/yandex-disk-0.0.5/lib/yandex/disk/client.rb:17:in `block in initialize'

и откройте файл /usr/local/rvm/gems/ruby-2.0.0-p247/gems/yandex-disk-0.0.5/lib/yandex/disk/client.rb:

# coding: utf-8
 
require 'base64'
require 'faraday'
require 'faraday_middleware'
 
Faraday::Connection::METHODS << :propfind
 
module Yandex
  module Disk
    class Client
      autoload :Request, 'yandex/disk/client/request'
 
      def initialize options={}
        @timeout = options[:timeout] || 300
        @http = Faraday.new(:url => 'https://webdav.yandex.ru') do |builder|
          if options[:access_token].present?
            builder.request :authorization, "OAuth", options[:access_token]
          else
            basic_token = Base64.encode64("#{options[:login]}:#{options[:password]}")
            builder.request :authorization, "Basic", basic_token
          end
 
          builder.response :follow_redirects
 
          if faraday_configurator = options[:faraday_configurator]
            faraday_configurator.call(builder)
          else
            builder.adapter :excon
          end
        end
      end
...

По неизвестным науке обстоятельствам ошибка возникает при вызове метода present? для String-элемента в хэше. Наивный читатель может предложить заменить

if options[:access_token].present?

на

unless options[:access_token].blank?

но спешу заметить, что такая рокировка вызовет аналогичную ошибку, поэтому в данном случае я предлагаю строку №17 привести к виду:

16
17
18

        @http = Faraday.new(:url => 'https://webdav.yandex.ru') do |builder|
          if options[:access_token]
            builder.request :authorization, "OAuth", options[:access_token]

После такой магии у меня все запустилось:

$ backup perform -t my_backup
[2014/01/08 19:09:03][info] Performing Backup for 'My backup DB to Yandex.Disk (my_backup)'!
[2014/01/08 19:09:03][info] [ backup 3.4.0 : ruby 2.0.0p247 (2013-06-27 revision 41674) [x86_64-linux] ]
[2014/01/08 19:09:04][warn] CleanerError: Cleanup Warning
[2014/01/08 19:09:04][warn]   The temporary backup folder '~/Backup/.tmp'
[2014/01/08 19:09:04][warn]   appears to contain the package files from the previous backup!
[2014/01/08 19:09:04][warn]   ~/Backup/.tmp/my_backup.tar
[2014/01/08 19:09:04][warn]   These files will now be removed.
[2014/01/08 19:09:04][warn]   
[2014/01/08 19:09:04][warn]   Please check the log for messages and/or your notifications
[2014/01/08 19:09:04][warn]   concerning this backup: 'My backup DB to Yandex.Disk (my_backup)'
[2014/01/08 19:09:04][warn]   The temporary files which had to be removed should not have existed.
[2014/01/08 19:09:04][info] Database::MySQL Started...
[2014/01/08 19:09:04][info] Using Compressor::Gzip for compression.
[2014/01/08 19:09:04][info]   Command: '/bin/gzip'
[2014/01/08 19:09:04][info]   Ext: '.gz'
[2014/01/08 19:09:10][info] Database::MySQL Finished!
[2014/01/08 19:09:10][info] Packaging the backup files...
[2014/01/08 19:09:10][info] Splitter configured with a chunk size of 500MB.
[2014/01/08 19:09:10][info] Packaging Complete!
[2014/01/08 19:09:10][info] Cleaning up the temporary files...
[2014/01/08 19:09:10][info] Yandex::Disk Started...
[2014/01/08 19:09:12][info] Storing '/backups/my_backup/2014.01.08.19.09.03/my_backup.tar'...
[2014/01/08 19:10:13][info] Cycling Started...
[2014/01/08 19:10:13][info] Yandex::Disk Finished!
[2014/01/08 19:10:13][info] Cleaning up the package files...
[2014/01/08 19:10:13][warn] Backup for 'My backup DB to Yandex.Disk (my_backup)' Completed Successfully (with Warnings) in 00:01:10

установка ruby 2.0, rails 4, nginx+passenger

lukmus — Sat, 05 Oct 2013 10:33:56 +0000

Установка Ruby 2.0 через RVM и Rails4+Passenger+Nginx практически ни чем не отличается от аналогичной ситуацией с Rails 3, однако я опишу весь процесс просто для того, чтобы каждый раз не искать новый сайт RVM.

установка ruby 2.0

Тут будет все практически тоже самое, что и для Ruby 1.9 и Rails 3, измениться практически только команда установки самой RVM.

Итак, для начала надо установить Git.

# yum install git -y

Далее надо установить RVM, как написано на офсайте делаем:

# \curl -L https://get.rvm.io | bash -s stable

Теперь надо выйти из консоли и зайти обратно, после чего можно установить непосредственно сам Ruby 2.0:

# rvm -v
 
rvm 1.22.16 (stable) by Wayne E. Seguin <wayneeseguin@gmail.com>, Michal Papis <mpapis@gmail.com> [https://rvm.io/]
 
# rvm install 2.0

Когда Ruby 2.0 установлен, если необходимо можно поставить его используемым по умолчанию.

# rvm use 2.0 --default
Using /usr/local/rvm/gems/ruby-2.0.0-p247
# ruby -v
ruby 2.0.0p247 (2013-06-27 revision 41674) [i686-linux]

установка rails 4

Надо просто установить соответствующий gem.

# gem install rails
# rails -v
Rails 4.0.0

установка nginx+passenger

Установка Nginx+Passenger для Rails 4, точно такая же как и для Rails 3.

# gem install passenger
# passenger-install-nginx-module

Теперь осталось воспользоваться предоставленными Passenger’ом настройками и правильно сконфигурировать конфиг Nginx /opt/nginx/conf/nginx.conf.

p.s. честно говоря, этот пост написан по двум причинам: давно не писал и хотелось бы забить ключевик установка rails 4.

установка tor+privoxy на CentOS 6

lukmus — Sat, 16 Mar 2013 00:23:59 +0000

Нездоровая тенденция хостеров отказываться от Fedora заставляет меня изучать CentOS. А точнее, запоминать новые способы установки того или иного ПО, слезы находят, когда вспоминаешь всеобъемлющие репозитории Fedora.

установка Tor на CentOS 6

Официальный сайт Tor’а дезинформирует, на нем указаны неверные ссылки в настройке репозитариев в инструкции по установке на RH-линуксы. Правильный конфиг репы ниже, его надо поместить в предварительно созданный /etc/yum.repos.d/Tor.repo.

[tor]
name=Tor experimental repo
enabled=1
#baseurl=http://deb.torproject.org/torproject.org/rpm/DISTRIBUTION/$basearch/
baseurl=http://deb.torproject.org/torproject.org/rpm/el/6/$basearch/
gpgcheck=1
gpgkey=http://deb.torproject.org/torproject.org/rpm/RPM-GPG-KEY-torproject.org.asc
 
[tor-source]
name=Tor experimental source repo
enabled=1
autorefresh=0
#baseurl=http://deb.torproject.org/torproject.org/rpm/DISTRIBUTION/SRPMS
baseurl=http://deb.torproject.org/torproject.org/rpm/el/6/SRPMS/
gpgcheck=1
gpgkey=http://deb.torproject.org/torproject.org/rpm/RPM-GPG-KEY-torproject.org.asc

Далее установка и запуск никак не отличается от федореной:

# yum install tor -y

# service tor start

установка privoxy на CentOS 6

Инструкция на офсайте ничего дельного кроме сборки из тарболов предложить не может, зато могу я.
Прежде всего нужно установить одну штуку, которя сама собственно, особо не нужна, но нужна ее библиотека одна.

$ yum provides libpcreposix.so.0
Loaded plugins: fastestmirror
Loading mirror speeds from cached hostfile
 * base: mirror.nl.leaseweb.net
 * extras: centos.mirror.triple-it.nl
 * updates: mirrors.supportex.net
pcre-7.8-6.el6.i686 : Perl-compatible regular expression library
Repo        : base
Matched from:
Other       : libpcreposix.so.0
 
pcre-7.8-6.el6.i686 : Perl-compatible regular expression library
Repo        : installed
Matched from:
Other       : Provides-match: libpcreposix.so.0

# yum install pcre-7.8-6.el6.i686 -y

Теперь качаем, устанавливаем и запускаем:

$ wget ftp://ftp.pbone.net/mirror/rpm.razorsedge.org/centos-4/RE-test/privoxy-3.0.12-1.el4.re.i386.rpm

# rpm -Uvh privoxy-3.0.12-1.el4.re.i386.rpm

# service privoxy start

Если у вас CentOS x64 париться из-за i386 в названии rpm-файла не надо, у меня все нормально встало.

windows-игры и другие windows-приложения на linux. PlayOnLinux

lukmus — Tue, 05 Feb 2013 13:37:14 +0000

Два или три дня назад у многих кто пользовался Chrome под Linux отвалился Flash с формулировкой: не удалось загрузить модуль. Произошла какая-то трабла с версиями Adobe Flash Player и автоматическим обновлением Chrome, если я правильно понял. А еще, зайдя на сайт Adobe, чтобы скачать тот самый плеер увидел такую штуку:

ПРИМЕЧАНИЕ. Adobe Flash Player 11.2 будет последней версией, поддерживающей Linux в качестве платформы. Adobe будет продолжать обеспечивать ретроподдержку безопасности Flash Player 11.2 для Linux.

Проблему с флэшем в Хроме я решил просто перейдя с Chrome на Chromium. А еще каким-то странным образом в процессе поиска устранения проблемы набрел на статью про PlayOnLinux.

Насколько я понимаю, PlayOnLinux это такая надстройка над WINE, которая автоматически докачивает/устанавливает необходимые windows-библиотеки и прочие штуки под каждое конкретное приложение. Вообще это очень удобно и практично, молодцы они там все.

установка

Процесс установки описан для каждой ветки Linux. Для Fedora это выглядит так:

$ wget http://rpm.playonlinux.com/PlayOnLinux_yum-3.3.rpm
$ su -c 'rpm -ivh PlayOnLinux_yum-3.3.rpm'
$ su -c 'yum install playonlinux -y'

эксплуатация

Теперь чтобы, например, установить Safari под Linux нужно сделать так:
1. открыть, собственно, сам PlayOnLinux в меню или через консоль

$ playonlinux

2. нажать ‘Установка’ -> ‘Интернет’ -> ‘Safari’

3. нажать кнопку ‘Установка’ в нижнем правом углу и следовать инструкциям. Там все предельно просто.
Теперь, после того как прога установлена, можно вернуться в главное окно PlayOnLinux и повесить ярлык этой проги на рабочий стол. Сейчас можно вообще забыть о том, что это все эмуляция windows-приложения.

игры

PlayOnLinux адаптирован под великое множество игры среди которых есть и такие как: StarCraft II, Counter-Strike Source, Diablo III, Fallout 3, S.T.A.L.K.E.R., World of Warcraft, Call of Duty 4, Crysis 2, Battlefield 2 и еще много разных других.

cadaver на CentOS

lukmus — Fri, 04 Jan 2013 19:19:25 +0000

Мой хостинг больше не хочет делать VPS на Fedora, поэтому новый сервер пришлось брать на CentOS. В репах CentOS нет cadaver, который мне необходим для залива бекапов на Яндекс.Диск по webdav, поэтому пришлось устанавливать cadaver из тарболов.
Cadaver это такой консольный webdav-клиент. А Webdav это такой протокол над HTTP, по которому работает Яндекс.Диск. Так вот для подключения к облаку Яндекса через cadaver нужна поддержка HTTPS, потому как команда подключения выглядит так:

$ cadaver https://webdav.yandex.ru

И если Вам уже надоела моя партнерская ссылка на Яндекс.Диск, то приступлю к описанию установки cadaver с поддержкой HTTPS на CentOS из исходников.

установка

$ wget http://www.webdav.org/cadaver/cadaver-0.23.3.tar.gz
$ tar -xvf cadaver-0.23.3.tar.gz
$ cd cadaver-0.23.3
$ ./configure --with-ssl=openssl
$ make
$ make install

Если же Вы как и я по миллион двести раз конфигурировали и make-ли этот тарбол с вариантами различных опций, вместо того чтобы нагуглить эту статью на китайском с правильными опциями, и в результате исполняемый файл кадавера записался в /usr/local/cadaver/bin/cadaver заместо /usr/local/bin/cadaver, то для нормального запуска, без прописки пути, надо сделать ссылку:

$ ln -s /usr/local/cadaver/bin/cadaver /usr/local/bin/cadaver

На этом все.

rails 3 на nginx+mongrel

lukmus — Mon, 31 Oct 2011 08:21:21 +0000

Некоторые люди, которым интересен iLukmus, наверняка заметили, что сайт работает, мягко говоря, нестабильно и падает по несколько раз в сутки. Я уже пробывал ставить сайт на Apache+Passenger и Nginx+Passenger, и в обоих этих вариантах ситуация с падениям web-сервера была идентичной. Вероятнее всего, я просто не умею ~~их готовить~~ их правильно настраивать, но проблему все равно нужно решать, а т.к. пробывать различные конфиги мне уже надоело, iLukmus переходит на Mongrel+Nginx.

установка Mongrel

Mongrel на ruby 1.9 устанавливается своеобразно, обычный способ с прописыванием гема в Gemfile рельсов здесь не прокатит и вызовет ошибку.
Ставим гем Mongrel’а:

1	gem install mongrel --pre

Прописываем гем в Gemfile ROR’а:

1	gem 'mongrel', '>= 1.2.0.pre2'

Ну и забандлим новый гем:

1	bundle install

Подробнее почему нужно ставить именно так и какая конкретно вылезает ошибка можно почитать здесь.

установка и настройка Nginx

установка

Предполагается, что Nginx был установлен вместе с Passenger’ом, но его можно установить и просто так:

1	# yum install nginx

настройка

Теперь открываем файл конфига nginx.conf и прописываем, что-то типа:

user  deploy;
worker_processes  1;
#error_log   logs/error.log debug;

events {
  worker_connections  1024;
}
 
http {
  include        conf/mime.types;
  default_type   application/octet-stream;
  sendfile        on;
  #tcp_nopush     on;
  keepalive_timeout  65;
  tcp_nodelay        on;
 
  gzip  on;
  gzip_min_length  1100;
  gzip_buffers     4 8k;
  gzip_types       text/plain;
 
  upstream mongrel {
    server 127.0.0.1:3000;
  }
 
  server {
    listen       80;
    server_name  example.com;
    root         /var/www/apps/example/current/public;
    index        index.html index.htm;
 
    try_files  $uri/index.html $uri.html $uri @mongrel;
 
    location @mongrel {
      proxy_set_header  X-Real-IP        $remote_addr;
      proxy_set_header  X-Forwarded-For  $proxy_add_x
_forwarded_for;
      proxy_set_header  Host             $http_host;
      proxy_redirect    off;
      proxy_pass        http://mongrel;
    }
    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
      root   html;
    }
  }
}

Подробнее о конфиге написано на официальной вики-странице Nginx’а.

запуск

Сначала запускаем Mongrel:

$ cd /var/www/apps/example/current/
$ rails s -e production
=> Booting Mongrel
=> Rails 3.0.10 application starting in production
on http://0.0.0.0:3000
=> Call with -d to detach
=> Ctrl-C to shutdown server

Запустить Mongrel как демон можно так:

1	$ rails s -e production -d

И теперь запускаем Nginx, у меня, например, это выглядит так:

1	# /opt/nginx/sbin/nginx

Типа все, но надо не забыть запретить открытию порта Mogrel’а (здесь 3000) из внешки.

nginx on rails 3

lukmus — Mon, 24 Oct 2011 03:24:17 +0000

Тестов я не проводил, но что-то мне подсказывает, что Nginx будет побыстрее чем Apache. В принципе, настройка Nginx через Passenger под Rails 3 похожа на аналогичную Apache’а. Но для закрепления, я все равно здесь ее опишу.

Прежде всего нужно отметить, что устанавливать Nginx вручную или через YUM не надо, за вас это сделает Passenger, всему свое время.

установка Passenger

Сначала нужно установить сам гем Passenger’а.

1	# gem install passenger

Далее запускаем скрипт:

1	# passenger-install-nginx-module

Если вам не хватает некоторых нужных пакетов, скрипт, также как и в случае с апачем, подскажет что и как нужно установить. И после того как все зависимости будут устранены нужно повторно запустить этот скрипт.
В процессе выполнения скрипт спросит, про установку Nginx. На этот вопрос я рекомендую отвечать положительно, т.е. выбрать цифру 1 – скрипт сам скачает и установит Nginx. Далее будет задан вопрос про место установки, тут поступаем как хотим.

конфигурация и запуск

В конце скрипт укажет параметры, которые нужно вставить в конфиг Nginx. В результате чего конфиг (у меня /opt/nginx/conf/nginx.conf) будет выглядеть примерно так:

...
events {  worker_connections  1024;}
http {
  passenger_root /usr/local/rvm/gems/ruby-1.9.2-p290/
    gems/passenger-3.0.9;
  passenger_ruby /usr/local/rvm/wrappers/
    ruby-1.9.2-p290/ruby;
 
include       mime.types;
...
   server {
      listen 80;
      server_name your-rails-domen.ru;
      root /var/www/rails/rails_app/public;
      passenger_enabled on;
   }
...
}
...

Насколько я понимаю, Nginx + Passenger всегда работает только под Production.
Запускать Nginx надо так:

1	# /opt/nginx/sbin/nginx

На этом, опять же грубая настройка Nginx под Rails 3 закончена. Но надо отметить, что эта грубая конфигурация Nginx’а будет производительней грубой настройки Apache’а.

Apache + RVM Ruby 1.9.2 + Passenger = no such file to load — bundler

lukmus — Wed, 29 Jun 2011 11:05:04 +0000

Довольно популярная ошибка, которая имеет вагон всяких решений в интернете, но при этом ни одно из них до конца не работает. Типичной средой ее обитания является Ruby, установленный через RVM (установлена под рутом => для всех), на который установлен Ruby on Rails 3 и все это дело запущено под Apache’м через Passenger. Т.е. когда приложение уже вот-вот должно запуститься и апачевская TestPage уже не светит появляется она.

Разумеется ошибка возникает тогда, когда сам гем bundler прекрасно установлен и при запуске рельсов под webrick’ом все прекрасно работает:

$ gem list | grep bundler
bundler (1.0.15)
$ rails s
=> Booting WEBrick
=> Rails 3.0.7 application starting in development on
http://0.0.0.0:3000
=> Call with -d to detach
=> Ctrl-C to shutdown server
[2011-06-29 13:14:21] INFO  WEBrick 1.3.1
[2011-06-29 13:14:21] INFO  ruby 1.9.2 (2011-02-18)
[x86_64-linux]
[2011-06-29 13:14:21] INFO  WEBrick::HTTPServer#start:
pid=4240 port=3000

Многие статьи в интернете при первых симптомах оной рекомендуют верно настроить путь Ruby в конфигурации апача, например:

PassengerRoot /usr/local/rvm/gems/ruby-1.9.2-p180/
gems/passenger-3.0.7
PassengerRuby /usr/local/rvm/rubies/ruby-1.9.2-p180/
bin/ruby

Потому как они предполагают, что среда в которой запускается рельсы под апачем не подозревает о существовании bundler’а. И здесь есть рациональное зерно и даже возможно удастся подобрать такой путь к руби.

Как можно заметить ошибка возникает тут:

1 2	/usr/local/rvm/rubies/ruby-1.9.2-p180/lib/ruby/site_ruby/1.9.1/ rubygems/custom_require.rb

Именно это скрипт ругается, а значит именно его мы и будем исправлять.

правильная среда

Прежде всего нужно найти ту правильную среду, а точнее те значения переменных окружения при которых все работает. Для этого надо с теми настройками RVM, под которыми корректно запускаются рельсы выполнить команду RVM info:

$ rvm info
 
  ruby-1.9.2-p180:
    bla-bla-bla...
 
  rvm:
    bla-bla-bla...
 
  ruby:
    bla-bla-bla...
 
  homes:
    bla-bla-bla...
 
  binaries:
    ruby:         "/usr/local/rvm/rubies/ruby-1.9.2-p180
/bin/ruby"
    irb:          "/usr/local/rvm/rubies/ruby-1.9.2-p180
/bin/irb"
    gem:          "/usr/local/rvm/rubies/ruby-1.9.2-p180
/bin/gem"
    rake:         "/usr/local/rvm/gems/ruby-1.9.2-p180
/bin/rake"
 
  environment:
    PATH:         "/usr/local/rvm/gems/ruby-1.9.2-p180
/bin:/usr/local/rvm/gems/ruby-1.9.2-p180@global/bin:
/usr/local/rvm/rubies/ruby-1.9.2-p180/bin:/usr/local
/rvm/bin:/usr/kerberos/sbin:/usr/kerberos/bin:/usr
/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr
/bin:/root/bin"
    GEM_HOME:     "/usr/local/rvm/gems/ruby-1.9.2-p180"
    GEM_PATH:     "/usr/local/rvm/gems/ruby-1.9.2-p180:
/usr/local/rvm/gems/ruby-1.9.2-p180@global"
    MY_RUBY_HOME: "/usr/local/rvm/rubies/ruby-1.9.2-p180"
    IRBRC:        "/usr/local/rvm/rubies/ruby-1.9.2-p180
/.irbrc"
    RUBYOPT:      ""
    gemset:       ""

И она выдаст то что нужно:

на 16-й строке верный путь до правильного интерпритатора Ruby, который нужно прописать в параметре Apache’а PassengerRuby
строки 26-37 – верная настройка среды под, которой все работает

ненавистный custom_require.rb

Открываем тот самый

1 2	/usr/local/rvm/rubies/ruby-1.9.2-p180/lib/ruby/site_ruby/1.9.1/ rubygems/custom_require.rb

Находим ту самую строку ошибки:

def require path
    if Gem.unresolved_deps.empty? or
          Gem.loaded_path? path then
 
      gem_original_require path
    else
      spec = Gem.searcher.find_active path
...

И тут, чтобы убедиться что ENV там кривое либо отсутствует напрочь, можно например запилить ~~дверь~~ вывод ENV в файл:

 def require path
    if Gem.unresolved_deps.empty? or
          Gem.loaded_path? path then
 
      File.new('/tmp/envs','a') { |f| f.puts path}
      gem_original_require path
    else
      spec = Gem.searcher.find_active path
...

Однако, нам нужно не это, а наладить запуск рельсов, поэтому вместо приколов просто прописываем в начало метода def require path правильные настройки переменных окружения, которые мы нашли при rvm info:

  def require path
 
   ENV['PATH']="/usr/local/..."
   ENV['GEM_HOME']="/usr/local/..."
   ENV['GEM_PATH']="/usr/local/..."
   ENV['MY_RUBY_HOME']="/usr/..."
   ENV['IRBRC']="/usr/local/rvm/..."
 
    if Gem.unresolved_deps.empty? or 
       Gem.loaded_path? path then
   ...

Вот и все, после этих манипуляции мои рельсы завелись.

нормальная установка Ruby 1.9 и Rails 3 через RVM

lukmus — Fri, 10 Jun 2011 13:44:17 +0000

Для тех кто не знает, RVM – Ruby Version Manager, это такая штука которая позволяет иметь одновременно вагон разных версий Ruby, причем не только Ruby, а и IronRuby, REE, Rubinius и т.д. и при этом все они будут работать и не конфликтовать.

Все что тут будет сделано делалось на Fedora’х 13 и 15.

установка RVM

Для начала установим Git.

1	# yum install git -y

Далее офсайт RVM рекомендует выполнить не под рутом следующую команду:

$ bash < <(curl -s https://rvm.beginrescueend.com/install/rvm)
Cloning into rvm...
remote: Counting objects: 4986, done.
remote: Compressing objects: 100% (2340/2340), done.
remote: Total 4986 (delta 3224), reused 3588 (delta 1959)
Receiving objects: 100% (4986/4986), 1.63 MiB | 87 KiB/s, done.
Resolving deltas: 100% (3224/3224), done.

Нужно отметить, что в Fedora 15 эта команда действительно сработала и все прошло гладко, однако в Fedora 13 у меня так не получилось. Но не беда, кстати если у вас не установлен curl его надо обязательно поставить, в Fedora 13 можно просто скачать скрипт и запустить его:

1 2	$ wget https://rvm.beginrescueend.com/install/rvm $ chmod u+x rvm && sh rvm

установка Ruby и примочек

После установки RVM можно приступить к установке ruby, gem и прочего.
Устанавливаем Ruby 1.9.2 (перед этим убедитесь что установлен gcc с соответсвующими фишками):

$ rvm install 1.9.2
Installing Ruby from source to: /home/username/.rvm/rubies/
ruby-1.9.2-p180,this may take a while depending on
your cpu(s)...
ruby-1.9.2-p180 - #fetching
ruby-1.9.2-p180 - #extracted to /home/username/.rvm/src/
ruby-1.9.2-p180 (already extracted)
Fetching yaml-0.1.3.tar.gz to /home/username/.rvm/archives
...
$ rvm ruby -v
ruby 1.9.2p180 (2011-02-18 revision 30909) [x86_64-linux]
$ rvm gem -v
1.6.2

Чтобы можно было запускать руби без ‘rvm’ добавляем в конец ~/.bashrc

1	[[ -s "$HOME/.rvm/scripts/rvm" ]] && . "$HOME/.rvm/scripts/rvm"

и перезапускаем консоль.

установка Rails 3

Если попытатся сейчас установить рельсы, то скорее всего произойдет старая история с zlib’ом:

# gem install rails
ERROR:  Loading command: install (LoadError)
    no such file to load -- zlib
ERROR:  While executing gem ... (NameError)
    uninitialized constant Gem::Commands::InstallCommand

Чтобы это исправить сначала установим сам zlib:

1	# yum install zlib zlib-devel

А потом ищем куда RVM кинул сорцы Ruby и компилим zlib вручную:

# find / -name ruby-1.9.2*
...
/home/username/.rvm/src/ruby-1.9.2-p180
...
# cd /home/username/.rvm/src/ruby-1.9.2-p180 && cd ext/zlib
# ruby extconf.rb && make && make install

Теперь можно и установить сами рельсы:

1	# gem install rails

После чего сделать тестовое приложение:

$ rails new wapp
$ cd wapp
$ rails server
Could not find gem 'sqlite3 (>= 0)' in any of the gem
sources listed in your Gemfile.
Run `bundle install` to install missing gems.

Если появилась такая шляпа насчет sqlite3, то разумеется нужно установить этот гем:

1 2	# yum install sqlite-devel.x86_64 # gem install sqlite3

И в конце еще кое-что нужно установить:

# yum install openssl-devel
$ cd /home/username/.rvm/src/ruby-1.9.2-p180
$ cd ext/openssl
$ ruby extconf.rb && make && make install

Ну и еще совсем чуть-чуть (Readline нужен для консоли Rails):

1
2
3

# yum install readline readline-devel
$ cd /home/username/.rvm/src/ruby-1.9.2-p180/ext/readline
$ ruby extconf.rb && make && make install

вуаля

$ rails server
=> Booting WEBrick
=> Rails 3.0.8 application starting in development on
http://0.0.0.0:3000
=> Call with -d to detach
=> Ctrl-C to shutdown server
[2011-06-10 17:36:30] INFO  WEBrick 1.3.1
[2011-06-10 17:36:30] INFO  ruby 1.9.2 (2011-02-18)
[x86_64-linux]
[2011-06-10 17:36:30] INFO  WEBrick::HTTPServer#start:
pid=20796 port=3000

P.S. подробнее о RVM и о том какие чудеса можно с ним творить читайте на оффсайте: https://rvm.beginrescueend.com/