The WebDevil » Ruby

Monitoring apache with GOD

dm — Mon, 30 Nov 2009 09:38:07 +0000

“Посчастливилось” мне заполучить VPS с сайтом на битриксе. Из-за Zend Optimizer (сорсы покриптованы) нет возможности установить APC. Вроде бы умеет xcache работать вместе с ним, еще не проверял. Периодически апач съедает всю память, свап, и машинка умирает окончательно. Хуже то, что апач работает с mpm-prefork, то есть он порождает не потоки, а процессы. И при мониторинге виден родительский процесс, который занимает всего 13М памяти.

Вначале для рестарта апача в период дикого роста я пытался использовать monit, но результат был неадекватный – при указании memory > 90% он убивал его когда памяти была занята всего треть.

После monit я попробовал использовать god. Но он мониторит только один процесс, без его чайлдов. Вроде бы есть проект bluepill, который идейно растет из god. Но примеры найти оказалось проблематично, да и в процессе решил таки остаться с god.

Среди условий у god была обнаружена фича – :lambda. После недолгого размышления на bash была написана строка, показывающая занятый апачем процент памяти:

ps -e -o pmem,cmd | grep apache2 | grep -v grep | awk '{sum += $1;}END{print sum;}'

что сразу переродилось в

w.restart_if do |restart|
restart.condition(:lambda) do |c|
c.lambda = lambda{`ps -e -o pmem,cmd | grep apache2 | grep -v grep | awk '{sum += \$1;}END{print sum;}'`.to_i > 90}
end
end

Итого конфиг для апача выглядит так:

God::Contacts::Email.delivery_method = :sendmail

God.contact(:email) do |c|
c.name = 'maintainer'
c.email = 'pager@sms.gate.isp'
end

God::Contacts::Email.format = lambda do |name, email, message, time, priority, category, host|
< <-EOF
From: god
To: #{name} <#{email}>
Subject: Alert!
Date: #{Time.now.httpdate}
Message-Id: < #{rand(1000000000).to_s(36)}.#{$$}.#{self.message_settings[:from]}>

#{host} (#{priority}): #{message}
EOF
end

%w{80}.each do |port|
God.watch do |w|
w.name = "apache2"
w.pid_file = "/var/run/apache2.pid"
w.interval = 10.seconds # default
w.start = "/etc/init.d/apache2 start"
w.stop = "/etc/init.d/apache2 stop"
w.restart = "/etc/init.d/apache2 restart"
w.start_grace = 10.seconds
w.restart_grace = 20.seconds

w.start_if do |start|
start.condition(:process_running) do |c|
c.interval = 5.seconds
c.running = false
end
end
w.restart_if do |restart|
restart.condition(:lambda) do |c|
c.lambda = lambda{`ps -e -o pmem,cmd | grep apache2 | grep -v grep | awk '{sum += \$1;}END{print sum;}'`.to_i > 90}
c.notify = 'maintainer'
end
end
end
end

DDoS

dm — Fri, 10 Oct 2008 16:35:49 +0000

Привалило мне сие несчастье некоторое время назад. Ничем не примечательный сайт, ДДоСят уже неделю. В процессе борьбы выросло небольшое детище на Ruby, именуемое Bananoid. От слова bann. И живет оно на Github’е. Пока оно меня спасает, но непростительно есть 50-100% CPU. Ну что ж, будем лечить.

Хочу особо поблагодарить Критика, Devil’a и Andrew за помощь в бою.

Ruby fixed in Ubuntu

dm — Fri, 27 Jun 2008 08:00:26 +0000

Наконец-то в Ubuntu полечили уязвимость в Ruby, обновление доступно из репозитария security.ubuntu.com.

Провериться можно выполнив (хоть в irb) код:

ary = []; ary[0x7fffffff] = "A"

Тут больше и подробнее

FAM and Gamin

dm — Thu, 13 Mar 2008 11:24:01 +0000

Вчера потратил немного времени и произвел скрипт-демон для отлова изменений в указанной папке.
Но вот работает связка только с FAM. А в Linux сейчас уже используется более продвинутый Gamin. Как подружить Ruby с Gamin?

Собссно, сам демон:

#!/usr/bin/ruby

# load the fam bindings
require 'fam'

require 'logger'
require 'rubygems'
require 'daemons'

my_path = Dir.pwd
monitored_path = Dir.pwd + '/monitored/'
Daemons.daemonize
#Daemons.daemonize :ontop => true # For debugging purposes. Doesn't detach.

logger = Logger.new my_path + '/dirmon.log'
logger.level = Logger::INFO

unless test ?d, monitored_path
log_file.write 'ERROR: Specified directory does not exist.'
exit 1
end
pid = File.new(my_path + '/dirmon.pid',"w")
pid.write Process.pid
pid.close

Dir.chdir(my_path)

# open a connection to FAM and start monitoring specified path
fam = Fam::Connection.new
fam.monitor_dir monitored_path
logger.info "Fam connected"

while true
# if there are fam events pending, then process them
if fam.pending?
ev = fam.next_event
case ev.code
when Fam::Event::CHANGED
logger.info 'File changed: ' + ev.file
when Fam::Event::DELETED
logger.info 'File deleted: ' + ev.file
when Fam::Event::CREATED
logger.info 'File created: ' + ev.file
end
end
end

Railsforum.ru

dm — Thu, 17 Jan 2008 23:24:17 +0000

Открылся новый ресурс – http://www.railsforum.ru.
Прошу любить и жаловать.

ruby directory listing

dm — Fri, 28 Dec 2007 22:27:54 +0000

Делая первые шаги в руби и рельсах наткнулся на необходимость получить листинг папки без “.” и “..”. Вот так реализовалось:

class Dir
def self.listing(path, &block)
return nil if path.nil?
entries = Dir.entries(path).reject! { |filename| filename=='.' or filename=='..'}
entries.each(&block) if block_given?
entries
end
end

Огромаднейшее спасибо kpumuk‘у за подсказки и помощь нюбу =)

rails got the power

dm — Wed, 19 Dec 2007 12:38:24 +0000

Работаю сейчас над проектом. И вот для публикации надо сделать

кол-во просмотров
теги
рейтинги
комментарии

Начал писать на рельсах. И обнаружил

Только кол-во просмотров надо писать самому. Сильно впечатлился.

NetBeans 6.0 released

dm — Mon, 03 Dec 2007 21:26:22 +0000

Наконец-то вышел NetBeans 6.0 – замечательная Java IDE. Для меня она ценна изумительной поддержкой Ruby, а также наличием в плагинах средств для работы с UML, PHP, C/C++.

Rails: first steps

dm — Tue, 10 Apr 2007 06:34:46 +0000

Робко и нерешительно я начал делать первые шаги по рельсам. И что я могу сказать – мне нравится.

Первое с чем я пока столкнулся – с ковырянием в БД. Реализация – просто зверь!
Миграции – это нечто. Итак, для начала имеем пустую миграцию – версия 0. Далее была создана миграция (автоматом) v1. Что есть миграция? Вот что:

class CreateNews < ActiveRecord::Migrationdef self.up
create_table :news, :force=>true, :options=>"ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE utf8_unicode_ci" do |t|
t.column :title, :string, :limit=>255, :null => false
t.column :teaser, :text, :null => false
t.column :body, :text, :null => false
t.column :created_at, :datetime, :null => false
t.column :updated_at, :datetime, :null => false
end
end

def self.down
drop_table :newsend
end

По привычке у меня установлен mysql (v5). И когда первый разописал структуру, тотекстовые данные сплошь были latin1. Потому в опциях добавил кодировку. Но после этого таблица стала не InnoDB! Оказалось, что по умолчанию рельсы создают таблицы типа InnoDB, если другое не указано в опциях. Как только добавляешь опции – требуется указать и таблицу. Ну вот и указал.

У многих возникает вопрос: а зачем же описывать структуру БД в коде? А для того, чтоб можно было красиво и легко переходить между изменениями, внесенными в процессе разработки. И не говорите, что БД спроектированная в начале работы над проектом не меняется никогда- не поверю, сам давно так думал, но всегда что-то но менялось.

И вот можно в следующей миграции описать какие поля добавить, что где поменять и т.п. – и в консоли на сервере сделать rake db:migrate VERSION=x. Разве это не удобно? Например, при откате на предыдущую версию тут же можно описать какие действия выполнять.

Ну и кроме миграций есть еще один плюс, который бросился мне в глаза: ведь эту же структуру не изменяя (вероятней всего, еще не пробовал) можно загнать и в PostgreSQL, и хоть в оракл.

И после этого – вот такой код для выбора всех новостей:

def index
@news = News.find(:all)
end

После написания таких кусочков задумался, а как же реализованы шаблоны и сильно порадовался – есть такая штука как layout и, собственно, view. View используется для отображения конкретного куска, а layout и есть шаблон всей страницы.

Layout:

<html><head><title>FirstSteptitle>
< %= javascript_include_tag 'prototype'%>
head><body>
< %= yield %>body>
html>

View:

Вот что я могу сказать о первых своих шагах – жутко нравится.

Rails screencasts

dm — Mon, 09 Apr 2007 09:54:55 +0000

Найден поистине неисчерпаемый источник знаний