Jenkinsで変更点をメールする方法

以前書いた、Jenkinsでログの一部分からメールを作成する方法ではログの一部分を送る方法を記載した。
メールで変更点もわかるようなのだが、公式のドキュメントに一切説明がない。

トークンリファレンスにさらっと書かれているが非常にわかりづらいため、メモとして残す。
（このエントリー書いたのに消えてた・・・。）

変更点を送るには３つ方法がある。
${CHANGES, showPaths, showDependencies, format, pathFormat}
直近のビルドからの変更点
${CHANGES_SINCE_LAST_SUCCESS, reverse, format, showPaths, changesFormat, pathFormat}
直近の成功ビルドからの変更点
${CHANGES_SINCE_LAST_UNSTABLE, reverse, format, showPaths, changesFormat, pathFormat}
直近のUNSTABLEか成功ビルドからの変更点



showDependencies - 使ったことないからわからない
showPaths - ファイルパスを表示するかどうか
format - 表示フォーマット
pathFormat - ファイルパスの表示方法のフォーマット

formatとpathFormatで使える変数
%a コミットした人
%d コミットした日付
%m コミットメッセージ
%p ファイルパス
%r リビジョン

ただし、%dと%rは全てのバージョン管理システムでサポートされているか不明。

CHANGES_SINCE_LAST_SUCCESSとCHANGES_SINCE_LAST_UNSTABLEの設定
reverse - true: 最新の変更が上にくる。デフォルトがfalse
format - それぞれのビルドでの表示方法。
%c 変更点
%n ビルド番号

showPaths, changesFormat, pathFormatはCHANGESのshowPaths, format, pathFormatと同じ


それで今回こんな感じで作ってみた。

${CHANGES, format="コミッター: %a\nリビジョン: %r\n変更ファイル: %p\nコメント: %m", pathFormat="\n\t-\ %p"}
結果：
コミッター: shiraji

リビジョン: SHA1のリビジョン

変更ファイル:

        - folder/filename

        - folder/filename2

コメント: ext-mail test

なぜか、showPaths=trueを設定すると動かない(v2.25）。まぁ問題ないから別にいいやということで放置。

Thorを使ってみた(Rubyバッチ編)

Ruby

ちょっとJenkinsのことは置いておいて、rubyでバッチを書くことになった。

悩んで、いろいろ試してみた。
まずは、Thor。
Railsにデフォルトで入っているのだけど、Thorだけで利用してみる。

実行結果
ヘルプ１
# ruby thor_test.rb help
Commands:
thor_test.rb execute [OPTION] # Test execute
thor_test.rb help [COMMAND] # Describe available commands or one specific command

Options:
-h, [--help] # Thor test

ヘルプ２
# ruby thor_test.rb help execute
Usage:
thor_test.rb execute [OPTION]

Options:
-p, [--production] # Run production DB server
-n, [--number=N] # test number
# Default: 3
-h, [--help] # Thor test

Test execute

デフォルト
# ruby thor_test.rb
DEVELOPMENT
3

パラメータ設定
# ruby thor_test.rb -p -n=100
PRODUCTION
100

こんな感じで、ソース少ないのに、複雑なことができちゃう。

===
共通部分を抽出して、バッチ作成を簡単にできるようにしてみました。
Thorを使いやすくしてみた(Ruby・Railsバッチ編)

pleiadesの英語化

Java Eclipse

Eclipseのpleiadesはall-in-oneで色々便利。でもEclipse自体は英語のが便利。
だから、pleiadesの英語化を行う。


eclipse.iniのコメントアウト
#-javaagent:dropins/MergeDoc/eclipse/plugins/jp.sourceforge.mergedoc.pleiades/pleiades.jar

以下削除する。
plugins/jp.sourceforge.mergedoc.jstyle_4.2.2.1
configuration/jp.sourceforge.mergedoc

Eclipse再起動

chef-soloでさくらVPSにJenkinsを立ててみる。（GitHub設定編）

shell サーバ Git GitHub SSH

chef-soloの勉強をしつつ、色々触っている。
いくつかCOOKBOOKを作成したのですが、新しい環境で使って、その場で手を入れようとすると、毎回環境ごとに公開鍵を設定する必要がある。
そこで、最初に考えたのが、秘密鍵の共有。→だめだろと即却下。



色々調べて、GitHubのAPIを使うことにした。
GitHub APIの日本語のドキュメントって少ない。最初どうやればいいのかわからなくてハマりました。

以下が今回利用したUser Public Keys APIの詳細
http://developer.github.com/v3/users/keys/

他のGitHub API
http://developer.github.com/

できたてホヤホヤな環境で使うため、shellで作ってみた。

やったことはcurlでGitHub APIを叩く！だけ。
access_tokenの取得

curl -u "username:password" -d "{"scopes":["user"]}" https://api.github.com/authorizations
SSHの設定をする
curl -H "Authorization: token 上記で得たトークン" https://api.github.com/user/keys -d "{ "title":"SSH鍵の名称", "key":"公開鍵" }"

JSONでやり取りしてるのだからperlでやるべきだった。
他にもGitHub APIで便利なのがあったらperlで書き直す！（今のところ、ない・・・。）

chef-soloでさくらVPSにJenkinsを立ててみる。（chef-solo準備編）

サーバ chef Git Gist

ちょっと前のエントリーが長くてだるいので、chefでインストールすることにする。
その前に、chef-soloの準備をする。

Gistをクローンすれば、chef-soloの環境が揃うーとウキウキしてたのだけど、

git clone https://gist.github.com/5204368.git

Initialized empty Git repository in /root/5204368/.git/

error: RPC failed; result=22, HTTP code = 400
できない・・・さくらVPSだとできないらしい。
プロトコルをgitにするとできるらしい。

さくらサーバからgistのリポジトリをcloneできない
https://github.com/willnet/misc/issues/1

あんまり気にせずに、言われた通りにやってみる。

git clone git://gist.github.com/5204368.git

cd 5204368/

bash prepare_chef_solo.sh
さて、chefでJenkins環境作るかーって思ったら時間切れ。

ということで、また次回。

＝＝＝ 2013/04/10 追記 ＝＝＝
いろいろやっていて、ruby1.8ではできないことが多かった。
yumで入れたrubyでは限界のため、ソースから入れることにした。

自分の時間が取れなくて、全く進んでいかない・・・涙

shellスクリプトでdateをダイナミックに取得する

shell Gist GitHub

ちょくちょくはまるのでメモ
曜日を取得するとか今週の○曜日がいつかとかshellでやりたいとき以下のようなプログラムを書く。

`date -d　'1 days' +"%Y-%m-%d"`
こんな感じで普通書いていたのだけど、「1」の部分を変数にして、シングルクォーテーションでやると展開できない。
これはシングルクォーテーション内では変数が展開されないため。ダブルクォーテーションで行うこと。


それにしても、初めてGist使った。
これ便利。はてなでの使い方にさらにはまったので、そちらもメモ

「Embed this gist」にあるタグをコピーする。

ここから、GitHubのアカウント名（上記の場合、shiraji/）をURLから削除する。


GitHubのURLを文字列にするのはどうやるのか。。。
もうループにはいってるからとりあえず無視。

さくらVPSでJenkinsを立ててみる。

サーバ Jenkins

yumの更新

# yum update
日本語化
# vim /etc/sysconfig/i18n

LANG="ja_JP.UTF-8"に変更する。
ユーザ作成とパスワード設定（shirajiを作る場合）
# useradd shiraji

# passwd shiraji
権限の設定
# usermod -G wheel shiraji

# visudo

wheelグループにすべてを許可する。

%wheel  ALL=(ALL)       ALL
suの設定
# vim /etc/pam.d/su

suコマンドをグループ内のユーザーだけが使用できるように設定

auth            required        pam_wheel.so use_uid
ログイン関連
クライアントがwindowsだった場合、PuTTYなどのツールで公開鍵、秘密鍵を作成する。Linuxだった場合はssh-keygen

shirajiでSSHログインする。

# cd

# mkdir .ssh

# chmod 700 .ssh

# vi .ssh/authorized_keys

公開鍵を貼り付ける

# chmod 600 .ssh/authorized_keys
rootでのログインをできなくする

# vi /etc/ssh/sshd_config

sshの再起動

# service sshd restart

rootでログインできないこと、作成したユーザでログインできることを確認する。
公開鍵認証のみに設定する。

# vi /etc/ssh/sshd_config

以下になるように編集

PubkeyAuthentication yes

PasswordAuthentication no

sshの再起動をして、再度ログインができることを確認する。
ポートの変更
# vi /etc/ssh/sshd_config

Port番号を22から違う数字（0-1023以外）に変更する

Port 10022
iptablesの設定をする
iptablesのインストール

# yum install iptables

Loaded plugins: fastestmirror, security

Loading mirror speeds from cached hostfile

epel/metalink                                                                                        | 5.3 kB     00:00     

 * base: www.ftp.ne.jp

 * epel: ftp.kddilabs.jp

 * extras: www.ftp.ne.jp

 * updates: www.ftp.ne.jp

base                                                                                                 | 3.7 kB     00:00     

extras                                                                                               | 3.5 kB     00:00     

updates                                                                                              | 3.5 kB     00:00     

Setting up Install Process

Package iptables-1.4.7-5.1.el6_2.x86_64 already installed and latest version

Nothing to do

さくらVPSの場合、インストールされている。
iptablesの設定

# vi /etc/sysconfig/iptables

以下をコピペ（内容はよくわからん。ｴ･･･）

＝＝＝スタート＝＝＝

 *filter

 :INPUT   ACCEPT [0:0]

 :FORWARD ACCEPT [0:0]

 :OUTPUT  ACCEPT [0:0]

 :RH-Firewall-1-INPUT - [0:0]

 -A INPUT -j RH-Firewall-1-INPUT

 -A FORWARD -j RH-Firewall-1-INPUT

 -A RH-Firewall-1-INPUT -i lo -j ACCEPT

 -A RH-Firewall-1-INPUT -p icmp --icmp-type any -j ACCEPT

 -A RH-Firewall-1-INPUT -p 50 -j ACCEPT

 -A RH-Firewall-1-INPUT -p 51 -j ACCEPT

 -A RH-Firewall-1-INPUT -p udp --dport 5353 -d 224.0.0.251 -j ACCEPT

 -A RH-Firewall-1-INPUT -p udp -m udp --dport 631 -j ACCEPT

 -A RH-Firewall-1-INPUT -p tcp -m tcp --dport 631 -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state ESTABLISHED,RELATED -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 80    -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 20    -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 21    -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 25    -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 10022 -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 8080  -j ACCEPT

 -A RH-Firewall-1-INPUT -j REJECT --reject-with icmp-host-prohibited

 COMMIT

＝＝＝エンド＝＝＝

以下のラインは必ず入れる。10022は上記のSSHのポート設定のポート。入れないとログインできなくなる。8080はJenkins用にあけておく。

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 10022    -j ACCEPT

 -A RH-Firewall-1-INPUT -m state --state NEW -m tcp -p tcp --dport 8080    -j ACCEPT

iptableの再起動

# /etc/rc.d/init.d/iptables restart
もう一度、SSHで入れるかどうか確認する。（ちょくちょく確認したほうが身のため。）
logwatchの設定
logwatchのインストール

# yum install logwatch

インストールできたかどうか確認

# /usr/sbin/logwatch --print

ログ的なものが出ていればOK

logwatchのメール送信先の設定

# vim /etc/logwatch/conf/logwatch.conf

MailTo=shiraji@example.comと記載。

フォルダの作成

# mkdir -p /usr/local/log/logwatch
Javaのインストール
# wget http://javadl.sun.com/webapps/download/AutoDL?BundleId=49018

# mv jre-6u26-linux-x64-rpm.bin\?AuthParam\=1361545167_db8e32ac10dd7744bf2875dd0f3ef4f5\&GroupName\=JSC\&FilePath\=%2FESD6%2FJSCDL%2Fjdk%2F6u26-b03%2Fjre-6u26-linux-x64-rpm.bin\&File\=jre-6u26-linux-x64-rpm.bin\&BHost\=javadl.sun.com jre.bin

# ./jre.bin
インストールできたか確認

# java -version

JAVA_HOMEを追加する。以下を.bashrcとかに追記

export JAVA_HOME=/usr/java/default/
Jenkinsのインストール
Jenkinsをインストールするためのレポジトリーの設定

# wget -O /etc/yum.repos.d/jenkins.repo http://pkg.jenkins-ci.org/redhat/jenkins.repo

# rpm --import http://pkg.jenkins-ci.org/redhat/jenkins-ci.org.key
インストール

# yum -y install jenkins
Jenkinsの起動

# /sbin/service jenkins start
起動の確認

http://ipaddress:8080/
Serviceに登録する

# chkconfig --list jenkins

jenkins         0:off   1:off   2:off   3:on    4:off   5:on    6:off

# chkconfig jenkins on

# chkconfig --list jenkins

jenkins         0:off   1:off   2:on    3:on    4:on    5:on    6:off

終わり。長い・・・。
chefでできるようにしよかな。