hiroki_kana 開発日記

ブログ移行しました

2009-11-08T13:15:00.002+09:00

せっかく自宅サーバがあるので自宅サーバに移行しました。

hiroki.kanaの日常
http://blog.hirokikana.com/

これからはこのブログにこちらではなく、新しいブログに書いていこうかと思います。
今後ともよろしくお願いします。

Catalystアプリと設定ファイルを共通化

2009-10-04T20:50:00.006+09:00

作ろうとしているやつがちょうどCatalystで作り直そうかと思っていたのでひとまず、設定ファイルをCatalystから切り離して、Catalyst以外のアプリからも読み込めるようにしました。

まず、作成するアプリは下記のようなライブラリ構成です。

MyApp::API　　　アプリケーションのロジック部です

MyApp::Web　　　Catalyst関連のものです

MyApp::Utils　　ユーティリティ。Catalystから切り離す。

MyApp::Config　設定ファイルに関するクラス

MyApp::Log　　　ログを出力するクラス

ともあれ、catalyst.plでひな形を作ります。

$ catalyst.pl MyApp::Web

まずlib/MyApp/Config.pmを下記のように作成します。

package MyApp::Config;

use strict;
use warnings;
use Config::Multi;
use MyApp::Utils;
use base 'Class::Singleton';

our $FILES ;
sub _new_instance {
    my $cm = Config::Multi->new(
        {
        dir => MyApp::Utils::path_to('conf')->stringify ,
        app_name    => 'myapp' ,
        extension   => 'yml'
    });
    my $config = $cm->load();
    $FILES = $cm->files;
    return $config;
}
sub files {
    return $FILES;
}

1;

参考サイトのコピペです。すいませんすいません。
ここで設定したapp_nameとextensionが設定ファイル名に使用されます。
上記設定だとmyapp_web.ymlになります。

次にMyApp::Utils。

package MyApp::Utils;

use warnings;
use strict;
use Path::Class::Dir;
use Path::Class::File;
use FindBin;

sub home {
    return $ENV{MYAPP_HOME} ||  Path::Class::Dir->new(  $FindBin::Bin, './../' );
}

sub path_to {
    my ( @path ) = @_;
    my $path = Path::Class::Dir->new( &home , @path );
    warn $path;
    if ( -d $path ) { return $path }
    else { return Path::Class::File->new( &home, @path ) }
}

1;

これも参考サイトのコピペです。すいませんすいません。
このメソッド、ログのところでも少し使ったので今後もたぶん使う&拡張することになるかと思います。

つぎに、Config用のCatalystプラグインです。
MyApp/Pluginディレクトリを作成して、Config.pmファイルをつくります。
Catalyst 5.8でやったのでNEXTじゃないやつ(名前なんだっけ?)を使いました。

package MyApp::Plugin::Config;

use strict;
use warnings;
use MyApp::Config;
use MRO::Compat;

our $VERSION ='0.01';

sub setup {
    my $c = shift;
    my $config = MyApp::Config->instance();

    if( $c->debug ) {
        my $files = MyApp::Config->files();
        for my $file ( @{$files} ) {
            $c->log->debug( 'Load Config ' . $file );
        }
    }

    $c->config( $config ) ;
    $c->next::method( @_ );
}

1;

そしてCatalystアプリ本体のlib/MyApp/Web.pmに下記を追加します。

our $VERSION = '0.01';
use Catalyst qw/+MyApp::Plugin::Config/;

設定ファイルをconf/myapp_web.ymlに作成します。

---
test: hogehoge

これでCatalystから設定ファイルの内容が拾えればOKです。
lib/MyApp/Web/Controller/Root.pmを下記のように修正して、テストサーバーを上げて画面にhogehogeと表示されれば成功です。

sub index :Path :Args(0) {
    my ( $self, $c ) = @_;

    # Hello World
    $c->response->body($c->config->{test});
}

sub default :Path {
    my ( $self, $c ) = @_;
    $c->response->body( 'Page not found' );
    $c->response->status(404);
}

Catalyst以外からも下記のように利用する事ができます。
ちなみにbin/test.plのような名前で作成しました。

#!/usr/bin/perl
use strict;
use warnings;
use FindBin;

use lib($FindBin::Bin . '/../lib');

use MyApp::Log;

my $config = NaNaCa::Config->instance();
print "$config->{test}\n";

これでひとまずConfigをCatalystから分離することができました。
理解しきれていないこと(特に初めて使ったクラス群)が多いので、ほとんど参考サイトをコピペさせてもらいました。

ログもLog4perlで出力しつつ、Catalystから切り離そうとしたんですがやっぱり同じようにSingletonにした方が良いもんなんでしょうか。
特に多くを望んでいないので、Catalyst::Log::Log4perlという便利なものを使い、同じ設定ファイルを読ませてアプリの方はLog4perlを使うって方法はどうだろうと思っています。
次回はLogについて書きたいと思います。

参考サイト

CatalystとConfig http://perl-mongers.org/2008/08/catalystconfig.html

最近の Catalyst の構成 http://vkgtaro.jp/2009/06/15/catalyst

MacでOpenCVプログラムをコンパイル

2009-08-13T00:12:00.006+09:00

前回、と言ってもだいぶ前にMacにMacPortsを使ってOpenCVをインストールする記事を書きました。
それからだいぶ経ちますが、今回は実際にソースを書いてコンパイルして動かすところまでをやってみたいと思います。

まず、てきとうな場所に下記のようなファイルを作成します。
今回はopencv_test.cというファイル名にしました。
ちなみに、このプログラムは指定した画像を表示するだけのプログラムです。

#include "cv.h"
#include "highgui.h"

int main(int argc, char* argv[]) {
  IplImage* img; //画像ファイルポインタ
  char imgfile[] = "test.jpg"; //ファイル名

  //画像読み込み
  img = cvLoadImage(imgfile, CV_LOAD_IMAGE_COLOR);

  //画像の表示
  cvNamedWindow ("test OpenCV", CV_WINDOW_AUTOSIZE);
  cvShowImage ("test OpenCV", img);
  cvWaitKey (0);
  cvDestroyWindow ("test OpenCV");

  //画像の解放
  cvReleaseImage(&img);

  return 0;
}

次にコンパイルします。
コンパイルする際にインクルードパスとライブラリパスをgccに直接指定します。
OpenCVに必要なヘッダファイルは/opt/local/include/opencvに、ライブラリは/opt/local/lib以下に存在します。

$ gcc -L/opt/local/lib/ -lcxcore -lcv -lhighgui -lml -I/opt/local/include/opencv/ opencv_test.c -o opencv_test
$ ./opencv_test

コンパイルが正常に終了したら出来上がったプログラムを実行すると指定した画像が表示されます。
何かのキーを押すとプログラムが終了します。

OpenCVに関する書籍やWebの例ではWindows上のVisual Studio環境が多いのですが、このようにすることでMacでもOpenCVの開発ができるようになります。
今回はIDEを使わない方法でしたが、XCodeやEclipseでも同じことができると思います。

参考サイト

OpenCVで学ぶ画像認識　http://gihyo.jp/dev/feature/01/opencv

Cactiインストール

2009-06-14T21:44:00.004+09:00

今回は各種統計情報を表示するCactiをインストールします。

一時的にEPELリポジトリを有効にしてyumでインストールを行いました。

# yum --enablerepo=epel install cacti

インストールが完了したらMySQLにCacti用のデータベースとユーザを作成します。
データベース名はcacti、ユーザ名はcactiuser、パスワードはpasswordに設定した例です。

# mysqladmin -u root create cacti
# mysql -u root cacti < /usr/share/doc/cacti-0.8.7d/cacti.sql
# mysql -u root mysql
mysql> GRANT ALL ON cacti.* TO cactiuser@localhost IDENTIFIED BY 'password';
mysql> flush privileges;

次にCactiとApacheの設定ファイルを編集します。
/etc/cacti/db.phpに設定したMySQLのユーザ名とパスワードを記述します。
その他、データベースの設定がある場合はここに記述します。

$database_type = "mysql";
$database_default = "cacti";
$database_hostname = "localhost";
$database_username = "cactiuser";
$database_password = "password";
$database_port = "3306";

Apacheの設定ファイルは/etc/httpd/conf.d/cacti.confに記述します。
デフォルトでは127.0.0.1からしかアクセスすることができない設定になっているので、下記のように編集し同じネットワークからアクセスできるようにします。
編集が終わったらApacheを再起動します。

#
# Cacti: An rrd based graphing tool
#
Alias /cacti    /usr/share/cacti

<Directory /usr/share/cacti/>
        Order Deny,Allow
        Deny from all
        Allow from 192.168.100.0/24
</Directory>

設定後http://<ホスト名>/cacti/にアクセスすると、初期設定ウィザードが表示されます。
インストールタイプを聞かれるので、"New Install"を選択します。
次の画面でCactiが使用するユーティリティのパスが表示されますが、その際にNOT FOUNDがある場合は該当のツールをインストールしてください。
私の場合はnet-snmp-utilsを追加でインストールしました。

Finishを押すとCactiのログイン画面が表示されるのでユーザ名admin、パスワードadminでログインします。

次にSNMPの設定をします。
今回は特にほとんど設定ファイルをいじらずにほぼデフォルトのままにします。
表に置くサーバーなどはコミュニティを切るなどの配慮が必要になるかと思います。

/etc/nsmp/snmpd.confの下記部分に一番上の一行を追加します。
これによってすべてのSNMPのデータを取得できるようになります。

view    systemview    included   .1
view    systemview    included   .1.3.6.1.2.1.1
view    systemview    included   .1.3.6.1.2.1.25.1.1

snmpdを再起動し、snmpwalkを使い正しく取得できるかどうか確認します。
snmpwalkで情報が取得できれば正しく動作しています。

# service snmpd restart
# snmpwalk -v 2c -c public localhost

次にCactiで監視ホストの登録とグラフの登録を行います。
ConsoleタブのDevicesをクリックするとlocalhostがあります。
これが監視ホストで、追加する場合はここに追加します。
次に設定で、Host Templateをucd/net SNMP Hostにし、SNMP VersionをVersion 2に設定します。
Saveボタンを押し、これらの設定を反映させます。

グラフの追加にはConsoleタブのDevicesを開いたときに表示されるCreate Graphs for this Hostをクリックするとグラフを追加することができます。
追加したいグラフをチェックし、createボタンを押すことでグラフが追加されます。
グラフの一覧はGraphタブ内から見ることができます

ffmpegのインストール(メモ)

2009-04-19T13:55:00.006+09:00

動画録画サーバーに入れてあるffmpegを最新版にしました。
iPhone用の動画を作る際に最新版だと-f ipodを渡すだけでできるとのことだったので、アップデートしました。

そのときの方法をメモ的ですがのせておきます。
ソースから導入するので、現状の環境を汚さないように/usr/local/ffmpeg以下にすべてが導入されるようにしました。

まず、faacとfaadのインストール。

$ wget http://jaist.dl.sourceforge.net/sourceforge/faac/faac-1.28.tar.gz
$ tar xzvf faac-1.28
$ ./bootstrap
$ ./configure --prefix=/usr/local/ffmpeg
$ make 
$ make install

$ wget http://jaist.dl.sourceforge.net/sourceforge/faac/faad2-2.7.tar.gz
$ cd faad2-2.7
$ chmod 755 bootstrap
$ ./bootstrap
$ ./configure --prefix=/usr/local/ffmpeg
$ make
$ make install

次に、x264で使用するyasmのインストール。
前まではrpmforgeのやつを使ってたんですが、ソースから簡単に導入できたので入れました。

$ wget http://www.tortall.net/projects/yasm/releases/yasm-0.7.2.tar.gz
$ tar xzvf yasm-0.7.2.tar.gz
$ cd yasm-0.7.2
$ ./configure --prefix=/usr/local/ffmpeg
$ make
$ make install

次に、x264のインストール。

$ wget ftp://ftp.videolan.org/pub/videolan/x264/snapshots/x264-snapshot-20090412-2245.tar.bz2
$ tar xjvf x264-snapshot-20090412-2245.tar.bz2
$ cd x264-snapshot-20090412-2245
$ export PATH=/usr/local/ffmpeg/bin:$PATH
$ ./configure --prefix=/usr/local/ffmpeg
$ make
$ make install

最後にffmpegのインストール。

$ svn co svn://svn.mplayerhq.hu/ffmpeg/trunk ffmpeg
$ cd ffmpeg
$ ./configure --enable-libx264 --enable-libfaad --enable-libfaac --enable-pthreads --extra-ldflags="-L/usr/local/ffmpeg/lib" --extra-cflags="-I/usr/local/ffmpeg/include" --enable-gpl --prefix=/usr/local/ffmpeg
$ make
$ make install

これでひとまず完了です。
iPhone用にしか考えていないので、対応コーデックは最低限にしました。

XSからlibcのputs関数を呼び出す

2009-04-13T00:27:00.004+09:00

前回はCのコードをxsコードに書いて、それを実行するということをやりました。
今回は外部のCライブラリを呼び出してみたいと思います。
一番簡単そうな例として、libcのputs関数を呼び出してみます。

まずはXSライブラリのひな形を作成します。

$ h2xs -A -n libcXS
perl Makefile.PL

次にXSソース(libcXS.xs)を編集します。

#include "EXTERN.h"
#include "perl.h"
#include "XSUB.h"

#include "ppport.h"

#include "stdlib.h"

MODULE = libcXS  PACKAGE = libcXS  

void
puts(value)
char * value

追記したのは、include部にstdlib.hを追加したのと前回も追加した関数の戻り値などの定義部分です。
前回のようCODEセクションを定義してコードを書かなくても、既存のライブラリ呼び出しの場合は定義だけでOKです。

最後にmakeして完了です。

実際にこのモジュールを使ったPerlコードを使った例が次のものです。
標準出力にhogehogeと表示されるはずです。

#!/usr/bin/perl

use strict;
use ExtUtils::testlib;
use libcXS;

libcXS::puts("hogehoge");

だんだんわかってきたような気がしてきていますが、きちんと理解するためにはもう少し時間がかかりそうです。
ひとまず、perldoc perlxsとモダンPerl入門を改めて読んでみます。

----
追記:
なぜか、#include "stdlib.h"を消しても動きます…
前段階でincludeされてるのかなぁ、それとも別の原因…？
今度は違うライブラリでやってみたいと思います。

インストールマニアックス2009に応募

2009-04-11T00:15:00.003+09:00

http://www.thinkit.co.jp/maniax/2009/

インストールマニアックス2009に応募しました。
サーバー1台とWindows Web Server 2008を無償提供してもらえ、それに期間中にどれだけたくさんのOSSをインストールできるか競うというイベントです。

前回のには参加しそびれてしまったので、今回は応募できました。
当たれば今月末にでも機材が届くのかもしれないです。

機材を無償提供してもらえるのはうれしいですが、1年間動かし続けなきゃいけないのがちょっと痛いですが…電気代的な意味で。

Pythonでテキストベースのインターフェイスを作成する

2009-04-08T00:23:00.008+09:00

今日、よくLinuxのテキストモードインストール時に使用するインターフェイスの自作しているのを見て自分でもやりたくなってきたのでちょっと調べてみました。
何に使うかと言われると…ちょっと？ですが。

よく見るテキストモードでのインストールにはnewtというライブラリで実現できているのですが、そのnewtをPythonから使えるようにしたのがSnackというライブラリです。
setupコマンドでも利用されている、アレです。

CentOSでは何もインストールせずともSnackが含まれていたのですが、ubuntu(MIE)には含まれていなかったのでインストールしました。
ちなみにパッケージ名はpython-newtです。

使い方は下記のサイトにまとまっているのですが、全部理解するには少し時間がかかりそうです。
http://www.wanware.com/tsgdocs/snack.html

ひとまず、0.1秒に1%増えるプログレスバーだけ作ってみました。


#!/usr/bin/env python

import snack
import time

screen = snack.SnackScreen()

g = snack.GridForm(screen, 'TEST', 1, 1)

scale = snack.Scale(50, 100)
scale.set(0)
g.add(scale, 0, 0)

g.draw()

count = 0
while 1:
    count = count + 1
    scale.set(count)
    g.draw()
    screen.refresh()
    time.sleep(0.1)
    if count == 100:
        break

screen.finish()

まだGrid、Formあたりの概念が理解しきれていないので引き続きドキュメントを読んでみます。
英語が苦手だとこんなところで障害になるんですよね…orz

あと、意外とGoogle Code Searchが参考になりました。
lang:python "import snack"とかで調べると使われてるコードがたくさん出てきて参考になります。

Blogger Syntax Hilighterを導入

2009-04-07T01:15:00.004+09:00

いつも記事でソースコードを書くときに毎回divとpreで囲んでごにょごにょしてたんだが、下記ページを参考にBlogger SYntax Hilighterを入れてみた。
http://www.kuribo.info/2009/02/blogger-syntax-highlighter-perl.html

最初Perlに対応していなくてどうしようかと思ったけど、どうにかなりました。

ひとまず、さっきの記事に適用してみました。
<とか>はきちんとエスケープしないとダメなようです。
ためしにいろいろ書いてみよう。


public class Test {
    public static void main(String[] args) {
        System.out.println("Hello World!");
    }
}


#include <stdio.h>

main() {
    printf("Hello World!!\n");
}


#!/usr/bin/env python

def hello():
 print "Hello World!"

hello()

XSを使ってみる

2009-04-07T00:36:00.008+09:00

PerlからC APIを呼ぶ仕組みでXSというものがあります。
これにより、Cで書いた部分の処理に関しては高速になったり、既存のCで書かれたライブラリが使用できるようになるらしいです。
ちょっとおもしろそうなので、練習に動かしてみました。

モダンPerl入門に詳しく書いてあったのですが、ちょっとやることが多すぎたので下記のサイトの例をやってみました。
http://d.hatena.ne.jp/higepon/20050615/1118829090

手順は上記のサイトに書いてある通りに行いました。

$ h2xs -A -n MyTestXS ←XSのひな形を作成
$ cd MyTestXS/
$ perl Makefile.PL ← Makefileを作成
［MyTestXS.xsを編集］
$ make

MyTestXS.xsは次のように編集しました。
ちなみにMODULE = MyTestXSまでは自動的に作成されてました。

#include "EXTERN.h"
#include "perl.h"
#include "XSUB.h"

#include "ppport.h"


MODULE = MyTestXS  PACKAGE = MyTestXS  

int
increment2(value)
int value
CODE:
 RETVAL = value + 2;
OUTPUT:
 RETVAL

追記した部分は、まず戻り値の型、関数名、引数名と型を指定します。
CODEより後ろには実際のCのコードを記述します。
OUTPUTに戻り値を指定します。

makeして失敗がなければ、XSモジュール作成完了です。
では、実際に使ってみつつ、ベンチマークもやってみました。
下記のようなコードを書きました。これも参考サイトと同じです。

#!/usr/bin/perl
use strict;

use ExtUtils::testlib;
use MyTestXS;

use Benchmark;

my $count = 5000000;
timethese($count,
   {
       'XS' => 'xs_test();',
       'Perl' => 'perl_test();',
   });

sub xs_test {
    MyTestXS::increment2(100);
}

sub perl_test {
    increment2(100);
}

sub increment2 {
    $_[0] + 2;
}

これを実際に私のMacBookで実行してみると下記のような結果になりました。

macbook:MyTestXS hiroki$ perl ./test.pl 
Benchmark: timing 5000000 iterations of Perl, XS...
      Perl:  5 wallclock secs ( 5.95 usr +  0.08 sys =  6.03 CPU) @ 829187.40/s (n=5000000)
        XS:  3 wallclock secs ( 3.46 usr +  0.04 sys =  3.50 CPU) @ 1428571.43/s (n=5000000)

XSで書いた方が2倍近くパフォーマンスが良いです。

私としては、はやく動かすというよりも既存のCライブラリをPerlから使いたいと思ってるので、引き続き調べます。
モダンPerl入門を見ると詳細に書いてあるようで。

モダンPerl入門デザインパターン実装の練習 -Iterator-

2009-02-17T00:30:00.004+09:00

モダンPerl入門の2章では、各種デザインパターンをPerlで実装した例が出ています。
あまりデザインパターンが得意ではないので、頭の整理と練習がてら自分で書いてみたいと思います。
今日はIterator。

Iteratorは何かデータを順番に取り出していく処理を抽象化するためのパターンです。
何かのデータとは、配列であったりファイルであったり、データベースであったりという感じです。

何かの連続したデータをひとつずつ取り出すときはIteratorを使った方が良さそうということなようです。
例えば、従来は配列で持っていたデータをある日ファイルに持つようになりましたと。
そんなとき、Iteratorを使っていない場合は該当箇所をすべて直す必要があります。
しかし、Iteratorを使っていればデータを取り出すという処理が抽象化されているので、使用するオブジェクトを変更するだけで良いのです。
よかったね、よかったね、ということになると。
# あってるか不安…

書籍の例では配列とリンクリスト(Data::LinkedListという仮想のモジュールを使用)、ファイル用のIteratorを実装していました。
ひとまず、軽く実践できそうな配列とファイル(File::IOを使用)の実装をしてみました。

package MyIterator;
use Moose::Role;

requires qw(next);

no Moose::Role;

package MyIterator::Array;
use Moose;
use MooseX::AttributeHelpers;

with 'MyIterator';

has 'array' => (
    metaclass => 'Collection::Array',
    is => 'rw',
    isa => 'ArrayRef',
    required => '1',
    trigger => sub {
 my ($self, $list) = @_;
 $self->size(scalar @$list);
    },
    provides => {
 get => 'array_get'
    },
    );

has 'size' => (
    is => 'rw',
    isa => 'Int',
    default => 0,
    );

has 'current' => (
    metaclass => 'Number',
    is => 'rw',
    isa => 'Int',
    default => 0,
    provides => {
 add => 'current_add'
    }
    );

__PACKAGE__->meta->make_immutable;

no Moose;

sub next {
    my $self = shift;
    if ($self->current >= $self->size){
 return ();
    }

    my $i = $self->current;
    $self->current_add(1);
    return $self->array_get($i);
}

1;

package MyIterator::File;
use Moose;

with 'MyIterator';

has 'filepath' => (
    is => 'rw',
    isa => 'Str',
    required => 1,
    );

has 'fh' => (
    is => 'rw',
    );

__PACKAGE__->meta->make_immutable;

no Moose;

use IO::File;

sub BUILD {
    my $self = shift;

    my $io = IO::File->new();
    $io->open($self->filepath(), 'r') or die $!;
    $self->fh($io);

    return $self;
}

sub DESTROY{
    my $self = shift;
    $self->fh()->close()
}

sub next {
    my $self = shift;

    my $fh = $self->fh();
    my $line = <$fh>;

    return $line ? $line : ();
}

1;

package main;

my $iterator = MyIterator::Array->new(array => ['a', 'b', 'c']);
while (my $result = $iterator->next()) {
    chomp $result;
    print "$result\n";
}

$iterator = MyIterator::File->new(filepath => '/Users/hiroki/Documents/perl/iterator.pl');
while (my $result = $iterator->next()) {
    chomp $result;
    print "$result\n";
}

MyIteratorが今回作成するIteratorのインターフェイス。
インターフェイスはMoose::Roleを使うと簡単に実現できます。
今回はnextメソッドを必ず実装するようにしました。

MyIterator::Arrayが配列用のIterator。
データが入った配列を格納するarray、配列のサイズを格納するsize、読み込み中の現在の位置を表すcurrentのプロパティがあります。
arrayプロパティのtriggerで1回だけsizeの初期化を行うようになっています。
あとはnextメソッドが実装されています。
なるほどー、MooseとMooseX::AttributeHelpersを使うとこんなに便利なのか。

MyIterator::Fileがファイル用のIterator。
これは自分で書いた。
まず、ファイルハンドルの初期化をBUILDメソッドで行いました。
BUILDメソッドはコンストラクタで初期化された後に呼び出されるので、プロパティなどに値が入っているのは保証されています(required => 1にした場合)。
あとはnextメソッドを実装しました。
returnのところが三項演算子を使っていてちょっとトリッキーですね(これは本に書いてあった)。

で、package main以降が実際に走るコード。
最初は引数で渡した配列を順に表示してる処理です。
次が、ファイルから1行ずつ読み込んで表示する処理です。
どちらもオブジェクト作成の方法は違いますが、値を取り出す処理は一緒です。
なので、$iteratorにはMyIteratorを実装したものが入っていれば同じ処理で値が取り出せます。

次回以降はまた違うデザインパターンを実装してみます。

MacPortsでMooseをインストール

2009-02-15T13:40:00.005+09:00

昨日頼んでいた「モダンPerl入門」が届いたので早速読み進めてみました。
目次を読んだだけでも、最近のPerl関連の書籍にはないような内容が満載。
最近Catalystのことをネットで探しても若干古い情報しかなかったし…。
2章のPerlでデザパタの実装例を紹介しているのは、デザパタの理解が明らかに足りない私にとってはとてもうれしい。
とりあえず、1章と3章と4章を読んでみた。

1章でMooseが紹介されてますね。
名前だけは知ってたんですが、特に放置しててどのようなものかはわからなくて…orz
だいぶ前に流行が過ぎてて今更感はあるかもしれないですが、とりあえず使ってみることにしました。

そこでMacPortsにあったのでインストールしてみたのですが、ちょっと一筋縄ではいかなかったです。
きちんと記録をとってなかったのでちゃんと書けないのですが、ひとまずやったことは次のようなことです。

Perlを5.8.8から5.8.9に
p5-scalar-list-utilsを強制インストール

最初にはまったのはp5-test-simpleでなぜかエラーが出て先に進みませんでした。
私の環境ではPerl5.8が5.8.8_3がactiveになっていたので5.8.9_2に変更したところp5-test-simpleがインストールできました。

$ port installed | grep perl
perl5.8 @5.8.8_3+darwin_9 (active)
perl5.8 @5.8.9_2
$ sudo port deactivate perl5.8
---> Deactivating perl5.8
$ sudo port install perl5.8
---> Activating perl5.8 @5.8.9_2
---> Cleaning perl5.8
$ port installed | grep perl
perl5.8 @5.8.8_3+darwin_9
perl5.8 @5.8.9_2 (active)
$ sudo port install p5-test-simple
---> Activating p5-test-simple @0.86_0
---> Cleaning p5-test-simple

次にp5-scalar-list-utilsのインストールでなぜかこけました。
deactivateしてactivateしてみてもどうにもならなかったので-fオプションをつけて強制インストールしてしまいました。
どうやらwarningが出ているようですが、already existsということだけみたいでした。

sudo port -f install p5-scalar-list-utils
---> Installing p5-scalar-list-utils @1.19_1
---> Activating p5-scalar-list-utils @1.19_1
Warning: File /opt/local/lib/perl5/5.8.9/darwin-2level/auto/List/Util/Util.bs already exists. Moving to: /opt/local/lib/perl5/5.8.9/darwin-2level/auto/List/Util/Util.bs.mp_1234672795.
Warning: File /opt/local/lib/perl5/5.8.9/darwin-2level/auto/List/Util/Util.bundle already exists. Moving to: /opt/local/lib/perl5/5.8.9/darwin-2level/auto/List/Util/Util.bundle.mp_1234672795.
Warning: File /opt/local/lib/perl5/5.8.9/darwin-2level/List/Util.pm already exists. Moving to: /opt/local/lib/perl5/5.8.9/darwin-2level/List/Util.pm.mp_1234672795.
Warning: File /opt/local/lib/perl5/5.8.9/darwin-2level/Scalar/Util.pm already exists. Moving to: /opt/local/lib/perl5/5.8.9/darwin-2level/Scalar/Util.pm.mp_1234672795.
Warning: File /opt/local/share/man/man3/List::Util.3pm.gz already exists. Moving to: /opt/local/share/man/man3/List::Util.3pm.gz.mp_1234672795.
Warning: File /opt/local/share/man/man3/Scalar::Util.3pm.gz already exists. Moving to: /opt/local/share/man/man3/Scalar::Util.3pm.gz.mp_1234672795.
---> Cleaning p5-scalar-list-utils

これであとはsudo port install p5-mooseすれば無事インストールできます。
インストールだけでも少し時間がかかってしまいました。

いつも思うのですが、このブログは環境構築ものの記事ばっかりでその先がないですね…
反省ですね。

Dropboxをインストール

2009-02-11T20:18:00.004+09:00

各所で便利だと噂のDropboxを自宅のMacBookにインストールしてみました。
http://www.getdropbox.com/

クライアント用のソフトはMac以外にもLinux、Windows用のもあるようです。
最初にクライアントソフトで新しいアカウントを作成します。
それだけでインストールは完了です。

あとはFinderの場所→Dropboxを開けば使うことができます。
まだ使い方がよくわかってないです。

大きめのファイルを置いてもすぐに反映されるのはなぜだろう。
あとはバージョン管理みたいのも勝手にやってくれるんだよね？
あとで調べてまとめます。

sudoでパスワードを再度聞かれるまでの時間を調整する

2009-02-11T19:57:00.006+09:00

前の記事でsudoコマンドでパスワードを再度聞かれるまで短いということを書きました。
調べたらやはりすぐ出てきました。

Linux書き散らし: sudoのパスワード入力省略時間の変更

sudo で次にパスワードを聞かれるまでの時間を調節する - ひげぽん OSとか作っちゃうかMona-

ということで自分のMacBookにも反映させておきました。
ちなみに180(3時間)にしました。

Defaults timestamp_timeout = 180

私の場合は長くすれば便利だなーとか適当な考えでのばしたわけですが、時間をのばすと席を外している間にsudoで何か操作されてしまうというセキュリティ的な脅威も生みます。
なので、業務で使用する際はあまり長くするのも望ましくないかもしれないですね。

mod_access_tokenを使ってみた

2009-02-11T17:00:00.007+09:00

livedoor labsで公開されたmod_access_tokenを使ってみました。
mod_access_tokenはコンテンツに対して有効期限をつけたりすることができるApacheモジュールです。
ソースはGoogle CodeにてMITライセンスで公開されています。
http://code.google.com/p/modaccesstoken/

とりあえず使い道はないけれどもインストールしてみました。
まず、ソースをダウンロード&展開して例のごとくインストールをします。
今回はMacPortsでインストールしたAapcheを使いたかったのでconfigureオプションにprefixとapxsのパスを指定しました。

$ tar xzvf mod_access_token-0.10.tar.gz
$ cd mod_access_token
$ ./configure --prefix=/opt/local/apache2 --with-apxs=/opt/local/apache2/bin/apxs
$ make
$ sudo make install

これでインストールは完了です。

ソースファイルのeg以下にhttpd.confの設定例とURLを生成するためのサンプルコード(Perl)が同梱されています。
今回は例としてhttp://localhost/hoge/index.htmlに対して有効期限の設定をしてみたいと思います。

まず、httpd.conf(/opt/local/apache2/conf/httpd.conf)に下記を追記します。

<Location /hoge>
AccessTokenCheck On
AccessTokenSecret 15cfb576a8bdc1551219fdeb3117ed85
AccessTokenAccessKey 7864ffcb01fb5cde1f1c2f37b619fbcd
</Location>

AccessTokenSecretとAccessTokenAccessKeyはサンプルのままです。
運用する際は変更しましょう。

これでApacheを/opt/local/apache2/bin/apachectl restartで再起動すれば/hoge以下のコンテンツはmod_access_tokenの管理下になるので、普通にアクセスすると403(Forbidden)が返ります。

次にURLを生成します。
URLは以下のようなものです。

http://localhost/hoge/index.html?Signature=<Signature>&AccessKey=<AccessKey>&Expires=<Expires>

AccessKeyはhttpd.confに設定したAccessKeyです。
Expiresは有効期限のUNIXタイムスタンプです。ということは有効期限は秒単位で設定できるんですね。
Signatureは"HTTPメソッド + URIのパス + 有効期限 + AccessKey"とAccessTokenSecretをHMAC-SHA1の値をBase64エンコードしたものです。

AccessKey	httpd.confに設定したAccessKey
Signature	"HTTPメソッド + URIのパス + 有効期限 + AccessKey"とAccessTokenSecretをHMAC-SHA1の値をBase64エンコードしたもの
Expires	有効期限のUNIXタイムスタンプ

ちなみにeg以下にあるsign.plでURLを生成できます。
下記ではhttp://localhost/hoge/index.htmlに120秒の期限付きで生成する例です。

$ ./sign.pl http://localhost/hoge/index.html 7864ffcb01fb5cde1f1c2f37b619fbcd 15cfb576a8bdc1551219fdeb3117ed85 120

生成したURLでアクセスしてみるときちんとコンテンツが表示されると思います。
120秒後にアクセスすると再び403になります。

想定される使い方はURLを生成するアプリを作成して、アクセスさせるんだと思います。
livedoorの何かのサービスで使われているらしいです。

せっかくなので、mod_access_tokenのソースを読みつつApacheモジュールの勉強もしてみようかと思います。

MacPortsのApacheを利用する

2009-02-10T01:28:00.004+09:00

前回更新からだいぶ間があいてしまいました。

Leopardには最初からApache2.2が付属しています。
なので、Apacheを使いたければ付属のものを使えば良いのですが、なんとなく元々あるものはこのままにしておきたいと思ったので、MacPortsからApacheをインストールすることにしました。

$ sudo port install apache2

ちなみに今さら使わないかもしれないですが、Apache2.0系(apache20)、Apache1.3系(apache)もMacPortsからインストールできる模様です。

これで/opt/local/apache2以下にインストールされます。
起動する前に付属のApacheを停止します。
起動していなければこのまま先に進みます。

$ sudo apachectl stop

特に何も出力されないのですが、ブラウザからlocalhostにアクセスしてみて何も表示され泣けば付属のApacheはたぶん落ちてます。
# わかりにくいですね…

最後にMacPortsでインストールしたApacheを起動します。
一応psコマンドを使って起動しているかも確認します。

$sudo /opt/local/apache2/bin/apachectl start
$ ps axu|grep httpd
hiroki 25352 0.5 0.0 599780 460 s001 R+ 1:46AM 0:00.00 grep httpd
_www 25348 0.0 0.0 606772 624 ?? S 1:45AM 0:00.00 /opt/local/apache2/bin/httpd -k start
_www 25347 0.0 0.0 606772 624 ?? S 1:45AM 0:00.00 /opt/local/apache2/bin/httpd -k start
_www 25346 0.0 0.0 606772 624 ?? S 1:45AM 0:00.00 /opt/local/apache2/bin/httpd -k start
_www 25345 0.0 0.0 606772 624 ?? S 1:45AM 0:00.00 /opt/local/apache2/bin/httpd -k start
_www 25344 0.0 0.0 606772 624 ?? S 1:45AM 0:00.00 /opt/local/apache2/bin/httpd -k start
root 25343 0.0 0.1 606772 2228 ?? Ss 1:45AM 0:00.15 /opt/local/apache2/bin/httpd -k start

ひとまずこれであとは普通のApacheと同様に使用できます。
ちなみに設定ファイルは/opt/local/apache2/conf以下に、デフォルトのドキュメントルートは/opt/local/apache2/htdocsです。
ようは/opt/local/apache2以下に全部まとまってます。

ひとまず、htdocs以下にsudoしなくてもファイルが作成できるようにパーミッションを変更しておきます。

$ chmod 777 /opt/local/apache2/htdocs

これからはこのApacheを使っていろいろしたいと思います。

というかportsするたびにsudoしなきゃいけないのがだんだん面倒になってきました。
しかもsudoは連続して使えばパスワードが毎回聞かれることはないのですが、一定時間空けるとパスワード聞かれます。
2、3時間はパスワードなしで作業したいです。
この辺も設定できそうなので近いうちに調べてみます、というかぐぐればすぐ出てきそう…。

CentOS5にZABBIXをインストール

2008-11-16T15:37:00.006+09:00

最近めっきり記事を書くことができませんでした。
今回は統合監視ツールのZABBIXをインストールしてみます。
今までMRTGとSNMPを使用してネットワークやリソースの監視を行っていたわけですが、ZABBIXを使えば比較的簡単にインストールできそうです。

データの保存にMySQLを使用するので、yumでMySQLをインストールします。
他に、SNMPのライブラリ、PHP関連パッケージも必要なので入れておきます。

# yum install mysql mysql-server
# yum install net-snmp-libs
# yum install php php-bcmath php-mysql php-gd

他にfpingとiksemelのパッケージに依存関係がありますが、これらはyumからインストールすることはできません。
なのでDAGからrpmを持ってきてインストールします。
今回はiksemel-1.3-1とfping-2.4.1.b2.2を使用しました。

# wget http://dag.wieers.com/rpm/packages/iksemel/iksemel-1.3-1.el5.rf.i386.rpm
# rpm -ivh iksemel-1.3-1.el5.rf.i386.rpm
# wget http://dag.wieers.com/rpm/packages/fping/fping-2.4-1.b2.2.el5.rf.i386.rpm
# rpm -ivh fping-2.4-1.b2.2.el5.rf.i386.rpm

これで依存関係があるパッケージの導入は完了です。
ZABBIXの本体とWebのインストールを行います。
パッケージは、本家サイトからrpmをダウンロードしてきます。
あとはダウンロードしたパッケージをインストールすることができます。

# rpm -ivh zabbix-1.4.5-1.el5.i386.rpm
# rpm -ivh zabbix-web-1.4.5-1.el5.i386.rpm

設定
まずMySQLにデータベースの作成とユーザの作成を行います。
データベース名zabbix、ユーザ名zabbixを作成します。

# mysqladmin create zabbix
# mysql
mysql> grant all on *.* to zabbix@localhost identified by 'hogehoge';
mysql> \q

次にZABBIXに使用するデータベースの初期化を行います。

# cd /usr/share/doc/zabbix-1.4.5/dbinit
# cat schema/mysql.sql |mysql -uzabbix -p'hogehoge' zabbix
# cat data/data.sql |mysql -uzabbix -p'hogehoge' zabbix
# cat data/images_mysql.sql | mysql -uzabbix -p'hogehoge' zabbix

次に/etc/zabbix/zabbix_server.confを編集し設定を行います。
変更する箇所はDBPasswordをコメントアウトし、DBに設定したパスワードに変更します。
ここまで完了したら、zabbixを起動します。

# /etc/init.d/zabbix start

次にWebUIから設定を行います。
最初にhttpdを再起動しないと、zabbix-webでインストールした設定が読み込まれないようなので再起動しておきます。
再起動後"http://<インストールしたサーバ>/zabbix/index.php"にアクセスすると下記のような画面が表示されるので、指示に従って質問に答えます。

途中でPHPの設定を編集するように促されたので、/etc/php.iniのmax_execution_timeを300に、data-timezoneをAsia/Tokyoに変更してhttpdを再起動しました。
最後に/etc/zabbix/zabbix.conf.phpをダウンロードして上書きするように指示されるので、ダウンロードし、サーバの該当ファイルを上書きします。
すべてが終了したらログイン画面が表示されるので、ユーザ名admin、パスワードは空白でログインします。

使用方法についてはまた別の記事で書こうと思います。

iSCSIターゲット(CentOS)とiSCSIイニシエーター(MacOS)のインストール

2008-10-20T00:15:00.000+09:00

iSCSIはEthernet上でSCSIプロトコルのやりとりを行うことで、安価なEthernetの機器を利用してSANを構築することができるものです。
今回はそのiSCSIの環境を構築してみたいと思います。
ちなみにiSCSIのディスク(サーバー)に相当するものがターゲット、クライアントに相当するものをイニシエータと呼びます。

ちなみに、ターゲットとイニシエータは多くは1対1で利用します。
複数から接続する場合は、それに対応したファイルシステム(GFS,OCFSなど)が必要です。
これは普通のSCSIと同じですね。

まず、iSCSIターゲットのインストールをします。
LinuxではiSCSI Enterprise Targetというものがあるので、これを使用します。
下記の手順でインストールすることが可能です。
途中openssl-develを求められたので、インストールしていない場合はyumで導入しておきます。
KSRCには今起動しているカーネルのソースツリーを指定します。
カーネルソースが入っていない場合もyumで導入しておきます。

# wget http://nchc.dl.sourceforge.net/sourceforge/iscsitarget/iscsitarget-0.4.16.tar.gz
# tar xzvf iscsitarget-0.4.16.tar.gz
# cd iscsitarget-0.4.16
# make KSRC=/usr/src/kernels/2.6.18-92.1.13.el5xen-i686/
# make KSRC=/usr/src/kernels/2.6.18-92.1.13.el5xen-i686/ install

次に設定を行います。
今回はテストなので、適当なイメージファイルを作成します。

# dd if=/dev/zero of=/tmp/test.img bs=1M count=1024

次に設定ファイルの/etc/ietd.confを編集します。
Targetから始まる行を削除し、以下のように記述します。
iqnから始まる部分は環境によって読み替えてください。

Target iqn.2008-10.com.hirokikana:storage.test
Lun 0 Path=/tmp/test.img,Type=fileio

最後にiSCSIターゲットを起動します。

# /etc/init.d/iscsi-target start
# chkconfig iscsi-target on

これでインストール完了です。

ひとまずMacにイニシエーターをインストールして動作確認しました。
MacのイニシエーターはglobalSAN iSCSI Initiator for OS Xを使用しました。
公式サイトからダウンロードしてきて、あとは普通にインストールします。
インストール後OSの再起動が必要です。

再起動後、システム環境設定にglobalSAN iSCSIの設定項目が追加されています。
メニューのPortalsを選び、下の+マークを押すとホスト名を入力するダイアログが表示されるので、iSCSIターゲットをインストールしたホスト名を指定します。
次にメニューのTargetsを選ぶとインストールしたTargetが表示されているので選択し、Log Onボタンを押します。
すると何かいろいろ入力するダイアログが出ますが、Connectボタンを押します。
これで接続完了です。

このときは初めて接続したのでフォーマットをするか聞かれます。
とりあえずFATでフォーマットしてみました。
あとは普通のディスクとして使用できます。
アイコンが黒ベースのちょっと違う感じになっています。

認証とか経路の暗号化などもできるようですが、中からつなげるだけなので特にいらないかなぁと思ってます。
でも、情報収集のためにいずれ使ってみます。

ちなみにXbenchで計測してみたところ以下のような感じになりました。

Sequential 15.58 
 Uncached Write 17.50 10.74 MB/sec [4K blocks]
 Uncached Write 15.02 8.50 MB/sec [256K blocks]
 Uncached Read 12.08 3.54 MB/sec [4K blocks]
 Uncached Read 19.91 10.01 MB/sec [256K blocks]
Random 47.90 
 Uncached Write 39.79 4.21 MB/sec [4K blocks]
 Uncached Write 26.12 8.36 MB/sec [256K blocks]
 Uncached Read 489.62 3.47 MB/sec [4K blocks]
 Uncached Read 55.37 10.27 MB/sec [256K blocks]

iSCSIの意味がないくらい遅いですね。
なぜなら我が家のネットワークは未だに100BASE/TXだからなのです。
Gigaにすればもっと早くなると思います。
今使ってるスイッチがAllideの16ポートスイッチなので、新しいのにするの躊躇してるんですよね。
それにいつもしていることで100BASE/TXで困ったことがないもので…。

次回はLinuxのマシンにイニシエーターをインストールして接続してみます。

CobblerでDomainUをインストールする

2008-10-19T19:28:00.003+09:00

Cobblerを使ってDomainUをインストールしたいときはKoanというものを使用すると良いらしいですが、virt-installだけで可能でした。

virt-installでインストール時に指定するインストール場所は、下記のようなURLを指定します。

http://<Cobblerをインストールしたホスト名>/cblr/links/<profile名>/

Cobblerでのキックスタートファイルは下記のようなURLで取得することができます。

http://<Cobblerをインストールしたホスト名>/cblr/svc/op/ks/profile/<profile名>

profile名はCobblerでimportするときに指定した物です。
忘れてしまった場合はcobbler reportコマンドで確認することができます。

virt-install時にキックスタートファイルを指定することもできます。
下記のように指定します。

# virt-install --name=centos5 --ram=512 --file=/home/xen/centos5.img --file-size=15 --location=http://url/cblr/links/CentOS-5.2-i386/ --nographics -x ks=http://url/cblr/svc/op/ks/profile/CentOS-5.2-i386

あとはCobblerでインストールするときと同じように待っているだけでインストールが完了します。

DomainUをVNC経由で操作する

2008-10-14T21:44:00.005+09:00

Xenを最近ちょくちょく触ってます。
XenのPara-Virtualisationしか使ってないのですが、特に不便する点はないうえ、体感速度は物理マシンと変わらない気がします。
今度機会があったらなんらかのパフォーマンス検証してみます。

前回の記事でvirt-installを使ってCUIで簡単にインストールすることはできました。
今回は、他のマシンからVNC経由で画面を飛ばして操作してみました。

まず、Xenの共通設定でVNCの設定をします。
Xenの設定は/etc/xen/xend-config.sxpです。
このファイルの(vnc-listen '127.0.0.1')のコメントアウトを外します。
あと、127.0.0.1の部分を別のホストから接続できるように、0.0.0.0にします。
VNC接続時のパスワードを設定したい場合は(vncpasswdに指定します。

(vnc-listen '0.0.0.0')
(vncpasswd '<パスワード>')

設定ファイルを編集したらxendを再起動します。

# /etc/init.d/xend restart
restart xend を起動中:                                     [  OK  ]
#

virt-installでインストールする際にVNCで飛ばす方法は--nographicsと指定していた部分を--vncにします。
必須ではありませんが、--vncportでポート番号を指定することもできます。

# virt-install --vnc --vncport <ポート番号>

あとは、前回と同じようにいくつかの質問に答えるとインストールが開始されます。
インストールが開始されるとVNCで接続することが可能なので、Domain0のホスト名、指定したポート番にアクセスします。
ポート番号は指定していない場合、5900+nになります。
nは起動した順になってました。ランダムなわけがないので、あとで調べておきます。
とりあえず1台しかいない場合はだいたい5900です。
するとGUIのインストーラーの画面が表示されます。

次にすでに--nographicsを指定してインストールしたDomainUをVNC経由で操作する方法です。
まず、/etc/xen以下にあるDomainUの設定ファイル中の下記部分を編集します。

vfb = [ "type=vnc,vncunused=1" ]

上記の設定をしたらxm createでDomainUを起動します。
DomainU用のVNCも立ち上がっているのですが、このままではVNCの画面には何も表示されません。
これで2時間近くはまったのですが、どうやら--nographicsを指定してインストールすると端末が1つも生成されない設定になってしまっていました。
/etc/inittabの下記部分を編集して端末を生成するようにしたらVNCに表示されました。

1:2345:respawn:/sbin/mingetty tty1
2:2345:respawn:/sbin/mingetty tty2
3:2345:respawn:/sbin/mingetty tty3
4:2345:respawn:/sbin/mingetty tty4
5:2345:respawn:/sbin/mingetty tty5
6:2345:respawn:/sbin/mingetty tty6

このVNCの機能はqemuに入っているVNCの機能を使った物らしく、OSの起動画面からきちんと表示することができます。
DomainU上にVNC serverを入れなくても使用できるので便利です。

MacPortsのパッケージでconfigureオプションの変更

2008-10-13T00:10:00.000+09:00

MacPortsのffmpegを使っていて、いろいろなオプションが有効になっていなかった。
どうにかconfigureオプションをいじりたいと思って調べたところ、以下のコマンドで可能だった。

$ sudo port edit <パッケージ名>

ちなみに、EDITOR環境変数を定義していないと怒られました。
とりあえず、lameパッケージを導入してffmpegのconfigureオプションのlibmp3lameを有効にして再インストールしたら、正常に動作しました。
すでにインストールしているパッケージの場合一度sudo port unistallしてから再度sudo port installしないとダメでした。

MacOSでvirtual-pythonが動かない…

2008-10-12T21:19:00.003+09:00

LinuxでPythonの開発をするときは、下記サイトを参考にvirtual-python環境を構築して、システムのPython環境を汚さないように開発をしています。

ウノウラボ Unoh Labs: Python開発環境を整えよう
reizn Second-Life - virtual-pythonの使い方

今日Macで同じようにしてみたのですが、どうやらうまく使用できない。
PYTHONPATHとかいろんなこと設定してみたりしましたが、easy_installすると動かないことが…orz
特にpysqliteとsqliteあたりが全然動かなかった…

と、数時間考えて…
よく考えてみたら、MacPortsが…。
しかもMacPortsには相当多くのPythonモジュールが…
結局、MacPortsで使うようにしました。
下記のものはちゃんと動きました。

Python 2.4

SQLAlchemy

Mako

pysqlite

flup

MacPortsならシステムのPython環境は汚さないし、最初からこうすれば良かった…。

Hadoopをインストール

2008-10-05T20:57:00.003+09:00

先日のOSC2008でHadoopのセッションを聞いてきたのですが、イマイチしっくりきませんでした。
一緒に紹介されたLustreという分散ファイルシステムの方が良いのでは？(POSIX互換だし)と思っているのですが、話題にされるには何か理由があるだろうということでちょっとインストールしてみつつ、理解を深めてみようかと思います。

ちなみに以下の記事を参考にしました。というより下記の記事の手順以上のことはしてません。

Hadoop、hBaseで構築する大規模分散データ処理システム

CodeZine - Hadoopのインストールとサンプルプログラムの実行

まず、JDKをインストールします。
yumだとgcjが入る模様なので、Sunのサイトからダウンロードしてきました。
バージョンは6 Update7でした。

次に、SSHでlocalhostにパスワードなしで入れるようにします。
下記のような操作を行います。

$ ssh-keygen -t rsa -P ""
$ cat .ssh/id_rsa.pub >> .ssh/authorized_keys

ちなみに.ssh/authorized_keysがない場合は作成後パーミッションを600にしておきます。
これでパスワードなしで入ることができるようになります。

次にHadoopをダウンロードします。
Hadoop CoreというのがHadoopの本体なようです。
バージョンは私が検証したときは0.18.1でした。
ダウンロードしたら、展開しディレクトリに入ります。
ディレクトリ以下のconf/hadoop-env.shのJAVA_HOMEを設定します。
私の場合は/usr/java/jdk1.6.0_07に設定しました。
次にconf/hadoop-default.xmlをconf/hadoop-site.xmlにコピーし、hadoop-site.xmlを編集します。
たくさん項目がありますが、下記の3つについて編集を行いました。

<property>
  <name>hadoop.tmp.dir</name>
  <value>/tmp/hadoop</value>
</property>

<property>
  <name>fs.default.name</name>
  <value>hdfs://localhost:54310</value>
</property>

<property>
  <name>mapred.job.tracker
  <value>localhost:54311
</property>

いろいろ設定できるらしいですが、あとで調べてみます。
とりあえず今はこのまま進めます。

次にフォーマットと起動を行います。
./bin/hadoop namenode -formatでフォーマットを行い、./bin/start-all.shで起動することができます。
停止する際は./bin/stop-all.shで停止することができます。
起動確認はjpsがなかったので、psとnetstatで確認しました。

とりあえず付属のサンプルを使って試してみます。
ファイル中の文字列出現数を計測するサンプルを実行してみます。

$ mkdir inputs
$ cat > inputs/file1
hoge hoge hoge fuga fuga
$ ./bin/hadoop dfs -copyFromLocal inputs inputs/
$ ./bin/hadoop dfs -ls
Found 1 items
drwxr-xr-x   - hiroki supergroup          0 2008-10-05 21:49 /user/hiroki/inputs
$ ./bin/hadoop jar hadoop-0.18.1-examples.jar wordcount inputs outputs
08/10/05 21:51:11 INFO mapred.FileInputFormat: Total input paths to process : 1
08/10/05 21:51:11 INFO mapred.FileInputFormat: Total input paths to process : 1
08/10/05 21:51:11 INFO mapred.JobClient: Running job: job_200810052142_0001
08/10/05 21:51:12 INFO mapred.JobClient:  map 0% reduce 0%
08/10/05 21:51:24 INFO mapred.JobClient:  map 100% reduce 0%
08/10/05 21:51:39 INFO mapred.JobClient: Job complete: job_200810052142_0001
08/10/05 21:51:39 INFO mapred.JobClient: Counters: 16
08/10/05 21:51:39 INFO mapred.JobClient:   File Systems
08/10/05 21:51:39 INFO mapred.JobClient:     HDFS bytes read=39
08/10/05 21:51:39 INFO mapred.JobClient:     HDFS bytes written=14
08/10/05 21:51:39 INFO mapred.JobClient:     Local bytes read=36
08/10/05 21:51:39 INFO mapred.JobClient:     Local bytes written=158
08/10/05 21:51:39 INFO mapred.JobClient:   Job Counters 
08/10/05 21:51:39 INFO mapred.JobClient:     Launched reduce tasks=1
08/10/05 21:51:39 INFO mapred.JobClient:     Launched map tasks=2
08/10/05 21:51:39 INFO mapred.JobClient:     Data-local map tasks=2
08/10/05 21:51:39 INFO mapred.JobClient:   Map-Reduce Framework
08/10/05 21:51:39 INFO mapred.JobClient:     Reduce input groups=2
08/10/05 21:51:39 INFO mapred.JobClient:     Combine output records=4
08/10/05 21:51:39 INFO mapred.JobClient:     Map input records=1
08/10/05 21:51:39 INFO mapred.JobClient:     Reduce output records=2
08/10/05 21:51:39 INFO mapred.JobClient:     Map output bytes=45
08/10/05 21:51:39 INFO mapred.JobClient:     Map input bytes=25
08/10/05 21:51:39 INFO mapred.JobClient:     Combine input records=7
08/10/05 21:51:39 INFO mapred.JobClient:     Map output records=5
08/10/05 21:51:39 INFO mapred.JobClient:     Reduce input records=2
$ ./bin/hadoop dfs -ls 
Found 2 items
drwxr-xr-x   - hiroki supergroup          0 2008-10-05 21:49 /user/hiroki/inputs
drwxr-xr-x   - hiroki supergroup          0 2008-10-05 21:51 /user/hiroki/outputs
$ ./bin/hadoop dfs -ls outputs
Found 2 items
drwxr-xr-x   - hiroki supergroup          0 2008-10-05 21:51 /user/hiroki/outputs/_logs
-rw-r--r--   3 hiroki supergroup         14 2008-10-05 21:51 /user/hiroki/outputs/part-00000
$ ./bin/hadoop dfs -cat outputs/part-00000
fuga 2
hoge 3

ふむふむ、確かにできている。
これ実態はどこにいるんでしょうか。
もしかしてhadoop.tmp.dir？
とすると、/tmp以下はめちゃくちゃヤバいですね。
とりあえず今回は動いているところを見ることが目的だったので、もう一度資料を見直してみます。

いまいちHadoopの力を享受できている気がしないので、もうちょっと調べてみます。
あと、そもそもMapReduceの話とかももう少し詳しく調べてみようと思います。

CentOS 5.2にXenを導入

2008-10-05T18:00:00.006+09:00

先日OSC 2008 Tokyo fallに行ってきました。
土曜日は元気がなくて参加できなかったのが残念でした。
やはり刺激になりますね、ああいうイベントは。
しかし、最近企業さんが増えましたね。
初めて行ったときはほとんどいなかった気が…。

この前図らずも2台ほどサーバを手に入れたのでそこにXenを導入してみたいと思います。
下記が導入するマシンのスペックです。

型名	NEC Express5800/110Eh
CPU	Intel Pentium4 3GHz
Memory	2.25GB
HDD	250GB(ATA)
OS	CentOS 5 32bit

すでにCentOS 5はインストール済みです。
ちなみにPentium 4なのでIntel-VTは搭載されていません。
そこにyumを使ってXenをインストールします。

# yum groupinstall Virtualization

これで仮想化関連のパッケージがインストールされます。
次に、再起動をしXen用のカーネルを読み込むのですが、GRUBの設定を変更してXen用のカーネルがデフォルトで起動するようにします。
/etc/grub.confのdefaultを1から0に変更します。
編集後は以下のようになっているはずです。

default=0
timeout=5
splashimage=(hd0,0)/boot/grub/splash.xpm.gz
hiddenmenu
title CentOS (2.6.18-92.1.13.el5xen)
 root (hd0,0)
 kernel /boot/xen.gz-2.6.18-92.1.13.el5
 module /boot/vmlinuz-2.6.18-92.1.13.el5xen ro root=LABEL=/
 module /boot/initrd-2.6.18-92.1.13.el5xen.img
title CentOS (2.6.18-92.el5)
 root (hd0,0)
 kernel /boot/vmlinuz-2.6.18-92.el5 ro root=LABEL=/
 initrd /boot/initrd-2.6.18-92.el5.img

/etc/modprobe.confにalias scsi_hostadapter xenblkを追記します。
これはどうやら仮想ディスクを読み込むための記述らしいです。
# よくわかってません…orz
デフォルトのカーネルを変更するために/etc/sysconfg/kernelのDEFAULTKERNELをkernelからkernel-xenに変更します。

再起動し、Xen用のカーネル(2.6.18-92.1.13.el5xen)で立ち上がってるかuname -aなどを利用して確認します。
xendを立ち上げ、再起動後も立ち上がるように設定します。

# /etc/init.d/xend start
xend を起動中:                                             [  OK  ]
# chkconfig xend on

次に、ゲストOS(DomainUというのか)を作成します。
今回はFull-Virtualizationが利用できないので、おのずとPara-Virtualizationに対応したOSしか使うことができません。
インストールにはvirt-installコマンドを使います。

# virt-install --nographics --file=/tmp/hoge
　仮想マシンの名前は何ですか? CentOS5_test
　どれだけの RAM を割り当てますか (メガバイト単位で)? 256
　どの位の大きさのディスク (/tmp/hoge) にしたいですか(ギガバイト単位で)? 10
　インストール場所は何ですか? http://mirror.centos.org/centos/5/os/i386/

virt-installのオプションの--nographicsはテキストモードでインストールを行い、--fileはDomainUのディスクイメージの保存先を指定します。
いくつかの質問に答えると、インストールが開始されます。
あとは通常通りにインストールするだけです。

ちなみにインストール元の指定はhttp、ftp、nfsが可能で、指定した先にimages/xen/があることが条件です。
CentOS5以降とFedora6以降はimages/xenディレクトリが存在したので、直接指定することが可能です。

インストール後、DomainUのコンソールから抜けるにはCtrl+]を押します。
DomainUのコンソールに入るにはxm console コマンドです。

やってみた感じですが、思った以上に簡単に扱えるのですね。
「Para-VirtualizationだとOSにいろいろパッチみたいの当てて面倒なんだろうなぁ」と勝手に思い込んでいたのですが、ここまで簡単だとは。
あとはCobblerと連携させればインストールも楽になれそうな気がするので、今度やってみます。

参考サイト

http://lightson.dip.jp/blog/seko/1238

http://d.hatena.ne.jp/yoshifumi1975/20080509/p1

http://shain.blog.conextivo.com/2007/04/xen_centos5virtinstall.html

yumでグループ単位でインストール

2008-10-05T12:14:00.003+09:00

OSインストール時にグループを選択してインストールすると思います。
インストール後に、そのグループをまとめてインストールしたい場合もあると思います。
Xが入っていればGUIツールでできそうですが(やったことない上、詳細調べていませんができますよね？)、どうにかyumからやりたい。
昔(Fedora Core1,2?)はできなかったそうですが、yumでもグループインストールが可能です。
まず、今インストールされているグループやインストールできるグループを調べるときはyum grouplistを使います。

# yum grouplist
Loading "fastestmirror" plugin
Setting up Group Process
Loading mirror speeds from cached hostfile
 * base: www.ftp.ne.jp
 * updates: www.ftp.ne.jp
 * addons: www.ftp.ne.jp
 * extras: www.ftp.ne.jp
Installed Groups:
   Editors
   System Tools
   Legacy Network Server
   Dialup Networking Support
   Network Servers
   Emacs
   Web Server
   Mail Server
   Yum Utilities
Available Groups:
   Tomboy
   Cluster Storage
   Office/Productivity
   Engineering and Scientific
   MySQL Database
   Development Libraries
   Beagle
   GNOME Software Development
   Text-based Internet
   X Software Development
   Virtualization
   DNS Name Server
   GNOME Desktop Environment
   Authoring and Publishing
   Base
   FTP Server
   Mono
   Games and Entertainment
   XFCE-4.4
   Legacy Software Development
   Clustering
   Java
   Java Development
   OpenFabrics Enterprise Distribution
   Legacy Software Support
   X Window System
   Graphics
   Ruby
   Windows File Server
   Printing Support
   KDE Software Development
   KDE (K Desktop Environment)
   Server Configuration Tools
   Horde
   Sound and Video
   PostgreSQL Database
   Administration Tools
   News Server
   Development Tools
   FreeNX and NX
   Graphical Internet
Done

指定したグループをインストールするときはyum groupinstallを使います。

# yum groupinstall "FTP Server"

ちなみにこのグループ名でkickstartの指定にも使えます。
意外と使っていそうで使ってない機能な気がしました。

Carbon EmacsでTramp

2008-09-28T15:48:00.003+09:00

普段はEmacsを利用しているのですが、.emacsを各サーバに配置したり同期したりするのがとても面倒です。
Trampを使えばEmacsからssh経由でリモートのファイルを開くことができます。
.emacsの設定とかもなくてとても便利です。

ちなみにCarbon EmacsはデフォルトでTrampが同梱されているので下記の設定を.emacsに書くだけで利用することができます。

(require 'tramp)
(setq tramp-default-method "ssh")

リモートのファイルを開くときはC-x C-fで/<ユーザ名>@<ホスト名>:<リモート上のファイルフルパス>でできます。
開くときに一度だけパスワード(もしくはパスフレーズ)を聞かれますが、以降保存したり他のファイルを開いたりするときは聞かれません。
1カ所で様々な場所のファイルが編集できるのでとても便利です。

Cobblerの最新版を使ってネットワークインストール環境構築

2008-09-28T14:52:00.004+09:00

前回Cobblerの環境構築について書きましたが、今回は実際に実マシンにインストールしたときのことを書きます。
ちなみに前回はテストもかねてVMにインストールしてました。

前回からそんなに時間が経ってないと思うのですが、バージョンが1.0.3から1.2.5まで上がってました。
開発スピード早いですね。
本家サイトも移動してました。(https://fedorahosted.org/cobbler)
さらにsrpmは1.2系しかなかったです。

大半は前回の記事のままでOKだったのですが途中でkickstartのファイルがダウンロードできなくてはまりました。
原因はlocalhostのXMLRPCサービスにアクセスしようとしたときに正しく取得できずこけてました。
/etc/hostsに書いてあるlocalhostが::1になっていたので、それを127.0.0.1にしたらなおりました。
::1ってIPv6？
あとで調べておきます。

とりあえず、CentOS 5.2とFedora9,8を用意しておきました。
Ubuntuはcobbler importだとうまくいかなかったので保留しておきました。

WBR-G54にDD-WRTをインストール

2008-09-22T17:00:00.001+09:00

DD-WRTは無線LANアクセスポイントのファームウェアの1種で、これを導入すると無線LANアクセスポイントがLinuxにすることが可能です。
これによって、サポートされていない暗号化方式が使えるようになったりSNMPがしゃべれるようになったりします。
また、Webからの管理画面もあり便利です。

私が持ってるWBR-G54も一応対応機種であるということなので、導入してみたいと思います。
これを導入する際の注意点は元のファームウェアには戻しにくい(一応戻せるらしい)というのと、ミスると二度と起動しなくなるというところでしょうか。

まず、DD-WRTのイメージをダウンロードしてきます。
メニューのDownloadsをクリックするとディレクトリが表示されます。
その中から「v24-sp1→Consumer→Buffalo→WBR-G54」の順でたどっていき、dd-wrt.v24_std_generic.bin をダウンロードします。
ほかにもVoIPとかVPNに最適なイメージがあるようですが、とりあえず今回は一番標準そうなやつを選択しました。

次にアクセスポイントとPCをLANケーブルで直接つないでおきます。
アクセスポイントの電源を入れたら工場出荷状態に初期化を行います。
通常、背面のボタンを押して初期化できるはずなのですが私のやり方が悪いみたいでできませんでした。
結局Web経由で行いました。
初期化するとIPアドレスは192.168.11.1/24になりました。
PCのIPアドレスは同じネットワークのアドレスを手入力で入れておきます。
今回は192.168.11.20/24をPCに設定しておきました。

次にイメージをそれぞれのアクセスポイントに合わせた形に編集する必要があります。
正規のイメージと見比べつつバイナリエディタで編集すればできるらしいですが、Ddadderという便利なプログラムが公式から配布されているらしいので利用します。
ここからfor Linuxをダウンロードしてきます。
バイナリはLinux用なので、付属のソースをgccを使ってコンパイルすることで使用することができるようになります。
最後にできたプログラムを使用し、以下のようにすることで専用のイメージが作成できます。

$ ./ddadder dd-wrt.v24_std_generic.bin wbr-g54

あとはできたイメージを使用してWebからファームウェアの更新を行えば完了です。
DIAGが点滅を繰り返している間はファームウェアを更新している最中なので、点滅が消えたら完了です。
初期設定ではアクセスポイントが192.168.1.1/24に設定されているので、それに合わせてPCのIPアドレスも変更しておきます。
今回は192.168.1.20/24にしておきました。

ブラウザから192.168.1.1にアクセスすると管理画面が表示されます。
最初はユーザ名とパスワードをどうするか聞かれるので任意のものを入力します。
ちなみに最初は英語で表示されますが、AdministrationからLanguageを選択することで日本語での表示も可能です。

とりあえず、いろいろ設定して遊んでみようかと思います。

追記
何か無線LANがつながらなくてファームウェアをいろいろ入れ替えてたらおなくなりになりました…orz
素直に新しいの買ってきます。

MacOS X LeopardにFlex3 SDKをインストール

2008-09-22T13:39:00.007+09:00

最近環境構築ネタばかりな気がしますが、気にしないで書きます。
今回はFlashを使ったRIAフレームワークのFlexのインストールをしてみます。

正直よくわかってないのですが、とりあえずFlashアプリがAdobe Flash CS3なしで作れるということだと理解しています。(齟齬が出てる可能性大)
mxmlという記述方法でどのようなガワにするか定義して、ロジックについてはAS3を使うという感じでしょうか。
コンパイルするとswfを吐いてくれます。
なぜ、これを使おうかと思ったかというと私が絶賛作成中のNaNaCaというサーバ上でアニメを録画再生するソフトのプレーヤーを自作しようかと思ったからです。
# ちなみにNaNaCaはfoltia(http://www.dcc-jpl.com/soft/foltia/)のようなものです
では、前置きはこれくらいにして。

Flex3 SDKをダウンロード

http://www.adobe.com/products/flex/flexdownloads/

PATHを通す

export PATH=/Developer/SDKs/flex_sdk_3/bin:$PATH

スタンドアローンFlash Playerのインストール

http://www.adobe.com/support/flashplayer/downloads.html

Hello World

<?xml version="1.0"?>
<mx:application mx="http://www.adobe.com/2006/mxml">
 <mx:button label="Hello World" />
</mx:application>

$ mxmlc hoge.mxml

今回はエディタで直接書いてコンパイルするという感じでしたが、Eclipseを使用したりFlex BuilderというIDEも用意されているそうです。
私はいけるところまではEmacsで書き続けます。

ちなみにswfファイルはSite以下に配置してWeb共有をオンにするとMacOS付属のApacheで確認することができるので便利です。
というかファイルをブラウザで開くのとApacheで開くので挙動が違うのはなぜでしょうか。

Emacsのcolor-themeの設定(メモ)

2008-09-17T22:31:00.004+09:00

Emacsのcolor-themeの設定の方法を失念しないようにメモ。
意外と開発するときに背景色、文字色って気になるものなんですよね。

とりあえずCarbon Emacsにはデフォルトでcolor-theme.elが同梱されているので.emacsに下記の設定を加えるだけでOK。

(require 'color-theme)
(color-theme-initialize)
(color-theme-tty-dark)

一番下の行はテーマを選択するところなので、自分の好みにあわせたものを選択してください。
ちなみにテーマはM-x color-theme-selectで一覧を見ることができます。

他の環境ではcolor-theme.elをload-pathの通ったところに配置する必要があります。
ここから必要なファイルをダウンロードしてきます。
展開するとたくさんのファイルが出てくるのですが、とりあえず必要なのはcolor-theme.elとthemeディレクトリの2つです。
これをload-pathの通ったところに配置して、上記の設定を.emacsに記述すればcolor-themeを使用することができます。

Carbon EmacsとサーバのCentOS 5.2上のEmacsで同じテーマでも微妙に色が違うのはなぜなんでしょう。
256色関連を疑ってるのですが、現状は放置で。

全然関係ない話ですが、最近携帯(au)の迷惑メールがすごく多いです…orz
さっきなりすまし防止とかいう機能をオンにしたのですが、その数分後に迷惑メールが…orz
やはり、PCからのメールを全部拒否するのが一番早いのかもしれないですね。

Carbon Emacsの最低限の設定(メモ)

2008-09-16T00:13:00.007+09:00

最近MacBookを新しいHDDにしてOSを再インストールしたときに.emacsを消してしまいました。
# MacOSの移行ウィザードは悪くないのです。それを使わなかった私が悪いんです…orz
せっかくなので新しく書いていくことにしました。

意外と.emacsって書くのが面倒で、しかもひとつひとつのマシンに.emacsを書かなければいけないのでどこかで変更したときの同期とかがとても面倒です。
今回はこれをエレガントに同期する方法ではなく、とりあえず使うのに最低限必要だった.emacsの設定を書きます。

まず最初に、Carbon Emacsの場合はCtrl+Spaceに割り当てられているSpotlightのキーバインドを外しましょう。
これをしないと範囲選択ができません。
そして、.emacsは以下のようになりました。

(set-terminal-coding-system 'utf-8)
(set-keyboard-coding-system 'utf-8)
(set-buffer-file-coding-system 'utf-8)
(setq default-buffer-file-coding-system 'utf-8)

(tool-bar-mode nil)
(menu-bar-mode nil)
(setq transient-mark-mode t)

(global-set-key "\C-h" 'backward-delete-char)
(global-set-key "\C-o" 'dabbrev-expand)
(global-set-key "\C-x\C-b" 'buffer-menu)
(global-set-key "\C-xl" 'goto-line)
(global-set-key "\C-c>" 'comment-region)
(global-set-key "\C-c<" 'uncomment-region)

下記のようなことを設定してあります。

いろいろUTF-8に

ツールバーとメニューバーは消す

選択範囲は目で見えるようにする

backspaceキーを使えるように(実際押すときはC-hですが)

動的略語展開を有効にする

C-xC-bでカレントバッファにバッファメニューを表示

指定した行に飛ぶキーバインドの設定

コメントアウトを簡単にできるようにする

動的略語展開が有効になっていたり、いろいろ最低限でない部分も多々ありますがこんな感じです。

これに各モードの設定や背景色、文字色の設定、elispのインストールと設定を行えばようやく快適に開発できるようになります。

これを同期するのが非常に面倒…orz
Subversionとかで管理するのが良いですかねぇ…
次回以降ではさらに設定しつつ、同期の方法を模索してみます。

Mac OS X LeopardにOpenCVをインストール

2008-09-15T15:18:00.004+09:00

OpenCVは画像の認識などといった画像処理を行うクロスプラットホームなライブラリです。
Intelが提供していて、1.0以降ではMacの対応も強化されているそうです。
まだ何ができるかしっかりわかってないのですが、おもしろそうなのでとりあえずインストールしてみることにしました。

この前インストールしたMacPortsにOpenCVがすでにあるようです。
下記コマンドでインストールします。

$ sudo port install opencv

インストールは以上です。
MacPorts最高。

とりあえずサンプルプログラムを動かしてみます。
サンプルプログラムは/opt/local/share/opencv/samples以下にあります。
Cで書かれたものとPythonで書かれたものがありました。
Pythonで書けるならそれにこしたことはないですね。
とりあえず、Pythonならコンパイルいらずなので実行してみます。

$ cd /opt/local/share/opencv/samples/python
$ python lkdemo.py

ほかにもたくさんのサンプルがありました。
一番おもしろそうな顔認識のサンプルはCだとiSightから動画をキャプチャしてたのですが、Pythonのものだと画像からのみでした。
サンプルがたくさんあるので後で書き直してみようかと思います。

PythonでかけるのであればXcodeとか使わないでEmacsとかでそのまま書けるのですごく便利そうです。
なんかいろいろパス通したりしなければいけなそうなのですが、何もしないで使えたのでちょっと気持ち悪い感じです。

LeopardにMacPortsをインストール

2008-09-07T16:03:00.004+09:00

MacBookのHDDの容量も増えて空き容量にだいぶ余裕ができました。
なので、前々からインストールしたかったMacPorts(http://www.macports.org/)をインストールしてみました。
Macには同じようなパッケージ管理のソフトとしてMacPortsのほかにFinkというのもありますが、最近はMacPortsの方が活発らしいです。
正直よくしらべていないのでどちらが良いかわかってないのですが、今回はMacPortsにしてみました。

まず最初にMacPortsをダウンロードします。
どうやらそれぞれのOSのバージョンごとにイメージになっているようです。
上記の本家サイトの左側のメニューの「Installing MacPorts」をクリックするといろいろ説明が出てきてdmgのリンクもあります。
私の環境はLeopardなのでこれを使いました。

ダウンロードしたイメージを展開するとMacPorts-1.6.0.pkgがあるので実行します。
あとは普通にインストールすればOKです。
ちなみにMacPortsはコンパイルやらなんやらを行ってソフトウェアをインストールするので、Developer Toolsがインストールしてある必要があります。

MacPortsは/opt/local以下にインストールを行うので、ここに環境変数を通しておく必要があります。
MacPorts自体であるportコマンドも/opt/local以下にあります。
なので最初にこの作業をやっておきましょう。
とりあえず自分のホームディレクトリの.bash_profileに下記を記述しておきます。

export PATH=/opt/local/bin:/opt/local/sbin/:$PATH
export MANPATH=/opt/local/man:$MANPATH

MacPortsをアップデートして、ソフトウェアのリストを下記コマンドで最新にします。

$ sudo port selfupdate
$ sudo port sync

これでインストールは終了です。

基本的な使い方は以下のような感じです。

検索

$ port search 名前

インストール

$ sudo port install 名前

下記記事を参考にさせていただきました。

Macの手書き説明書

MacPortsでステキなUNIXツールをインストール - はこべにっき#

MacOS X LeopardでX11が起動しない

2008-09-06T22:18:00.006+09:00

再インストールを行ったので、LeopardでInkscapeをインストールして、起動しようとしたらうまくいきませんでした。
そもそもX11自体がうまく起動しないようで、アプリケーション→ユーティリティ→X11のアイコンを押してもうんともすんともない状態…

どうやらDVDに入っているX11にはバグがあるらしいです。
XQuarts(http://xquartz.macosforge.org/trac/wiki/)を入れると直るようです。
本家サイトをみると10.5.2を入れれば万事OKっぽいことが書いてある…。
今使ってるのは10.5.4なのですが…

ソフトウェアアップデートをやってみたらSecurityUpdate 2008-005ってのがある。
もしかしてこれを入れてないからでしょうか…。
とりあえず入れてみる。
うーん、動かない…。

結局上記のXQuartsの最新版(X11-2.2.3.pkg)を落としてきてインストールしました。
するとX11.appは問題なく起動したのですが、やはりInkscapeは起動せず…

もうちょっと調べてみたら解決策を書いてらっしゃる方がいました。
X11メモ(http://www.rottel.net/kuwa/23787)
ここに書いてある通りにやってみたらちゃんと起動しました。

とりあえずこのまま使ってみます。

MacOS XでARToolKitアプリの開発 -環境準備編-

2008-08-31T23:35:00.016+09:00

ちょっと前からARToolKit(http://www.hitl.washington.edu/artoolkit/)を使ってアプリを作ろうと画策中です。
ARToolKitとはAR(拡張現実感)を簡単に実装することができるライブラリ集です。
最近ではニコニコ動画でARToolKitを使って撮影したおもしろい動画がたくさんアップされてます。
本なども出版されドキュメントも充実してきているようです。

ネットなどのほとんどの情報はWindowsのものばかりで、Macに関しては非常に少ないです。
しかし、本家からダウンロードできるソースにはXcodeプロジェクトが含まれています。
なのでMacでこのXcodeプロジェクトを開いてビルドすれば簡単にサンプルコードのビルドが可能です。

さて、自分でアプリを作成する場合はこの同梱されていたXcodeプロジェクトを使用すればできるっちゃできるのですが、自分で0からXcodeプロジェクトを作れないと何かと不便だし、できないことはないはず。
というわけで探したら以下のような記事をみつけました。

　Xcode で空のプロジェクトから ARToolkit が使えるようになるまでをまとめてみる

この記事を参考に自分でもやってみました。
ちなみに今回試した環境は下記のとおりです。

MacOS X Leopard 10.5.4

Xcode 3.1

新規プロジェクトの作成

グループの追加

新規ターゲットの作成

ライブラリとヘッダファイルの設定

既存フレームワークの追加

使用するライブラリの追加

dataディレクトリの追加

ソースファイルの追加

ビルドそして実行

最初やったときはライブラリの追加がうまくいってなかったり、検索パスがどこにあるかわからなかったり、Dataディレクトリが読み込めなかったりとうまく行きませんでしたがどうにか動かせました。
そもそも、Xcodeの使い方がわかってないのでそっちから勉強すべきかもしれないですね。

とりあえずMacでARToolKitを使ったアプリの開発をやる準備は整いました。

DNRH-001が熱い

2008-08-28T22:56:00.003+09:00

昨日から玄箱のデータをいくつかの外付けHDDに避難させて、帰ったらとりあえず終わってた。
ようやく玄箱のHDDを取り出して、DNRH-001につけられる。

んで、玄箱からHDDを取り出してみたらなんとMaxtor製。
Maxtorは発熱量が確か多い傾向にあったような…
とりあえず考えていてもしょうがないのでDNRH-001につけてCentOS5.2をインストールした。
今は外付けHDDに避難したデータをサーバに移動中。

やはり電源をつけると結構熱くなる。
とりあえず当分はHDDの温度を定期的に見ながら運用してみよう。
その間になんらかのきっかけでHDDが壊れてデータが飛んだらあきらめよう、うん。

ちなみに、以下のコマンドでHDDの温度を見ることができる。

# smartctl -a /dev/hda|grep -i temp
194 Temperature_Celsius 0x0032 044 253 000 Old_age Always - 53

さっきまで40度台だったのにいつの間にか53度に。
とりあえず常時55度を超えるようであればファンを買ってこよう。

DNRH-001購入

2008-08-27T21:10:00.003+09:00

家にある玄箱をだましだまし使っていたが、やはり音が気になる。
またミシン油をファンにさせば静かになるんだろうけども…
そろそろ買い替え時期かなぁと思っていた今日この頃。

静かなPCを購入することにした。
DNRH-001というファンレスで3.5インチHDDがつめるPCを買ってみた。
今の玄箱のHDDが使えるので3.5インチHDDがつめるのはなかなかいい感じ。

先ほど届いたので早速先日作ったCobblerの環境を使いネットワークインストール中。
DNRH-001をPXEブートするときの注意点は

BIOSでBootの順番でLANを一番頭に持ってくる

BIOSでOnboard Lan Boot ROMをEnableにする

LANケーブルはLAN2に差し込む

というところですね。

あとCobblerでなんか変なときはとりあえずcobbler syncをしてみるのが大切ですね。
なんか最初bootできなかったときに余計な場所をいろいろいじくったりしてしまった。

電源をつけた印象は思った以上に本体が熱くなる。
これは考えないとダメかも。
あとHDDが意外とうるさい。
これは静かなHDDを買えば解決するでしょう。

とりあえず今週中に玄箱のデータをDNRH-001に移行します。
今日はなんか風邪気味で頭が痛いのでインストールして放置。

Macのドロー系ソフト

2008-08-24T13:56:00.002+09:00

姉の結婚式の2次会の招待状の作成をすることになり、ちゃちゃっと書いてみることに。
何かドロー系の良いソフトがないか探してみました。

ドロー系のソフトだとIllustratorが有名ですが、いかんせん価格が高すぎます。
フリーのものだとInkscapeがあります。
本も出てたりして結構使われているみたいですね。
InkscapeはWindows以外にLinuxやMacでも動かすことができて便利なのですが、Macで使用するときは日本語入力がちょっとめんどくさい。
# テキストエディットあたりで書いてコピペすれば良いのですが

そこで、Macで使用できる新しいドロー系のソフトを探してたらGCDrawKitというのを見つけた。
これはソフトではなくドローエンジンというもので、エンジン部分だけらしい。
MacOSX向けに作成されており、MacOSのQuartzエンジンなどをフル活用している。
デモでGCDrawKitを使ったアプリが配信されており、それを使ってみた。

デモとは言ってもかなり高機能でInkscapeと同じくらいに感じる。
Cocoaベースなので日本語入力なども問題なく利用できる。
かなり便利です。
しかし、レイヤをいじってると突然落ちます。
安定性はまだまだなようです。

作成中に保存してない状態で2、3回落ちたので、結局Inkscape使いました。

CobblerでOSネットワークインストール

2008-08-23T16:46:00.005+09:00

ノートPCにCentOSをインストールしようとしたら、CDドライブしかついてなかった。
CDイメージを落としてインストールすればいいんだけど、CDが何枚にもなるし、ダウンロードするのもめんどくさい。
だから、ネットワークインストールを試してみることにした。

ネットワークインストールの環境を整えることができるのが、Cobbler(http://cobbler.et.redhat.com/)というもの。
Cobblerを使えば、様々なディストリビューションをネットワークインストールすることが可能になる。
CobblerをインストールしてCentOS5.2をノートPCに導入する。

Cobblerに必要なパッケージをインストール

# wget ftp://rpmfind.net/linux/EPEL/5Client/i386/python-cheetah-2.0.1-1.el5.i386.rpm
# rpm -ivh python-cheetah-2.0.1-1.el5.i386.rpm

Cobblerのインストール

ここ

# wget http://cobbler.et.redhat.com/download/cobbler-1.0.3-1.src.rpm
# rpmbuild --rebuild cobbler-1.0.3-1.src.rpm
# mv /usr/src/redhat/RPMS/noarch/cobbler-1.0.3-1.noarch.rpm .
# rpm -ivh cobbler-1.0.3-1.noarch.rpm

設定ファイルの編集

service tftp
{
socket_type = dgram
protocol = udp
wait = yes
user = root
server = /usr/sbin/in.tftpd
server_args = -s /tftpboot
per_source = 11
cps = 100 2
flags = IPv4
}

# cp /etc/dhcpd.conf /etc/dhcpd.conf.default

・text:~を削除：グラフィカルモードを使用
・next_server <IPアドレス>:TFTPサーバのIPアドレスを指定。今回の場合は自分のIPアドレス
・server <IPアドレス>：イメージ配布サーバーのIPアドレス
・manage_dhcp 1：DHCPサーバをCobblerで管理

subnet 192.168.100.0 netmask 255.255.255.0 {
option routers 192.168.100.1;
option subnet-mask 255.255.255.0;
range dynamic-bootp 192.168.100.101 192.168.100.254;
filename "/pxelinux.0";
default-lease-time 21600;
max-lease-time 43200;
next-server $next_server;
}

デーモンの起動

# /etc/init.d/cobblerd start
# cobller sync
# /etc/init.d/httpd start
# /etc/init.d/dhcpd start

ISOイメージのコピーとインポート

# mount /dev/cdrom /media/cdrom
# mkdir /tmp/centos5
# shopt -s dotglob
# unalias cp
# cp -rf /media/cdrom/* /tmp/centos5/
# umount /media/cdrom

# cobbler import --path /tmp/centos5 --name=centos5

# cobbler report
# cobbler system add --name=default --profile=centos5-i386

あとはインストールしたいPCからPXEブートすればインストールが始まる。
何か他に設定があるようで、勝手にインストールが進んでいつの間にか終了してた。
どういう設定を行うかも設定することができるようだ。

これでPXEブートさえできれば、どんなPCにでもインストールできる。
とりあえず家にあるThinkpad R40e、Thinkpad X20にインストールしてみた。
すごく便利。

SpamAssassinの設定

2008-08-17T15:08:00.003+09:00

スパムメールの数が増えてきたので、サーバーのMTAにSpamAssassinをかませていたのだが、効果がいまいちだった。
とりあえずSoftwareDesign 2008/3を参考に以下のような設定をしてみたので、そのメモ。

・ベイジアンフィルタの学習データとホワイトリストのデータベースの場所を準備

# mkdir /var/spool/spamd
# chmod 777 /var/spool/spamd

・SpamAssassin用のレシピをダウンロード（TLECのを使います）

# wget http://tlec.linux.or.jp/docs/user_prefs
# cd /etc/mail/spamassassin
# mv local.cf local.cf.default
# cp ~/user_prefs local.cf

・レシピに下記を追記（ベイジアンフィルタの学習データなどの場所を指定）

bayes_path /var/spool/spamd/bayes
bayes_file_mode 0666
auto_whitelist_path /var/spool/spamd/auto-whitelist
auto_whitelist_file_mode 0666

returnとexit

2008-07-22T23:58:00.003+09:00

Cでプログラムを書いているときに、プログラムを終了させる方法がはreturnするのとexitするのの2種類あるけど違いがよくわからなかった。
というかstdlib.hをincludeしないreturnでみんないいじゃんと安易に考えてしまった。

でも、もちろん違いがあって

・return：呼び出しもとへ処理を返す（mainであればプログラム終了）
・exit:プログラムを終了させ、OSへ処理を返す

大きく違いがあります。
なので、場合によって使いわけるのが良さそうですね。

放置してしまってすいません

2008-07-22T23:51:00.002+09:00

もう４ヶ月ほど放置してしまいました。
きちんと書き続けるような生活の流れにしないといけませんね。

LeopardにMySQLをインストール

2008-03-20T21:58:00.007+09:00

公式でパッケージが用意されておりインストールは簡単です。
以下サイトからダウンロード可能。
　http://dev.mysql.com/downl oads/mysql/5.0.html
ダウンロードする際にユーザ登録をする必要がありました。

まずmysql-5.0.x-osx10.5-x86.pkgを実行します。
次に自動起動させるためにMySQLStartupItem.pkgを実行します。

さらにシステム環境設定から操作できるようにMySQL.prefPaneをインストールします。
選択肢が出ますが一応「このコンピュータすべてのユーザ用にインストールする」にしておいていいかと思われます。
するとシステム環境設定にMySQLが追加されます。
ここから起動・停止ができるはずだったんですが、どうやらLeopardではうまく行かない模様…

そこでGoogle先生に聞いてみたらBug報告がありました。
　http://bugs.mysql.com/bug.php?id=28854
そしてLeopardに対応したMYSQL.prefPaneファイルが公開されてました。
　ftp://ftp.mysql.com/pub/mysql/download/gui-tools/MySQL.prefPane-leopardfix.zip
これによってシステム環境設定から起動・停止ができるようになりました。

MySQLの操作コマンド群は/usr/local/mysql/binにインストールされます。
なので、PATH環境変数に/usr/local/mysql/binを通しておくと便利です。

次にrootユーザのパスワードを設定します。
設定は以下のコマンドを実行します。

./mysqladmin -u root password '<設定するパスワード>'

設定したらmysqlコマンドでログインができればインストール完了です。

./mysql -u root -p

VirtualBoxのホストOSからゲストOSにアクセス

2008-03-20T15:14:00.005+09:00

VirtualBoxはOSSの仮想マシンであり、Macでも動作する。
Macで動作する仮想マシンでかつ無料で使用できるのは現状VirtualBoxだけ。
VMware Fusionの発売前オーダーの存在を知っていながら買えず、今更あの値段で買う気がしない僕は結局VirtualBox使ってる。

そして、VirtualBoxで現状ネットワークを使うにはNATしか選ぶことができない。
# ベータ版だし
VMwareだとNATで接続しているゲストOSもホストOSからアクセスできるんだけど、VirtualBoxだとできないらしい。

接続するためにはPortForwardingを行って接続するというとてもまどろっこしい方法を使う必要があるようだ。

　VBoxManage setextradata "<ゲストOS名>" "VBoxInternal/Devices/pcnet/0/LUN#0/Config/guestssh/Protocol" TCP
　VBoxManage setextradata "<ゲストOS名>" "VBoxInternal/Devices/pcnet/0/LUN#0/Config/guestssh/HostPort" 2222
　VBoxManage setextradata "<ゲストOS名>" "VBoxInternal/Devices/pcnet/0/LUN#0/Config/guestssh/GuestPort" 22

これでゲストOSの22番ポートにローカルの2222番でアクセスできる。

ちょっとめんどくさい…
やっぱ素直にVMware Fusion買うべきだろうか。

iKnow

2008-03-17T23:56:00.003+09:00

私は英語が苦手というか自由に使いこなすことができません。
英語に対しての嫌悪感みたいのはないのですが、やはり学生時代に英語の授業をおろそかにしたツケが今出てきている感じです。

最近ではドキュメントを英語のものを読むようにしたりして英語に慣れようと心がけていますが、やはりまだまだです。
# たぶんちまたの中学生の方が僕より英語を使いこなせるはず…

そこでiKnowという英語のeラーニングのサイトを見つけました。
　http://www.iknow.co.jp/
あまり使っていないのでなんとも言えないのですが、レベルごとにコースなどがあり学習の記録を残せるようです。
しかも無料。

とりあえず覚えている単語の数も少ない私には効果がありそうです。
ちょっと少しずつやってみようかと思います。

MacBookをMacOS X Leopardに

2008-03-09T23:50:00.003+09:00

僕が持っているMacBookはTigerが入っていたのですが、もうそろそろLeopardにしてもいい時期かなと思ってLeopardにした。

思った以上に使い勝手が良くなっている。

・ファイラー
何よりも一番うれしかったのがファイラが使いやすくなっている。
まず、Windows共有が今までより格段に便利になっている。
Tigerまでだとわざわざネットワーク→ワークグループ→共有先コンピュータを選んで、共有を1つずつ毎回マウントし認証する必要があった。
LeopardだとWindows共有のコンピュータの一覧がファイラの左側に表示されていてそこから表示ができる。
さらに、一度認証すればあとはそのコンピュータの共有ファイルは全部使える。
これは便利。
Windows同士だと普通のことなんだけどねぇ。
あとはCoverFlowも意外と使えるし、イメージファイルや動画ファイルのアイコンがプレビューになっているのもいい感じ。

・Spaces
Linuxの仮想デスクトップのようなもの。
Tigerだとフリーソフトのものがあったけど、なんかいつもファイラが前に出てきちゃって使いにくかった。
やっぱ純正でついているとうれしい（気の持ちようかもしれないけど）
最初キーボードで移動するショートカットキーがわからなかった。
Ctrl + 矢印キーで移動できた。

・Terminal
タブが使えるようになった。
これは相当便利。
iTermだとレンダリングが遅くて僕には合わなかった。
# Emac + mewとかだと遅さが目立った
まぁ今となってはGNU screen使ってるから別にいらないっちゃいらないんだけどね。
こっちもタブ移動のショートカットキーがわからなかったけど、command + {が前タブでcommand + }が後ろタブだった。

・TimeMachine
Leopardの新機能。
バックアップ先はローカルディスクのみ。
なんかTMManagerというのを使うとNASにもバックアップできるらしい。
でも、MacBookは持ち運ぶので考えて使わないとバックアップのファイルが整合性とれなくなりそう。

なによりiPhone / iPod touch のSDKが動くようになったのであとで少しずつやってみよう。

iPhone/iPod touch用SDK β版

2008-03-07T22:48:00.006+09:00

β版の配布が開始されたようです。
これでjailbreakしていないiPod touchにもアプリケーションが追加できると喜んでいたのですが、実機で動かすにはまだダメなようです。

実機で動かすにはiPhone Developer Programの加入しキーのようなものを取得する必要があるそうです。
現状iPhone Developer Programはアメリカでの加入しか対応していないそうです。

さらにSDKで作ったアプリに対応したiPhone/iPod touchのアップデートはiPhoneは無料だけどiPod touchは有料というよくわからない感じになっています。

とりあえず現状はSDKに同梱されるシミュレーターでデバッグするしかないようですね。

ドキュメントはかなり整っているようなので開発するのがいくぶん楽そうです。

しかしながら、そもそもSDKの対応OSがLeopard 10.5.2以降なのでTiger 10.4.11の僕涙目。

ブログはじめました

2008-03-06T00:30:00.001+09:00

開発ブログをはじめました。
毎日更新を目標にしておきます。

Park Place - Amazon S3のクローン

2008-03-04T23:49:00.008+09:00

Amazon S3はAmazonが提供するストレージサービスだ。
データーの転送量とストレージへの保存容量によって課金されるしくみだ。
インターフェイスとしてSOAPもしくはRESTが用意されていて、クライアントのプログラムもいくつか存在する。

このAmazon S3のクローンを作成するソフトがPark Placeだ。
　Park Place - Trac http://code.whytheluckystiff.net/parkplace/

これを使えば自分の環境に自分専用のAmazon S3が用意できる。

インターフェイスとしてREST しかサポートしていないようだ。
次回以降でインストールしてみる。