<<前の5件次の5件>>

2015-8-15[土] WinCE機で NetBSD6.5

MIPS系(x86系以外)CPUでの linux/unix環境ほしくて 中古でWinCE 機の Movile Gear II (MC-R730 と sigmarion初代)を入手してのを、やっとこさOS入れてみた。MC-R730 は CF と PCMCIA スロットあり、sigmarion は CF 一つなので基本的に MC-R730 を対象。

ググってみると WinCE 機の場合 linuxはかなり古いモノしかなさそうで、ただし NetBSD は今でも一応サポートされているようなので、これをお試し。

ググって見つかる各種サイトを参考に... 本家サイトでは

今となってはかなりメモリ少ないし(32MB)、GUIはハナッから あきらめ(そもそもインストーラで X 関係は None 扱いになってた)。

正直、linux以上に 知らないosなんで苦労多そう…てか躓きまくってる。WinCE側の事情がよくわかってないせいもあるけれど。


WinCE機では、WinCE環境で アプリ hpcboot.exe (かpbsdboot.exe) を実行し、そこから WinCEのRAM状態ぶっ壊して NetBSD を boot するようになっている。 (元dosモバ・ユーザー的には覚えのある手順)

WinCE環境をぶっ壊すので起動のたびにWinCE初期セッティングを要求される… が、公式をみれば SHIFT+Powerで初期セッティング飛ばせるとのことで そんなにひどくはなかった(多少煩わしいけれど)。

※ SHIFT+Powerてより 初期設定開始前からSHIFTが押されてないと駄目な感じ

また、すべての機種ではないけれど、CFから自動実行する仕組みがある場合もあるようで、運がよければ手間は省けるよう... だが、このへんは、ヒントにある方法で設定を幾つか試しても自動起動ならず...うまくいってません (公式の 対応機種表の boot の欄で *3 ついてるヤツが use hpcboot.exe となってるので、逆に他のYになってるのは自動起動可能なのかなと思ったのだけど…そうではないのか…)

iso ダウンロード

7.0はrc2とかrc3のようなので とりあえず 6.1.5 を試す。

ftp://ftp.netbsd.org/pub/NetBSD/NetBSD-6.1.5/iso/

より取ってくるWinCE機用のisoファイルは、netbsd-?.?.?-hpc???.iso なヤツ。
WinCE機は ハンドヘルド・パーソナル・コンピュータってことで hpc が略称らしく、それに cpuアーキテクチャ名(arm,sh,mips)が付く

Mips機なので NetBSD-6.1.5-hpcmips.iso を取ってくる.

インストーラでインストール

配布されている iso イメージは、他機種と共通だったり移植当初の状況もあってか、CD(SCSI)から ディスク(CF)へのinstallを想定されている感じ。CDでなくても、2ドライブ構成が前提のよう。

ただWinCE機の場合は Boot セクタ不要(利用できず)で逆に DOS(FAT)パーティション必須なので、予めCF上に DOS(FAT)パーティションを切っておき、そこに install 元イメージを配置すれば 1ドライブ構成でも install できそう... てか出来た。

※ MC-R730 は2ドライブなので当初それでインストールしてたのだけど、手持ちのCF PCMCIAアダプタのせいか PCMCIA 側が不調でデカいtgzの展開でエラー多発だったので、1ドライブ・インストールに切り替えた

Windows機で作業する場合、win標準の"ディスクの管理"では CF(フラッシュメモリ)に対しパーティションを切れないので

  1. リムーバブルメディアにパーティションを切れるサードパーティ製のツールを使う
  2. Linux機があれば そちらの環境で gparted か何かでパーティションをきる
  3. NetBSD インストーラを用いて、初回はパーティションを切るためだけに使い、2回目に本体のインストールを行う

いづれかの方法を取る必要がある。

ここでは 3番目の方法でパーティションをきってみる。

なお今回 16GBのCFを用い、 MSDOS(FAT)領域 1GB、NetBSD 残り全部、のように割り当ててる。

※mc-r730 基準で書いたけど、結局不安定で実際は sigmarion でほぼinstall, lan関係からをmc-r730で作業した... というふうにインストールしたCFは、MIPS で kern-GENERIC 使うなら他の機種でも動く模様。WinCE側の hpcboot(pbsdboot)で適切に機種を設定する必要はあるけれど、netBsd環境自体に機種固有の設定は(あまり)なさげにみえる。といっても MC-R730 と Sigmarion初代 というどちらも Mobile Gear II な機種でしか試してないので他は未確認。

パーティション分けのためのインストーラ実行

(他の方法でパーティション分済ならこの作業は不要)

Win機で install 先 CF (16GB) を FAT フォーマット、unetbootin でダンロードした isoイメージ書込む。

※ isoイメージ書込めるならツールはなんなり。Win8 以降なら 標準でisoイメージ・マウントしてファイルとりだせるので初回パーティション切だけならこの方法で installationフォルダをCFにコピーするのも可。ただし、マウントしてファイル取り出すとファイル名が 大文字化されてしまうようで、本番のinstallでは不都合(ファイル見つからないエラー)なため、なんらかのiso書込ツールは必要。

WinCE機にそのCFを挿して、
ハンドヘルドPC アイコンを開けて
"メモリ カード 2" (1ドライブ機だと "メモリ カード") を開けて
"installation" フォルダ開けて
hpcboot.exe を実行。

入力欄にインストーラのディレクトリとファイル名を設定。

ディレクトリは

  • \メモリ カード2\installation\
    最後の \ は必須(ないとファイル見つからない).
  • ファイル名は
    netbsd.gz (デフォルトまま)
  • 機種名として
    NEC MC-R730 選択(今使ってるWinCE機の名前)

とりあえず他は変更せず、boot ボタンを押す。
プログレスバーが伸びていって途中で

Data in memory well be lost.Are you sure?
オンメモリなWinCE環境ぶっ壊すぞと聞かれるので Yes

No symbol and/or string table in binary.(no fatal)
気にせずOK

Push YES to boot.
"はい(Y)" 選んで コンソールなboot画面に突入。

テキストなメニューが出るので、

Installation messages in English を選択.(英語以上に他の言語わからんので)

install NetBSD to hard disk を選択.

minimam install を選択.(どうせ途中抜けなのでどれでもいいはず)

※ここで exit して sh に降りて fdisk でパーティション切るほうが実は早い...が自信なかったので そのまま続行.

hdd なパラメータ2つ(63,255)聞かれるけど、Enter 2回押してデフォルトですます。

MBR ・・・を選択。
WinCE機はDOSパーティション必須のはずだけど、このへん、WinCE機用にデフォルト設定が用意されてるようでないので(PC用と共通動作?)、 自分でDOSパーティションの指定をする。

2ドライブ構成だと、DOSパーティションは hpcboot.exe(pbsdboot.exe)を置くための少量でいいけれど、今回は install元cdイメージを書き込めるサイズは必要だし、ファイルやりとりに使うかもで、16GBあるからざっくり1GBほどを設定。

a: start 1MB: size 1024MB MSDOS
b: start 1025MB: size 残り全部 NetBSD
c: unused
d: unused

NetBSD のパーティションは設定しないとインストール継続できないのでそれも指定。
(この段階で、セクタ単位による DOS側の開始位置&サイズを控えても吉)。
x: 行でenterして次へ。

今回はパーティション分だけなんで、b: のデフォルト選び、その次も x:のデフォルト選んで

Please enter aname for your NetBSD disk[CF Card ]:
あとで付け直すことにして、ここではデフォルトのままenter.

yes or no で yes を選ぶと、パーティション分け&フォーマット開始。数回 continue待ちキー入力あり。

※ 正直、この段階での NetBSD側フォーマットは無駄だけど...自力fdisk回避したツケなんであきらめ。

インストール元の指定のメニューが出てきたら、ここで初回は終了、WinCE機電源off&CF抜く.

Win機にCFを指す。
一見正常そうにフォルダ開くかもしれないけれど、実際はぶっ壊れているので とっとと(quick)フォーマット、1GBになってたらOK。
(ええ試して駄目でした. DOSパーティションを縮小させるような器用なことはやってくれてません。ちなみに、NetBSD側で start位置をデフォルト以外のサイズ(2MBとか)にしていると開始位置も壊れてるので とっととフォーマットを即される状態)

本番インストール

CFのパーティション分が出来たら、本番インストール。

CFのフォーマット済のMSDOS領域に isoイメージを unetbootinで書き込み。

※ ツールは何でもいいけど、Win8のisoマウント経由だとファイル名が大文字化されてしまって不都合あるので、そのへんが大丈夫なツールを使う。

WinCE機にそのCFを挿して、
ハンドヘルドPC アイコンを開けて
"メモリ カード 2" を開けて
"installation" フォルダ開けて
hpcboot.exe を実行。
※ 1ドライブの Sigmarion だと 2なしの "メモリ カード"。以後も同様に機種によって読み替えて。

入力欄にインストーラのディレクトリとファイル名を設定。

ディレクトリは

  • \メモリ カード2\installation\
    最後の \ は必須. ないとファイル見つからない.
  • ファイル名は
    netbsd.gz (デフォルトまま)
  • 機種名として
    NEC MC-R730 選択(今使ってるWinCE機の名前)

とりあえず他は変更せず、boot ボタンを押す。
プログレスバーが伸びていって途中で

Data in memory well be lost.Are you sure?
オンメモリなWinCE環境ぶっ壊すぞと聞かれるので Yes
(Optionで "Safety Message" をoffにすればでなくなる)

No symbol and/or string table in binary.(no fatal)
気にせずOK
(Optionで "Safety Message" をoffにすればでなくなる)

Push YES to boot.
"はい(Y)" 選んで コンソールなboot画面に突入。 (Optionで "Pause Before Boot" をoffにすればでなくなる)

テキストなメニューが出るので、

Installation messages in English を選択.(英語以上に他の言語わからんので)

install NetBSD to hard disk を選択.

yes or no は yes を選択.

対象CFに間違いなけりゃ Hit enter to continue でキー入力.

minimam install か custom install を選択. custom の時は必要な物をマーク

※どうも うちのMC-R730はが不調なのかうまく展開できないことが多く... sigmarion だとそこそこ正常に展開できるけど comp.tgzなんかだとエラーでることもあるので、この段階では minimam install してひと通りすんだ後、後で手動で tgz 展開する手を使った。

hdd なパラメータ2つ(sectors[63],heads[255])聞かれるけど、Enter 2回押してデフォルトですます。

Edit the MBR partition table を選択。

a: start 1MB: size 1024MB MSDOS
b: start 1025MB: size 残り全部 NetBSD
c: unused
d: unused

b: の NetBSD を選んで active と install を Yes にする。

e:でセクター表示に切り替えて、MSDOS領域の開始セクタとサイズをメモする。( 開始2048セクタ 、サイズ 2097152セクタ)。

x: 欄でenterして次へ。

a: Set size of NetBSD partitions
b: Use existing partition sizes

は b (かaでデフォルトのままか、わかってる人なら都合で変更で)

で、その次の一覧では

a: ... FFSv1
b: ... swap
c: ... NetBSD partition
d: ... Whole disk
e: 空欄

となってる. NetBSD側でFAT領域アクセス出来るように e: の空欄を

MSDOS
start 2048セクタ    (4MB)
size  2097152セクタ (1023MB)

な感じに 先のMSDOSパーティション設定と同じセクタ数を記入する.
シリンダ境界が考慮されてるのかMB単位で指定するとfdisk側と同じ値にならなかったりするので注意... ええ、やってしまった。後でsh上で fdisk でサイズ表示確認して、その値を disklabel -e /dev/wd0 で編集して修正も可(viは苦手だ)

Please enter aname for your NetBSD disk[CF Card ]: MyNetBSD
ディスクに名前をつける。自分のだとわかるようにつけたほうがいいらしいけど、ここでは適当に MyNetBSD.

これで準備okなら yes or no 確認で yes 後、partition きったり format したりが行われる。途中 Hit enter to continue で確認待ちになるので 入力して継続。

Install from メニュー

Install from メニューに来たら、
 f: Unmounted fs
を選択。

Device: wd0e
File system   msdos
Base directory  (空欄)
Binary set directory  /binary/sets
Source set directory  /source/sets (元のまま)

に書き換える。(デフォルト設定は全然 WinCE実機向けじゃないわな)

※ ちなみにインストール元 pcmcia、インストール先 CF の2ドライブ構成でインストール試した時は、Device として wd1e を指定した。

※ 正直 Device 名がなかなかわからず困った。NetBSD(てかunix由来?)のお作法しらないので...インストール中のメッセージ等から wd とか rwd とかなんだろうけど(wd?とrwd?の関係がよくわかんね)、wd0,wd1がlinuxでのhda(sda),hdb(sdb),wd0aがhda1みたいだけど末のa,bが連番じゃなさそう... FreeBSDのだけどこのへんみると a,b,はルールがあるようで...

x:で続けると tgzファイルの展開や MAKEDEV all が行われ途中continue待ち入力有)、うまくいくと 次の Configure Menu が出る。

※ ここでエラーで Configure Menu まで辿りつけない場合は 手動でのファイルinstall を試みる(後述)

Install from メニューから先に進めない時の手動インストール

Install from メニューから先に進めない場合は、Exit Install System で抜けて sh に降りて手動で tgz 展開をしてみることにする. (うまく行ってたらここ不要)

こちら(hpcmipsみたいな環境でインストーラを使わずにNetBSDをインストールする)を大いに参考... てか 最初からこれに従ったほうがよいかも。

マウント&カレント変更

mount -t ffs /dev/wd0a /targetroot
mount -t msdos /dev/wd0e /mnt2
cd /targetroot

この段階のshは 人の入力考慮してくれてないので 上下キーによる履歴はおろか左右キーによるカーソル移動も出来ないので慎重に入力.

tgz 展開

tar xzfp /mnt2/binary/sets/kern-GENERIC.tgz
tar xzfp /mnt2/binary/sets/modules.tgz
tar xzfp /mnt2/binary/sets/base.tgz
tar xzfp /mnt2/binary/sets/etc.tgz
tar xzfp /mnt2/binary/sets/misc.tgz
tar xzfp /mnt2/binary/sets/text.tgz
tar xzfp /mnt2/binary/sets/man.tgz
tar xzfp /mnt2/binary/sets/comp.tgz

ログ出力無のほうがよいという話もありそ?だけど どちらでもエラーなる時は頻繁になった。一つのtar実行でファイル出力が終了するまで(hddアクセスランプが無明になるまで) 次のtarを実行しないほうがよさげ?なのかな。あと tar する都度 exit してメニュー戻って すぐ終了(Exit Install System)で sh に戻って、をしてたらマシな気がする...が exitした時点でおかしくなることもあり日によって状況違うので単にハード不安定が濃厚.

※ segmentation fault 等で進行不能なって再起動した場合は fsck -y /dev/wd0a でディスクチェック。


tgz 展開できたら

cd /targetroot/dev
./MAKEDEV all

する.

(この段階で fstab, rc.conf も編集しとくのも手かも)

umount /targetroot
umount /mnt2
exit

してインストーラのメニューに戻り、Configure Menu を選択。

Configure Menu

Configure Menu では

  • a: は network 関係.
    • PCMCIAのLanカードを挿す。己が使ったのは 古い10baseTな ne2000 互換のモノ。
    • 認識ログが出終わったところで、a:を選択
    • [ne0] デフォルトのまま
    • [manual] まま
    • DHCP  用途・環境次第。今回のは DHCP noで。
    • Domain  環境次第。わかんなかったらとりあえず空欄。
    • host name  環境に合わせて名付ける。(maba2 とか)
    • IPv4 number  環境に合わせて決める( 192.168.0.100 とか )
    • IPv4 Netmask  環境次第(0xffffff00 デフォルトまま)
    • IPv4 gateway  環境次第(192.168.0.1 とか)
    • IPv4 name server  環境次第(192.168.0.1 とか)
    • IPv6  環境次第(no で)
    • OKでよけりゃ Yes
    • continue待ちは入力して
    • /etc への設定は yesで
  • b: の timezone関係は asia 選んで asia/Tokyo 選んで enter 押して。
  • c: の シェルは好みで.( /bin/sh )
  • d: で root パスワードを設定。
  • g: で sshd を有効にするなら yes ... あとまわしするなら no.
  • ntpdに時間合わせ任せるなら h: で ntpd 有効(yes)にして、i: で boot 時に ntpd 開始するよう yes に ...
    だけど起動時にそもそも lanカードさせてるか怪しいので NO で.
  • (他も必要に応じて設定した後) x: Finished configuring で終了.

戻ってきたメニューで 終了を選択して sh に降りる。

対象パーティションをマウントする

mount -t ffs /dev/wd0a /targetroot
mount -t msdos /dev/wd0e /mnt2

この段階のshは 人の入力考慮してくれてないのでタブキー補完や上下キーによる履歴はおろか左右キーによるカーソル移動も出来ないので慎重に入力.

カレント移動して

cd /targetroot/etc

fstab を編集. (vi しかないのか...)
msdos(/wd0e)の行頭の#を外して有効にし、
CDドライブ(/cd0a)はないので 行頭に#を入れてコメントアウト.

rc.conf を編集.

rc_configured=YES

に変更して、

postfix=NO
sendmail=NO

追加.(このへんは こちら とか見よう見まね)

minimam install してて、他に入れたい tgz があれば このタイミングで展開.

tar xzfp /mnt2/binary/sets/misc.tgz
tar xzfp /mnt2/binary/sets/text.tgz
tar xzfp /mnt2/binary/sets/man.tgz
tar xzfp /mnt2/binary/sets/comp.tgz

等.
※展開中に segmentation fault 等で進行不能になって再起動した場合は
  fsck -y /dev/wd0a
でディスクチェック。

終わったら exit を実行し shから メニューに戻り、適当に電源offして WinCE再起動。

インストールしたての環境での設定

適当に電源終了して、WinCE再起動。
"メモリ カード2\instation\"の
  hpcboot.exe, pbsdboot.exe pbsdboot1.exe
を "メモリ カード2" 直下にコピー。

hpcboot.exe あるいは pbsdboot.exe を実行し、今度は ディレクトリ /, ファイル netbsd にして 自分の機種(NEC MC-R730)を選んで boot。

※本来は hpcboot.exe でいいはずなのだけど、うちのmc-r730では進行不能になった。PCMCIA側にCFさしてbootすると起動できたので、hcpbootでは "メモリ カード"を前提にしてるのかも。pbsdbootだと "メモリ カード2"でもちゃんとboot できたので MC-R730 ではこれを使った。

login: に来たら、root で入り、Configure Menu で設定した password を入力.

普段使うrootになれるユーザーを作成.

useradd -s /bin/sh -m -g users -G wheel ユーザ名
passwd ユーザ名
(新しいパスワードを入力)

まだまだ pkgsrc の install とか諸々していかないと駄目なんだろうけど...( pkgsrc の tar.gz 展開でsegmentation fault出まくりとかで)...くたびれたので一旦終了


mc-r730よりマシとはいえ やっぱり 不具合が出ないわけでもない sigmarion での作業時間を思うと、pc に NetBSD いれてそちらで CFにファイル展開とか極力 済ませてしまうのが無難かもしれない。 (ほんと こちらの言われるとおりにやってればこんな手間食わずにすんだかもしれない...)




2015-8-14[金] USL-5P で debian

ちょっと前にamazonで中古 USL-5P 入手。IO-DATAのUSB-HDD別付のNASで、 SH4 でメモリ64MB の linux 機器。2004~2010年くらいまで売られていた模様。

debian 化が流行ってたのは 2004-7年付近なんでしょうかね? 玄箱の流行りの頃でもあり、当時 玄箱HGユーザーだった身としては SH4に惹かれつつUSB経由でしかHDD繋げられないから遅そう(メモリ64MBしかないし)と思って今一歩な気分だったのだけど、今回は NASとして使う気無しなこともあり、HDDない分 玄箱より断然小さくて白い箱は 今なら Raspberry Pi とかに近い気分。比較するとちょう2つ分くらい。なかなか かわいいヤツです。

USL-5Pの debian 化のページはググれば わりと見つかるけれど、 たぶん LANDISKで漕ぎいでな~♪ の方が用意されたモノを使っている人が多いみたいなので、お手軽にそれを使わせていただきます。
さすがに今現在現役でサポートされてる状態ではなさそで、最終は etch なのかな。(まあSH4が debian で正式に対応されてるものじゃなし... と lennyやらsqueezeやらsidやらの対応をされててる方もおられる模様...己には難度高めそうなので そこまでは手を出せず)

基本的に こちら の方の手順でできた。もちろん他の方々の頁も参考。

てことで焼き直しだけれど、以下 自分用の作業メモ(実際に作業したのは数週間前)

家内lanでのみの ssh(telenet)接続しての ちょっとしたSH4お試し環境としての利用なので、(ファイル/web)サーバー立てたりとかはしないです。

debian(etch) インストール

CF(ディスク) の扱いを楽したいので そのへんは linux(mint) 機で作業。(webブラウザや telnet 接続は win機 使用)

  • まずUSL-5Pが普通に動くか確認、IPアドレスを控える。
  • USL-5Pを終了させて、USL-5P のガワを外して中の CFカードを取り出す。
    蓋の開け方は こちらの図解が有りがたかった。
  • linux(pc)機 で CFカードのイメージ作成. USL-5PのCFをCDリーダーに刺して linux でのドライブ名確認(ここでは/dev/sdb)。自動mountしたならumountしてから
     $ sudo dd if=/dev/sdb of=usl-5p-cf-image.img
    でイメージ作成。サイズは64か128MBらしい(うちのCFは128MBだった. 使われてるのは64MB分)
  • 元のCFカードを抜き、新しく用意した CFカードをlinux機につなげる。
    今回用意したCFは32GB。
     $ sudo dd if=usl-5p-cf-image.img of=/dev/sdb
    でイメージ書き込む。
  • 新しい CF を抜き、USL-5Pにセットして起動、ちゃんと動作するか確認する。
    ※作業的には他の作業準備もすませてからのほうが手間は少ないけれど、相性問題とかホントに32GBの使えるかわからなかったので先に確認した
  • USL-5Pを telnet対応版の ファームに更新する。
    このあたり等 から usl5p-telnetd-update.tgzをダウンロードして update.tgz に変名しておいて、管理者のwebページ経由でファーム更新。
  • 再起動したら 管理者で入って ユーザー追加.(user:landisk, pw:landisk)
  • telnetクライアントで USL-5Pに(名前でアクセスできなければ最初に控えたipアドレスで) 作ったばかりのユーザーでlogin してみる。
  • 大丈夫ならマシン終了して、CFカード抜いて、linux側につなげる。(自動mountされたらumountしとく)
  • gparted 等で未使用領域を (ここではCFが /dev/sdb として)
     /sdb2 を swap用(サイズ128MBくらい)
     /sdb3 を ext3 (残り全部)
    くらいにパーティショニング&フォーマット.
    インストールしようとしている環境が sda2:swap, sda3:ext3 前提なので気をつける。考えずに sda2:ext3 sda3:swap なんて逆にしてると後で苦労する(した)
  • sdb1,sdb3 をマウントする. 面倒なので自分のホーム当たりで hd1 hd3 をmkdirしといて
     $ mount /dev/sdb1 ~/hd1
     $ mount /dev/sdb3 ~/hd3
  • linux(pc)機にて このへん より、最新(最終)の base26-sh4-20070709-etch.tgz, landisk-tools-20070612.tgz をダウンロード、ホームに置く。
  • ~/hd3 をカレントにして
     $ sudo tar xvzf ~/base26-sh4-20070709-etch.tgz
    で解凍、debian26/ の全ての中身を ~/hd3直下に移動して、空になった debian26/フォルダを削除.
  • ~/hd3 をカレントで
     $ sudo tar xvzf ~/landisk-tools-20070612.tgz
    で解凍。
  • ネットワーク関係の修正。~/hd3/etc/ にある hostname, hosts, hosts.allow, network/interface, resolv.conf や ~/hd3/boot/ にある bootld.conf で、
     名前が landisk
     アドレスが 192.168.1., 192.168.1.80
    になっているあたりを自分の環境に合わせて修正。(必要に応じてその他も)
  • reiserfsでなくext3にしているなら ~/hd3/etc/fstab 中を ext3 に修正.
  • ※ もし、hdb2 を ext3, hdb3 を swap にしていたのなら、etc/ や boot/ で sda3 やhda3 を grep して修正( ~/hd3/etc/のlilo.conf, fstab, ~/hd3/boot の bootld.conf, kernelsw.conf あたり)
  • /etc/apt/sources.list を修正. debianサイトでは etch はarchiveに移動になっていたり、sh4(landisk)向けサイトも変化してたりなので
    deb http://iohack.osdn.jp/kogiidena/debian26/binary-sh4-etch/ ./
    deb-src http://ftp.riken.jp/Linux/debian/debian-archive/debian etch main non-free contrib
    に変更.(riken.jpとしてるところは 自分家から近いサーバーを選ぶ)
  • ~/hd3/boot の中身を ~/hd1/boot へ上書きコピー.
  • ~/hd3/etc/lilo.conf を ~/hd1/etc/lilo.conf に上書きコピー.
  • /dev/sdb1, /dev/sdb3 を umount して CF カードを linux(pc)機より抜く。用済みの ~/hd1 ~/hd3 ディレクトリは削除.
  • usl-5pにCFカード装着、起動、telnet で 再度ログイン.
    /sbin/lilo を実行、エラーがなければ再起動.
  • 自分で設定した 新しい固定アドレスを使って telnet でログインできれば ok.

あとは諸々install&設定していく。
自分用user作って ユーザー landisk は削除、 sudo やら ssh やら locale やら rsync やら gcc,g++,make,libncurses5-dev 等等 apt-get install して... fdclone とか ne とかコンパイルしたり ... ああ さすがにコンパイルはおそいわな。




2015-8-13[木] 中古 zx2000 に linux インストール

(遅延書込8/16. 実作業は先月)

先月 amazon で 3万円台だったのでつい 中古の HP zx2000(itanium2 workstation. メモリ1GB) を購入。osとかは無しだけど debian か何かlinuxは対応してるだろう、と到着してから探してみれば debian8 では丁度 IA64 はサポート打ち切られてたという... 他を探してみれば gentoo で新しめのisoイメージあったけれどその他は対応なかったり対応していても結構古そうだったりと面倒そう(NetBSDもFreeBSDもIA64はイマイチ)。

とりあえず debian7.8 と gentoo の CD image 焼いて試してみたところ、どちらも CD 起動途中でbeep音鳴らしてシステムLED赤に変えてリブート... ひょっとして zx2000 対応してないのか? (ちなみに dvdドライブついてたので最初dvdで試したが起動対象にもならなかった)

ググってみれば海外サイトで同じ症状の件がいくつか質問に上がっていた。どうも debian の場合 sarge(debian3.1) では動いてたようで etch(debian4) 以後ダメになったような(IDEドライバ?か何かぽい)話。 ただ、sarge から dist-upgrade してetchへの移行はできるようなので、 それを試してみて...

いろいろハマったが 結論をいえば sarge からupgradeしていかずとも debian 6(squeeze) を直接 CDでインストールすれば とりあえず動いた。(sargeからupgradeしていくと lenny(debian5) までは無問題だけど 5 から 6 への upgrade が困難、てかうまく行かなかった)

ただ debian 6 でも gnome 入れて立ち上げ、そこから logout した時に beep音&LED赤状態になってしまったので、コマンドラインのみにした状態。(ハングがなくても gnome環境すごく遅かったのでコマンドラインのみにしてただろうけど)

まあ予定の範囲の結果なんでよかったかな、と。(うるさいし邪魔なので当面 物置部屋のオブジェだけど...)


ちなみにgentoo のほうも古めの cd imageを用いたら beep&reboot なくプロンプトまでこぎつけた。(2007 年版(install-ia64-minimal-2007.0.iso))
ただ hdd (/dev/sd?) が見当たらず...で挫折。
(debian と違って gentoo はマトモに使ったことないので面倒でもあり)




2015-7-18[土] n3150b-itx

Asrock n3150b-itx、IDEやFDDは無いけれど背面に プリンタ・ポートやら 232cポートやらがあって微妙にレガシー用途が想定されてるぽいのだけれど、組立ててみると今どきのM/Bでは当たり前?な4(or 8)ピン電源(atx12v)コネクタが盤上になかった。まあCPUの消費電力思えば無しでも当然か……
で、電力食いなグラボとかも無いので 24ピン・コネクタのほうも 4ピン外して 20ピンにしても当然、起動。ぉ

コレ、pen4より前の、かなり古い(十数年前の)メーカー製パソコンのMB置換にも使えるかも。
M/Bは一見普通なのに匣や電源周りの形状が特殊な奴とかね。試してないけど。

※ 古い atom M/B(D945gclf) は 4pin(12v)つなげないとダメだったけど、n3150 の前世代atom(j1900とか) はどうだったんだろ……ググって見つかるMB見る限り基本4pin無しのよう。こっちでもいいのか。

もっとも IDEやFDD接続無いしフロントパネルの類とかの接続も工夫か諦めが必要だし なにより古い電源は爆音ぎみなので、コストかけて苦労我慢してまで使えるマシンに復活させたい愛着ある古パソは……早々ないワナ。 (爆音回避でACアダプタ電源にでも取替えられるなら そもそもこのMBでなくてもよく)


と、今回 n3150b-itx は win8.1 機になった(たぶんwin10機になる予定)。
元々 家鯖(ubuntu)の置換目的で買ったのだけどこちら の記事での評価が気になったこともあり、 winを仮インストールして1時間程いじってたらいつの間にかアクティベートしてたという…… wan側つなげたまま lan内ファイル転送試したのが敗因だな。 まあ実質 常起動になってしまってた電気食いのwin機を置換させたい気もあったので結果オーライ。




2015-7-5[日] 簡易類似画像判定のメモ

別件ググってて類似画検索のネタみかけて、だけど特定のモノを(綿密に)探すタイプで、どちらかというと大量のものを分類したいなあ...と、一応 以前 かなり簡易だけれど そういうものを作りかけて放置していたので それをネタに。

キッカケは忘れたけれど、以下のような近似画チェックを思いついて (でもこれは良くない例)

  1. 画像の全画素の輝度の平均と、画像を縦横2等分4分割した領域各々での輝度の平均を求め、各領域の平均と全体の平均を比べ、明るければ1 でなければ0 で4bitの値を作る.
  2. 4分割した各領域を対象に、先と同様に その領域の輝度平均と さらにそこを4分割した各領域の輝度平均を比較して 4bit *4エリアの16bitを得る.
  3. さらに同様に(16分割されてる)各領域を4分割して 4bit * 4*4エリア=64bitを得る.(場合によってはさらにもう一段階....)
  4. 広い順に上位に詰めて 4+16+64=84bit値を作り、その84bit値をキーにソートすればそこそこ同じ(類似)画像が近くに並ぶんじゃね?と(実際には輝度yだけじゃなく u,vも)

思いついた時はいいアイデアのような気がして作り始めたけれど多少面倒くさくて、実はもう似たようなものがあるかも、とググれば案の定、もっとシンプルで良いものがあった。

こちら等 で 紹介されてる Avarage Hash 法.

  • 画像を縦横8等分64分割し、分割された各領域の輝度の平均と、画像全体の輝度の平均と比べ、明るいか等しければ1、暗ければ 0で 64bit の値(ビットパターン)を得る。

画像を8x8サイズに縮小して上記のような64bit整数値(ビットパターン)を得るだけ。再帰する必要なんてなかった。
今どきの64bitCPUだと すこぶる低コストで画像同士の比較ができる。32bitCPUでも64を 32bit値 2つに分けて処理できる類なので かなり軽い。

(以下ビット演算慣れした人には釈迦に説法の類だけど)

画像 a と画像 b の 上記明暗の64ビットパターンを a.ptn と b.ptn とすると、排他的論理和(xor)を用いて

 uint64_t d_ptn = a.ptn ^ b.ptn;

のようにして差異のビットパターン d_ptn を得られる。xorの結果は違う部分のビットが1になっているので、d_ptn 中の 1 になってるbit数が少ないほど 類似している(可能性が高い)ということになる。

64bit値中の1のビットの数を数えるのは、今どきの64bit CPUだと、

 __popcnt64 (VC) や __builtin_popcountll (GCC)

でコンパイラがネイティブなマシンコードにインライン展開してくれたりする。
そういうネイティブのがなくてもこちらで紹介されてるpopcount(numofbits5) 処理で

unsigned popcnt64(uint64_t bits) {
   bits = (bits & 0x5555555555555555UL) + ((bits >> 1) & 0x5555555555555555UL);
   bits = (bits & 0x3333333333333333UL) + ((bits >> 2) & 0x3333333333333333UL);
   bits = (bits & 0x0f0f0f0f0f0f0f0fUL) + ((bits >> 4) & 0x0f0f0f0f0f0f0f0fUL);
   bits = (bits & 0x00ff00ff00ff00ffUL) + ((bits >> 8) & 0x00ff00ff00ff00ffUL);
   bits = (bits & 0x0000ffff0000ffffUL) + ((bits >> 16) & 0x0000ffff0000ffffUL);
   return (unsigned)(bits) + (unsigned)(bits >> 32);
}

な感じで結構高速に求められる。
ので 2枚の絵の類似判定の雰囲気は (a.ptn, b.ptn は画像ロード時に予め作成してるとして)

if (popcnt64(a.ptn ^ b.ptn) <= 類似とみなす差異ビット数)
    類似画像の処理
else
    別画像の処理

1回当たりのチェックがこれだけ低コストならば、数千(万)程度の画像数なら、総当りチェックしても 割りと実用的な(ガマンできそうな)速度になりそうで、試してみるとそこそこいい感じだった。

総当りして、違いが少ないもの同士をリンクしておいて、後でリンクされたグループ内で調整して並べなおして... 等ちょっとめんどくさいけれど。

※ 実のところ 総当りチェックせず単純にビットパターンでソートだけでも 結構よかったりする。同一とみなしたもの(8x8縮小画同士の差が0)が連続するだけでなく、画像の上のほうが一緒で違いが下のほうにしかない場合なんかも近くに並ぶので…… もちろん上側が違って下側が似てる場合などは離れてしまっているのだけど。
(※左上から右下へ横縦繰返でスキャンして64ビットを作ってる場合)

で、どの程度を近似とみなすか、が面倒、てか肝。 同一判定なら Average Hash 法の説明で書かれている7%ほど(64点だと 4,5個)でよいかもだろうけど、も少し増やすと同一ではないけどちょっと違う類似画像もひっかかりやすくなって....

それなりな結果が出てると欲が出てきてしまうもので、類似判定の精度上げるために、さらに以下のようなチェック等追加

  1. 画像のアスペクト比がある程度以上違えば別画像
  2. (以下、先にチェックした8x8ビットパターンのうち 違うと判定したビット以外の部分をさらにチェックする形で)
  3. yuvの y(輝度)だけでなく u, v についても8x8で同様にチェック
  4. u,vのビットパターンが オール1の時はモノクロ化画像なので考慮
  5. 輝度について 明るい部分のみ・暗い部分のみをそれぞれの輝度平均を用いて明暗ビットパターンを作ってチェック
  6. 輝度16x16ビットパターンも補助的に利用.
  7. ビットパターンの違いが少なくも多くもない微妙な場合は、(ビット化する前の)輝度ピクセル同士の差もチェック

等等 ごちゃごちゃ追加して 判定 重くなってくるわけですが。(の わりにはまだまだ誤判定有)

ちなみに 16x16パターンについては、同一画の判定としては8x8より精度よさそうだけど、類似物を集めるという面ではシビアになりすぎるのか分が悪い感じだった。ので補助的に利用。速度を思えば無しのほうがよさげだけど、この判定でマシになるケースもあるし、で。逆に4x4は荒すぎて結局8x8の判定便りになるぽいから あまり意味なく(でも最初にざっくりとしたソートするのに使ったかも)
※ そもそも8x8(16x16)縮小画での比較なので、近似/類似でなく ちゃんと同一を判定するのは困難なんだけども

こういう判定は面白いけれど難しい。いろいろサンプル食わして それなりな線を目指すのだけどサンプル違うとガラッと誤判定多かったりね、手間の割には精度よくならないわな。根本的に簡易なので、もっとよくしたいなら別のアルゴリズムにする/を併用する、ほうがよさそう。けどググって出てくる本格的な類似画判定のアルゴリズムは速度を思うと……(だし、そこまで気合入れて類似画分類処理を作りたいわけでもなく)


お試しプログラム

と、ま、以前 試しに作ってみてたコマンドライン・ツールは これ
win64用とwin32用 の exe のみ。
※追記2016-08-25: ソース同梱のzipに差し替えました。

指定したjpegファイル群を調べて、類似のあったファイル名だけ表示したり、全ファイルを類似情報を元に名前付けて copy や move するバッチ生成したり、類似順にファイルの日付を付直したり出来ます。
※いまどきの類似画検索/分類ツール使ったことないので使い物になるかは知らない


変換例。左or上がソース、右or下が類似並替結果。フォルダのキャプチャは縦横50%縮小してわかりにくいけれど、変換結果はバッチ出力して、名前付け替えてのコピー。

c

c


※画像は 株式会社ブリリアントサービスのフリー素材 (タイトル:ジュエルセイバーFREE URL:http://www.jewel-s.jp/) のものを使用。 jewel-s-free100j より適当に13枚を選んでα無 jpg画像にし類似画像の順番がバラけるよう適当に変名した。また うち1枚を、拡大、モノクロ化、文字書込、したものも追加。(ruig-smp.zip)


処理速度については、i7-3770(3.4GHz) mem32GB の win8.1x64 マシンで、適当に寄せ集めたjpeg画像自分で撮った写真や net で拾ったイラストや写真等)を HDD(3TB)に置いて win64用exeで試したところ、

画像10286 ファイル
内 類似画2473 ファイル
file読込27.9 秒
jpeg展開53.6 秒
並替準備5.1 秒
並替1.8 秒

と いう感じだった。
(続けざまに同じ変換をするとosのファイルキャッシュが効いて2回目のファイル読込2.2秒ほど)

並替準備――画像縮小してソート・キーになるビットパターン生成等――はちょい負荷あるが、 並替自体は 許容できそうな範囲(ただ類似画の量が多いともっと増える)、 主にjpg展開+ファイル読込に時間がかかっている模様。

jpg 展開は libjpeg-turbo を用いて、また、ある程度巨大画像については サムネール機能利用して処理短縮を図っているけどこの時間。(jpg は8x8ピクセルのブロック単位で扱う工程があって最後まできっちり展開せず処理端折って縦横8分の1(1/64縮小)の荒い画像を得ることができる。ただ王道な縮小と誤差はあるので、その誤差も無視できる程度に1/64画像が大きい――比較用8x8画よりも2桁ほど広い――場合のみ利用) (※libjpeg側のサムネール取得関数は1/8とは限ってないので も少し工夫あるのかもしれない)

単純に1スレッドでファイルごとに読込→展開→並替準備をシーケンシャルに繰り返し処理してるので、そのへん並列化できれば少しはマシになりそうな気はする。(劇的には無理だろうけど。ただ画像ビュワー等で自前でサムネール生成保存するような場合なら一緒に類似ソート・キーも保存しておけば そこそこ使えそうな手段な気もする)

あ、と、実際にソート結果を反映したrename(move)したりcopyしたりは生成したバッチで行うので それなりに時間かかります。




<<前の5件次の5件>>