2017年8月16日水曜日

複数写真の切り出し

復数の写真を一気にスキャンしたものから、自動的に写真を切り出す方法を探していた。Photoshopならできるらしいが、手元にないので除外。
GIMPにスクリプトを入れてやるという方法 も試してみたがイマイチ上手くコントロールできない。

> multicrop -b white SRC.jpg Cropped.jpg
とかやると、Cropped001.jpg, Cropped002.jpg みたいにファイルを作ってくれる。-b で指定しているのは背景色。多分曲がっているのを直してくれたりはしないので、スキャンするときにある程度気を使う必要がある。
これで、手元の写真を整理できるかな。。

2017年8月15日火曜日

tmux で SSH_FORWARD

tmux を使っていると、ssh でauth forward していても、中のSHELLに環境変数がSSH_AUTH_SOCKが伝わらないため、git にアクセスできなかったりして不便。
解決策を検索したら見つかったのでメモ。
したのように.bashrc に書いておく。すると外部からログインした際に、.ssh/.ssh_authsock.txtにSSH_AUTH_SOCKがコピーされる。
function update_forward
{
    if [ -z "$STY" -a -z "$TMUX" ]; then
        echo $SSH_AUTH_SOCK > ~/.ssh/.authsock.txt
    else
        export SSH_AUTH_SOCK=`cat ~/.ssh/.authsock.txt`
    fi                                                 
}                                                      
update_forward
tmux の内部シェルでは、
> update_forward
としてやればSSH_AUTH_SOCKがアップデートされてgit とかにアクセスできるようになる。

2017年7月21日金曜日

pyenv 下のPythonを使って PySpark

conf/spark-defaults.conf に、
spark.pyspark.python   /home/XXX/.pyenv/versions/anaconda2-4.4.0/bin/python
みたいに直接書くとうまくいく。

2017年7月19日水曜日

cargo

rust のツールチェーンにcargoなるものが含まれている。makeみたいなものか?もう少し高度なのか。sbtぐらい?
プロジェクトディレクトリを自動的につくって、ソースとビルドファイルのテンプレートまで作ってくれる。驚いたことに、勝手に.gitができていてgit管理下になっている。便利。

Hidemotos-MacBook:rust nakada$ cargo new myProj --bin
     Created binary (application) `myProj` project
ディレクトリができて、その中にビルドファイルCargo.toml とsrcディレクトリができる。
$ ls myProj
Cargo.toml    src
Cargo.toml はこんな感じ。toml はTom’s Obvious, Minimal Language だそうだ。INIファイルとかに似てる?
$ cat myProj/Cargo.toml
[package]
name = "myProj"
version = "0.1.0"
authors = ["nakada"]

[dependencies]
srcの中にはmain.rsができる。
$ cat myProj/src/main.rs 
fn main() {
    println!("Hello, world!");
}
プロジェクトディレクトで、cargo build とすると、targetというディレクトリが作られて、target/debug/プロジェクト名 でバイナリができる。
cargo run とやるとbuild したあとそのまま実行するようだ。

Rust install mac

https://www.rustup.rs/ にしたがって、
curl https://sh.rustup.rs -sSf | sh
とやる。なにか.bash_profile とか書き換えているようで、ちょっと嫌な感じ。cargoなど一切合切ツールチェーンもインストールされる。
$ rustc --version
rustc 1.18.0 (03fc9d622 2017-06-06)
無事インストールできたようだ。
fn main() {
    println!("Hello, world!");
}
をtest.rs としてセーブして、
$ rustc test.rs
とやると test というバイナリができる。
これを実行すると
$ ./test
Hello, world!
となる。a.out になったりしないあたりが偉い。
$ ls -al test
-rwxr-xr-x  1 XXXXXX  staff  400552 Jul 19 16:22 test
400Kbytesもある。いまどきこんなもんか。

tensorflow server

https://tensorflow.github.io/serving/serving_basic TensorFlowサーバなるものがあるらしい。 学習済みのモデルをエクスポートする。 これをサーババイナリ(C++で書かれている模様)に与えると、 grpcのサーバができるので、ネットワーク越しにgrpcで呼び出して 予測をさせる事ができる、ということらしい。

2017年6月21日水曜日

python UnicodeEncodeError


 UnicodeEncodeError: 'ascii' codec can't encode character u'\xa0' in position 20: ordinal not in range(128)
この手のエラー、
export PYTHONIOENCODING=utf-8
とやるとうまくいく場合がある模様。Python3で確認