python3でSSHトンネル経由でMySQLへの接続する
最近、業務でも python3 を書くことが多くなってきました MySQL というか、MariaDB との連携も多くなり・・・。 ただし、業務上 MySQL のポートは開放したくないので SSH 経由で接続を調べました …
カテゴリー: Programming
Windows に superset をインストール
Redash の次と言われている superset 以前であれば、 VirtualBox に linux インストールして という体力ありましたが、それも失せて来たので Windows7 x64 の Anaconda x…
casperjs でサイトをクロール
忘れそうなので、メモ ウェブサイトをスクレイピングしたいときには、 普通のサイトの場合、PHP の simple_html_dom.php を使ってます 名前の通り、dom のように html を扱えるので、 simpl…
USB UVC カメラで Motion JPEG を取得
せっかくなので、USB の UVC カメラで Motion JPEG を取得したことのメモ linux で UVC カメラで画像を取得する場合は、video4linux2 を使います カメラの画像を取得する場合、YUYV…
C 言語で IP アドレス判定する
Hadoop Pig でアクセスログを解析していると、IP アドレス範囲を解析したい場合ってありますよね Pig で IP アドレス範囲をチェックする場合、UDF を作る必要があります ただ、私は Java を使うことが…
pig で URL デコード
pig で URL デコードをしたくなる場合ありますよね。 最初に簡単な pig の Dynamic Invokers を使って URL デコードをしようと考えました しかし、なぜか Shift_JIS の時だけ上手く動…
Hadoop を設定する
会社で hadoop を使うことになりそうだ 管理などは自分でやらなくて済むが、わからないので手元のマシンで実験してみることにする /opt/hadoop に hadoop-0.20.203.0rc1 をインストール ［…
USB-GEIGER を Linux で動かす
やっとストロベリーリナックスのガイガーカウンターUSB-GEIGERを入手しました Windows 用のUSB 経由で cpm と経過時間のデータは取得できるソフトはストロベリーリナックスで公開されています しかし、Li…
CytoScapeRPCでXGMMLファイル出力
CytoScapeRPC から直接は GML ファイルしか出力できなかった。 他の機能でできないか調査。 executeCommand() という機能があるが、使える機能なのかさっぱりわからない。 なので、CytoSca…
CytoScapeRPC で GML ファイル出力
以前、PHP で CytoScape を操って png を出力するネタを書きましたが、その続き。 「CytoScape を PHP で操りファイルを出力して、CytoScapeWeb に読み込ませる」 という計画を立てた…
Windows に superset をインストール
Redash の次と言われている superset 以前であれば、 VirtualBox に linux インストールして という体力ありましたが、それも失せて来たので Windows7 x64 の Anaconda x…
casperjs でサイトをクロール
忘れそうなので、メモ ウェブサイトをスクレイピングしたいときには、 普通のサイトの場合、PHP の simple_html_dom.php を使ってます 名前の通り、dom のように html を扱えるので、 simpl…
USB UVC カメラで Motion JPEG を取得
せっかくなので、USB の UVC カメラで Motion JPEG を取得したことのメモ linux で UVC カメラで画像を取得する場合は、video4linux2 を使います カメラの画像を取得する場合、YUYV…
C 言語で IP アドレス判定する
Hadoop Pig でアクセスログを解析していると、IP アドレス範囲を解析したい場合ってありますよね Pig で IP アドレス範囲をチェックする場合、UDF を作る必要があります ただ、私は Java を使うことが…
pig で URL デコード
pig で URL デコードをしたくなる場合ありますよね。 最初に簡単な pig の Dynamic Invokers を使って URL デコードをしようと考えました しかし、なぜか Shift_JIS の時だけ上手く動…
Hadoop を設定する
会社で hadoop を使うことになりそうだ 管理などは自分でやらなくて済むが、わからないので手元のマシンで実験してみることにする /opt/hadoop に hadoop-0.20.203.0rc1 をインストール ［…
USB-GEIGER を Linux で動かす
やっとストロベリーリナックスのガイガーカウンターUSB-GEIGERを入手しました Windows 用のUSB 経由で cpm と経過時間のデータは取得できるソフトはストロベリーリナックスで公開されています しかし、Li…
CytoScapeRPCでXGMMLファイル出力
CytoScapeRPC から直接は GML ファイルしか出力できなかった。 他の機能でできないか調査。 executeCommand() という機能があるが、使える機能なのかさっぱりわからない。 なので、CytoSca…
CytoScapeRPC で GML ファイル出力
以前、PHP で CytoScape を操って png を出力するネタを書きましたが、その続き。 「CytoScape を PHP で操りファイルを出力して、CytoScapeWeb に読み込ませる」 という計画を立てた…