2013年5月23日木曜日

clisp でファイルダンプ

ファイルダンププログラムを clisp でも作成してみた。emacs の初期設定すらもままならない僕にはやはりかなりハードルが高かった。出来上がったソースは lisp らしくないのかもしれないが、とりあえずはじめの一歩を記すことができた。以下、躓いたところを列挙。

  • 本みて理解しているつもりでも、cons,list,push が解ってなかった。目的をもってREPLで試すと少し理解が深まった。
  • どの言語もそうだけれど、1バイト単位の処理方法に意外と苦労する。今回は element-type,read-byte,code-char,char-code の組み合わせかな。
  • while はマクロで実現されているので、自分でマクロを組まなければいけないらしい(初心者には荷が重いので loop に書き換えた)。
  • return は、break のようなもので、二重ループを一気に抜け出たりはしてくれないらしい。
  • format は、独特な世界観で、なかなか覚えられない。そもそもlisp は関数の名前が長めのが多い。
出来上がってみれば、他の言語同様の構造で(lispらしくない?)どこに詰まったのかと思うところが悲しい。
(defun hdmp(adr line len)
  (format t "~8,'0x: " adr)
  (mapc (lambda(c) (format t "~2,'0x " c)) (reverse line))
  (setq zan (- 16 len))
  (if (> zan 0)
      (dotimes(i zan) (princ "   "))))

(defun cdmp(adr line len)
  (princ "| ")
  (mapc (lambda(c)
          (if (or (< c 32) (>= c 127))
              (format t ".")
              (format t "~a" (code-char c))))
        (reverse line))
  (setq zan (- 16 len))
  (if (> zan 0)
      (dotimes(i zan) (princ " ")))
  (princ " |")
  (fresh-line))

(defun dump(name)
  (with-open-file (in name :direction :input :element-type 'unsigned-byte)
    (setq adr 0)
    (setq cnt 0)
    (setq line nil)
    (loop
       (setq c (read-byte in nil nil))
       (if (equal c nil) (return t))

       (if (> cnt 15)
           (progn
             (hdmp adr line cnt)
             (cdmp adr line cnt)
             (setq adr (+ adr cnt))
             (setq cnt 0)
             (setq line nil)))

       (push c line)
       (setq cnt (1+ cnt)))
    (if (> cnt 0)
        (progn
          (hdmp adr line cnt)
          (cdmp adr line cnt))))

2013年5月22日水曜日

ruby で mysql 接続

ruby では、java でうまく行かなかった time 型の最大値も問題なく表示されたが指数表記に差異が見られた。原因はここに記載されているデフォルトのフォーマットが異なるのだろう。また、bit 型の表記は、mysql コマンドで表示させた時と同じサイコロ状の表記となった。(サイコロ状表記についてはこちら)

タイプ DB設定値 ruby取込値
BIT(8) 1 mysql の表記と同じ
TINYINT 127 127
BOOL 1 1
SMALLINT 32767 32767
MEDIUMINT 8388607 8388607
INT 2147483647 2147483647
BIGINT 9223372036854775807 9223372036854775807
FLOAT 3.402823466E+38 3.40282e38
DOUBLE 1.7976931348623157E+308 1.7976931348623157e308
DECIMAL 1 1
DATE '9999-12-31' 9999-12-31
DATETIME '9999-12-3123:59:59' 9999-12-31 23:59:59
TIMESTAMP '2037-12-3123:59:59' 2037-12-31 23:59:59
TIME '838:59:59' 23:59:59
YEAR 2155 2155
CHAR 'a' a
VARCHAR(255) 'ab1' ab1
BINARY(255),@ 'ab2' ab2
VARBINARY(255) 'ab3' ab3
TINYBLOB 'ab4' ab4
TINYTEXT 'ab5' ab5
BLOB(255) 'ab6' ab6
TEXT(255) 'ab7' ab7
MEDIUMBLOB 'ab8' ab8
MEDIUMTEXT 'ab9' ab9
LONGBLOB 'abA' abA
LONGTEXT 'abB' abB
ENUM('a','b','c'), 'c' c
SET('e','f','g') 'ef' e,f

#! /home/naoki/.rvm/rubies/ruby-1.8.7-p371/bin/ruby
# coding: utf-8
require 'rubygems'
require 'mysql'
con = Mysql::new("127.0.0.1","user","password","db")

begin
  res = con.query("select * from test01")
  res.each do |row|
    puts row[0]
    puts row[1]
    puts row[2]
    puts row[3]
    puts row[4]
    puts row[5]
    puts row[6]
    puts row[7]
    puts row[8]
    puts row[9]
    puts row[10]
    puts row[11]
    puts row[12]
    puts row[13]
    puts row[14]
    puts row[15]
    puts row[16]
    puts row[17]
    puts row[18]
    puts row[19]
    puts row[20]
    puts row[21]
    puts row[22]
    puts row[23]
    puts row[24]
    puts row[25]
    puts row[26]
    puts row[27]
    puts row[28]
  end
ensure
  con.close
end

php でmysql接続

php では、java でうまく行かなかった time 型の最大値も問題なく表示されたが指数表記に差異が見られた。原因はここに記載されているデフォルトのフォーマットが異なるのだろう。また、bit 型の表記は、mysql コマンドで表示させた時と同じサイコロ状の表記となった。(サイコロ状表記についてはこちら)

タイプ DB設定値 php取込値
BIT(8) 1
TINYINT 127 127
BOOL 1 1
SMALLINT 32767 32767
MEDIUMINT 8388607 8388607
INT 2147483647 2147483647
BIGINT 9223372036854775807 9223372036854775807
FLOAT 3.402823466E+38 3.40282e38
DOUBLE 1.7976931348623157E+308 1.7976931348623157e308
DECIMAL 1 1
DATE '9999-12-31' 9999-12-31
DATETIME '9999-12-3123:59:59' 9999-12-31 23:59:59
TIMESTAMP '2037-12-3123:59:59' 2037-12-31 23:59:59
TIME '838:59:59' 23:59:59
YEAR 2155 2155
CHAR 'a' a
VARCHAR(255) 'ab1' ab1
BINARY(255),@ 'ab2' ab2
VARBINARY(255) 'ab3' ab3
TINYBLOB 'ab4' ab4
TINYTEXT 'ab5' ab5
BLOB(255) 'ab6' ab6
TEXT(255) 'ab7' ab7
MEDIUMBLOB 'ab8' ab8
MEDIUMTEXT 'ab9' ab9
LONGBLOB 'abA' abA
LONGTEXT 'abB' abB
ENUM('a','b','c'), 'c' c
SET('e','f','g') 'ef' e,f

#! /usr/bin/php

perl で mysql 接続

perl では、java でうまく行かなかった time 型の最大値も問題なく表示されたが指数表記に差異が見られた。原因はここに記載されているデフォルトのフォーマットが異なるのだろう。また、bit 型の表記は、mysql コマンドで表示させた時と同じサイコロ状の表記となった。(サイコロ状表記についてはこちら)

タイプ DB設定値 perl取込値
BIT(8) 1 mysqlと同じ表記
TINYINT 127 127
BOOL 1 1
SMALLINT 32767 32767
MEDIUMINT 8388607 8388607
INT 2147483647 2147483647
BIGINT 9223372036854775807 9223372036854775807
FLOAT 3.402823466E+38 3.40282e38
DOUBLE 1.7976931348623157E+308 1.7976931348623157e308
DECIMAL 1 1
DATE '9999-12-31' 9999-12-31
DATETIME '9999-12-3123:59:59' 9999-12-31 23:59:59
TIMESTAMP '2037-12-3123:59:59' 2037-12-31 23:59:59
TIME '838:59:59' 23:59:59
YEAR 2155 2155
CHAR 'a' a
VARCHAR(255) 'ab1' ab1
BINARY(255), 'ab2' ab2
VARBINARY(255) 'ab3' ab3
TINYBLOB 'ab4' ab4
TINYTEXT 'ab5' ab5
BLOB(255) 'ab6' ab6
TEXT(255) 'ab7' ab7
MEDIUMBLOB 'ab8' ab8
MEDIUMTEXT 'ab9' ab9
LONGBLOB 'abA' abA
LONGTEXT 'abB' abB
ENUM('a','b','c'), 'c' c
SET('e','f','g') 'ef' e,f

#! /usr/bin/perl
use DBI;

$d = "DBI:mysql:naoki:localhost";

$dbh = DBI->gtconnect($d,"user","password");
if (!$dbh) {
    printf("接続失敗\n");
    exit 1;
}
$sth = $dbh->gtprepare("select * from test01");
if (!$sth->gtexecute) {
    printf("SQL失敗\n");
    exit 1;
}
#$types = $sth->gt{TYPE};
#foreach $line (@$types) {
#  printf("[%d]\n",$line);
#}

while(@rec = $sth->gtfetchrow_array) {
    print @rec[0] . "\n";
    print @rec[1] . "\n";
    print @rec[2] . "\n";
    print @rec[3] . "\n";
    print @rec[4] . "\n";
    print @rec[5] . "\n";
    print @rec[6] . "\n";
    print @rec[7] . "\n";
    print @rec[8] . "\n";
    print @rec[9] . "\n";
    print @rec[10] . "\n";
    print @rec[11] . "\n";
    print @rec[12] . "\n";
    print @rec[13] . "\n";
    print @rec[14] . "\n";
    print @rec[15] . "\n";
    print @rec[16] . "\n";
    print @rec[17] . "\n";
    print @rec[18] . "\n";
    print @rec[19] . "\n";
    print @rec[20] . "\n";
    print @rec[21] . "\n";
    print @rec[22] . "\n";
    print @rec[23] . "\n";
    print @rec[24] . "\n";
    print @rec[25] . "\n";
    print @rec[26] . "\n";
    print @rec[27] . "\n";
    print @rec[28] . "\n";
}

$sth->gtfinish;
$dbh->gtdisconnect;

python で mysql 接続

python では、java でうまく行かなかった time 型の最大値も問題なく表示されたが、指数表記に差異が見られた。原因はここに記載されているデフォルトのフォーマットが異なるのだろう。また、bit 型の表記は、mysql コマンドで表示させた時と同じサイコロ状の表記となった。(サイコロ状表記についてはこちら)

タイプ DB設定値 python取込値
BIT(8) 1 mysqlと同じ表記
TINYINT 127 127
BOOL 1 1
SMALLINT 32767 32767
MEDIUMINT 8388607 8388607
INT 2147483647 2147483647
BIGINT 9223372036854775807 9223372036854775807
FLOAT 3.402823466E+38 3.40282e+38
DOUBLE 1.7976931348623157E+308 1.79769313486e+308
DECIMAL 1 1
DATE '9999-12-31' 9999-12-31
DATETIME '9999-12-3123:59:59' 9999-12-31 23:59:59
TIMESTAMP '2037-12-3123:59:59' 2037-12-31 23:59:59
TIME '838:59:59' 838:59:59
YEAR 2155 2155
CHAR 'a' a
VARCHAR(255) 'ab1' ab1
BINARY(255),@ 'ab2' ab2
VARBINARY(255) 'ab3' ab3
TINYBLOB 'ab4' ab4
TINYTEXT 'ab5' ab5
BLOB(255) 'ab6' ab6
TEXT(255) 'ab7' ab7
MEDIUMBLOB 'ab8' ab8
MEDIUMTEXT 'ab9' ab9
LONGBLOB 'abA' abA
LONGTEXT 'abB' abB
ENUM('a','b','c'), 'c' c
SET('e','f','g') 'ef' e,f

#! /usr/bin/python
# -*- coding: utf-8 -*-

import MySQLdb

if __name__ == "__main__":

    connector = MySQLdb.connect(host="192.168.11.100",db="naoki",user="naoki",passwd="naoki",charset="utf8")
    cursor = connector.cursor()
    cursor.execute("select * from test01")

    result = cursor.fetchall()

    for row in result:
        print "===== Hit! ====="
        print row[0]
        print row[1]
        print row[2]
        print row[3]
        print row[4]
        print row[5]
        print row[6]
        print row[7]
        print row[8]
        print row[9]
        print row[10]
        print row[11]
        print row[12]
        print row[13]
        print row[14]
        print row[15]
        print row[16]
        print row[17]
        print row[18]
        print row[19]
        print row[20]
        print row[21]
        print row[22]
        print row[23]
        print row[24]
        print row[25]
        print row[26]
        print row[27]
        print row[28]

    cursor.close()
    connector.close()

java で mysql接続

java から mysql に接続してみた。TIMEの上限値が取得できない障害に出会ったが、24時間以内であれば問題はなかった。また、指数表記に差異が見られたが原因はここに記載されているデフォルトのフォーマットが異なるのだろう。bit 型の表記は、mysql コマンドで表示させた時と同じサイコロ状の表記となった。(サイコロ状表記についてはこちら)

タイプ DB設定値 Java取込値
BIT(8) 3 3
TINYINT 127 127
BOOL 1 1
SMALLINT 32767 32767
MEDIUMINT 8388607 8388607
INT 2147483647 2147483647
BIGINT 9223372036854775807 9223372036854775807
FLOAT 3.402823466E+38 3.40282e38
DOUBLE 1.7976931348623157E+308 1.7976931348623157e308
DECIMAL 1 1
DATE '9999-12-31' 9999-12-31
DATETIME '9999-12-3123:59:59' 9999-12-31 23:59:59.0
TIMESTAMP '2037-12-3123:59:59' 2037-12-31 23:59:59.0
TIME '838:59:59' ×
YEAR 2155 2155-01-01
CHAR 'a' a
VARCHAR(255) 'ab1' ab1
BINARY(255),@ 'ab2' ab2
VARBINARY(255) 'ab3' ab3
TINYBLOB 'ab4' ab4
TINYTEXT 'ab5' ab5
BLOB(255) 'ab6' ab6
TEXT(255) 'ab7' ab7
MEDIUMBLOB 'ab8' ab8
MEDIUMTEXT 'ab9' ab9
LONGBLOB 'abA' abA
LONGTEXT 'abB' abB
ENUM('a','b','c'), 'c' c
SET('e','f','g') 'ef' e,f

import java.sql.*;
import java.lang.Long;

public class test11 {
  public static void main(String[] args) {
        String msg = "";
        try {
            // ドライバロード
            Class.forName("org.gjt.mm.mysql.Driver");

            // MySQLに接続
            Connection con = DriverManager.getConnection(
                        "jdbc:mysql://localhost/naoki", "user", "password");

            // ステートメント生成
            Statement stmt = con.createStatement();

            // SQLを実行
            String sqlStr = "SELECT * FROM test01";
            ResultSet rs = stmt.executeQuery(sqlStr);

            // 結果行をループ
            while(rs.next()){
                // レコードの値
                System.out.println(rs.getString("col01"));
                System.out.println(rs.getString("col02"));
                System.out.println(rs.getString("col03"));
                System.out.println(rs.getString("col04"));
                System.out.println(rs.getString("col05"));
                System.out.println(rs.getString("col06"));
                System.out.println(rs.getString("col07"));
                System.out.println(rs.getString("col08"));
                System.out.println(rs.getString("col09"));
                System.out.println(rs.getString("col10"));
                System.out.println(rs.getString("col11"));
                System.out.println(rs.getString("col12"));
                System.out.println(rs.getString("col13"));
                System.out.println(rs.getString("col14"));
                System.out.println(rs.getString("col15"));
                System.out.println(rs.getString("col16"));
                System.out.println(rs.getString("col17"));
                System.out.println(rs.getString("col18"));
                System.out.println(rs.getString("col19"));
                System.out.println(rs.getString("col20"));
                System.out.println(rs.getString("col21"));
                System.out.println(rs.getString("col22"));
                System.out.println(rs.getString("col23"));
                System.out.println(rs.getString("col24"));
                System.out.println(rs.getString("col25"));
                System.out.println(rs.getString("col26"));
                System.out.println(rs.getString("col27"));
                System.out.println(rs.getString("col28"));
                System.out.println(rs.getString("col29"));
            }

            // 接続を閉じる
            rs.close();
            stmt.close();
            con.close();
        }
        catch (ClassNotFoundException e){
            msg = "ドライバのロードに失敗しました";
            System.out.println(msg);
        }
        catch (SQLException e) {
            msg = "SQLに失敗しました";
            System.out.println(msg);
            e.printStackTrace();
        }
    }
}

2013年5月11日土曜日

mysql の bit 型のサイコロ表記の謎

mysql の bit 型を pythonやruby で出力すると、サイコロの4つ目のような表示になる。あまり見かけない表示だなと思いつつ、ふと、プログラムではどのように使うのか疑問に思った。


まずは、なんの加工もなしにダイレクトにプログラムに渡ってきているなら、ビットマスクできるのではないかと考えて抽出対象ビットを16進数と&してみたが、0が帰ってきた。


サイコロの4つ目のような表示になるのだから変なコードになっているのかと思い、ファイルに出力して16進ダンプしてみると設定した通りの値'0x01' が入っていた。


いい年をしてなんだが、0x01 を画面に出力するとサイコロの4つ目表示になるのか試してみた。確かにサイコロの4つ目表示が出てきた。


脇道にそれるがこのサイコロの4つ目表示は、ビット表記なのか16進表記なのか確かめてみると、16進表記っぽいが、16進全部が表記できるわけでもないらしい(年甲斐もないが。。)


本題にもどるがここまで来て、プログラム内でこのbit 型を使うときは unpack して数値にしてから、ビット操作するのだと気がついた。

binary 型や blob 型のように無変換のレアなままの値を保持している型の値をプログラムで利用しようとおもったら、同じように unpack を駆使することになるのだろう。

ちなみに、型のない言語で変数に保存したこれらの値の取り扱い方法は、プログラム依存になるしかないのだろうか・・・・(年甲斐もないな)