語句ログ - ニュース、プログラミング、システムトレードの用語解説

Deep Learning (日本語翻訳版） - ディープラーニング（深層学習）に関する書籍の決定版 #機械学習

Wed, 06 Sep 2017 17:39:27 +0900

Deep Learning (日本語翻訳版）

「ディープラーニングに関する書籍の決定版」と言われているGoodfellow他著「Deep Learning」の日本語翻訳版をオンライン公開しているページ。

製本版は今後発売される予定となっているが、少しでも良い翻訳本とするため、発売前にできるだけ多くの人に翻訳版を読んでもらうことで、意見や指摘を反映させることを意図して事前にオンライン公開することにしたという。

原著はAmazonで購入できるだけでなく、オンライン公開ページ（英語）で読むこともできる。

ただし、書籍の発売後は公開を終了する予定だそうなので読むならお早めに。

Deep Learning (日本語翻訳版）

ディープラーニング（深層学習）

ディープラーニング（深層学習）とは、人間の脳を模倣したニューラルネットワークを用いた機械学習の一手法。ディープラーニングを使用することで、画像認識や音声認識の性能が近年飛躍的に向上し、将棋や囲碁のでは人工知能（AI）がトッププロを圧倒的に打ち負かすなど大きな成果を上げている。従来型の機械学習に比べて高い汎用性を備えていることが特長で、画像認識や音声認識にとどまらず、機械翻訳や信号処理、ロボット制御など広範囲な対象に応用されている。

ゼロから作るDeep Learning ―Pythonで学ぶディープラーニングの理論と実装
オライリージャパン著者：斎藤康毅

amazon.co.jpのカスタマーレビューを見る
powered by amalink

Link(3) | Trackback(0) | Comment(0)

キーワード

深層学習 日本語 翻訳 人工知能 ディープラーニング

語句ログ - ニュース、プログラミング、システムトレードの用語解説 - 日本の注目ニュース、コンピュータープログラミング（C/C++,Perl,PHP,SQL）、システムトレード（FX,CFD,株価指数,先物）に関する語句（Word）を日本語や英語で解説

[プログラミング]opensource.google.com Googleの #オープンソースプロジェクトに関するポータルサイト

Wed, 29 Mar 2017 18:03:44 +0900

opensource.google.comは、オープンソースプロジェクトに関するポータルサイトで、プロジェクトを検索したり、機能やプログラム言語別に表示することができる。各プロジェクトのソースコードはGitHub（Google）等で公開されているが、ポータルには、各プロジェクトの基本的な情報に加え、リポジトリへのリンクが掲載されている。

opensource.google.comについてのニュース記事

「opensource.google.com」オープン、Googleのオープンソースプロジェクトポータル
 Google Open Source Blog: A New Home for Google Open Source（英語）

オープンソースプロジェクトとは

オープンソースプロジェクトとはソフトウェアのソースコードを公開して、より多くの人にプロジェクトに参加してもらうことで、質の高いソフトウェアを開発しようというもので、代表的なものとして基本ソフト（OS）ではLinux、WEBサーバーではApache、データベースではMySQLやPostgreSQL、ブログソフトではWordpressなどがある。

オープンソースソフトウェア―彼らはいかにしてビジネススタンダードになったのか
オライリー・ジャパン著者：クリスディボナ,マークストーン,サムオックマン

amazon.co.jpのカスタマーレビューを見る
powered by amalink

Link(2) | Trackback(0) | Comment(0)

キーワード

Google プログラミング オープンソース ポータルサイト

YouTube動画のURLを正規表現で埋め込みコードに変換するためのPerlコード

Sat, 22 Jun 2013 01:35:47 +0900

掲示板などのスレッドやコメント欄に投稿されたYouTube動画のURLを埋め込みコードに変換する方法を、ネットで検索していろいろ調べましたが、YouTube動画のURLは、http://www.youtube.com/watch?v={VID}とhttp://youtu.be/{VID}という2種類の形式があるようで、イマイチうまくいきませんでした。

結局、以下のコードで埋め込みコードへの変換は出来ましたが、改良の余地がまだかなりありそうです。

sub _url_convert {
    my $str = shift;

    if ($str =~ m/http:\/\/www\.youtube\.com\/watch\?v=([a-zA-Z0-9]+).*/i) {
        my $vid = $1;
        $str =~ s/(http:\/\/www\.youtube\.com\/watch.*)/<iframe width="480" height="360" src="http:\/\/www.youtube.com\/embed\/$vid?rel=0" frameborder="0" allowfullscreen><\/iframe>/g;
    }
    elsif ($str =~ m/http:\/\/youtu\.be\/([-_a-zA-Z0-9]+)/i) {
        my $vid = $1;
        $str =~ s/(http:\/\/youtu\.be\/[-_a-zA-Z0-9]+)/<iframe width="480" height="360" src="http:\/\/www.youtube.com\/embed\/$vid?rel=0" frameborder="0" allowfullscreen><\/iframe>/g;
    }

    return $str;
}

正規表現クックブック
オライリージャパン著者：Jan Goyvaerts,Steven Levithan

amazon.co.jpのカスタマーレビューを見る
powered by amalink

Link(1) | Trackback(0) | Comment(0)

キーワード

YouTube Perl URL 埋め込み コード 正規表現

[Perl]UTF-8でエンコードされた文字の文字コードを表示するプログラム

Mon, 17 Dec 2012 00:25:00 +0900

Unicodeの文字コード表によるとUTF-8の半角英数、全角英数、半角カナ、全角カナの文字コードは以下のようになるようです。英数字の場合は半角と全角の文字がそれぞれ対応していますが、カタカナの場合は半角と全角では文字の数が違うようです。

半角数字:0 - 9
30 - 39

全角数字
EFBC90 - EFBC99
2バイト目まではEFBC

半角アルファベット大文字:A - Z
41 - 5A

全角アルファベット大文字:Ａ - Ｚ
EFBCA1 - EFBCBA
2バイト目まではEFBC

半角アルファベット小文字:a - z
61 - 7A

全角アルファベット小文字:ａ - ｚ
EFBD80 - EFBD9A
2バイト目まではEFBD

半角カナ（JISカナ）
EFBDA1 - EFBE9F
1バイト目がEFで2バイト目、3バイト目がBDA1 - BE9Fの範囲

全角カタカナ
E38299 - E383BF
1バイト目がE3で2バイト目、3バイト目が82A1 - 83BFの範囲

Unicode対応文字コード表
http://ash.jp/code/unitbl1.htm
http://ash.jp/code/unitbl21.htm

動作確認用にまずUTF-8の文字コードを表示するプログラムを作成します。

#!/usr/bin/perl

use strict;
use warnings;
use Encode;

my $hanAlnum = "ABCDE12345abcde";
my $zenAlnum = "ＡＢＣＤＥ１２３４５ａｂｃｄｅ";
my $hanKana = "ｱｲｳｴｵ";
my $zenKana = "アイウエオ";

print_charcode($hanAlnum);
print "\n";

print_charcode($zenAlnum);
print "\n";

print_charcode($hanKana);
print "\n";

print_charcode($zenKana);
print "\n";

# UTF-8でエンコードされた文字列の文字コードを表示する
sub print_charcode {
    my ($src) = @_;

    my $srclen = length($src);
    my $pos = 0;

    while ($pos < $srclen) {
        my $code = ord substr($src, $pos, 1); # 先頭のASCIIコード値を取得
        my $bytelen = _bytesize($code);
        my $srcchar = substr($src, $pos, $bytelen);
        my $codestr = sprintf("%2.2X ", $code);
        if ($bytelen > 1) {
            my $times = $bytelen - 1;
            for my $i (1 .. $times) {
                my $charcode = ord substr($src, $pos + $i, 1);
                $codestr .= sprintf("%2.2X ", $charcode);
            }
        }

        # Windowsで表示するのでcp932（シフトJIS）に変換
        Encode::from_to($srcchar, 'utf8', 'cp932');
        print "$srcchar : $codestr\n";
        $pos += $bytelen;
    }
}

# 文字のバイト長を求める
sub _bytesize {
    my $code = shift;
    my $size = 1;
    if (0x80 & $code) { # 1バイト文字以外
        $code <<= 1;
        for my $i (2 .. 8) {
            $size++;
            $code <<= 1;
            last if (!(0x80 & $code));
        }
    }
    return $size;
}

Perl Hacks ―プロが教えるテクニック & ツール101選
オライリー・ジャパン著者：chromatic,Damian Conway,Curtis "Ovid" Poe

amazon.co.jpのカスタマーレビューを見る
powered by amalink

Link(1) | Trackback(0) | Comment(0)

キーワード

Perl 全角半角 文字コード 表示 日本語

自然言語処理（しぜんげんごしょり）

Sun, 09 Dec 2012 22:59:04 +0900

自然言語処理（しぜんげんごしょり、natural language processing、NLP）は、人間が日常的に使っている自然言語をコンピュータに処理させる一連の技術であり、人工知能と言語学の一分野。「計算言語学」（computational linguistics）も同じ意味だが、自然言語処理が工学的な視点からの言語処理をさすのに対して、計算言語学は言語学的視点を重視する手法をさす事が多い。データベース内の情報を自然言語に変換したり、自然言語の文章をより形式的な（コンピュータが理解しやすい）表現に変換するといった処理が含まれる。

自然言語処理の基礎技術にはさまざまなものがあるが、現在のところ、日本語を処理する基礎技術としては、形態素解析、構文解析、語義の曖昧性解消照応解析が主に研究されている。

自然言語処理 - Wikipedia
言語処理学会 The Association for Natural Language Processing
自然言語処理ツール
 Python による日本語自然言語処理
 Perl で自然言語処理

入門自然言語処理
オライリージャパン著者：Steven Bird,Ewan Klein,Edward Loper

amazon.co.jpのカスタマーレビューを見る
powered by amalink

Link(1) | Trackback(0) | Comment(0)

キーワード

自然言語 コンピュータ プログラミング 人工知能

[Perl]1バイト(8bit)の10進数を2進数の文字列に変換するコード

Sun, 09 Dec 2012 20:36:29 +0900

Perlの関数を使用して、以下の手順で10進数を2進文字列に変換することができます。

sprintf関数で10進数を16進文字列に変換
pack関数で16進文字列をバイナリーにパック
unpack関数で2進文字列に変換

例えば、文字列の先頭文字のASCIIコード値（10進数）を取得し、それを2進文字列に変換に変換する場合は、次のようなコードになります。

#!/usr/bin/perl

use strict;
use warnings;

my $ascii = "ABC";
my $asciicode = ord $ascii;  # 先頭文字のASCIIコード値を取得
my $str = _bitstr($asciicode, 8);
print "str   = $str\n"; # for debug

exit;

# 10進数を2進文字列に変換する関数
sub _bitstr {
    my ($code, $len) = @_;
    my $hexcode = sprintf("%X", $code); # 16進に変換
    my $bitstr = unpack("B".$len, pack("H2", $hexcode));
}

10進数を単に2進文字列に変換するだけならこれでも構わないのですが、ビット演算子を使ってビットのオン・オフを判定して、2進文字列を作成していく方法もあります。以下のコードはその実装例です。

#!/usr/bin/perl

use strict;
use warnings;

my $ascii = "ABC";
my $asciicode = ord $ascii;  # 先頭文字のASCIIコード値を取得
my $str = _bitstrR($asciicode, 8);
print "str   = $str\n"; # for debug

exit;

# ビット演算で10進数を2進文字列に変換する関数
sub _bitstrR {
    my ($code, $len) = @_;
    my $bitstr = '';
    for my $i (1 .. $len) {
        $bitstr .= (0x80 & $code) ? '1' : '0'; # 0x80(2進数：10000000)でビット論理積をとる
        $code <<= 1;
    }
    return $bitstr;
}

ここで問題になるのはどちらの方法が処理速度が優れているかということですが、以下のコードのプロファイルを取ると・・・

#!/usr/bin/perl

use strict;
use warnings;

my $ascii = "ABC";
my $asciicode = ord $ascii;  # 先頭文字のASCIIコード値を取得

my $str = '';
for my $j (1 .. 10000) {
    $str = _bitstr($asciicode, 8);
    $str = _bitstrR($asciicode, 8);
}
print "str   = $str\n"; # for debug

exit;

sub _bitstr {
    my ($code, $len) = @_;
    my $hexcode = sprintf("%X", $code); # 16進に変換
    my $bitstr = unpack("B".$len, pack("H2", $hexcode));
}

sub _bitstrR {
    my ($code, $len) = @_;
    my $bitstr = '';
    for my $i (1 .. $len) {
        $bitstr .= (0x80 & $code) ? '1' : '0'; # 0x80(2進数：10000000)でビット論理積をとる
        $code <<= 1;
    }
    return $bitstr;
}

C:\xampp\htdocs\sample>perl -d:Dprof bitstr3.pl
str   = 01000001

C:\xampp\htdocs\sample>dprofpp
Total Elapsed Time = 0.018988 Seconds
  User+System Time = 0.016988 Seconds
Exclusive Times
%Time ExclSec CumulS #Calls sec/call Csec/c  Name
223.   0.038  0.038  10000   0.0000 0.0000  main::_bitstr
47.0   0.008  0.008  10000   0.0000 0.0000  main::_bitstrR
0.00       - -0.000      1        -      -  strict::import
0.00       - -0.000      1        -      -  warnings::import
0.00       - -0.000      1        -      -  strict::bits
0.00       - -0.000      2        -      -  main::BEGIN

やはり、ビット演算で2進文字列を作成するほうが早いようです。

プログラミングPerl〈VOLUME1〉
オライリー・ジャパン著者：ラリーウォール,ジョンオーワント,トムクリスチャンセン

amazon.co.jpのカスタマーレビューを見る
powered by amalink

Link(4) | Trackback(0) | Comment(0)

キーワード

Perl 2進数 変換 サンプル プログラム コード

[プログラミング言語]Processing（プロセッシング）

Tue, 22 May 2012 16:56:25 +0900

Processing（プロセッシング）は、イメージ、アニメーション、インタラクティブなグラフィックスをプログラムするためのオープンソースのプログラミング言語。紙にスケッチするように、すぐに結果が確認できることから、プログラミング入門としても優れている。

Processing is an electronic sketchbook for developing ideas. It is a context for learning fundamentals of computer programming within the context of the electronic arts.

Processing.org

Processing 学習ノート
 Processing入門講座

Processingをはじめよう (Make: PROJECTS)
オライリージャパン著者：Casey Reas,Ben Fry

amazon.co.jpのカスタマーレビューを見る
powered by amalink

Link(1) | Trackback(0) | Comment(0)

キーワード

プログラミング 言語 イメージ オープンソース

掲示板CGI ThreadPlus 1.0 のリリース

Tue, 17 Jan 2012 23:17:11 +0900

オープンソースのシンプルな掲示板CGI「ThreadPlus 1.0」をリリースしました。プログラミング言語はperl、ライセンスはGPLv2です。

ThreadPlusは、以前公開していた掲示板CGI（bbscgi.cgi）の機能を見直し、若干の機能追加、不要な機能の削除、不具合の修正などを行ったもので、携帯電話からも利用できるようになっています。

ThreadPlusの特徴

誰にでもわかりやすいシンプルなスレッド形式
テンプレートエンジン（HTML::Template）によりデザインと処理が分離されておりカスタマイズが容易
スレッドやコメントの本文に含まれるURLのリンク変換（画像の場合はimgタグも追加）
携帯電話に対応（但し、携帯電話向けに最適化されているわけではなく基本的に機能はPCと同じ）

ThreadPlusのデモページ
ThreadPlusのダウンロード

CGIプログラミング
オライリー・ジャパン著者：スコットグーリッジ,ガンザーバージニックス,シシャガンダヴァラム価格：4,200円評価：★★★★★

キーワード

掲示板 CGI オープンソース ソフトウェア GPL

GNU Debugger (GDB)

Tue, 07 Sep 2010 16:44:12 +0900

GNU Debugger (GDB) は、Ada、C、C++、Objective-C、Pascal、FORTRANなど多くの言語に対応する、GPLで公開されているソースレベルのデバッガ。最新版では、D言語とARM Symbianに対応したほか、C++やPythonのサポートなども強化されている。

GDB, the GNU Project debugger, allows you to see what is going on `inside' another program while it executes -- or what another program was doing at the moment it crashed.

GDB: The GNU Project Debugger

実践デバッグ技法 ―GDB、DDD、Eclipseによるデバッギング
オライリージャパン著者：Norman Matloff,Peter Salzman 価格：2,940円評価：★★★★★

PizzaFactoryを使っていました ★★★★★

キーワード

GDB GNU Debugger デバッグ ソース GPL

[Perl]2次元配列のサンプルプログラム

Sat, 17 Jul 2010 00:10:40 +0900

C言語やC++なら2次元配列といっても配列の階層を増やすだけなので、わりと簡単に理解できるのですが、Perlはそこでリファレンスという、いまいちわかりにくいものが出てくるのでちょっと面倒です。

とはいっても、2次元配列程度でならそんなに複雑なコードになるというわけでもありません。

以下は、numdata.txtというコンマで区切られたテキストファイルのデータを、2次元配列に格納してからレコードごとに標準出力に出力するPerlのサンプルプログラムです。

--- numdata.txt ---1,2,3,411,12,13,1421,22,23,2431,32,33,3441,42,43,44--- sample.pl ---#!/usr/bin/perluse strict;use warnings;#use Data::Dumper;my @list;open my $infh, '<', "numdata.txt";while (my $rec = <$infh>) {    chomp $rec;    if ($rec ne '') {        push @list, [split(/,/, $rec)];    }}close $infh;#print Dumper(@list);foreach my $item (@list) {#    print Dumper($item);    my ($a, $b, $c, $d) = @{$item};    print "$a, $b, $c, $d\n";}

初めてのPerl 第5版
オライリージャパン著者：Randal L. Schwartz,Tom Phoenix,brian d foy 価格：3,780円評価：★★★★★

キーワード

Perl サンプルプログラム 2次元配列 リファレンス

語句ログ - ニュース、プログラミング、システムトレードの用語解説

Deep Learning (日本語翻訳版） - ディープラーニング（深層学習）に関する書籍の決定版 #機械学習

Deep Learning (日本語翻訳版）

ディープラーニング（深層学習）

キーワード

[プログラミング]opensource.google.com Googleの #オープンソース プロジェクトに関するポータルサイト

opensource.google.comについてのニュース記事

オープンソースプロジェクトとは

キーワード

YouTube動画のURLを正規表現で埋め込みコードに変換するためのPerlコード

キーワード

[Perl]UTF-8でエンコードされた文字の文字コードを表示するプログラム

キーワード

自然言語処理（しぜんげんごしょり）

キーワード

[Perl]1バイト(8bit)の10進数を2進数の文字列に変換するコード

キーワード

[プログラミング言語]Processing（プロセッシング）

キーワード

掲示板CGI ThreadPlus 1.0 のリリース

ThreadPlusの特徴

キーワード

GNU Debugger (GDB)

キーワード

[Perl]2次元配列のサンプルプログラム

キーワード

[プログラミング]opensource.google.com Googleの #オープンソースプロジェクトに関するポータルサイト