[プログラム]の検索結果

[2325] Posted by kagahiro at 2013/07/03 00:10:55
0 point | Link (1) | Trackback (0) | Comment (0)

＋ 

A [C言語]UTF-8でエンコードされた文字列の部分文字列を取り出すコード

－ 

A [C言語]UTF-8でエンコードされた文字列の部分文字列を取り出すコード

C言語のstrncpy関数やmemcpy関数ではバイト単位の操作になるので、漢字、ひらがな、カタカナなどの全角文字を文字数で指定して部分文字列を取り出すことができません。そこで半角英数も全角文字も1文字として部分文字...

C言語のstrncpy関数やmemcpy関数ではバイト単位の操作になるので、漢字、ひらがな、カタカナなどの全角文字を文字数で指定して部分文字列を取り出すことができません。 そこで半角英数も全角文字も1文字として部分文字列を取り出すことができる関数を作成します。

以下はそのコードです。[C言語]UTF-8でエンコードされた文字列の文字数を取得するコードと同様に、文字の1バイト目のビットの状態を調べることによってその文字が何バイト文字を判定しています。

#include <stdio.h>
#include <string.h>

char *substr_utf8(char *dest, char *src, int offset, int len);
int _bytesize(unsigned char code);


int main(void)
{
    char *testStr = "ABCDEFGあいうえおアイウエオ愛夢佐々木";
    char strBuf[256];

    memset(strBuf, 0, sizeof strBuf);

    printf("substr_utf8($testStr, 0, 5) = %s\n", substr_utf8(strBuf, testStr, 0, 5));
    printf("substr_utf8($testStr, 3, 3) = %s\n", substr_utf8(strBuf, testStr, 3, 3));
    printf("substr_utf8($testStr, 10, 4) = %s\n", substr_utf8(strBuf, testStr, 10, 4));
    printf("substr_utf8($testStr, 13, 5) = %s\n", substr_utf8(strBuf, testStr, 13, 5));

    return 0;
}

/* UTF-8でエンコードされた文字列の部分文字列を取り出す */
/* substr_utf8 (文字列式, オフセット, 長さ）*/
char *substr_utf8(char *dest, char *src, int offset, int len)
{
    int srclen = strlen(src);
    int pos = 0;
    int count = 0;
    char *cp = dest;

    while (pos < srclen) {
        unsigned char code;
        code = *(src + pos); /* ASCIIコード値を取得 */
        int bytelen = _bytesize(code);

        if (count >= offset && count < (offset + len)) {
            memcpy(cp, (src + pos), bytelen);
            cp += bytelen;
            *cp = '\0';
        }
        pos += bytelen;
        count++; /* 文字数をカウント */
    }

    return dest;
}

/* 文字のバイト長を求める */
int _bytesize(unsigned char code)
{
    int size = 1;
    int i;

    if (0x80 & code) { /* 1バイト文字以外 */
        for (i = 2; i <= 8; i++) {
            code <<= 1;
            if (!(0x80 & code)) {
                break;
            }
            size++;
        }
    }
    return size;
}

実行結果
$ ./substr_utf8
substr_utf8($testStr, 0, 5) = ABCDE
substr_utf8($testStr, 3, 3) = DEF
substr_utf8($testStr, 10, 4) = えおアイ
substr_utf8($testStr, 13, 5) = イウエオ愛

[2324] Posted by kagahiro at 2013/07/02 11:02:48
0 point | Link (3) | Trackback (0) | Comment (0)

＋ 

A [C言語]UTF-8でエンコードされた文字列の文字数を取得するコード

－ 

A [C言語]UTF-8でエンコードされた文字列の文字数を取得するコード

C言語のstrlen関数では文字列の長さとして返ってくる値はバイト単位となるので、UTF-8でエンコードされている場合、漢字、ひらがな、カタカナなどは1文字で3となってしまいます。Webアプリケーションのテキスト処理で...

C言語のstrlen関数では文字列の長さとして返ってくる値はバイト単位となるので、UTF-8でエンコードされている場合、漢字、ひらがな、カタカナなどは1文字で3となってしまいます。

Webアプリケーションのテキスト処理ではそれでは不都合な場合もことも多いので、半角英数も全角文字（漢字、ひらがな、カタカナなど） も1文字としてカウントする関数を作成することにします。

#include <stdio.h>
#include <string.h>

int strlen_utf8(char *cp);
int _bytesize(unsigned char code);

int main(void)
{
    char *testAscii = "ABCDEFG";
    char *testHira  = "あいうえお";
    char *testKata  = "アイウエ";
    char *testKanji = "愛々木";
    char *testAll = "ABCDEFGあいうえおアイウエオ愛夢佐々木";

    printf("strlen(testAscii) = %d\n", strlen(testAscii));
    printf("strlen_utf8(testAscii) = %d\n", strlen_utf8(testAscii));

    printf("strlen(testHira) = %d\n", strlen(testHira));
    printf("strlen_utf8(testHira) = %d\n", strlen_utf8(testHira));

    printf("strlen(testKata) = %d\n", strlen(testKata));
    printf("strlen_utf8(testKata) = %d\n", strlen_utf8(testKata));

    printf("strlen(testKanji) = %d\n", strlen(testKanji));
    printf("strlen_utf8(testKanji) = %d\n", strlen_utf8(testKanji));

    printf("strlen(testAll) = %d\n", strlen(testAll));
    printf("strlen_utf8(testAll) = %d\n", strlen_utf8(testAll));

    return 0;
}

/* UTF-8でエンコードされた文字列の文字数を取得 */
int strlen_utf8(char *cp)
{
    int textlen = strlen(cp);
    int pos = 0;
    int count = 0;

    while (pos < textlen) {
        unsigned char code;
        code = *(cp + pos); /* ASCIIコード値を取得 */
        int bytelen = _bytesize(code);
        pos += bytelen;
        count++; /* 文字数をカウント */
    }

    return count;
}

/* 文字のバイト長を求める */
int _bytesize(unsigned char code)
{
    int size = 1;
    int i;

    if (0x80 & code) { /* 1バイト文字以外 */
        for (i = 2; i <= 8; i++) {
            code <<= 1;
            if (!(0x80 & code)) {
                break;
            }
            size++;
        }
    }
    return size;
}

strlen_utf8関数では、1バイト目のASCIIコード値をパラメータとして_bytesize関数を呼び出して文字のバイト数を求め、1文字分の処理を行うたびに文字数をカウントアップしています。

また、_bytesize関数ではパラメータで渡されたコード値の場合の文字のバイト数を、コード値のビットの状態から判定して戻り値として返しています。

プロクラムの実行結果は以下のようになります。

kagahiro@kagahiro-PC ~/sample/c
$ ./strlen_utf8
strlen(testAscii) = 7
strlen_utf8(testAscii) = 7
strlen(testHira) = 15
strlen_utf8(testHira) = 5
strlen(testKata) = 12
strlen_utf8(testKata) = 4
strlen(testKanji) = 9
strlen_utf8(testKanji) = 3
strlen(testAll) = 52
strlen_utf8(testAll) = 22

[2323] Posted by kagahiro at 2013/07/01 20:46:54
1 point | Link (3) | Trackback (0) | Comment (1)

＋ 

A Google AdSenseの広告コードが条件付きで変更可能に

－ 

A Google AdSenseの広告コードが条件付きで変更可能に

これまで一切の変更が禁止されてきたGoogle AdSenseの広告コードが、今後は、広告のパフォーマンスを作為的に高めたり、広告主に損害を与えたりするものでない限り、Google の利用規約とプログラムポリシーに沿った形...

これまで一切の変更が禁止されてきたGoogle AdSenseの広告コードが、今後は、広告のパフォーマンスを作為的に高めたり、広告主に損害を与えたりするものでない限り、Google の利用規約とプログラムポリシーに沿った形で変更できるようになった。

これによって、レスポンシブ ・ウェブデザイン、 A/B テスト、動的なカスタム チャネルの設定、広告タグの削減などの技法に対応することができるようになるという。

Inside Adsense - 日本語: ウェブの技術進化に対応するために広告コードの変更が可能になりました

[2311] Posted by kagahiro at 2013/06/12 16:06:07
0 point | Link (1) | Trackback (0) | Comment (0)

＋ 

A PRISM（プリズム）

－ 

A PRISM（プリズム）

PRISM（プリズム）は、アメリカ政府の情報機関である米国家安全保障局（NSA）が、大手IT企業のApple、Microsoft、Facebook、Google、Yahoo、AOL、YouTube、Skype、PalTalkの9社のサーバーから直接情報を収集する、国...

PRISM（プリズム）は、アメリカ政府の情報機関である米国家安全保障局（NSA）が、 大手IT企業のApple、Microsoft、Facebook、Google、Yahoo、AOL、YouTube、Skype、PalTalkの9社のサーバーから直接情報を収集する、国民監視の極秘プロジェクトで、このNSAでプロジェクトに関わっていいた元CIA職員のEdward Snowden(エドワード・スノーデン)氏の内部告発によって明らかになった。

GoogleおよびFacebookのCEOは、この国民監視の極秘プロジェクトへの関与を否定しているが、両社についてもなんらかの形で情報を提供していたのは間違いないようだ。

アメリカ政府はこのPRISMの存在を認め、テロ対策のためだった説明しているが、NSAはこのプロジェクトで得た情報で対象とする人物の弱みを握り、諜報活動などに活用していたもようだ。

米政府が国民の情報収集をしていた「PRISM」問題を暴露したCIA元職員が実名公開
グーグルCEO、米当局によるユーザーデータ収集への関与を否定--「PRISM」報道に対し声明
Facebookのザッカーバーグ氏、「PRISM」プログラムへの関与を否定
PRISMの極秘スライドがまだ1枚あった！　関与否定したIT企業の?が明るみに。ツイッターひとり勝ち

最強スパイの仕事術
ディスカヴァー・トゥエンティワン 著者：ピーター・アーネスト,マリアン・カリンチ

amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2310] Posted by kagahiro at 2013/06/12 15:52:58
3 point | Link (4) | Trackback (0) | Comment (3)

＋ 

A ニコニコ静画がクリエイター奨励プログラムの対象に

－ 

A ニコニコ静画がクリエイター奨励プログラムの対象に

動画投稿サイト「niconico（ニコニコ動画）」を運営するニワンゴは、これまで動画だけだったクリエイターの創作活動やコラボレーションを支援する制度「クリエイター奨励プログラム」を、ニコニコ静画（イラスト、ニ...

動画投稿サイト「niconico（ニコニコ動画）」を運営するニワンゴは、これまで動画だけだったクリエイターの創作活動やコラボレーションを支援する制度「クリエイター奨励プログラム」を、ニコニコ静画（イラスト、ニコニコ漫画、スクロール漫画）にも全面対応したと発表した。

クリエイター奨励プログラムとは、創作活動の支援、および二次創作文化の推進を目的とする、niconicoの投稿作品に対して奨励金を支払う制度で、クリエイター奨励プログラムに作品を登録（作品を登録できるのは有料のプレミアム会員のみ）してから3ヶ月間、その作品が公開され続ければ、奨励金を現金またはニコニコポイントで受け取ることができる。なお、奨励金には、その作品自体の人気度に応じて算出される「作品奨励金」と、その作品に影響を受けた子作品の人気度に応じて算出される奨励金「子ども手当」の2種類がある。

今回のニコニコ静画（イラスト、ニコニコ漫画、スクロール漫画）への対応によって、ニコニコ静画単体でもクリエイター奨励プログラムに登録、その作品の人気度に応じて作品奨励金を受け取ることが可能になった。

niconicoの投稿作品に対して奨励金をお支払い
クリエイター奨励プログラム
niconico（ニコニコ動画）

ニコニコ動画ファンブック Vol.1 (100%ムックシリーズ)
晋遊舎

amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2284] Posted by kagahiro at 2013/02/21 10:19:25
0 point | Link (1) | Trackback (0) | Comment (0)

＋ 

B Google AdWords（グーグルアドワーズ）日本版

  ブックマーク先へ

－ 

B Google AdWords（グーグルアドワーズ）日本版

  ブックマーク先へ

Google AdWords（グーグルアドワーズ）は、検索サービスで世界最大手のGoogle（グーグル）社が広告主（アドバータイザー）に対して提供する広告が表示されたときではなく広告がクリックされたときに料金が発生するク...

Google AdWords（グーグルアドワーズ）は、検索サービスで世界最大手のGoogle（グーグル）社が広告主（アドバータイザー）に対して提供する広告が表示されたときではなく広告がクリックされたときに料金が発生するクリック課金広告サービス（PPC）。

広告主はGoogleや他の検索エンジンの検索クエリに関連する広告を検索結果ページに表示するリスティング広告（検索連動型広告）だけでなく、Googleと提携しているウェブサイトの検索結果（AdSense for Search) 、一般のウェブページのコンテンツ（AdSense for Contents）、YouTubeなどの動画 (AdSense for Video)、携帯端末向けのウェブページ (AdSense for Mobile)、iPhoneやAndroidといったハイエンド携帯端末用アプリケーション内 (AdSense for Mobile Application) など、さまざまな出稿先を指定して広告を出すことができる。

毎月の固定費用はなく、例えば、1日の予算を500円、広告の上限クリック単価を10円といったように広告主は広告予算を自由に設定することができる。 実際の広告費用は、オークションによって決定されたクリック単価と利用者のクリック回数に応じて決まるが、設定した上限値を超えないようになっている。

Google AdWords - Google のオンライン広告プログラム
Google AdWords:キーワードツールを使って、キーワードを探す！【SEO講座】
Googleアドワーズの効果 - 小人さんの妄想

Google AdWords 成功の法則
ソーテック社 著者：川田 達矢

amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2266] Posted by kagahiro at 2013/02/05 23:33:52
0 point | Link (2) | Trackback (0) | Comment (0)

＋ 

A [C言語]1バイト(8bit)の10進数を2進数の文字列に変換するコード

－ 

A [C言語]1バイト(8bit)の10進数を2進数の文字列に変換するコード

1バイト(8bit)の10進数を2進数の文字列に変換するコードのC言語版です。C言語では、PerlやPHPなどのように2進文字列に変換してくれる便利な関数は関数はないので、ビット演算子を使ってビットのオン・オフを判定して...

1バイト(8bit)の10進数を2進数の文字列に変換するコードのC言語版です。

C言語では、PerlやPHPなどのように2進文字列に変換してくれる便利な関数は関数はないので、ビット演算子を使ってビットのオン・オフを判定して、2進文字列を作成していくしかありません。

#include <stdio.h>
#include <string.h>

void dec2bin(char src, char *dest);

const int buf_size = 9;

int main(void)
{
    char buf[buf_size]; /* 変換後の2進文字列を受け取るための領域 */
/*    char str1[] = "abcdefg"; */
    char str1[] = "あいうえお";
    char *cp;

    int num = 1;
    for (cp = str1; *cp; cp++) {    /* 文字数分処理 */
        memset(buf, '\0', sizeof(buf));
        dec2bin(*cp, buf);
        printf("%d:%s (0x%02.2X)\n", num, buf, 0x000000ff & *cp);
        num++;
    }

    return 0;
}

/* 1Byte(8bit)の10進数を2進数の文字列に変換 */
void dec2bin(char src, char *dest)
{
    const int bit_size = 8;
    int i;
    for (i = 0; i < bit_size; i++) {
        dest[i] = (0x80 & src) ? '1' : '0';
        src <<= 1;
    }
}

解きながら学ぶC言語
ソフトバンククリエイティブ 著者：柴田 望洋,肘井 真一,高木 宏典,赤尾 浩

amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2253] Posted by kagahiro at 2012/12/21 17:23:17
0 point | Link (6) | Trackback (0) | Comment (0)

＋ 

A [Perl]UTF-8でエンコードされた英数字の全角半角変換を行うコード

－ 

A [Perl]UTF-8でエンコードされた英数字の全角半角変換を行うコード

まずカタカナより比較的プログラミングしやすそうな英数字の全角半角変換から作成します。半角から全角への変換の処理手順は、・半角英数字の場合は、同じ全角英数字に置き換えて戻り値として返す文字列に連結・それ...

まずカタカナより比較的プログラミングしやすそうな英数字の全角半角変換から作成します。

半角から全角への変換の処理手順は、

・半角英数字の場合は、同じ全角英数字に置き換えて戻り値として返す文字列に連結
・それ以外の文字の場合はそのまま戻り値として返す文字列に連結

また、全角から半角への変換の処理手順は、

・全角英数字の場合は、同じ半角英数字に置き換えて戻り値として返す文字列に連結
・それ以外の文字の場合はそのまま戻り値として返す文字列に連結

となります。

文字コードはそれぞれ以下の通りですので、これらに該当する文字があったら置き換えを行います。

半角数字:0 - 9
30 - 39

全角数字:０ - ９
EFBC90 - EFBC99
2バイト目まではEFBC

半角アルファベット大文字:A - Z
41 - 5A

全角アルファベット大文字:Ａ - Ｚ
EFBCA1 - EFBCBA
2バイト目まではEFBC

半角アルファベット小文字:a - z
61 - 7A

全角アルファベット小文字:ａ - ｚ
EFBD80 - EFBD9A
2バイト目まではEFBD

以下が英数字の半角から全角へ、全角から半角への変換を行うコード（プログラム）です。

#!/usr/bin/perl

use strict;
use warnings;
use Encode;

my $hanAlnum = "ABCDEい12345あabcde";
my $zenAlnum = "ＡＢＣＤＥい１２３４５あａｂｃｄｅカ";

my $zenstr = han2zen_alnum($hanAlnum);
Encode::from_to($hanAlnum, 'utf8', 'cp932');
Encode::from_to($zenstr, 'utf8', 'cp932');
print "$hanAlnum ---> $zenstr\n";

my $hanstr = zen2han_alnum($zenAlnum);
Encode::from_to($zenAlnum, 'utf8', 'cp932');
Encode::from_to($hanstr, 'utf8', 'cp932');
print "$zenAlnum ---> $hanstr\n";

# UTF-8でエンコードされた半角英数字を全角英数字に変換する
sub han2zen_alnum {
    my ($src) = @_;

    my $srclen = length($src);
    my $pos = 0;
    my $dest = '';
    while ($pos < $srclen) {
        my $code = ord substr($src, $pos, 1); # 先頭のASCIIコード値を取得
        my $bytelen = _bytesize($code);

        my $lastbyte = 0;
        my $bytechar = '';
        my $flagged_utf8 = ''; 
        if ($code >= 0x30 && $code <= 0x39) { # 数字
            $lastbyte = 0x90 + ($code - 0x30);
            $bytechar = pack("C3", 0xEF, 0xBC, $lastbyte);
            $dest .= $bytechar;
        }
        elsif ($code >= 0x41 && $code <= 0x5A) { # 大文字英字
            $lastbyte = 0xA1 + ($code - 0x41);
            $bytechar = pack("C3", 0xEF, 0xBC, $lastbyte);
            $dest .= $bytechar;
        
        }
        elsif ($code >= 0x61 && $code <= 0x7A) { # 小文字英字
            $lastbyte = 0x81 + ($code - 0x61);
            $bytechar = pack("C3", 0xEF, 0xBD, $lastbyte);
            $dest .= $bytechar;
        }
        else {
            $dest .= substr($src, $pos, $bytelen);
        }
        $pos += $bytelen;
    }

    return $dest;
}

# UTF-8でエンコードされた全角英数字を半角英数字に変換する
sub zen2han_alnum {
    my ($src) = @_;

    my $srclen = length($src);
    my $pos = 0;
    my $dest = '';

    while ($pos < $srclen) {
        my $code = ord substr($src, $pos, 1); # 先頭のASCIIコード値を取得
        my $bytelen = _bytesize($code);
        my $hit = 0;
        if ($code == 0xEF) { # 全角英数の場合は1バイト目がEF
            my $code2 = ord substr($src, $pos + 1, 1);  # 2バイト目
            my $code3 = ord substr($src, $pos + 2, 1);  # 3バイト目
            if ($code2 == 0xBC) {
                if ($code3 >= 0x90 && $code3 <= 0x99) {
                    $dest .= chr(0x30 + ($code3 - 0x90));
                    $hit = 1;
                }
                elsif ($code3 >= 0xA1 && $code3 <= 0xBA) {
                    $dest .= chr(0x41 + ($code3 - 0xA1));
                    $hit = 1;
                }
            }
            elsif ($code2 == 0xBD) {
                if ($code3 >= 0x80 && $code3 <= 0x9A) {
                    $dest .= chr(0x61 + ($code3 - 0x80));
                    $hit = 1;
                }
            }
        }
        if(!$hit) {
            $dest .= substr($src, $pos, $bytelen);
        }
        $pos += $bytelen;
    }

    return $dest;
}

# 文字のバイト長を求める
sub _bytesize {
    my $code = shift;
    my $size = 1;
    if (0x80 & $code) { # 1バイト文字以外
        $code <<= 1;
        for my $i (2 .. 8) {
            $size++;
            $code <<= 1;
            last if (!(0x80 & $code));
        }
    }
    return $size;
}

[2250] Posted by kagahiro at 2012/12/19 16:54:42
0 point | Link (1) | Trackback (0) | Comment (0)