[文章]の検索結果


日本語の文章では半角の英数字と全角の英数字、また、半角のカタカナと全角のカタカナが混在していることがよくあります。意味は半角でも全角でも同じですので、コンピュータで処理する場合はどちらかに統一してから処理したいところです。

Perlで全角半角変換を行う主な方法としては、

・標準モジュールのEncode.pmを使う
・Unicode::Japaneseモジュールを使う
・全角半角の変換に特化したLingua::JA::Regular::Unicodeモジュールを使う

などがあります。

Encode.pmは標準モジュールですので比較的使いやすいですが、euc-jp以外の文字エンコードの場合はeuc-jpに変換する必要があります。

Unicode::Japaneseモジュールは、現状では一番使いやすいと思われますが、標準モジュールではないのでレンタルサーバーで動かすWebアプリケーションではちょっと使いにくい面もあります。

Lingua::JA::Regular::Unicodeは、全角半角の変換に特化したモジュールですので非常に軽量ですが、全角半角の変換以外の処理を考えるとuse utf8;しないと動作しないというのはかなり面倒です。

これらのモジュールを使った全角半角の変換のコードについては、以下のブログ記事などに記述されています。

Encodeで全角半角変換
Perl で半角カナと全角カナの変換をする : Serendip - Webデザイン・プログラミング
perl - で全角半角変換をモダンに行う

しかし、いずれの方法もそれぞれ若干使いにくい面があるので、モジュールを使わずに自力で全角半角変換を行う方法を考えたいと思います。

プログラマのための文字コード技術入門 (WEB+DB PRESS plus) (WEB+DB PRESS plusシリーズ)
技術評論社 著者：矢野 啓介


amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2247] Posted by kagahiro at 2012/12/14 23:52:52
0 point | Link (4) | Trackback (0) | Comment (0)

自然言語処理（しぜんげんごしょり、natural language processing、NLP）は、人間が日常的に使っている自然言語をコンピュータに処理させる一連の技術であり、人工知能と言語学の一分野。「計算言語学」（computational linguistics）も同じ意味だが、自然言語処理が工学的な視点からの言語処理をさすのに対して、計算言語学は言語学的視点を重視する手法をさす事が多い。データベース内の情報を自然言語に変換したり、自然言語の文章をより形式的な（コンピュータが理解しやすい）表現に変換するといった処理が含まれる。

自然言語処理の基礎技術にはさまざまなものがあるが、現在のところ、日本語を処理する基礎技術としては、形態素解析、構文解析、語義の曖昧性解消照応解析が主に研究されている。

自然言語処理 - Wikipedia
言語処理学会 The Association for Natural Language Processing
自然言語処理ツール
Python による日本語自然言語処理
Perl で自然言語処理

入門 自然言語処理
オライリージャパン 著者：Steven Bird,Ewan Klein,Edward Loper


amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2240] Posted by kagahiro at 2012/12/09 22:59:04
0 point | Link (1) | Trackback (0) | Comment (0)

Texttは、単純にテキストを記録しておくためのサービス。機能はシンプルで、1つのテキストに複数の文章をタイトルつきで追加していく形で記録していくだけとなっている。テキストは公開/非公開の設定ができる。

Textt

[1994] Posted by kagahiro at 2010/08/11 22:28:21
0 point | Link (2) | Trackback (0) | Comment (0)

「pick」は、みんなが今、見つけた「いいよね。」をピックアップしていく、他のユーザーが投稿した画像や動画などの再投稿機能を中心にしたミニブログサービスです。自分で文章や画像などの投稿を行わないユーザーで...
[1781] Posted by kagahiro at 2010/03/15 11:54:49
0 point | Link (0) | Trackback (0) | Comment (0)

clippは、ソーシャルブックマークとマイクロブログを統合したソーシャルスクラップブックサービス。文章の抜粋や写真のサムネイルを取り込んで、自分のコメントを付けて、気になるページを、見やすく、わかりやすく保...
[1705] Posted by kagahiro at 2009/11/18 14:04:18
0 point | Link (0) | Trackback (0) | Comment (0)

140Trans（ワンフォーティトランス）は、Twitter経由で140文字以内の文章の翻訳を依頼できるサービス。利用は無料だが、翻訳を依頼できるのはTwitterの1アカウントにつき1日3回まで。 With a simple operation, you ...
[1642] Posted by kagahiro at 2009/10/20 21:02:44
0 point | Link (0) | Trackback (0) | Comment (0)

無料で日本語文章の校正が行えるサイト。
[1584] Posted by kagahiro at 2009/09/21 18:31:32
0 point | Link (0) | Trackback (0) | Comment (0)

システム設計やプログラミングなどのソフトウェア開発やコンピュータ技術に関する情報を掲載。いまはなき「ぜろいち倶楽部」のコンテンツの中からコンピュータとかソフトウェア開発に関連する文章を一部再掲載。
[1519] Posted by kagahiro at 2009/04/13 12:02:59
0 point | Link (0) | Trackback (0) | Comment (0)

Twitter（ツイッター）とは「Twitter（ツイッター ）」は、「いまなにしてる？（What are you doing?）」という質問に140文字以内の短い文章（ツイート、以前はつぶやきと呼ばれていた）で答えることによって、友だち...
[1472] Posted by kagahiro at 2009/03/12 15:01:38
1 point | Link (11) | Trackback (0) | Comment (1)

グーグルが、昨年公開した Search Engine Optimization Starter Guide の日本語版「Google 検索エンジン最適化スターターガイド」を公開しました。このスターターガイドには Google の検索結果で1位になるための秘訣...
[1347] Posted by kagahiro at 2009/06/05 21:12:15
0 point | Link (1) | Trackback (0) | Comment (0)

|< 先頭へ  < 前へ  1 2 3 4 5  次へ >


アクセスランキング

今日のアクセスランキング TOP 10

  1. FC2まとめ (5 PV)
  2. SQLのSELECT文で先頭から上位（TOP）10件のレコードを取得する方法（SQL Server、Oracle、MySQL、PostgreSQL） (4 PV)
  3. Twitter Lite - 起動時や利用時の読み込み速度が最大30％アップ (3 PV)
  4. ２ちゃんねる（2ch） (3 PV)
  5. 大人気のブランド品即時買取サービス「CASH」がDMM.comにたったの70億円で買い叩かれる (2 PV)
  6. 無料ダイヤルアッププロバイダ「Soloot(ソルート)」 (2 PV)
  7. FC2ブログにコミュニティ機能 (2 PV)
  8. ほしい物リスト (2 PV)
  9. Hg Init: a Mercurial tutorial by Joel Spolsky (2 PV)
  10. 掲示板CGI ThreadPlus 1.2 のリリース (2 PV)

今月のアクセスランキング TOP 10

  1. FC2まとめ (13 PV)
  2. 将棋ウォーズPCブラウザ版がchrome、Firefox、edgeなどに対応 (8 PV)
  3. SQLのSELECT文で先頭から上位（TOP）10件のレコードを取得する方法（SQL Server、Oracle、MySQL、PostgreSQL） (7 PV)
  4. 掲示板CGI ThreadPlus 1.2 のリリース (5 PV)
  5. 「Kindle for the Web」 (5 PV)
  6. FC2ブログにコミュニティ機能 (4 PV)
  7. Jipanguの配布は終了しました (4 PV)
  8. [FX]裁量ポジションを簡単に管理できるMT4向け無料の裁量補助EA「PositionKeeper」 (4 PV)
  9. Twitter Lite - 起動時や利用時の読み込み速度が最大30％アップ (3 PV)
  10. 「さくらのクラウド」のオプションサービスで「専有ホスト」の提供を開始 (3 PV)

アクセス統計

ディレクトリ

関連サイト