[文章]の検索結果


日本語の文章では半角の英数字と全角の英数字、また、半角のカタカナと全角のカタカナが混在していることがよくあります。意味は半角でも全角でも同じですので、コンピュータで処理する場合はどちらかに統一してから処理したいところです。

Perlで全角半角変換を行う主な方法としては、

・標準モジュールのEncode.pmを使う
・Unicode::Japaneseモジュールを使う
・全角半角の変換に特化したLingua::JA::Regular::Unicodeモジュールを使う

などがあります。

Encode.pmは標準モジュールですので比較的使いやすいですが、euc-jp以外の文字エンコードの場合はeuc-jpに変換する必要があります。

Unicode::Japaneseモジュールは、現状では一番使いやすいと思われますが、標準モジュールではないのでレンタルサーバーで動かすWebアプリケーションではちょっと使いにくい面もあります。

Lingua::JA::Regular::Unicodeは、全角半角の変換に特化したモジュールですので非常に軽量ですが、全角半角の変換以外の処理を考えるとuse utf8;しないと動作しないというのはかなり面倒です。

これらのモジュールを使った全角半角の変換のコードについては、以下のブログ記事などに記述されています。

Encodeで全角半角変換
Perl で半角カナと全角カナの変換をする : Serendip - Webデザイン・プログラミング
perl - で全角半角変換をモダンに行う

しかし、いずれの方法もそれぞれ若干使いにくい面があるので、モジュールを使わずに自力で全角半角変換を行う方法を考えたいと思います。

プログラマのための文字コード技術入門 (WEB+DB PRESS plus) (WEB+DB PRESS plusシリーズ)
技術評論社 著者：矢野 啓介


amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2247] Posted by kagahiro at 2012/12/14 23:52:52
0 point | Link (4) | Trackback (0) | Comment (0)

自然言語処理（しぜんげんごしょり、natural language processing、NLP）は、人間が日常的に使っている自然言語をコンピュータに処理させる一連の技術であり、人工知能と言語学の一分野。「計算言語学」（computational linguistics）も同じ意味だが、自然言語処理が工学的な視点からの言語処理をさすのに対して、計算言語学は言語学的視点を重視する手法をさす事が多い。データベース内の情報を自然言語に変換したり、自然言語の文章をより形式的な（コンピュータが理解しやすい）表現に変換するといった処理が含まれる。

自然言語処理の基礎技術にはさまざまなものがあるが、現在のところ、日本語を処理する基礎技術としては、形態素解析、構文解析、語義の曖昧性解消照応解析が主に研究されている。

自然言語処理 - Wikipedia
言語処理学会 The Association for Natural Language Processing
自然言語処理ツール
Python による日本語自然言語処理
Perl で自然言語処理

入門 自然言語処理
オライリージャパン 著者：Steven Bird,Ewan Klein,Edward Loper


amazon.co.jpのカスタマーレビューを見る
powered by amalink

[2240] Posted by kagahiro at 2012/12/09 22:59:04
0 point | Link (1) | Trackback (0) | Comment (0)

Texttは、単純にテキストを記録しておくためのサービス。機能はシンプルで、1つのテキストに複数の文章をタイトルつきで追加していく形で記録していくだけとなっている。テキストは公開/非公開の設定ができる。

Textt

[1994] Posted by kagahiro at 2010/08/11 22:28:21
0 point | Link (2) | Trackback (0) | Comment (0)

「pick」は、みんなが今、見つけた「いいよね。」をピックアップしていく、他のユーザーが投稿した画像や動画などの再投稿機能を中心にしたミニブログサービスです。自分で文章や画像などの投稿を行わないユーザーで...
[1781] Posted by kagahiro at 2010/03/15 11:54:49
0 point | Link (0) | Trackback (0) | Comment (0)

clippは、ソーシャルブックマークとマイクロブログを統合したソーシャルスクラップブックサービス。文章の抜粋や写真のサムネイルを取り込んで、自分のコメントを付けて、気になるページを、見やすく、わかりやすく保...
[1705] Posted by kagahiro at 2009/11/18 14:04:18
0 point | Link (0) | Trackback (0) | Comment (0)

140Trans（ワンフォーティトランス）は、Twitter経由で140文字以内の文章の翻訳を依頼できるサービス。利用は無料だが、翻訳を依頼できるのはTwitterの1アカウントにつき1日3回まで。 With a simple operation, you ...
[1642] Posted by kagahiro at 2009/10/20 21:02:44
0 point | Link (0) | Trackback (0) | Comment (0)

無料で日本語文章の校正が行えるサイト。
[1584] Posted by kagahiro at 2009/09/21 18:31:32
0 point | Link (0) | Trackback (0) | Comment (0)

システム設計やプログラミングなどのソフトウェア開発やコンピュータ技術に関する情報を掲載。いまはなき「ぜろいち倶楽部」のコンテンツの中からコンピュータとかソフトウェア開発に関連する文章を一部再掲載。
[1519] Posted by kagahiro at 2009/04/13 12:02:59
0 point | Link (0) | Trackback (0) | Comment (0)

Twitter（ツイッター）とは「Twitter（ツイッター ）」は、「いまなにしてる？（What are you doing?）」という質問に140文字以内の短い文章（ツイート、以前はつぶやきと呼ばれていた）で答えることによって、友だち...
[1472] Posted by kagahiro at 2009/03/12 15:01:38
1 point | Link (11) | Trackback (0) | Comment (1)

グーグルが、昨年公開した Search Engine Optimization Starter Guide の日本語版「Google 検索エンジン最適化スターターガイド」を公開しました。このスターターガイドには Google の検索結果で1位になるための秘訣...
[1347] Posted by kagahiro at 2009/06/05 21:12:15
0 point | Link (1) | Trackback (0) | Comment (0)

|< 先頭へ  < 前へ  1 2 3 4 5  次へ >


アクセスランキング

今日のアクセスランキング TOP 10

  1. 安全性重視の完全無料ナンピンマーチンEA「Million Dollar（ミリオンダラー）」 #FX #ゴールド #ビットコイン (21 PV)
  2. 自作のMT4向け無料EA（口座縛り無し、ブローカー縛り無し、使用期限無し）とゴゴジャン出品中の有料EAの一覧 #MT4 (8 PV)
  3. 「Repeat K」高値安値の中間レートを基準に逆張りポジションを持つMT4向けリピート系（ナンピン）無料EA #自動売買 (6 PV)
  4. Million Dollar（MT4）リアルフォワード（myfxbook） #Gold(XAUUSD) #ナンピンマーチン (5 PV)
  5. MT4向けオープンソースナンピンマーチンEA「Automaton」 (4 PV)
  6. SQLのSELECT文で先頭から上位（TOP）10件のレコードを取得する方法（SQL Server、Oracle、MySQL、PostgreSQL） (4 PV)
  7. 有名まとめサイトの管理人「JIN」さんが株、FXで約-8000万の大損失 #もうダメだ、終わった (4 PV)
  8. MT4向け無料ナンピンマーチンEA「PINMA FREE」（ベースロット0.01固定） #自動売買 #FX (4 PV)
  9. Google Finance（グーグルファイナンス）- リアルタイム株価情報、金融ニュース、日本株 (3 PV)
  10. MT5用レンジ相場向け逆張りナンピンEA「Nanpin K（ナンピンケイ） MT5」を完全無料で公開 (3 PV)

今月のアクセスランキング TOP 10

  1. SQLのSELECT文で先頭から上位（TOP）10件のレコードを取得する方法（SQL Server、Oracle、MySQL、PostgreSQL） (1956 PV)
  2. 安全性重視の完全無料ナンピンマーチンEA「Million Dollar（ミリオンダラー）」 #FX #ゴールド #ビットコイン (346 PV)
  3. Google Finance（グーグルファイナンス）- リアルタイム株価情報、金融ニュース、日本株 (290 PV)
  4. MT4向けオープンソースナンピンマーチンEA「Automaton」 (172 PV)
  5. 自作のMT4向け無料EA（口座縛り無し、ブローカー縛り無し、使用期限無し）とゴゴジャン出品中の有料EAの一覧 #MT4 (156 PV)
  6. 完全無料のMT5用ナンピンEA「Nanpin K（ナンピンケイ） MT5」 (149 PV)
  7. [FX]高値更新・安値更新でエントリー、MT4向け無料スキャルピングEA「1Scalper」#システムトレード (145 PV)
  8. MT4向け1ポジアノマリーEA「DAY TRADING」オープンソースライセンス（GPL3）で公開 #ドル円 (131 PV)
  9. 完全無料のMT4向けナンピンEA「Nanpin K（ナンピンケイ）」 (121 PV)
  10. SQLiteのSELECT文で上位 (TOP) n件のデータを取得する (115 PV)

アクセス統計

ディレクトリ

関連サイト