もう一つのデータ処理パッケージ2017版について

T. Yoshiizumi

2017/03/29

＊ もう一つのデータ処理パッケージ(rptパッケージ)2018版についてを更新しました(2018/12/15)。
５月にアップロードしたものを更新。64bitコマンドも追加。Rails関連のrubyライブラリも組み入れました。

＊2017/03/29　当サイトに掲載しているrpt_main.zipに含まれている i386_RmdRuby.bat, x64_RmdRuby.bat に不具合があります。
rpt_bat.zipに含まれている同名のバッチファイルで置き換えて下さい(つまり上書きして下さい)。詳細は rpt_bat.zip の readme.txt をご覧下さい。

＜目　次＞

• 更新情報
• 1.　rptパッケージの特徴
• 2.　rptパッケージのダウンロード
• 3.　rptパッケージのインストールとアンインストール
• 4.　各種ファイルのテキストへの変換
• 5.　付属のサンプルプログラムについて
• 6.　rptパッケージの基本的なキー操作とその背景
• 7.　luatex利用時の留意点
• 8.　rptパッケージに関する解説ページ

更新情報

　もう一つのデータ処理パッケージ(rptパッケージ)を2015年6月にアップロードして以降　更新してませんでしたが、今回、以下のように刷新しました。

• rpt_main.zipなどのzip圧縮ファイルを全面的に更新。
  　ruby(2.3.3), pandoc(1.19.2), R(3.3.2), w32tex(2017/02/23現在版)に入れ替え。
• 64bit版のコマンドや関連ファイルも追加。
• 付属のサンプルプログラムに、統計解析ソフトRとpandocの組み合わせによる
  rmarkdownに関連するものを追加。

　なお、2015年６月の旧版は、従来どおり もう一つのデータ処理パッケージ(rptパッケージ)についてに残してあります。

1.　rptパッケージの特徴

• MS-Windowsの上で使います。
• 「プログラミングによるオートメーション化」を行うために取りまとめました。
  プログラミング言語 ruby がその中核を担います。
• ruby, 統計解析ソフトR, LaTeX(w32tex)を
  インストールなしで使うことができます。
• rptパッケージをUSBメモリーやSDカードに入れておけば、
  常用パソコン以外のパソコンでも簡単に使い始めることができます。
  ただし、luatexを実用的に使う場合はＣドライブに入れることをお勧めします。これについては後述の「7.　luatex利用時の留意点」参照。

2.　rptパッケージのダウンロード

　パッケージを使うための方法を記します。

　まず、次の三つの圧縮ファイルをダウンロードします。

• rpt_main.zip (約735メガバイト)
• rpt_w32tex.zip (約1626メガバイト)
• rpt_ruby64.zip (約604メガバイト)

＊　64bit版のコマンドを使わないなら rpt_ruby64.zip は不要。

　解凍先は、ハードディスク、SDカード、USBメモリーなど　どのドライブでもかまいません。

　ただし、自由に書き込みできる媒体でないと、うまく動作しないとおもいます。
DVD-rwで適切に動作するかどうかは未確認。

　解凍すると rpt というフォルダができるはずです。

rpt というフォルダは、必ずルートディレクトリ直下に置くようにします。

つまり「C:\rpt」とか「F:\rpt」などになるようにします。

もし解凍した場所がルートディレクトリ直下でない時は、
ルートディレクトリ直下に移動させて下さい。

　USBメモリーやSDカードに置くと、
常用パソコン以外のパソコンにも装着して簡単に使えます。

　念のため md5, sha-256 の情報を掲載しておきます。

ダウンロードしたzip圧縮ファイルが元本と一致するかどうかをチェックしたい時に利用して下さい。

1. rpt_main.zip
   • md5: 5d cc b9 a9 91 ee 94 f5 a1 ea a6 2c 8c 23 4b a4
   • sha-256: 8b 98 7c 9e 55 d6 95 d2 ac 97 ac 0c 9d 4c fe 62 68 f4 d4 d0 e8 71 58 eb e6 44 40 8f 18 4d 53 d6
2. rpt_w32tex.zip
   • md5: 5c 9b 6c 13 27 cb 6e 2e 70 c5 bb 66 09 b6 a1 d5
   • sha-256: c2 8b 8a 66 ee 76 a8 ff 68 a7 8f a6 ca e5 34 9e a3 97 37 3d e1 3e b8 58 dd 6a 73 64 3d 47 e9 56
3. rpt_ruby64.zip
   • md5: 4b 3c 83 48 52 65 ae 09 41 a1 f8 a8 92 f6 f2 c2
   • sha-256: eb cf 7f b2 2c 21 1b e5 58 2b 99 93 d1 4f b1 96 53 44 e6 be dd f2 2c b6 f0 02 5a 16 42 ed 8c ca

［補足］　Windowsでの md5, sha-256 の確認方法

　’CertUtil’ というコマンドを使うと md5, sha-256 などを確認できます。

　rpt_main.zip がカレントディレクトリにある状態で次ぎの２行を実行します。

CertUtil -hashfile rpt_main.zip MD5 >output.txt
CertUtil -hashfile rpt_main.zip SHA256 >>output.txt

　書き出された output.txt に md5, sha-256 のコードが書かれているはずです。

3.　rptパッケージのインストールとアンインストール

　\rpt\bat というフォルダの下にある rpt_set.bat を実行すると、
「送る」メニューに関連項目が登録されます。
これでサンプルプログラムを実行できるようになります。

　rpt_set.bat を実行するには、
マイコンピュータ(explorer)でこのバッチコマンドに焦点を当てて
エンターキーを押します。そうすると実行されます。

　rpt_unset.bat を実行すれば、関連の「送る」メニューの項目が消去されます。

「rptパッケージをもう使わない」という時に実行して下さい。

　あるいは、パッケージをUSBメモリーなどに入れている場合であって、
そのUSBメモリーをパソコンから取り外す時は、取り外す前に
rpt_unset.bat を実行して下さい。

　64bit版のコマンドを使う場合は、\rpt\bat64 の下にある rpt_set.bat を実行します。

　そうすると、rubyのほか、統計R, w32tex のコマンドも
64bit版が使われるようになります。

　rpt_set.bat または rpt_unset.bat を実行した結果は、
\rpt\rpt_log.txt というファイルに書き出されます。

　64bit用の rpt_set.bat, rpt_unset.bat を実行した場合も
やはり \rpt\rpt_log.txt というファイルに書き出されます。

4.　各種ファイルのテキストへの変換

　rptパッケージを導入すると、「送る」メニューに
「t textへの変換」が追加されます。

　エクセルやワードに限らず、一太郎、パワーポイント、PDFなどのファイルに
焦点を当ててこの「t textへの変換」を選ぶと、
変換結果が test.jtd.txt とか test.pptx.txt などとして書き出されます。

これは、xdoc2txtというコマンドを呼び出す形で実現しています。

　OCR機能はないので、pdfなどの画像化された文字は変換できませんが、
変換が迅速で便利です。

5.　付属のサンプルプログラムについて

• rpt_sample.zip: 従来のサンプル。2015年から変更なし。
• rpt_sample02.zip: 統計Rとmarkdown の組合せに関するサンプル

　rpt_sample02.zipについては rptパッケージとrmarkdown を参照して下さい。

　サンプルの動作チェックは、Windows7で行いました。

　Excelなどのバージョンは 2010 で試しました。

　rpt_sample.zipのサンプルでどんな処理を取り上げているか、ざっと書いてみます。

• Excelの処理: 基本編(フォントの調整、関数、罫線、グラフなど)、
  ピボットテーブル(各種の集計)、
  クエリテーブル(AccessデータベースやWebなど外部データの取り込み)、
  データテーブル(住宅ローン返済月額算出のシミュレーション)、
  シナリオ(本業と副業の組合せ別の簡易な予算書)、
  ゴールシーク(逆算による３乗根の算出)。
  　Excelとは違いますが、Accessデータベースをsqlで処理する例も入っています。
  Excelとのデータの交換の例を含みます。
• Wordの処理: 基本編(文字の書き込み、中央揃え・右揃え、箇条書き、
  ページ番号付加、テキストファイルの挿入、文字の検索と置換、
  ２段組の文書作成、文字の書体・大きさ・太字の指定)、
  MarkDownによるWord文書の作成(表・数式の書き込み、画像の挿入、
  用紙の横幅や縦の長さなどの変更、表の罫線の変更、標準フォントに関する変更)
• 統計解析ソフトRの処理: 基本編(単一回答や複数回答の単純な集計)、
  カイ二乗検定(クロス集計表の検定)、
  F検定とt検定(平均値の差の検定)、
  回帰分析(気温からアイスティーの売り上げを予測するなど)。
  　関連のグラフや散布図も作ります。
• 文書化(ドキュメンテーション): 上記の統計解析の結果その他を、
  グラフや図あるいは表を含めて文書化します。
  ワード文書にしたり、htmlにしたり、あるいは、LaTeXを使ってpdfにします。
  　rubyというソフトウェアを中核にすえて、関連のソフトウェアを連携させます。

6.　rptパッケージの基本的なキー操作とその背景

　面倒がないように、どのサンプルも簡易な同じ操作手順で実行できるようにしました。

　いずれも次の２ステップで行います。

○　ステップ１

マイコンピュータ(explorer)で注目のファイルに焦点を当てます。

注目のファイルというのはrubyのプログラムファイルです。

といっても、いずれも「メモ帳」で読み書きできるテキストファイルです。

サンプルでは test.rb.txt のように、最後が「.rb.txt」になっています。

○　ステップ２

「送る」メニューを呼び出して、その中から「r rubyの実行」というのを選びます。

rptパッケージを導入すると、この「r rubyの実行」が
「送る」メニューに追加されます。

　上のステップ１，ステップ２を行うと、ExcelやWordのファイルができたり、
htmlやpdfのファイルが作られたりします。

Excelの処理でも、Wordの処理でも、統計ソフトRの処理でも、
どれでも同じ２つのステップです。

　処理が終了すると、短い警告音がなって、マイコンピュータの状態に戻ります。

7.　luatex利用時の留意点

　rptパッケージのw32texには luatex 関連のファイルも含まれています。

　ただし、rptパッケージをＣドライブ以外のSDカードやUSBメモリーに入れている場合、luatexでpdfを生成しようとすると、筆者の環境では20分以上かかったりします。Windows7 (64bit) ＋ USB2.0 接続という環境です。

　数ページ程度のpdfファイルでもそれくらいの時間がかかります。

　rptパッケージをＣドライブに入れている場合は二分くらいです。それでも「長いな」と感じますが……

　pandoc経由でpdfを生成するとき、LaTeXエンジンとしてlualatexを指定することが多いとおもいます。rpt_sample.zip, rpt_sample02.zip に該当のサンプルが含まれています。その処理に多くの時間がかかってしまいます。

　筆者が知らないだけで、処理時間短縮の方法があるような気がしますが、よく分かりません。

　なお、LaTeX関連でも platex の方はそんなに時間がかかりません。

　SDカードやUSBメモリーに入れた場合も「実用的」に使えるとおもいます。

　luatexについてもう少し補足します。

　Ｃドライブ以外にrptパッケージを入れた場合、lualatexコマンドでpdfを生成しようとすると、「フォントをロードできない」というエラーが出て、pdfを生成できないかもしれません。

　そのときは、\rpt\w32tex\xtra\luaotfload_reset.bat を実行して下さい。

　luatex関係のキャッシュを一度クリアして、フォントに関するキャッシュを再構築します。

　具体的には次の処理を行います。

• \rpt\w32tex\share\ctxdir\luatex-cache\generic\fonts\otl というフォルダの下のファイルをすべて削除。
• \rpt\w32tex\share\ctxdir\luatex-cache\generic\names というフォルダの下のファイルをすべて削除。
• luaotfload-tool -u -v を実行。

　実行の結果は \rpt\w32tex\xtra\luaotfload_stdout.txt に書き出されます。

8.　rptパッケージに関する解説ページ

　下のようなページを設けています。

• rptパッケージの詳細について
• ライブラリ追加の方法および補足
• rptパッケージで導入したw32texについて
• rptパッケージのサンプル・スクリプトに関するメモ書き

　以上です。

　よかったらお試し下さい。

トップページへ