JasperReportsでクロス集計を行う

データを分析する上で集計表にするというのは可読性も上がり有効的です。

今まではデータをExcel形式に出力して集計したりピボットテーブルでまとめていたのですが、JapserReportsでクロス集計（Crosstab）という機能があるようなので試してみました。
要点は以下の2点

・Summary領域に作成する
CrosstabをPageHeaderやDetailに配置して実行してみると以下のエラーが発生します。

  Error incrementing crosstab dataset

このフレーズで調べてみた所、以下のサイトで簡潔に答えが出ていました。
JasperForge Forum

・複数ページになるとレイアウトが崩れるので
  1ページにまとまるようにする
これはこういった仕様なのかもしれません。


以下手順です。

１、レポートを加工
今回は今まで使っていた一覧形式のレポートを流用しました。 明細を一覧に表示した上で最後に表を表示したいのであればそのままですが、今回は表だけにしたいのでSummary領域だけを残し後は最小化 （高さを0に）します。

２、Crosstabを追加
パレットからCrosstabをドラッグ&ドロップ

「次へ」をクリック

行要素を選択、ここでは二つまで選択できますが、後でから追加、編集が可能です。複数選択した場合は1,2の順番でグルーピングされますので部門別社員別の様な見方をしたい場合はそのように設定します。

列要素の選択、行要素同様 

集計要素を選択します。 一般的な集計以外に偏差も取れるようですがシンプルにSumを選択

表のスタイルを選択します。特にこだわりが無ければそのまま「完了」をクリックします。ちなみにここで「背景色無し」という設定は出来ないので後でから背景色を抜く作業をします。

これでCrosstabが配置されます。


Crosstab内の編集を行う場合は右のCrosstabを、レポート自体を編集する場合は左のMain reportをクリックして画面を切り替えます。

おまけ
・0を非表示に
集計結果が0の場合は表示しない方が見やすいので
各要素の Print When Expressions に

$V{XxxMeasure}.equals(Integer.valueOf(0)) ? Boolean.FALSE : Boolean.TRUE

と入れて対象項目が0の場合はBoolean.FALSEを返し非表示にします。

・背景色の変更
デフォルトのCrosstabは水色が基本の配色になっていますが、一般的にカラー印刷はコストが掛かるので背景色を取り除きます。

取り除く際はレポートをXML表示にして以下「」内のキーワードを正規表現付きで空文字に置換します。
（分かりづらいですが最後に半角スペースがあります）

「backcolor=.*" 」

中古PCを手配

知り合いが中国で仕事を始めるという事で中古のノートPC手配を頼まれた。
用途としてはインターネットとメール、Officeが使えればいいので、古いPCでもいいのだが、Windows2000は今年の夏でサポートが切れるので対象外、また古いPCにPuppyLinuxやUbuntuを入れてもいいのではと思ったが、何かあった時にサポートが難しくなるのでそれも対象外とした。

また、ちょっと年配の方なのであまり小さいのもちょっと．．．　という要望だったのでそれにあった物を探した。
要望をまとめると以下の通り

提示された要望
・A4サイズのノートPC
・メールとインターネット、Officeが使えればいい
・予算は2万位

これにこちらでの判断を追加すると、
・A4サイズのノートPC
・WindowsXP以降
・CPUはそこそこの物でもOK
・メモリはXPのSP3を考慮すると 512MB以上は欲しい
・無線LANはあっても無くてもOK
・バッテリーは出来るだけあった方がいい
・予算は2万位

個人的にIBM（Lenovo）のThinkPadが好きなのでオークション等を調べてみたらThinkPad R40eが結構出回っているみたいなのでそれがいいと思ったのだが、あの赤丸のポインティングデバイスがいまいち受け入れられないようなので、同じように数が多いDELLを中心に探したが、条件に合うものがなかなか無かった。

色々見てみた所、オークションで2004年製のNECのLet's Noteが手ごろな値段であったので落札、メモリが256MBしかなかったので追加で512MB購入し、全部で23,000円位になった。

商品が到着後、パーティションを切ったりAvast入れたりバックアップイメージを取ったりと諸作業をして引き渡し。
バックアップイメージはWindowsUpdateとその他設定をした状態で取り、外部メディアに保存しているので、もし何かあっても10分位でその時点に復元できるようにした。

バッテリーも良好で2.5時間位は持つようだし、出先で使う分には十分。
その人が持っている、2年くらい前のDELLノートよりも早くて使いやすいと言われた。
最近は新品でも10万円を切る感じで売っているが、用途によっては中古の方がコストパフォーマンスが良いのかもしれない。と思った。

ローカルディスクが ロ と表示される

マイコンピュータの表示がおかしいとと連絡があったので対処、行ってみるとマイコンピュータの中身が以下のようになっていました。

普通は以下のようグループ別に表示されるのですが



どうやら名前の先頭でまとめられている様子。使っている人も「特に何もしていない」という事でしたので、何か変になったのかなと思いましたが、調べてみたら簡単に解決しました。

 

マイコンピュータの空いている所で右クリックして

「アイコンの整列（I）」を選択して「種類（T）」を選択

これだけでした。ここで「名前（N）」を選択すると最初の状態になってしまうようです。

Excel2007でグラフ入りのxlsファイルを保存すると小さくなる

Excel2000形式（*.xls）で作ったグラフ入りのファイルをExcel2007で開いて保存するとグラフが小さくなる現象が発生。
色々試してみるとどうやら2007で保存をするだけでグラフのプロットエリアが一回り小さくなる様子。

色々調べてみた所マイクロソフトのサポートに以下のページがありました。

グラフのプロット エリアをサイズ変更される可能性があります、またはがシフトされる少し Excel 2007 でグラフの右部分に

自動翻訳みたいなので内容も若干おかしな日本語になっています。原因の部分も下のように変な文章になっています。

・ブックが、 Excel 97-2003年ブック (*.xls) ファイル形式で保存します。
・倍率が 100% 以外の設定に変更されるとブックを保存します。
・ブックは Excel 2007 と以前のバージョンの Excel の両方に、Excel 2007 ブックとして保存または。

もとになっているページを見てみると

・The workbook is saved in the Excel 97-2003 Workbook
(*.xls) file format.
・The workbook is saved when the zoom setting is changed
  to a setting other than 100 percent.
・The workbook is alternately saved as an Excel 2007 workbook
 both in Excel 2007 and in an earlier version of Excel.

と、表示を100%以外で保存するとこの現象が起きる。と言った内容で書かれていました。

実際問題になっているファイルを見てみると表示倍率は８０%でしたので100%に戻してみた所小さくなる現象はでなくなりました。
（微妙にレイアウトが変わってしまう場合があるようですが、
こちらはまた別で調べたいと思います）

取り合えず原因はわかったものの、Excel2000,2003,2007が混在している以上これからも起きうる問題です。パッチとかは出ないのでしょうか？

JasperReportsで四則演算

ACCESSのレポートで列AとBを足したい場合は非連結のテキストボックスを設けて

Private Sub 詳細_Format(Cancel As Integer, FormatCount As Integer)
    テキストボックス = A + B
End Sub

とすればA+Bの計算結果をテキストボックスに表示する事が出来ましたが、
（式エディタは面倒なので使ってませんでした）
JasperReportsでやってみた所、うまくいかずはまりました。

まず、ACCESSと同じ感覚で以下の様にして

　$F{A} + $F{B}

レポートのコンパイルを行うとこんなエラーが

The operator + is undefined for the argument type(s) java.lang.Integer, java.lang.Integer

Integerでは + 演算子が使えないという内容でしたので今度は

　$F{A}.intValue() + $F{B}.intValue()

とした所

Cannot cast from int to Integer

というエラーに．．．

エラーの内容を元にWebで調べてみたのですが、英語での情報しかない上に、「データソースの段階で計算しておけばいいじゃない？」。というような内容であまり参考にはならずで、あきらめようとしていたのですが、どうやらJavaの文法が使えそうな気がしてきたので

Integer.valueOf($F{A}.intValue() + $F{B}.intValue())

の様にしてみた所うまく表示されるようになりました。
VariablesではIntegerのまま使えるのになぜ？という感じではありますが一応解決です。

Hibernateで ORDER BY *** IS NULL ASC を実現したい

MySQLでソート時にNULLを優先させたくない場合は

ORDER BY XXX IS NULL ASC, XXX ASC

と書く事で解決できますが、Hibernateに対応するAPIが見つかりませんでした。

Criteriaを使ってコードがすっきりしているのでSession#createSQLQuery()は使いたくなかったので以下の様にして無理やり実現してみたのですが、もっと簡単に出来ないものでしょうか？

List list
// createCriteria()内で検索条件を追加
Criteria criteriaA = createCriteria(session)；
Criteria criteriaB = createCriteria(session)；

// キーとなる XXX が Not Null なデータを取得
criteriaA.add(Expression.isNotNull("XXX"));
criteriaA.addOrder(Order.asc("XXX"));
list = criteriaA.list();

// キーとなる XXX が Null なデータを取得しcriteriaAの結果に追加
criteriaB.add(Expression.isNull("XXX"));
list.addAll(criteriaB.list());

障害発生時の画面キャプチャ取得

Robot#createScreenCapture()を使うと現在の画面キャプチャが取れるようなのでそれを画像として保存する処理を仮作成。

離れた事業所で運用しているシステムで障害が発生した場合、電話だけでは要領を得ないので主要な所にはVNCをインストールしてますが、障害が起きている状態で連絡が来るわけでもないので、例外発生時の画面キャプチャを残す事で少しは有力な情報が得られそう。

同じような用途で実行時の画面インスタンス情報もテキスト化する処理を作りたいが、なかなか時間が確保できない．．．


// 画面サイズの取得
GraphicsEnvironment env = GraphicsEnvironment.getLocalGraphicsEnvironment();
Rectangle rect = env.getMaximumWindowBounds();

// 画面キャプチャ
Robot robot = new Robot();
BufferedImage image = robot.createScreenCapture(rect);

// 取得したイメージを画像へ保存
Date date = new Date();
SimpleDateFormat dataFormat = (SimpleDateFormat)DateFormat.getDateInstance();
dataFormat.applyPattern("yyyyMMdd_HHmmss");
ImageIO.write(image, "gif", new File(dataFormat.format(date) + ".gif"));

Hibernate辞典購入

これまではHibernateをブログやホームページの解説を見ながら何とか使っていたのですが、先日アノテーションの設定で詰まってしまい、色々と情報を探していた所、Hibernate辞典にはそういった事も書いてあるみたいなのでamazonで購入。昨日着いたので早速見たのですが、最初の「01：Hibernateの基礎知識 」の部分を読んだだけでも十分勉強になる内容でした。

Hibernateを使い始めた頃、Hibernate辞典が内容も充実していていいという話を聞いていたのですが、近所の本屋にも置いて無く、また値段も地味に高いので躊躇していたのですが、もっと早く買っておくべきだったと思いました。

JFormattedTextFieldでの勘違い

以前の投稿でJFormattedTextFieldの値が削除できないと書いたが、ただの勘違いというか勉強不足だった。
NetBeansでJFormattedTextFieldを配置した場合にfocusLostBehaviorの値がデフォルトでCOMMIT_OR_REVERT になっているのでそこをPERSISTに変えれば空にした場合はそれが反映されるよう。

この場合はマスクに一致しない場合でもそれが残ってしまうのでInputVerifierを継承したクラスをセットして値のチェックを行う必要があるみたいなのですが、基礎部分を変に作りこんでしまったため、ここを直すと他にも影響が出てしまいそうですぐには直せないですが、早めにリファクタリングしないといけない所です。

JasperReportsでデータの並び替えを行う

ACCESSのレポートではグループ化や並び替えと言った事が画面上で定義出来たが、いざJasperReportsでやってみようとした所、どこにもそういった項目が無くはまってしまいました。
色々調べてみるとそれらしいキーワードが出ては来るものの海外のサイトなので手探りでやってみた所うまく並び替えが出来るようになりました。

ポイントは
　・<sortField>を使用
　・デザイナ上では設定できない？ようなので直接XMLファイルを編集する
　・スキーマの制約上、<field>タグの次に記述する
　・デフォルトで昇順になっているので、降順にする場合は
　　order="Descending" を指定する。
　　　（order="Ascending"と記述してもiReportで省かれてしまう様子）

■ 記述例
　<jasperReport>
　　　　　　：
　    <field name="CD class="java.lang.String"/>
  　  <field name="KEY1" class="java.util.Integer"/>
　    <field name="KEY2" class="java.lang.Integer"/>
　    <sortField name="KEY1"/>
　    <sortField name="KEY2" order="Descending"/>
　    <background>
　        <band/>
　    </background>
　　　　　　：

上の記述で、KEY1の昇順、KEY2の降順の優先順位でソートが行われるようになります。

NetBeansでFindBugsを使う

１、ツール(T) - プラグイン(G)をクリック


２、タブ「設定」を選択して追加ボタンをクリック


３、以下の情報を入力して了解ボタンをクリック

名前：SQE等
URL：https://sqe.dev.java.net/updatecenters/sqe/updates.xml

４、使用可能なプラグインに「Update Center for SQE」が追加されるのでチェックしてインストールボタンをクリック


途中以下の警告が出るので続行ボタンをクリック


５、カタログを再読み込みすると「FindBugs」が追加されるのでチェックしインストールボタンをクリック


途中以下の警告が出るので続行ボタンをクリック


以上の手順でメニューにQueryが追加され、ウィンドウにもFindBugsが表示されます。


ソースの解析は自動でやってくれるみたいで、FindBugsのウィンドウが開いている状態でソースファイルをエディタで開くとバグが表示されます。
Javaを習い始めた時に作ったソースを見ると結構まずいバグが指摘されるので、勉強がてら直していきたいです。

ACCESS MDBファイル破損

ACCESSで組まれている既存のシステムが起動しないと連絡を受けて対応した所、以下のメッセージが発生し起動できない状態でした。

「ほかのユーザーが同じデータに対して同時に変更を試みているので、プロセスが停止しました」

調べてみると参照している別のMDBファイルが破損した様子なので以下の順番で復旧を試みたがどれも最初のメッセージが出て開けずダメ。

１、新規にMDBファイルを作成して壊れたMDBファイルをインポート
２、ACCESSのメニューから最適化
３、ODBC経由で開く

毎日定時に取っているバックアップファイルと内容を確認した所問題なさそうなので、そのファイルで上書きしてとりあえずは対応できました。タイミングが悪ければ最悪1日分の作業がロスになるので良かったです。

ACCESSはいまだにこういったトラブルがあるのでバックアップが必須ですが、不安定な部分もあるので、早く現在開発を進めているJavaベースのシステムに切り替えを進めたい所です。

MySQL Error Number 1025

エラーメッセージだけを見ると何でなのか分からないので備忘録として。

あるテーブル（以降：TableA）の主キーになっている列の属性をVARCHAR(45)からINTEGERに変更しようとした所、タイトルのエラーが発生、
エラーコードで調べてみると「列の名前を変更できません」という内容の様なのですが何故そうなるのか不明。

全体を見直してみた所、変更したいテーブルの主キーは別のテーブル（以降：TableB）で外部キーとして定義されていました。その辺が怪しいので以下の手順でやってみた所無事に属性を変える事が出来ました。

１、TableBの外部キーを削除
２、TableAの主キーの属性を変更
３、TableBの外部キーに該当する列の属性を２、と同じように変更
４、TableBにTableAの主キーへの外部キーを設定

MySQLのデータメンテナンス

MySQLのテーブルの作成、更新には「MySQLAdministrator」を使っていますが、データの追加や更新をすると「MySQL server has gone away （エラーコード：Error 2006）」といったエラーでデータベースへの反映が出来なくなる時があります。
設定の見直しで何とかなるのかもしれませんが、有力な情報も無くデータの更新は非効率ながらもJavaで作成した画面経由で行っていましたのですが、
今使っているPCは購入する時にOfficeのProfessionalを入れていたのを思い出し、ODBC接続でデータのメンテナンスが出来ないか試してみました。

■ 用意したもの
・MySQL用のODBC用ドライバ
ダウンロードしてインストールしておきます。
・Microsoft Access 2007

■ 作業手順

１、ODBCデータソースの作成
コントロールパネルの管理ツールより「データソース（ODBC）」をクリック
 

タブ「システムDSN」をクリックし「追加」ボタンをクリック

ドライバ一覧から「MySQL ODBC 3.51 Driver」を選択し「完了」をクリック


設定画面が表示されるので項目を入力して「OK」ボタンをクリック
 
タブ：Login

項目名	内容
Data Source Name	ACCESSから接続する際に使用する名前 今回はMySQLとしました
Description	コメント？の様なので未入力
Server	サーバ名、もしくはIPアドレス
User	ユーザ名
Password	パスワード
Database	上の3つが正しければコンボボックスにデータベース名が一覧で表示されるのでデータベースを選択

タブ：Connect Options

項目名	内容
Initial Statement	set names utf8
Character Set	cp932
その他	特に設定なし

タブ：Advanced

色々と設定できる項目があるみたいですが、今回は設定なし。


２、Accessの設定
Access 2007 の起動して新規にファイルを作成
 

リボンメニュー「外部データ」をクリックして「その他」-「ODBCデータソース」をクリック
  

「リンクテーブルを作成してソース データにリンクする」を選択して「OK」ボタンをクリック


タブ「コンピュータデータソース」を選択して一覧から先ほど作成したODBCデータソースを選択して「OK」ボタンをクリック
 
テーブルの一覧が表示されるので選択して「OK」ボタンをクリック

以上の手順でAccessからMySQLのデータの操作が出来るようになりました。

はまった所がODBCデータソースの作成時の文字コード部分で、Character Setの値が空やsjisでも表示は出来るのですが、日本語の入力時、環境依存文字（㈱、①等）に文字コードが認識できないようなエラーが出ました。