001    /*
002     * Copyright (c) 2009 The openGion Project.
003     *
004     * Licensed under the Apache License, Version 2.0 (the "License");
005     * you may not use this file except in compliance with the License.
006     * You may obtain a copy of the License at
007     *
008     *     http://www.apache.org/licenses/LICENSE-2.0
009     *
010     * Unless required by applicable law or agreed to in writing, software
011     * distributed under the License is distributed on an "AS IS" BASIS,
012     * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND,
013     * either express or implied. See the License for the specific language
014     * governing permissions and limitations under the License.
015     */
016    package org.opengion.hayabusa.taglib;
017    
018    import org.opengion.hayabusa.common.HybsSystem;
019    import org.opengion.hayabusa.common.HybsSystemException;
020    import org.opengion.hayabusa.resource.ResourceManager;
021    import org.opengion.hayabusa.resource.GUIInfo;
022    import org.opengion.hayabusa.db.DBColumn;
023    import org.opengion.fukurou.db.Transaction;
024    import org.opengion.fukurou.db.TransactionReal;
025    import org.opengion.fukurou.util.FileUtil;
026    import org.opengion.fukurou.util.ErrorMessage;
027    import org.opengion.fukurou.util.StringUtil;
028    import org.opengion.fukurou.util.Closer ;
029    import org.opengion.fukurou.model.Formatter;
030    import org.opengion.fukurou.model.ArrayDataModel;
031    
032    import static org.opengion.fukurou.util.StringUtil.nval ;
033    
034    import java.sql.Connection;
035    import java.sql.PreparedStatement;
036    import java.sql.SQLException;
037    
038    import java.io.File;
039    import java.io.BufferedReader;
040    import java.io.IOException;
041    
042    /**
043     * æŒ?®šã?ファイルを直接ãƒ??タベã?スに登録するãƒ??タ入力タグですã?
044     *
045     * 通常の readTable などは、DBTableModelオブジェクトを介して全件メモリに
046     * ロードしてから表示させる為、大量データ処ç�?�Œできませんã€?
047     * こã?タグでは、直接ファイルを読み取りながらãƒ??タベã?ス登録するので
048     * 大量データをバãƒ?ƒ�çš?�«登録する場合に使用しますã?
049     *
050     * 読み取るファイルは、å?頭(またã?実データが現れるまでに) #NAME 行がå¿?¦�ですã?
051     * これは、ファイルãƒ??タのカラãƒ?��を指定してã�?�¾すã?またã?columns 属æ?を使用すればã€?
052     * ファイルの#NAME 行より優先して(つまり存在してã�?�ªくても良ã�?ãƒ??タのカラãƒ?��ã‚?
053     * æŒ?®šすることがå?来ますã?
054     * こã?#NAME 行ã?、ファイルのセパレータと無関係にå¿?�šタブ区åˆ?‚Šで用意されてã�?�¾すã?
055     * タグのBODY部に、実行するSQLæ–?‚’記述しますã?
056     * こã?SQLæ–??ã€?
057     * INSERT INTO GE41 (CLM,NAME_JA,SYSTEM_ID,FGJ,DYSET)
058     * VALUES ([CLM],[NAME_JA],[SYSTEM_ID],'1','{@USER.YMDH}')
059     * と、いã�?„Ÿじで、ファイルから読み込んだ値は、[カラãƒ?��]に割り当てられますã?
060     * もちろんã€??常の固定å?(FGJに'1'をセãƒ?ƒˆ)ã‚??リクエスト変数(DYSETの{@USER.YMDH})
061     * なども使用できますã?
062     *
063     * ※ こã?タグは、Transaction タグの対象ですã?
064     *
065     * @og.formSample
066     * ●形式ï¼?lt;og:directTableInsert filename="[?¥?¥?¥]" ?¥?¥?¥ >INSERT INTO ?¥?¥?¥ </og:directTableInsert >
067     * ●body?šあã‚?EVAL_BODY_BUFFERED:BODYを評価しã?{@XXXX} を解析しまã�?
068     *
069     * ●Tag定義??
070     *   <og:directTableInsert
071     *       fileURL            【TAG】読み取りå…?ƒ‡ィレクトリ名をæŒ?®šしまã�?(初期値:FILE_URL[=filetemp/])
072     *       filename           【TAG】ファイルを作æ?するときã?ファイル名をセãƒ?ƒˆしまã�?(初期値:FILE_FILENAME[=file.xls])
073     *       encode             【TAG】ファイルを作æ?するときã?ファイルエンコーãƒ?‚£ング名をセãƒ?ƒˆしまã�?(初期値:FILE_ENCODE[=UnicodeLittle])
074     *       separator          【TAG】可変長ファイルを作æ?するときã?é ?›®区åˆ?‚Šæ–?­—をセãƒ?ƒˆしまã�?初期値:タãƒ?
075     *       displayMsg         【TAG】query の結果を画面上に表示するメãƒ?‚»ージIDを指定しまã�?初期値:MSG0040[ã€?»¶登録しました])
076     *       columns            【TAGã€?NAME 属æ?の代わりとなるファイルのカラãƒ?��ã‚?CSV形式でæŒ?®šしまã�?
077     *       commitBatch        【TAG】指定数毎にコミットを発行しまã�?初期値:0 終äº?�¾でコミットしません)
078     *       useColumnAdjust    【TAG】カラãƒ?¤‰換(DBType変換)を行うかどã�?�‹を設定しまã�?初期値:false)
079     *       useColumnCheck     【TAG】カラãƒ?ƒ�ェãƒ?‚¯(DBTypeチェãƒ?‚¯)を行うかどã�?�‹を設定しまã�?初期値:false)
080     *       nullCheck          【TAG】NULL チェãƒ?‚¯すべきカラãƒ??をカンマ区åˆ?‚Š(CSV形å¼?でæŒ?®šしまã�?
081     *       dbid               【TAGã€?通常は使ã�?�¾せん)検索時ã?DB接続IDを指定しまã�?初期値:DEFAULT)
082     *       skipRowCount       【TAG】データの読み飛ã?し件数を設定しまã�?初期値:0)
083     *       stopZero           【TAG】検索結果が0件のときå?ç�?‚’続行するかどã�?�‹[true/false]を指定しまã�?初期値:false[続行する])
084     *       debug              【TAG】デバッグæƒ??をå?力するかどã�?�‹[true/false]を指定しまã�?初期値:false)
085     *   >   ... Body ...
086     *   </og:directTableInsert>
087     *
088     * ●使用ä¾?
089     *     <og:directTableInsert
090     *         dbid         = "ORCL"                接続データベã?スID(初期値:DEFAULT)
091     *         separator    = ","                   ファイルの区åˆ?‚Šæ–?­?初期値:タãƒ?
092     *         fileURL      = "{@USER.ID}"     読み取りå…?ƒ‡ィレクトリå�?
093     *         filename     = "{@filename}"    読み取りå…?ƒ•ァイルå�?
094     *         encode       = "Shift_JIS"           読み取りå…?ƒ•ァイルエンコード名
095     *         displayMsg   = "MSG0040"             登録完äº?¾Œã?メãƒ?‚»ージ
096     *         columns      = "CLM,NAME_JA,LABEL_NAME,KBSAKU,SYSTEM_ID,LANG"
097     *                                              #NAME の代わりに使用するカラãƒ??å�?
098     *         commitBatch  = "100"                 こã?件数ずつコミットを発è¡?初期値:無制é™?
099     *         useColumnCheck  = "true"             カラãƒ?ƒ�ェãƒ?‚¯を行うかどã�?�‹(初期値:false)
100     *         useColumnAdjust = "true"             カラãƒ?¤‰換を行うかどã�?�‹(初期値:false)
101     *         nullCheck       = "CLM,SYSTEM_ID"    NULLチェãƒ?‚¯を実行しますã?
102     *     >
103     *          INSERT INTO GE41
104     *              (CLM,NAME_JA,LABEL_NAME,KBSAKU,SYSTEM_ID,LANG,
105     *                 FGJ,DYSET,DYUPD,USRSET,USRUPD,PGUPD)
106     *          VALUES
107     *              ([CLM],[NAME_JA],[LABEL_NAME],[KBSAKU],[SYSTEM_ID],[LANG],
108     *                '1','{@USER.YMDH}','{@USER.YMDH}','{@USER.ID}','{@USER.ID}','{@GUI.KEY}')
109     *     </og:directTableInsert >
110     *
111     * @og.group ファイル入åŠ?
112     *
113     * @version  4.0
114     * @author   Kazuhiko Hasegawa
115     * @since    JDK5.0,
116     */
117    public class DirectTableInsertTag extends CommonTagSupport {
118            //* こã?プログラãƒ??VERSIONæ–?­—å?を設定しますã?       {@value} */
119            private static final String VERSION = "5.7.6.2 (2014/05/16)" ;
120    
121            private static final long serialVersionUID = 576220140516L ;
122    
123            private static final String TAB_SEPARATOR = "\t" ;
124    
125            // 4.0.0.0 (2007/10/10) dbid の初期値をã?"DEFAULT" から null に変更
126            private String          dbid            = null;
127            private String          separator       = TAB_SEPARATOR;   // é ?›®区åˆ?‚Šæ–?­?
128            private String          fileURL         = HybsSystem.sys( "FILE_URL" );                 // 4.0.0 (2005/01/31)
129            private String          filename        = HybsSystem.sys( "FILE_FILENAME" );    // ファイルå�?
130            private String          encode          = HybsSystem.sys( "FILE_ENCODE"   );    // ファイルエンコーãƒ?‚£ング  "JISAutoDetect" ,"JIS", "EUC_JP", "MS932", "SJIS" , "Windows-31J" , "Shift_JIS"
131            private String          displayMsg      = "MSG0040";    // ã€?»¶登録しましたã€?
132            private String[]        columns         = null;
133            private String[]        clmKeys         = null;                 // SQLæ–??[カラãƒ?��]配å?
134            private String          sql                     = null;
135            private int                     commitBatch     = 0;                    // コミットするまとめ件数
136            private boolean         useColumnCheck  = false;        // 3.6.0.2 (2004/10/04)
137            private boolean         useColumnAdjust = false;        // 3.6.0.2 (2004/10/04)
138            private String[]        nullCheck       = null;                 // 3.8.0.2 (2005/06/30) nullチェãƒ?‚¯確èª?
139            private long            dyStart         = 0;                    // 実行時間測定用のDIV要ç´?‚’出力しますã?
140            private int                     skipRowCount= 0;                        // 5.5.7.1 (2012/10/01)
141            private boolean         stopZero        = false;                // 5.7.6.2 (2014/05/16) stopZero属æ?追åŠ?
142    
143            /**
144             * Taglibの開始タグが見つかったときに処ç�?�™ã‚?doStartTag() ã‚?オーバã?ライドしますã?
145             *
146             * @return      後続å?ç�??æŒ?¤º( EVAL_BODY_BUFFERED )
147             */
148            @Override
149            public int doStartTag() {
150                    dyStart = System.currentTimeMillis();           // 時間測定用
151                    return EVAL_BODY_BUFFERED ;     // Body を評価するã€? extends BodyTagSupport æ™?
152            }
153    
154            /**
155             * Taglibのタグ本体を処ç�?�™ã‚?doAfterBody() ã‚?オーバã?ライドしますã?
156             *
157             * @og.rev 3.6.0.2 (2004/10/04) SQLæ–?? [カラãƒ? 対応とパã?サー機è?追åŠ?
158             * @og.rev 3.8.6.3 (2006/11/30) SQL æ–??前後ã?スペã?スを取り除きますã?
159             *
160             * @return      後続å?ç�??æŒ?¤º(SKIP_BODY)
161             */
162            @Override
163            public int doAfterBody() {
164                    sql = getBodyString();
165                    if( sql == null || sql.length() == 0 ) {
166                            String errMsg = "BODY 部の登録用 Insert/Updateæ–??、å¿??ですã?";
167                            throw new HybsSystemException( errMsg );
168                    }
169    
170                    return SKIP_BODY ;                              // Body を評価しなã�?
171            }
172    
173            /**
174             * Taglibの終äº?‚¿グが見つかったときに処ç�?�™ã‚?doEndTag() ã‚?オーバã?ライドしますã?
175             *
176             * @og.rev 4.0.0.0 (2007/10/18) メãƒ?‚»ージリソース統å�? getResource().getMessage â‡?getResource().getLabel )
177             * @og.rev 5.7.0.3 (2013/11/22) BufferedReaderのcloseをcreateå†?�§行うように変更
178             * @og.rev 5.7.6.2 (2014/05/16) stopZero属æ?、DB.COUNT キーで検索件数をリクエストにセãƒ?ƒˆするã€?
179             *
180             * @return      後続å?ç�??æŒ?¤º
181             */
182            @Override
183            public int doEndTag() {
184                    debugPrint();           // 4.0.0 (2005/02/28)
185    
186                    BufferedReader pw = getBufferedReader();
187                    int executeCount = create( pw );
188    
189                    // 実行件数の表示
190                    // 4.0.0 (2005/11/30) 出力é?の変更。ä¸?•ªæœ??に出力しますã?
191                    if( displayMsg != null && displayMsg.length() > 0 ) {
192                            String status = executeCount + getResource().getLabel( displayMsg ) ;
193                            jspPrint( status + HybsSystem.BR );
194                    }
195    
196                    // 5.7.6.2 (2014/05/16) 検索結果の件数をã?"DB.COUNT" キーでリクエストにセãƒ?ƒˆするã€?
197                    setRequestAttribute( "DB.COUNT" , String.valueOf( executeCount ) );
198    
199                    // 5.7.6.2 (2014/05/16) 件数?�件かつ stopZero = true
200                    if( executeCount == 0 && stopZero ) { return SKIP_PAGE; }
201    
202                    // 時間測定用の DIV 要ç´?‚’出åŠ?
203                    long dyTime = System.currentTimeMillis()-dyStart;
204                    jspPrint( "<div id=\"queryTime\" value=\"" + (dyTime) + "\"></div>" );      // 3.5.6.3 (2004/07/12)
205    
206                    // 4.0.0 (2005/01/31) セキュリãƒ?‚£チェãƒ?‚¯(ãƒ??タアクセス件数登録)
207                    GUIInfo guiInfo = (GUIInfo)getSessionAttribute( HybsSystem.GUIINFO_KEY );
208                    if( guiInfo != null ) { guiInfo.addWriteCount( executeCount,dyTime,sql ); }
209    
210                    return EVAL_PAGE ;
211            }
212    
213            /**
214             * タグリブオブジェクトをリリースしますã?
215             * キャãƒ?‚·ュされて再利用されるã?で、フィールドã?初期設定を行いますã?
216             *
217             * @og.rev 3.6.0.2 (2004/10/04) useColumnCheck,useColumnAdjust 属æ?追åŠ?
218             * @og.rev 3.8.0.2 (2005/06/30) nullCheck 属æ?追åŠ?
219             * @og.rev 4.0.0.0 (2007/10/10) dbid の初期値をã?"DEFAULT" から null に変更
220             * @og.rev 5.5.7.1 (2012/10/05) skipRowCount追åŠ?
221             * @og.rev 5.7.6.2 (2014/05/16) stopZero属æ?追åŠ?
222             */
223            @Override
224            protected void release2() {
225                    super.release2();
226                    dbid                    = null;
227                    separator               = TAB_SEPARATOR;   // é ?›®区åˆ?‚Šæ–?­?
228                    fileURL                 = HybsSystem.sys( "FILE_URL" );         // 4.0.0 (2005/01/31)
229                    filename                = HybsSystem.sys( "FILE_FILENAME"        );   // ファイルå�?
230                    encode                  = HybsSystem.sys( "FILE_ENCODE"          );   // ファイルエンコーãƒ?‚£ング  "JISAutoDetect" ,"JIS", "EUC_JP", "MS932", "SJIS" , "Windows-31J" , "Shift_JIS"
231                    displayMsg              = "MSG0040";    // ã€?»¶登録しましたã€?
232                    columns                 = null;         // 3.5.4.5 (2004/01/23)
233                    useColumnCheck  = false;        // 3.6.0.2 (2004/10/04)
234                    useColumnAdjust = false;        // 3.6.0.2 (2004/10/04)
235                    nullCheck               = null;         // 3.8.0.2 (2005/06/30)
236                    skipRowCount    = 0;            // 5.5.7.1 (2012/10/05)
237                    stopZero                = false;        // 5.7.6.2 (2014/05/16) stopZero属æ?追åŠ?
238            }
239    
240            /**
241             * BufferedReader より読み込み、データベã?スに書き込みますã?
242             *
243             * @og.rev 3.6.0.2 (2004/10/04) カラãƒ?‚ªブジェクトã?DBType属æ?の整合æ?チェãƒ?‚¯
244             * @og.rev 3.8.0.2 (2005/06/30) nullチェãƒ?‚¯確èª?
245             * @og.rev 3.8.5.1 (2006/05/08) 取込ãƒ??タã�?name 列より少なã�??合ã?対応を追åŠ?
246             * @og.rev 3.8.7.0 (2006/12/15) アクセスログ取得ã?為,ApplicationInfoオブジェクトを設å®?
247             * @og.rev 4.0.0.0 (2005/01/31) CheckColumnDataクラス static 化ã?引数にResourceManager追åŠ?
248             * @og.rev 4.0.0.1 (2007/12/03) try ??catch ??finally をきちんと行うã€?
249             * @og.rev 5.1.9.0 (2010/08/01) Transaction 対å¿?
250             * @og.rev 5.2.2.0 (2010/11/01)) ""で囲われてã�?‚‹ãƒ??タに改行が入ってã�?�Ÿ場合ã?対å¿?
251             * @og.rev 5.3.7.0 (2011/07/01) TransactionReal の引数変更
252             * @og.rev 5.3.8.0 (2011/08/01) pstmt.setObject で、useParamMetaData の判定を避けるため、pstmt.setString で代用(PostgreSQL対å¿?
253             * @og.rev 5.5.7.1 (2012/10/05) omitFirstLine対å¿?
254             * @og.rev 5.7.0.3 (2013/11/22) BufferedReaderのclose処ç�?‚’こã?メソãƒ?ƒ‰å†??finallyで行う
255             *
256             * @param   reader BufferedReaderオブジェクãƒ?
257             *
258             * @return  取り込み件数
259             */
260            private int create( final BufferedReader reader )  {
261    
262                    String[] names = readName( reader );    // ファイルのカラãƒ?��
263                    int   nameLen = names.length ;                  // 3.8.5.1 (2006/05/08) 追åŠ?
264    
265                    ArrayDataModel nmdata = new ArrayDataModel( names );
266                    Formatter format = new Formatter( nmdata );
267                    format.setFormat( sql.trim() );
268                    sql = format.getQueryFormatString();
269                    int[] clmNos = format.getClmNos();
270                    int   clmNosLen = clmNos.length ;
271                    clmKeys = format.getClmKeys();
272    
273                    CheckColumnData checkClass = new CheckColumnData( clmNos,clmKeys,getResource() );
274    
275                    ArrayDataModel nullData = new ArrayDataModel( names );
276                    int[] nullClmNos = nullData.getColumnNos( nullCheck );  // バインド変数のアドレス求め
277    
278                    // 3.8.0.2 (2005/06/30) nullチェãƒ?‚¯確èª?
279                    int   nullClmNosLen = nullClmNos.length ;
280    
281                    int    executeCount = 0;
282                    int    commitCount  = 0;
283                    char   sep  = separator.charAt(0);
284                    boolean errFlag  = true;
285                    Transaction tran = null;        // 5.1.9.0 (2010/08/01) Transaction 対å¿?
286                    PreparedStatement pstmt = null ;
287                    String[] data   = null ;
288                    int skip = skipRowCount; // 5.5.7.1 (2012/10/05)
289                    try {
290                            // 5.1.9.0 (2010/08/01) Transaction 対å¿?
291                            TransactionTag tranTag = (TransactionTag)findAncestorWithClass( this,TransactionTag.class );
292                            if( tranTag == null ) {
293                                    tran = new TransactionReal( getApplicationInfo() );             // 5.3.7.0 (2011/07/01) 引数変更
294                            }
295                            else {
296                                    tran = tranTag.getTransaction();
297                            }
298    
299                            Connection conn = tran.getConnection( dbid );           // 5.1.9.0 (2010/08/01) Transaction 対å¿?
300                            pstmt = conn.prepareStatement( sql );
301                            String line ;
302                            while((line = reader.readLine()) != null) {
303                                    if( line.length() == 0 || line.charAt( 0 ) == '#' ) { continue; }
304                                    else if( skip > 0 ){ skip--; continue;} // 5.5.7.1 (2012/10/05) 
305                                    else {
306                                            // 5.2.2.0 (2010/11/01) ""で囲われてã�?‚‹ãƒ??タに改行が入ってã�?�Ÿ場合ã?対å¿?
307                                            int quotCount = StringUtil.countChar( line, '"' );
308                                            if( quotCount % 2 != 0 ) {
309                                                    String addLine = null;
310                                                    StringBuilder buf = new StringBuilder( line );
311                                                    while(quotCount % 2 != 0 && (addLine = reader.readLine()) != null) {
312                                                            if( line.length() == 0 || line.charAt( 0 ) == '#' ) { continue; }
313                                                            buf.append( HybsSystem.CR ).append( addLine );
314                                                            quotCount += StringUtil.countChar( addLine, '"' );
315                                                    }
316                                                    line = buf.toString();
317                                            }
318    
319                                            // 3.8.5.1 (2006/05/08) 取込ãƒ??タã�?name 列より少なã�??合ã?対応を追åŠ?
320                                            data = StringUtil.csv2Array( line , sep , nameLen );
321    
322                                            // 3.6.0.2 (2004/10/04) カラãƒ?¤‰換
323                                            if( useColumnAdjust ) {
324                                                    data = checkClass.adjustData( data );
325                                            }
326    
327                                            // 3.6.0.2 (2004/10/04) カラãƒ?ƒ�ェãƒ?‚¯
328                                            if( useColumnCheck ) {
329                                                    ErrorMessage errMsg = checkClass.checkData( executeCount, data );
330                                                    if( !errMsg.isOK() ) {
331                                                            tran.rollback();                        // 5.1.9.0 (2010/08/01) Transaction 対å¿?
332                                                            jspPrint( TaglibUtil.makeHTMLErrorTable( errMsg,getResource() ) );
333                                                            return commitCount;
334                                                    }
335                                            }
336    
337                                            // 3.8.0.2 (2005/06/30) nullチェãƒ?‚¯確èª?
338                                            if( nullClmNosLen > 0 ) {
339                                                    ErrorMessage errMsg = new ErrorMessage( "Null Check Columns Error!" );
340    
341                                                    for( int i=0; i<nullClmNosLen; i++ ) {
342                                                            int clm = nullClmNos[i];
343                                                            if( data[clm] == null || data[clm].length() == 0 ) {
344                                                                    String label = getResource().getLabel( nullCheck[i] );
345                                                                    // ERR0012 : æŒ?®šã?ãƒ??タがセãƒ?ƒˆされてã�?�¾せんã€?NULLエラー)。key={0}
346                                                                    errMsg.addMessage( executeCount+1,ErrorMessage.NG,"ERR0012",label );
347                                                            }
348                                                    }
349                                                    if( !errMsg.isOK() ) {
350                                                            tran.rollback();                        // 5.1.9.0 (2010/08/01) Transaction 対å¿?
351                                                            jspPrint( TaglibUtil.makeHTMLErrorTable( errMsg,getResource() ) );
352                                                            return commitCount;
353                                                    }
354                                            }
355    
356                                            for( int i=0; i<clmNosLen; i++ ) {
357                                                    String val = data[clmNos[i]];
358                                                    if( val != null && val.startsWith( "'0" ) ) {
359                                                            val = val.substring( 1 );
360                                                    }
361                                                    pstmt.setString( i+1,val );
362                                            }
363    
364                                            pstmt.execute();
365                                            if( commitBatch > 0 && ( executeCount%commitBatch == 0 ) ) {
366                                                    tran.commit();                  // 5.1.9.0 (2010/08/01) Transaction 対å¿?
367                                                    commitCount = executeCount;
368                                            }
369                                            executeCount++ ;
370                                    }
371                            }
372                            tran.commit();                  // 5.1.9.0 (2010/08/01) Transaction 対å¿?
373                            commitCount = executeCount ;
374                            errFlag = false;                // エラーではなã�?
375                    }
376                    catch (IOException ex) {
377                            String errMsg = "ファイル読込みエラー[" + reader.toString() + "]"
378                                                    + " 行番号=[" + executeCount +"]"
379                                                    + " 登録件数=[" + commitCount + "]"  ;
380                            throw new HybsSystemException( errMsg,ex );
381                    }
382                    catch (SQLException ex) {
383                            String errMsg = "sql=[" + sql + "]" + HybsSystem.CR
384                                                    +       "names=[" + StringUtil.array2csv( names ) + "]" + HybsSystem.CR
385                                                    +       "vals =[" + StringUtil.array2csv( data ) + "]" + HybsSystem.CR
386                                                    + " 行番号=[" + executeCount +"]"
387                                                    + " 登録件数=[" + commitCount + "]"  + HybsSystem.CR
388                                                    + " errorCode=[" + ex.getErrorCode() + "] State=[" +
389                                                    ex.getSQLState() + "]" + HybsSystem.CR ;
390                            throw new HybsSystemException( errMsg,ex );
391                    }
392                    finally {
393                            Closer.stmtClose( pstmt );
394                            Closer.ioClose( reader );       // 5.7.0.3 (2013/11/22) finallyでcloseするように変更
395                            if( tran != null ) {                            // 5.5.2.6 (2012/05/25) findbugs対å¿?
396                                    tran.close( errFlag );                  // 5.1.9.0 (2010/08/01) Transaction 対å¿?
397                            }
398                    }
399    
400                    return commitCount;
401            }
402    
403            /**
404             * BufferedReader よりã€?NAME 行ã?é ?›®名情報を読み取りますã?
405             * ãƒ??タカラãƒ?‚ˆり前にã€??目名情報を示ã�?"#Name" が存在する仮定で取り込みますã?
406             * こã?行ã?、ファイルの形式に無関係に、TAB で区åˆ?‚‰れてã�?�¾すã?
407             * #NAME 配å?の先é?(行番号にあたるå?æ‰?は、ROW_NO とã�?�†キーを割り当てますã?
408             * columns が設定されてã�?‚‹場合ã?ã€?NAME 行ではなくã?columns を優先しますã?
409             *
410             * @og.rev 3.6.0.0 (2004/09/22) #NAME 行が見つからなã�??合ã?、エラーとしますã?
411             * @og.rev 3.6.0.2 (2004/10/04) columns が設定されてã�?‚‹場合ã?、それを返しますã?
412             *
413             * @param       reader PrintWriterオブジェクãƒ?
414             *
415             * @return      カラãƒ?��配å?
416             */
417            private String[] readName( final BufferedReader reader ) {
418                    if( columns != null && columns.length > 0 ) {
419                            return columns ;
420                    }
421    
422                    try {
423                            String line;
424                            while((line = reader.readLine()) != null) {
425                                    if( line.length() == 0 ) { continue; }
426                                    if( line.charAt(0) == '#' ) {
427                                            if( line.length() >= 5 &&
428                                                    "#NAME".equalsIgnoreCase( line.substring( 0,5 ) ) ) {
429                                                    String[] rtn = StringUtil.csv2Array( line ,TAB_SEPARATOR.charAt(0) );
430                                                    rtn[0] = "ROW_NO";      // 先é?カラãƒ?�«カラãƒ?��を与えるã?
431                                                    return rtn ;
432                                            }
433                                            else { continue; }
434                                    }
435                                    else {
436                                            String errMsg = "#NAME が見つかる前にãƒ??タが見つかりましたã€? + HybsSystem.CR
437                                                            + " LINE=" + line;                      // 5.1.8.0 (2010/07/01) errMsg 修正
438                                            throw new HybsSystemException( errMsg );
439                                    }
440                            }
441                    }
442                    catch (IOException ex) {
443                            String errMsg = "ファイル読込みエラー[" + reader.toString() + "]"  ;
444                            throw new HybsSystemException( errMsg,ex );
445                    }
446    
447                    String errMsg = "#NAME が見つかりませんでしたã€?;
448                    throw new HybsSystemException( errMsg );
449            }
450    
451            /**
452             * BufferedReader を取得しますã?
453             *
454             * ここでは、ä¸?ˆ¬çš?�ªファイル出力をè€??した BufferedReader を作æ?しますã?
455             *
456             * @return      æŒ?®šã?読み取り用BufferedReaderオブジェクãƒ?
457             */
458            private BufferedReader getBufferedReader() {
459                    if( filename == null ) {
460                            String errMsg = "ファイル名がセãƒ?ƒˆされてã�?�¾せんã€?;
461                            throw new HybsSystemException( errMsg );
462                    }
463                    String directory = HybsSystem.url2dir( fileURL );
464                    File file = new File( StringUtil.urlAppend( directory,filename ) );
465    
466                    BufferedReader out = FileUtil.getBufferedReader( file,encode );
467    
468                    return out ;
469            }
470    
471            /**
472             * 【TAGã€?通常は使ã�?�¾せん)検索時ã?DB接続IDを指定しまã�?初期値:DEFAULT)ã€?
473             *
474             * @og.tag
475             *   検索時ã?DB接続IDを指定しますã?初期値は、DEFAULT ですã?
476             *
477             * @param       id ãƒ??タベã?ス接続ID
478             */
479            public void setDbid( final String id ) {
480                    dbid = nval( getRequestParameter( id ),dbid );
481            }
482    
483            /**
484             * 【TAG】可変長ファイルを作æ?するときã?é ?›®区åˆ?‚Šæ–?­—をセãƒ?ƒˆしまã�?初期値:タãƒ?ã€?
485             *
486             * @og.tag 可変長ファイルを作æ?するときã?é ?›®区åˆ?‚Šæ–?­—をセãƒ?ƒˆしますã?
487             *
488             * @param   separator é ?›®区åˆ?‚Šæ–?­?
489             */
490            public void setSeparator( final String separator ) {
491                    this.separator = nval( getRequestParameter( separator ),this.separator );
492            }
493    
494            /**
495             * 【TAG】読み取りå…?ƒ‡ィレクトリ名をæŒ?®šしまã�?
496             *              (初期値:FILE_URL[={@og.value org.opengion.hayabusa.common.SystemData#FILE_URL}])ã€?
497             *
498             * @og.tag
499             * こã?属æ?でæŒ?®šされるãƒ?‚£レクトリより、ファイルを読み取りますã?
500             * æŒ?®š方法ã?ã€??常の fileURL 属æ?と同様に、å?頭がã?'/' (UNIX) またã?ã€?¼’文字目がã?
501             * ":" (Windows)の場合ã?、指定ã?URLそã?ままのãƒ?‚£レクトリに、そã�?�§なã�??合ã?ã€?
502             * fileURL = "{&#064;USER.ID}" とæŒ?®šすると、FILE_URL 属æ?でæŒ?®šã?フォルãƒ??下にã€?
503             * さらに、各個人ID別のフォルãƒ??下よりã?読み取りますã?
504             * (初期値:シスãƒ?ƒ 定数のFILE_URL[={@og.value org.opengion.hayabusa.common.SystemData#FILE_URL}])ã€?
505             *
506             * @og.rev 4.0.0.0 (2005/01/31) StringUtil.urlAppend メソãƒ?ƒ‰の利用
507             * @og.rev 4.0.0.0 (2007/11/20) æŒ?®šされたãƒ?‚£レクトリ名ã?æœ?¾Œが"\"or"/"で終わってã�?�ªã�??合にã€?/"を付加するã€?
508             *
509             * @param       url ファイルURL
510             * @see         org.opengion.hayabusa.common.SystemData#FILE_URL
511             */
512            public void setFileURL( final String url ) {
513                    String furl = nval( getRequestParameter( url ),null );
514                    if( furl != null ) {
515                            char ch = furl.charAt( furl.length()-1 );
516                            if( ch != '/' && ch != '\\' ) { furl = furl + "/"; }
517                            fileURL = StringUtil.urlAppend( fileURL,furl );
518                    }
519            }
520    
521            /**
522             * 【TAG】ファイルを作æ?するときã?ファイル名をセãƒ?ƒˆしまã�?
523             *              (初期値:FILE_FILENAME[={@og.value org.opengion.hayabusa.common.SystemData#FILE_FILENAME}])ã€?
524             *
525             * @og.tag
526             * ファイルを作æ?するときã?ファイル名をセãƒ?ƒˆしますã?
527             * (初期値:シスãƒ?ƒ 定数のFILE_FILENAME[={@og.value org.opengion.hayabusa.common.SystemData#FILE_FILENAME}])ã€?
528             *
529             * @param   filename ファイルå�?
530             * @see         org.opengion.hayabusa.common.SystemData#FILE_FILENAME
531             */
532            public void setFilename( final String filename ) {
533                    this.filename = nval( getRequestParameter( filename ),this.filename );
534            }
535    
536            /**
537             * 【TAG】ファイルを作æ?するときã?ファイルエンコーãƒ?‚£ング名をセãƒ?ƒˆしまã�?
538             *              (初期値:FILE_ENCODE[={@og.value org.opengion.hayabusa.common.SystemData#FILE_ENCODE}])ã€?
539             *
540             * @og.tag
541             * 初期値は、シスãƒ?ƒ パラメータ の FILE_ENCODE 属æ?で、設定してã�?�¾すã?
542             * Shift_JIS,MS932,Windows-31J,UTF-8,ISO-8859-1,UnicodeLittle?¥?¥?¥
543             * (初期値:シスãƒ?ƒ 定数のFILE_ENCODE[={@og.value org.opengion.hayabusa.common.SystemData#FILE_ENCODE}])ã€?
544             *
545             * @param   enc ファイルエンコーãƒ?‚£ングå�?
546             * @see     <a href="http://www.iana.org/assignments/character-sets">IANA Charset Registry</a>
547             * @see         org.opengion.hayabusa.common.SystemData#FILE_ENCODE
548             */
549            public void setEncode( final String enc ) {
550                    encode = nval( getRequestParameter( enc ),encode );
551            }
552    
553            /**
554             * 【TAG】query の結果を画面上に表示するメãƒ?‚»ージIDを指定しまã�?初期値:MSG0040[ã€?»¶登録しました])ã€?
555             *
556             * @og.tag
557             * ここでは、検索結果の件数ã‚?™»録された件数をまずå?力しã€?
558             * そã?次に、ここでæŒ?®šしたメãƒ?‚»ージをリソースから取得して
559             * 表示しますã?
560             * 表示させたくなã�??合ã?, displayMsg = "" をセãƒ?ƒˆしてくださいã€?
561             * 初期値は、検索件数を表示しますã?
562             * ※ こã?属æ?には、リクエスト変数({&#064;XXXX})は使用できませんã€?
563             *
564             * @param   id ãƒ?‚£スプレイに表示させるメãƒ?‚»ージ ID
565             */
566            public void setDisplayMsg( final String id ) {
567                    if( id != null ) { displayMsg = id; }
568            }
569    
570            /**
571             * 【TAGã€?NAME 属æ?の代わりとなるファイルのカラãƒ?��ã‚?CSV形式でæŒ?®šしますã?
572             *
573             * @og.tag
574             * ãƒ??タファイルの先é?行にã€?NAME 行があり、読み取るべきファイルの
575             * カラãƒ?��が記述されてã�?�¾すã?通常は、このカラãƒ?��を取り込んでã€?
576             * å�?ƒ‡ータ列ã?カラãƒ?‚’æŒ?®šしますã?
577             * こã?属æ?は、ファイルに#NAME 行が存在しなã�?他シスãƒ?ƒ からの入力ファイルç­?
578             * 場合にã€?NAME 属æ?の代わりに、カラãƒ?��を外部よりæŒ?®šしますã?
579             *
580             * @og.rev 3.8.5.1 (2006/05/08) getCSVParameter の使用を中止
581             *
582             * @param   clms ファイルのカラãƒ?��(カンマ区åˆ?‚Šæ–?­?
583             */
584            public void setColumns( final String clms ) {
585                    columns = StringUtil.csv2Array( nval( getRequestParameter( clms ),null ),',' );
586            }
587    
588            /**
589             * 【TAG】指定数毎にコミットを発行しまã�?初期値:0 終äº?�¾でコミットしません)ã€?
590             *
591             * @og.tag
592             * 通常は、å?ての処ç�?�Œ正常に終äº?�™るか、なにもしなã�?�‹(トランザクション)
593             * を判断すべきでã€??中でのコミットã?しませんã€?
594             * しかしã?場合によって、件数が異常に多い場合や、å?実行可能な場合ã?ã€?
595             * 途中でコミットしてã€??度、å?ç�?�§きるもã?ã�?�‘をå?ç�?�—てしまã�?�¨ã�?�†方法がありますã?
596             * またã?ロールバックエリアの関係などで、データ量が多い場合に、å?ç�?™‚間が異常に
597             * 長くなる事があり、指定件数ごとのコミット機è?を用意してã�?�¾すã?
598             * 0 に設定すると、終äº?�¾でコミットしません。å?期å?はã€? ですã?
599             *
600             * @param   cmtBat æŒ?®š数毎にコミットを発è¡?初期値:0)
601             */
602            public void setCommitBatch( final String cmtBat ) {
603                    commitBatch = nval( getRequestParameter( cmtBat ),commitBatch );
604            }
605    
606            /**
607             * 【TAG】カラãƒ?ƒ�ェãƒ?‚¯(DBTypeチェãƒ?‚¯)を行うかどã�?�‹を設定しまã�?初期値:false)ã€?
608             *
609             * @og.tag
610             * カラãƒ??整合æ?チェãƒ?‚¯を行う場合ã?こã?属æ?を設å®?true)しますã?
611             * 初期値は、行わなã�?false)ですã?
612             * チェãƒ?‚¯するカラãƒ??ã€?NAME ã‚?columns でæŒ?®šされたカラãƒ?�§はなくã?
613             * BODY部のSQLæ–?�§æŒ?®šされたカラãƒ?��( [カラãƒ?��] )ですã?これは、直接、SQLæ–?¸­に
614             * 記述してã�?‚‹値ã‚??{&#064;XXXX}æ–?­—等ã?、チェãƒ?‚¯出来なã�?‚ºですã?
615             *
616             * @og.rev 3.6.0.2 (2004/10/04) 新規追åŠ?取り込み時å?チェãƒ?‚¯
617             *
618             * @param   flag チェãƒ?‚¯を行うかどã�?�‹(true:行う/false:行わなã�?
619             * @see     #setUseColumnAdjust( String )
620             */
621            public void setUseColumnCheck( final String flag ) {
622                    useColumnCheck = nval( getRequestParameter( flag ),useColumnCheck );
623            }
624    
625            /**
626             * 【TAG】カラãƒ?¤‰換(DBType変換)を行うかどã�?�‹を設定しまã�?初期値:false)ã€?
627             *
628             * @og.tag
629             * カラãƒ??変換を行う場合ã?こã?属æ?を設å®?true)しますã?
630             * 初期値は、行わなã�?false)ですã?
631             * 変換するカラãƒ??ã€?NAME ã‚?columns でæŒ?®šされたカラãƒ?�§はなくã?
632             * BODY部のSQLæ–?�§æŒ?®šされたカラãƒ?��[カラãƒ?��]ですã?これは、直接、SQLæ–?¸­に
633             * 記述してã�?‚‹値ã‚??{&#064;XXXX}æ–?­—等ã?、変換出来なã�?‚ºですã?
634             *
635             * @og.rev 3.6.0.2 (2004/10/04) 新規追åŠ?取り込み時変換
636             *
637             * @param   flag 変換を行うかどã�?�‹(true:行う/false:行わなã�?
638             * @see     #setUseColumnCheck( String )
639             */
640            public void setUseColumnAdjust( final String flag ) {
641                    useColumnAdjust = nval( getRequestParameter( flag ),useColumnAdjust );
642            }
643    
644            /**
645             * 【TAG】NULL チェãƒ?‚¯すべきカラãƒ??をカンマ区åˆ?‚Š(CSV形å¼?でæŒ?®šしますã?
646             *
647             * @og.tag nullCheck="AAA,BBB,CCC,DDD"
648             * åˆ?§£方法ã?ã€??常のパラメータ取得後に、CSVåˆ?§£しますã?
649             *
650             * @og.rev 3.8.0.2 (2005/06/30) 新規追åŠ?
651             * @og.rev 3.8.8.5 (2007/03/09) 通常のパラメータ取得後に、CSVåˆ?§£に戻しますã?
652             *
653             * @param   clms カラãƒ??(CSV形å¼?
654             */
655            public void setNullCheck( final String clms ) {
656                    nullCheck = StringUtil.csv2Array( getRequestParameter( clms ) );
657                    if( nullCheck.length == 0 ) { nullCheck = null; }
658            }
659            
660            /**
661             * 【TAG】取り込み時に除外する行をæŒ?®šしまã�?初期値:0)ã€?
662             *
663             * @og.tag
664             * TAB区åˆ?‚Šãƒ?‚­ストやEXCEL等ã?ãƒ??タの読み始めの初期値を指定しますã?
665             * ファイルの先é?行がã€?¼�行としてカウントしますã?で、設定å?は、読み飛ã?ã�?
666             * 件数になりますã?(?‘とæŒ?®šするとã€?¼‘件読み飛ã?しã??’行目から読み込みますã?)
667             * 読み飛ã?しã?、コメント行などは、無視しますã?で、実際の行数åˆ?ª­み飛ã?しますã?
668             * ?ƒNAME属æ?ã‚??columns 属æ?は、有効ですã?
669             *
670             * @og.rev 5.5.7.1 (2012/10/05) 新規追åŠ?
671             *
672             * @param   count 先é?行を無視するかどã�?�‹(true:無視すã‚?false:無視しなã�?
673             */
674            public void setSkipRowCount( final String count ) {
675                    skipRowCount = nval( getRequestParameter( count ),skipRowCount );
676            }
677    
678            /**
679             * 【TAG】検索結果が0件のときå?ç�?‚’続行するかどã�?�‹[true/false]を指定しまã�?初期値:false[続行する])ã€?
680             *
681             * @og.tag
682             * 初期値は、false(続行すã‚?ですã?
683             *
684             * @og.rev 5.7.6.2 (2014/05/16) 新規追åŠ?
685             *
686             * @param  cmd 検索結果が0件のときã?[true:処ç�?‚’中止する/false:続行する]
687             */
688            public void setStopZero( final String cmd ) {
689                    stopZero = nval( getRequestParameter( cmd ),stopZero );
690            }
691    
692            /**
693             * カラãƒ?¤‰換、カラãƒ?ƒ�ェãƒ?‚¯を行うå†?ƒ¨クラス
694             *
695             * @og.rev 4.0.0.0 (2005/01/31) static クラス化ã?引数にResourceManager追åŠ?
696             * @og.group ファイル入åŠ?
697             *
698             * @version  4.0
699             * @author   Kazuhiko Hasegawa
700             * @since    JDK5.0,
701             */
702            static class CheckColumnData {
703                    private final DBColumn[] dbClm    ;
704                    private final int[]      clmChkNo ;
705                    private final int        len      ;             // 長さ0ã?時ã?、なにもしなã�??
706                    private final ErrorMessage errMsg = new ErrorMessage( "Check Columns Error!" );
707    
708                    /**
709                     * コンストラクター
710                     *
711                     * @param       clmNo   カラãƒ?•ª号配å?
712                     * @param chkClm String[]
713                     * @param resource ResourceManager
714                     */
715                    CheckColumnData( final int[] clmNo, final String[] chkClm,final ResourceManager resource ) {
716                            if( clmNo  == null || clmNo.length  == 0 ||
717                                    chkClm == null || chkClm.length == 0 ) { // return; }   // 何もしなã�?
718    
719                                    dbClm    = null;
720                                    clmChkNo = null;
721                                    len      = 0;
722                            }
723                            else {
724                                    clmChkNo = clmNo ;
725                                    len = clmNo.length ;
726                                    dbClm = new DBColumn[len];
727                                    for( int i=0; i<len; i++ ) {
728                                            dbClm[i] = resource.makeDBColumn( chkClm[i] );  // 4.0.0 (2005/01/31)
729                                    }
730                            }
731                    }
732    
733                    /**
734                     * 引数のãƒ??タã‚?DBColumn で正規化(valueSetメソãƒ?ƒ‰経由)しますã?
735                     *
736                     * @param       data    ?‘行å?のãƒ??タ配å?
737                     * @return String[]
738                     * @see org.opengion.hayabusa.db.DBColumn#valueSet( String )
739                     */
740                    String[] adjustData( final String[] data ) {
741                            if( len == 0 ) { return data; }
742                            String[] ajstData = new String[len];
743                            for( int i=0; i<len; i++ ) {
744                                    String val = data[clmChkNo[i]];
745                                    ajstData[i] = dbClm[i].valueSet( val );
746                            }
747                            return ajstData ;
748                    }
749    
750                    /**
751                     * 引数のãƒ??タã‚?DBColumn で正規化(valueSetメソãƒ?ƒ‰経由)しますã?
752                     *
753                     * @param       row     行番号
754                     * @param       data    ?‘行å?のãƒ??タ配å?
755                     * @return ErrorMessage
756                     * @see org.opengion.hayabusa.db.DBColumn#valueSet( String )
757                     */
758                    ErrorMessage checkData( final int row,final String[] data ) {
759                            for( int i=0; i<len; i++ ) {
760                                    String val = data[clmChkNo[i]];
761                                    errMsg.append( row+1,dbClm[i].valueCheck( val ) );
762                            }
763                            return errMsg ;
764                    }
765            }
766    
767            /**
768             * こã?オブジェクトã?æ–?­—å?表現を返しますã?
769             * 基本çš?�«ãƒ?ƒ�ãƒ?‚°目çš?�«使用しますã?
770             *
771             * @return こã?クラスのæ–?­—å?表現
772             */
773            @Override
774            public String toString() {
775                    return org.opengion.fukurou.util.ToString.title( this.getClass().getName() )
776                                    .println( "VERSION"                     ,VERSION                )
777                                    .println( "dbid"                        ,dbid                   )
778                                    .println( "separator"           ,separator              )
779                                    .println( "fileURL"                     ,fileURL                )
780                                    .println( "filename"            ,filename               )
781                                    .println( "encode"                      ,encode                 )
782                                    .println( "displayMsg"          ,displayMsg             )
783                                    .println( "columns"                     ,columns                )
784                                    .println( "clmKeys"                     ,clmKeys                )
785                                    .println( "sql"                         ,sql                    )
786                                    .println( "commitBatch"         ,commitBatch    )
787                                    .println( "useColumnCheck"      ,useColumnCheck )
788                                    .println( "useColumnAdjust"     ,useColumnAdjust)
789                                    .println( "nullCheck"           ,nullCheck              )
790                                    .println( "dyStart"                     ,dyStart                )
791                                    .println( "Other..."            ,getAttributes().getAttribute() )
792                                    .fixForm().toString() ;
793            }
794    }