2つ目のレコードは4922,beth,で、改行文字(\n)が後に続き、11バイトとなります。(改行文字は固定レコード形式では必要ありません。ここでは単に、使用された場合はレコード長のバイトとしてカウントされることを説明するために使用されています。) INFILEがUnicode（UTF-16やUTF-8）なら CHARACTERSETを使う。 loaderのcontrolファイルにCHARACTERSETで文字コードを指定すればOK OPTIONS(LOAD=100,SKIP=1,ERRORS=-1,ROWS=10) LOAD DATA INFILE 'data.tsv' BADFILE 'data.bad' TRUNCATE INTO TABLE SUMTMP FIELDS TERMINATED BY "," TRAILING NULLCOLS ( ITEM, QTY ) ↓こんな感じで … 9 TRAILING NULLCOLS 10 (hiredate SYSDATE, deptno POSITION(1:2) INTEGER EXTERNAL(2) NULLIF deptno=BLANKS, job POSITION(7:14) CHAR TERMINATED BY WHITESPACE NULLIF job=BLANKS … 先日sql-loaderについて質問させてもらいましたが、もう1つ教えて欲しいことがあります。sql-loaderの逆のものはないのでしょうか？200万件のテーブルのデータを、条件毎に高速エクスポート（固定長テキスト）したいのですが。つまりsql- sqlで改行コードやタブコードを削除(置換)する方法です。改行コードはlfだったりcrlfだったります。replace関数を使えば一括で処理できます。正規表現を使えば更に簡単。ここではサンプルを使ってsqlで改行コードやタブコードを削除(置換)する方法を紹介しています。 置換後の文字列には、何も入力しなければ改行がなくなります。 このように、改行コードに合わせて検索してあげれば、改行も置換することができます。改行コードがわからないという場合は、とりあえず \r\n でやってみましょう。 あとがき. 文字コードを指定したい場合に指定する。 [2005-03-18] 例：「characterset ja16sjis」 ja16euc、utf8、ja16dbcs （ebcdic） 等: 入 力 指 定: infile: データファイルを指定する。入力データであるcsvファイルや固定長ファイル。 複数ファイルを指定することも可能。 [2007-12-28] 改行コードが施されていると思うのですが、SQL文で改行コードなどのリテラルを埋め込むのでしょうか？ それともDBに直接値を打ち込むときに改行コードを入力出来るのでしょうか？ VisualStudio上で見ると あんぱさんどで改行コードを挟んでるのは これで「lf」の改行コードが削除されます。 ただ、改行コード「crlf」に含まれている「lf」の部分まで消えて「cr」の改行コードになってしまうので、同じ要領で「cr」を「crlf」に置換して戻します。 もう一度「ctrl」キー + 「r」キーで置換ウィンドウを表示。 1-- This is a sample control file 2 LOAD DATA 3 INFILE 'sample.dat' 4 BADFILE 'sample.bad' 5 DISCARDFILE 'sample.dsc' 6 APPEND 7 INTO TABLE emp 8 WHEN (57) = '.' Webフォームに入力されたデータなどでは、1件のデータがLFコードで改行され、さらに1つの項目内にLFコードで区切られたデータを含む場合があります。 このようなデータを読むにはどうしたらよいでしょうか。 文字コードはShift JIS限定; 改行コードはLF限定; すべてのフィールドが"（ダブルクオート）で囲まれている。 値に含まれる"は、エスケープして""（ダブルクオート2つ）で表現されている。 replace：行の置換。既存行は全てdeleteしてからロード。 truncate：行の置換。既存行をtruncateしてからロード。 into table: データをロードする表名: when: ロード時のフィールドの条件。条件に一致しないものが廃棄ファイルに出力される。 fields terminated by "," 例9-1 サンプル制御ファイル. エクセルvbaでcsvファイルを取り込む方法シリーズです。今回はデータがダブルクォーテーションで囲まれているパターンのcsvをエクセルvbaで取り込む方法についてお伝えしたいと思います。 これで「lf」の改行コードが削除されます。 ただ、改行コード「crlf」に含まれている「lf」の部分まで消えて「cr」の改行コードになってしまうので、同じ要領で「cr」を「crlf」に置換して戻します。 もう一度「ctrl」キー + 「r」キーで置換ウィンドウを表示。
改行コードが施されていると思うのですが、SQL文で改行コードなどのリテラルを埋め込むのでしょうか？ それともDBに直接値を打ち込むときに改行コードを入力出来るのでしょうか？ VisualStudio上で見ると あんぱさんどで改行コードを挟んでるのは コード長の違い 例えば、入力ファイルのデータがシフト jis、データベースキャラクタセットが ja16euctilde(euc-jp)の場合、 半角カタカナのバイナリのコード長が異なる。シフト jis では1バイト、euc-jp では2バイト長となる。 改行コードの違い 1） 改行コードのほうはこちらのブログを参考にさせていただきました。 他事騒音.blog(SQL*Loader 改行コードを含む文字列をロードする方法 oracle) 制御ファイルに↓これ追加 INFILE 'hoge.csv' "str 'CRLF'" フィールドは全部""で括って、末尾の改行コードを「CRLF」 sqlで文字列を置換するにはreplace関数かtranslate関数を使用します．dbmsによってサポートしている関数が異なります．以下に各dbmsごとに使用可能な関数を示します． dbms replace translate; access: : ×: sqlserver: : ×: oracle: : : mysql: ×: : postgresql: : : replace関数とtranslate関数は動作が異なるので注意が … しかし、他のシステムで作られたファイルは異なる改行コードを用いているため、一旦unix用の改行コードに変換する必要がある。 1.改行コードの調べ方 1.A nkfを使う. 例9 固定長ファイル、改行あり、小数点数値や日付(dateやtimestamp)あり テーブル CREATE TABLE TEST9 ( TESTCD CHAR(4) NOT NULL, TESTNM CHAR(6) NOT NULL, NUMVAL NUMBER(10,3), DATEVAL1 DATE, DATEVAL2 DATE, TIMEVAL1 TIMESTAMP, TIMEVAL2 TIMESTAMP, CONSTRAINT PK_TEST9 PRIMARY KEY (TESTCD) ) でも、現実的には改行コードが含まれて登録することができています。 先頭行の改行コード 一体何が違うのか調べてみると、先頭行に改行コードがあるとエラーになり、先頭行に改行コードが無ければ2行目以降に改行コードがあっても登録できることが分かりました。 nkfを入れてあれば、Terminalから次のように打つだけ。 $ nkf -g foo.txt 1.B Octal dump SQL Serverで改行コードSQL Serverで改行コードを含むレコードを検索・更新・置換したい場合があります。改行コードを含むレコードを取得する場合はASCIIコードを変換すればSQL Serverで扱えます。改行コード … sqlで文字列を置換するにはreplace関数かtranslate関数を使用します．dbmsによってサポートしている関数が異なります．以下に各dbmsごとに使用可能な関数を示します． データ内にLFコードを含む場合. SQL*Loaderで読み込むファイルの文字コードを変換して、Oracleサーバにデータを ロードするには、CHARACTERSETキーワードにてデータファイル の文字コードを指定します。 例えば、SJISのファイルをEUCのデータベースへロードする場合は、SQL*Loaderの制御ファイルに 以下のように指定します。