テーブルデータをCSVでインポートしてみよう！

いつもお世話になっております。
既存のテーブルへの行追加は現在可能でしょうか？

Erikoさん
cybozu.com developer network事務局です。

既存のテーブルであっても行追加はできますが、いちど今のデータを取得し、
その取得したデータに行を追加して更新という手順になります。

ぜひご検討ください。

cybozu.com developer network事務局様、
いつも大変お世話になります。

もし差し支えなければ、その手順などを詳しくお教えいただけないでしょうか…？
色々と試したのですが、どうにも上手くいかず八方塞がりです。

Erikoさん
返信ありがとうございます。ちょっと試してみて記事化を検討します！
進捗ありましたらまたコメントさせていただきます。

Erikoさん
お待たせいたしました。既存のレコードのテーブル更新のTipsをリリースしました！
https://cybozudev.zendesk.com/hc/ja/articles/208399613

是非お試しください。

ファイルの文字コードはUTF-8以外、SJISとかでは対応難しいのでしょうか？

横から失礼します。

こちらの記事を参考にさせていただき、
ちょうどSJISからのテーブルインポートをやりましたので、参考までに。

以下のencoding.jsを、アプリ設定で一緒にアップして使っています。

encoding.js
https://github.com/polygonplanet/encoding.js

//ファイル選択とテキストエリアのセレクタ取得
var dialog = document.querySelector('#selfile');
var textarea = document.querySelector('textarea[name=\"txt\"]')

// ファイルタイプ定義
var types = [
　　　 'text/csv',
　 　　'text/comma-separated-values',
　 　　'text/plain',
　　　 'application/csv',
　 　　'application/excel',
　　　 'application/vnd.ms-excel',
　 　　'application/vnd.msexcel',
　 　　'text/anytext'
];

// ファイル指定時のイベント
dialog.addEventListener('change', function(evt) {
 　　　var reader = new FileReader();
 　　　var file = evt.target.files[0];

 　　　if (!file) {
 　　　　　　　// 指定ファイル存在確認
 　　　　　　　alert('指定したファイルが存在しません。');
 　　　　　　　return;
　　　　} else if ((types.indexOf(file.type) < 0) || /\.csv$/.test(file.name)) {
 　　　　　　　　// CSVファイルチェック
 　　　　　　　　alert('CSVファイルではありません。');
 　　　　　　　　return;
 　　　} else {
 　　　　　　　　// ファイル読み込み（ArrayBuffer形式）
 　　　　　　　　reader.readAsArrayBuffer(file);
          // オンロード時処理
 　　　　　　　　reader.onload = function(ev) {
              // 配列に変換
 　　　　　　　　　　　　var uint8Array = new Uint8Array(ev.target.result);
              // 文字コードを判定
 　　　　　　　　　　　　var encoding = Encoding.detect(uint8Array);
              // 判定した文字コードからunicodeへ変換
 　　　　　　　　　　　　var codeArray = Encoding.convert(uint8Array, {
 　　　　　　　　　　　　　　　　from: encoding,
 　　　　　　　　　　　　　　　　to: 'unicode'
 　　　　　　　　　　　});
             // テキストエリアに出力
 　　　　　　　　　　　textarea.value = Encoding.codeToString(codeArray);
 　　　　　　　};
　　　　}
});
〜　以下略　〜 

以下の状況で行き詰っています。ご教示頂けますでしょうか。

１．インポートするCSVを選択してもテキストエリアに表示されない。
→ご提供頂いているデモ環境では表示されるので、CSVの問題ではなさそうです。

２．テキストエリアにCSVデータの内容を貼り付けてPOSTしても、登録できない。
→こちらもデモ環境ではコピペしてPOSTすると登録できるのは確認しました。

そもそも根本的な事で間違っているような気がするのですが、原因が特定できません。

考えられる原因を教えて頂けると助かります。よろしくお願いします。

高橋様

ご不便をおかけしております。

>今回、ソースからもわかるようにCybozu CDNでも提供されているjQueryを使いました。

とあり、jQueryを使えるようにする設定が必要です。

こちらの記事の「Cybozu CDNを利用する」を参考に、jQueryのライブラリのリンクを設定いただくことをお試しいただけますか。

よろしくお願いいたします。

cybozu Development team様

お世話になります。早速のご返信ありがとうございます。

頂いた「こちらの記事」のリンクがクリックしても表示されないので、

リンクをご確認頂いてもよろしいでしょうか。お手数をお掛けして申し訳ありません。

宜しくお願い致します。 

高橋様

失礼いたしました。こちらになります。

https://cybozudev.zendesk.com/hc/ja/articles/204695384

cybozu Development team様

有難うございます。おかげ様で実行できました！

お世話になります。

このページを参考にデータインポートを試みていますが、CSVのテキストボックスへの展開まではうまくいくものの、

インポートが出来ません。

jswatchdogでエラーが無くなるまで細かな訂正もしましたし、エラー表示が出るわけでもありません。

ここの記事と違っているのは、

ダウンロードした既存のデータでは、"New Record Flag"とはならず、"レコードの開始行"となっています。

また、フィールド名もフィールドコードも日本語です。

これが問題なのでしょうか？

インポートするデータの中には、ルックアップやドロップダウン、ラジオボタンなどありますが、

フィールド形式の指定など、キチンとやっているつもりです。

自分で原因を調べる方法など、ヒントをいただければ幸いです。

よろしくお願いいたします。

OECDE様

いつもお世話になっております。
cybozu.com developer network事務局です。

> ダウンロードした既存のデータでは、"New Record Flag"とはならず、"レコードの開始行"となっています。
書き出したデータが「レコードの開始行」となっているのは、kintoneを日本語でお使いの場合、
書き出す言語も日本語となるので、「レコードの開始行」と表示されます。
この違いについては、問題ありません。

どこに問題があるか、開発者ツールを利用してデバッグすると発見できるかと思います。
下記を参考にデバッグをしてみてください。

○動かない？そんな時はデバッグをしてみよう！入門編
https://cybozudev.zendesk.com/hc/ja/articles/207613916

よろしくお願いいたします。

ありがとうございます。

その場合下記のエラーについては、原因わかりました。

日付をyyyy/mm/ddで記述していたのが原因でした。

たびたびすみません。

エラー原因は特定でき、データのインポートは出来ましたが、

一度に100件までしかインポート出来ないようです。

データが4万件超あるので、せめて数千件は一度にインポートしたいのですが、

方法は無いでしょうか？

OECDE 様

ありがとうございました。

こちらでも「100件ずつしか登録できないなら、100件ずつ切って登録を繰り返せばよい」という発想で、

ループをひとつ追加して対応しました。

ただ、5000件も続けてインポートすると、途中で失敗し、

実際に登録されたデータが4800件とか、100件単位でデータが抜けていることがありました。

おそらく前回の登録が完了しないうちに、次の登録処理を実行しようとしたためでは？

と推測しているのですが、いただいたURLでは、これを回避する方法があるのか、今一つわかりませんでした。

OECDE 様

確かに順番に処理していってほしいので、同期処理を記述する必要がありますね。