ファイルサイズが大きいCSVファイルの読み込みについて
38 vues (au cours des 30 derniers jours)
Afficher commentaires plus anciens
ファイルサイズが、行2000000 列10のファイルを読み込みたいです。 データインポートでは時間がかかってしまいます。 また、datastoreだと行数が多きいためエラーになってしまいます。
このファイルを読み込む方法を教えてください。
0 commentaires
Réponse acceptée
Kazuya
le 19 Oct 2018
Modifié(e) : Kazuya
le 19 Oct 2018
datastore が最適な気がしますが、どんな読み込みをされたときにどんなエラーがでましたか?
200万x10の行列だと、double 型で大体 150MBのサイズになりますが・・これをすべてメモリ上に読み込む必要がありますか?
4 commentaires
Kazuya
le 20 Oct 2018
datastoreで読み込めるサイズが決まっているということはなさそうですが・・。もやもやしますね。。
私の場合は、数値であるべき列に途中で文字列が混ざっていたのが原因で途中で読み込みが止まっていた、、と記憶しています。その場合、readtable で読むと数値で読み込むはずの列が、セル配列になってたりするのでわかりやすいのですけども。
Plus de réponses (1)
Voir également
Catégories
En savoir plus sur データ ストア dans Help Center et File Exchange
Community Treasure Hunt
Find the treasures in MATLAB Central and discover how the community can help you!
Start Hunting!