[csv] タグが付いた質問

Comma-Separated Valuesの略で、いくつかの項目をカンマで区切ったテキストファイルの事を指します。

162 件の質問
絞り込み
並べ替え
タグ付けされた
0
1 回答
3,930 閲覧数

jupyterにおいてcsvがuploadできない

jupyterで右上のuploadボタンをクリックし、アップロードしたいcsvファイルを選択しても何も反応がありません。解決策はないでしょうか? 現在は、csvファイルをMoveボタンで目的のフォルダに直接置くことで対応しています。 ただし、元のファイル自体が移動してしまい不便な状態です。
ジョー's user avatar
0
1 回答
1,770 閲覧数

GCPを使って、サイズの大きなCSVファイルをリクエスト受信する方法は?

現在、GAE(standard開発環境)にてサイズの大きなCSVファイルを受信して、解析するウェブアプリケーションの作成を試みております。 公式GCPでは、リクエストのサイズ上限が32MBであることが明記されており、32.8MB以上のCSVファイルがリクエストできないことは実証済であります。 リクエストがGCPの外から送られる場合、ファイル制限をGAE側ではできないため、 ...
Delta's user avatar
  • 7
0
1 回答
4,582 閲覧数

jqを使いJSONの入れ子配列から値を取得する

下記のJSONをjqでCSVに変換しています。 { "items":[ { "id":"1", "name":"masao", "images":["001.jpg","002.jpg"] }, { "id":"2", ...
くにあつ's user avatar
0
1 回答
3,942 閲覧数

Rでcsvデータを読み込もうとすると、エラーが発生します。どう解決したらよいでしょうか。

data<-read.csv("try.csv",header=T) make.names(col.names, unique = TRUE) でエラー: 'サno' に不正なマルチバイト文字があります と表示されます。文字のエンコーディングのために、 data<-read.csv("try.csv",header=T,fileEncoding="utf-8") ...
lightdown's user avatar
0
1 回答
2万 閲覧数

CSVを読み込もうとすると「不正な入力がありました」というエラーが出る

read.csv("ファイル名", header=T, fileEncoding="utf-8") で読み取りをしようとしたところ、 [1] X. <0 行> (または長さ 0 の row.names) 警告メッセージ: 1: read.table(file = file, header = header, sep = sep, quote = quote, で: ...
user22488's user avatar
0
1 回答
7万 閲覧数

CSVを読み込もうとすると「不正なマルチバイト文字があります」というエラーが出る

ExcelでCSV形式(UTF-8)で簡単なデータを作成(1行目が英字、以降数字)し、Rで read.csv("ファイル名",header=T) で読み込もうとすると make.names(col.names, unique = TRUE) でエラー: '<ef>サ<bf>area' に不正なマルチバイト文字があります > というエラーが出ます。 ...
user22488's user avatar
0
1 回答
359 閲覧数

goでcsv書き込みの際にfloatで書き込みしたい

go言語を用いてcsvの書き込みを試みようとしているのですが, 事情によりstringではなくfloatでの書き込みを求めています. csvパッケージにwhite関数があるのですが引数がstringのスライスでなければならず,書き込んだcsvの中身もstringになります. 何かよい方法はないでしょうか?
applepine1125's user avatar
0
1 回答
241 閲覧数

Rubyで undefined method `table' for CSV:Class (NoMethodError) というエラーが発生する

以下のコードを実行した時, game.rb:3: undefined method `table' for CSV:Class (NoMethodError) というようなエラーが出ます. どうすればエラーの対処することができるでしょうか. rubyファイル(game.rb) require 'csv' csv = CSV.table('data.csv') time = csv[:...
ando-rei's user avatar
  • 111
0
1 回答
175 閲覧数

ラズパイに格納したCSVデータを1秒ごとに1行ずつ抜き出し、MQTTを利用してIoTプラットフォームへ送信(転送)したい

表題の通り、1秒ごとの数値が1列ずつに格納されているCSVデータを読み取り、 1秒おきにIoTプラットフォームへ全くそのまま送信したいと考えております。 現在のコードは以下です。 ### CSV_to_.py import pandas as pd import csv import datetime import subprocess import sys from pathlib ...
user59069's user avatar
0
1 回答
93 閲覧数

IoTデバイスにCSVデータを格納後、別ファイルに変換したい

IoTデバイスへ以下のようなCSVデータを格納し、 'datetime', 'people', 'week', 'temperature', 'weather', 'precipitation', 'snowfall', 'snowcover', 'wind', 'humidity', 'holiday', 'vacation', 'event', 'eventtime', 'holidays', ...
user59069's user avatar
0
1 回答
976 閲覧数

tkinterモジュールでテキストボックスに値を入力したものを取得して、外部ファイルに1セルに文字列を格納したい

今回やりたいことは、GUI画面からテキストボックスに値を入力したのを、外部ファイル(CSVに書き込むためのファイル)に格納したい。 二つのファイルがあり、一つはGUIファイル(sample_tkinter.py),もう一つが実行ファイル(merge.py)になります。 GUIの機能は、 1テキストボックス 2テキストボックスの値を取得するボタン 3閉じるボタン ・...
GINNNIGG's user avatar
0
1 回答
610 閲覧数

PythonでCSVファイルをYAMLに変換したいが、上手く出力されない

PythonでCSVをYAMLに変換したいのですが、想定した通りに出力されません。 CSVファイル version,3 services, db, container_name,atcoder-stream-db image,postgres:12.1 expose,"- ""5432""" web-backend, ...
Hironobu Saito's user avatar
0
0 回答
111 閲覧数

複数の辞書に対してループで特定の処理を実行したい

不特定数の辞書をcsvに記載したいのですが、私の知識では方法をみつけることが出来ませんでした。 もし、何か方法ございましたらご教示頂けないでしょうか。 [試したコード] 以下コードは辞書が2つあった場合にやりたいことを実現出来たコードとなります。 ただ、実際は辞書(d1,d2...)はユーザー入力のため、不特定で対応できるコートが必要となります。 import csv labels = ['...
modori's user avatar
  • 45
0
1 回答
426 閲覧数

csvファイルを任意の列で2つの配列に分割する方法について

初心者のため、C#に詳しくなくご相談します。 いま、CSVファイルがあり、3列目までが説明変数、 4列目が目的変数として、4組のデーターを解析したいと思っています。 ・「inputfile.csv」  0.00625, 0.03448276, 0.0483871, 0.04  0.21875, 0.2068966, 0.2580645, 0.24  0.46875, 0.4137931, 0....
shiro's user avatar
  • 23
0
0 回答
257 閲覧数

Pandasのdataframeでcsvファイルの値を扱う際の"..."による省略が行われてしまう

以下の写真のように、csvファイルのある値(1枚目)を用いて、関数内で処理を行う際に、長すぎるためか2枚目の写真のように途中から"..."で省略が行われ、それがそのまま値として扱われてしまいます。 3枚目にエラーの内容も載せます。これを解決する方法はあるのでしょうか。 表示に関しては調べたら出てきましたが、自分が悩む問題に関しては関係なさそうでした。 宜しくお願いします。
Mtsn's user avatar
  • 3
0
1 回答
424 閲覧数

VB で CSV ファイルの内容を一つの文字列として登録したい

vbでcsvファイルをdbに登録する際に、一つの文字(~、~、~))として登録したい。 string.joinを使うということは分かったが、csvの場合どうすればいいか分からない 該当コード Dim strAry As String() = csv //ここが間違っている? Dim s1 As String = String.Join(",", strAry) ...
user48506's user avatar
0
1 回答
283 閲覧数

VScodeで作ったCSVファイルをnumbersで開くと白紙の状態になる。

前提・実現したいこと VScodeで作ったCSVファイルをnumbersで開くと白紙の状態になるので解決したい。 VScodeで作ったCSVファイルを作成する所まではできたのですが、作ったファイルをデスクトップに移動させ、numbersで開くと白紙の状態となってしまいます。 ※PyCharmにて作成し、デスクトップに移動さした後numbersで開いた画像⬇︎ ※VScodeにて作成し、...
wizerd's user avatar
  • 33
0
0 回答
369 閲覧数

QListWidgetに表示されている文字の情報を取得してJSONファイルを作成したい

Python初学者です。 CSVファイルから情報を取得して、QListWidgetに表示させました。 そのQListWidgetから情報を取得して、Jsonファイルを作成するコードを書きました。 しかし、ファイルは作成したのですが、最後の1行しか入ってません。 QListWidgetを使うことが間違っているのでしょうか? 環境: Windows 10 Python3 PySide2 ...
Hironobu Saito's user avatar
0
0 回答
1,102 閲覧数

SQLServerで複数のCSVファイルからテーブルを作成しインポートしたい

SQLServerのインポートウィザードにてCSVファイルからテーブルを作成することができます。 ただし、これは1ファイルずつの処理になるため複数ファイルある場合は非常に手間がかかります。 これを、1回の手順で複数のファイルに対して実行することはできないでしょうか? CSVファイルのファイル名をテーブル名に、ヘッダをカラム名にしたいです。 以前、...
semanggi's user avatar
0
0 回答
246 閲覧数

RでCSVファイルの読み込み時にエラー: 入力コネクション 'Data/Ramen.csv' に不正な入力がありました

Rを最近学び始めた者です。 CSVファイルをRで読み込もうとしたら以下のようなエラーが出てしまいます。 解決策をご教授お願い致します。 コード: df <- read.csv("Data/Ramen.csv", header=T, fileEncoding="Shift-JIS") エラーメッセージ: 1: read.table(file = ...
Oka Yusaku's user avatar
0
2 回答
422 閲覧数

RStudio で CSV の dateimport が出来ない

csvを指定してdateimorortしようとすると以下のダイアログが表示されます。 ここでyesを選択するとconsoleの部分に以下のメッセージが表示されます。 file(con, "r") でエラー: unable to translate 'C:/Users/髣夜宦・キ譎画、ェ陝カ<8c>/OneDrive/郢・87>郢ァ・ケ郢ァ・ッ郢晏現繝」郢・...
ABAC's user avatar
  • 1
0
0 回答
426 閲覧数

RでCSVファイルを read.table で読み込む時にエラー: 入力コネクション 'Shugyoritu.csv' に不正な入力がありました

以下の通り実行すると、エラーが表示されてしまいます。 > shugyoritu <- read.csv("Shugyoritu.csv", header=T, fileEncoding="utf-8") read.table(file = file, header = header, sep = sep, quote = quote, ...
user2021's user avatar
0
1 回答
188 閲覧数

csvをheaderとして結合したい

同じ列数を持つcsvを片方をheaderに設定するように結合したい やってみたこと header.csv Columns: [a,b,c] Index: [] axis.csv Columns: [1,2,3]      [4,5,6] df=pd.read_csv('header.csv') df1=pd.read_csv('axis.csv') df2=pd.concat([df1, ...
まさる's user avatar
0
0 回答
754 閲覧数

2つファイルのCSVデータ比較について【重複・行の追加・空白】

やりたいこと 2つのcsvファイルを比較して、両ファイル内の差分を抽出し、別のファイルにデータを書き込みたいです。 下記のコードのように条件を指定して差分を抽出したいですが途中で行の追加と空白・Noの重複がありますので、 希望通りの出力結果にならないです。 csvデータ① (カンマ区切り) No,テスト1,テスト日,New/Existing,テスト名,テスト数,テスト担当,テスト訪問日,テスト名,...
幸589's user avatar
  • 445
0
1 回答
178 閲覧数

Pythonで特定の列を抽出しメールで送信する

csvの日付と内容の列だけを抽出し、昨日の日付だけが含んだ列だけを抽出しメールを送信したいです。 下記のコードで記載しましたが、エラーが発生します。 ilocではdataframeがemptyだとエラーになるからだと思います。 ① csvの 特定の列 だけを抽出した pandasのDataFrame を作成する ② 昨日の列だけを抽出する ③ 作成したDataFrameの 1行目と2行目(...
幸589's user avatar
  • 445
0
1 回答
828 閲覧数

スプレッドシートにcsvを読み込む

ローカルにダウンロードしてあるcsvファイルをスプレッドシートに読み込またいです。 デバッグをしても特にエラーは表示されないのですが、dialog.htmlからcsvを指定しても何も反応がありません。 お気づきの点ありましたら指摘いただけると助かります。 ご存知の方おりましたらどうぞ宜しくお願いいたします。 サーバー側のコード.gs function showDialog(){ var ...
yukidaruma's user avatar
0
1 回答
701 閲覧数

c#配列を利用してCSVファイルの操作

開発環境 visual studio2017 言語 C# 流れ ◯①csvファイルを読み込む(カラム数10件、データ数10件) ×②読み込んだファイルのデータを使い異なるレイアウトのcsvファイルを作成する(カラム数7件、データ数5件)=残り2点は読み込み時に存在しない列なので空(””)にする 読み込みサンプル カラム1,カラム2,カラム3,カラム4,カラム5,カラム6,カラム7,カラム8,...
亀レオン's user avatar
0
2 回答
385 閲覧数

CSV形式でデータフレームを読み込み、特定のカラムを抽出して新しいデータフレームを作成したい

各社のCSVデータをfor文で読み込み、必要なカラムだけ抽出して新たなデータフレームを作成したいと考えております。 ファイル読込み後、添付画像のようにA,Bの売上を抽出して、新たなデータフレームを作成するにはどのようにすればよろしいでしょうか。(稀に売上データに欠損値がある場合もございます。) ご教示のほどよろしくお願い申し上げます。 # ファイル指定 outfolder = '...r/' #...
Nobutaro's user avatar
0
1 回答
349 閲覧数

得られたデータ(deque)を書式に合わせてcsvに出力したいです.

現在,筋電センサを用いて動作推定するプログラムを作っているのですが,個人学習する際に得られるデータをトーレーニングデータの書式(csv)と同じようにcsvに出力したいと考えています.使用している筋電センサは8電極あり,8行1列の行列値でデータが取得できます. 例 deque([160067619223897, [-12, 13, 2, 4, 1, 4, 0, 0])のような形式で表示されます. ...
tazawa's user avatar
  • 1
0
0 回答
248 閲覧数

カラムやバリデーションに引っかかったcsvファイルのエラーがエラー画面に出てしまいます

現在、csvファイルを作成しており、画像のようにファイルを選択してボタンを押すとcsvファイルがインポートできる機能を実装しております。 無事にインポートできたのですが、1度取り込んだcsvファイルを再びインポートすると、画像のようなエラーが出てしまいます。 3時間以上詰まってしまったので、解決策を教えていただけると幸いです。 ○実現したいこと→エラーを解消したい ○現状→...
R66's user avatar
  • 13
0
1 回答
256 閲覧数

foreach文で取得した変数を、さらに一つの配列にまとめたい

以下のような、質問と回答が3セットで一行を成す、10行分のCSVファイルがあります。 質問1||回答1||質問2||回答2||質問3||回答3 このCSVファイルの回答をPHP(Laravel)で集計するために、以下のような操作を行おうと試みています。 ①このCSVファイルを1行ずつインポートし、それぞれの行のn列目の値をforeach文で取得 ②取得した、1行目〜...
m.takehana's user avatar
0
1 回答
751 閲覧数

Rを使ってデータセットをクロス集計し、結果をCSVで出力したい。

「被験者」「ポイント」「要素」の3つのカラムで出来たデータセットがあります。 下画像のようなイメージです。 「被験者」は A,B,C,D,E,F,G,H のいずれか 「ポイント」は 1~23 の整数 「要素」は 1~10 の整数 が入っています。 このデータをRを使って、 被験者別(A,B,...,H)に、「1~23」の各ポイントでの要素の割合をクロス集計で出したいです。 ...
user41006's user avatar
0
1 回答
422 閲覧数

AmazonAuroraMySQLの「SELECT * INTO OUTFILE S3」での出力ファイルでNULL値と数値の上手い処理の仕方について

環境 AuroraMySQL 5.6.10a (provisioned) ap-northeast-1 以下のテーブルがあったとします。 create table Person ( id varchar(2) NOT NULL, name varchar(10) NOT NULL, age int ) engine=InnoDB ...
takizawanoK's user avatar
0
0 回答
334 閲覧数

pykakasiでローマ字変換したリストをCSVファイルにするには?

pykakasiで日本語をローマ字に変換した場合、再度CSVファイルで取り出すにはどうしたらよいでしょうか?ご助言頂けますと幸いです。 エラー ValueError: DataFrame constructor not properly called! コード G=nx.Graph() df=pd.read_csv("at1.csv",header=None) df ...
maruchanz's user avatar
0
2 回答
397 閲覧数

python で csvファイルのデータを処理したい。

以下のようなcsvファイルを読み取ってデータをまとめる作業を行おうと考えています。 ダウンロードした時刻:2019/11/11 16:04:33 寺泊 寺泊 年 月 日 時 風速(m/s) 風向 2016 12 23 5 9.6 南南東 2016 12 23 6 9.8 南東 ...
toshiyuki's user avatar
0
1 回答
350 閲覧数

pythonでcsvファイルの数値処理

以下のようなcsvファイルを読み取ってデータをまとめる作業を行おうと考えています。 ダウンロードした時刻:2019/11/11 16:04:33 寺泊 寺泊 年 月 日 時 風速(m/s) 風向 2016 12 23 5 9.6 西 2016 12 23 6 9.8 西 2016 ...
user37081's user avatar
0
1 回答
2,901 閲覧数

django / csvでのデータ書き出しの文字化け&列ずれ対策

django, Python共に初心者です。 現在djangoで作ったWebサイト内で表示したタスクリストの書き出しをCSVで対応したいと考えております。 CSVでの書き出しはいけるのですが、これをExcelで開くとutf-8のため、文字化けしてしまいます。 下記のどこかに(推測では [writer = csv.writer(response)]...
redbean's user avatar
0
0 回答
318 閲覧数

pythonのmatplotlib

一番下に載せたカンマ区切りのcsvファイルを、contourで等高線にしたいです。 空白欄のNANの部分を0に置き換えた上で下記のコードで実行すると、等高線は出てくるのですが、0という値は考えないので本当は出てきてほしくないです。 ・NANの空欄ところの処理はどうすれば良いのでしょうか? ・y軸の値は0.01〜1.00なのに、実行すると0~100になってしまうのはなぜでしょうか? ・...
iyyhs's user avatar
  • 1
0
1 回答
587 閲覧数

Python スクレイピング 同じ項目は同じ列に記載、異なる項目は新しく列を追加して記載する方法

当方初心者であり、申し訳ないのですが皆様のお知恵を拝借したいです。 いろいろ検索したのですが、良い方法(どこから手をつけるべきか)がわからず、 困っております。アドバイスいただけますと幸いです。 ページをスクレイピングして、CSVに下記のようなデータを書き出すプログラムを作りました。 a,b,d,x,テスト 3354,test,あいうえ,いろはに,12345 この時、...
montjeu's user avatar
  • 63
0
0 回答
1,215 閲覧数

csvファイルをvue.jsを用いてブラウザに出力させたい

現在、db形式で記録されている音ゲーのスコアをhtmlに出力させてwebで閲覧するタイプのスコアサイトを作ろうと思っています。 保存されているdb形式のファイルにはタイトルの代わりに曲名と連動したハッシュが記録されているのでスクレイピングをして得られたデータをPythonのスクリプトを用いてCSV形式に変換することができたのですが、...
k0gane's user avatar
  • 13
0
1 回答
695 閲覧数

スクレイピングで取得した複数列のテーブルデータをCSVに書き出す時に1列にする方法

初心者のためわかりにくい部分もあるかと思いますが、教えてください。 スクレイピングで取得したテーブルデータをCSVで書き出し、 マイクロソフトのエクセルで開いた場合、 項目1 値1 項目4 値4 項目2 値2 項目5 値5 項目3 値3 項目6 値6 元のテーブルの形式上、このように表示されます。 これを、 項目1 項目2 項目3 項目4  値1 値2 値3 値4 .... ...
montjeu's user avatar
  • 63
0
3 回答
1,255 閲覧数

エクセルで作成したcsvファイルをphpファイルでサーバーのmysqlへインポートすると文字化けする

いつもお世話になっております。 ネット上のサイトにて拝見致しました以下のphpファイルの記述を元に、ローカル上で作成したエクセルのcsvファイルをサーバーのmysqlへインポートするとエクセル上でタイプした時点では日本語は当然のことながら問題なく表示されておりますし、データ自体もインポートされますが、mysql上で日本語が文字化けしてしまいます。 ...
baseballjapan's user avatar
0
1 回答
73 閲覧数

リストの取り出す値の条件を別のリストにする方法

A = [1,1,1,.....-1,-1,1] B = apple, banana 0 333, 356 1 364, 675 2 643, 346   . ..., ... 344 325, 356 Bはcsvをdataframe型で読み込んでいます. ...
kkk's user avatar
  • 1
0
1 回答
2,637 閲覧数

python spark DataFrameをcsv出力する際に指定したファイル名でS3に保存

現在とあるpythonのスクリプトを開発しているのですが,そのスクリプトの処理の中で sparkのDataFrameの中身をCSVとしてS3に出力しており 出力する際にスクリプト内でファイル名を指定して出力したいのですがなかなかいい方法が見つかりません。。。どんな些細なことでもよいのでご教示いただけますでしょうか。 #SparkのDataFreameの型に変更 sdf2 = spark....
金子理人's user avatar
0
0 回答
2,077 閲覧数

jqコマンドでJSONの入れ子配列からcsv出力して値を取得する方法

やりたい事: jqコマンドで欲しいデータだけcsv出力したい { "jsonrpc": "2.0", "result": [ { "hostid": "00001", "host": "testserver", "groups": [ { "groupid": "1", "name"...
user31807's user avatar
0
1 回答
192 閲覧数

list型のplotについて

pythonを用いてcsvファイルをlist型として読み込み、pylabでplotしようと思ったら下のような結果となってしまいました(1枚目元のデータ、2枚目plot結果) プログラムは下の様に記述しました from matplotlib import pylab as pl import csv if __name__ == "__main__": data = [] with ...
Rect's user avatar
  • 5
0
1 回答
166 閲覧数

PhantomJSで収集したデータのcsvへの格納

以前質問をさせて頂いたPhantomJSをGoogle Colab上で用いて、データスクレイピングの練習をしています。 が、データをcsvファイル内にうまく格納できず下の様なエラーが出てしまいます...。 どの様に対応すれば良いでしょうか...? コード !pip install selenium # PhantomJS をダウンロード !wget https://bitbucket....
lightning070's user avatar
0
1 回答
4,625 閲覧数

pythonで2つのcsvファイルを比較し重複している値を抽出する

2つのcsvファイルを比較して、両ファイル内に重複している内容で抽出する方法を考えており 適切なコードがわからず、御教授願います。 (py勉強中のため、web・本等のプログラム内容を無理やりな方法で作成しております。不備はご容赦下さい) データーの読み込み・データーフレーム迄の形はできたのですが これより先の、データフレームを使用してデータの抽出プログラム方法がわからず御教授お願い致します。 (...
python勉強中です's user avatar
0
1 回答
381 閲覧数

csvの指定カラムのカンマを正規表現で指定し取り除きたい

EmEditor の CSV モードで読み込んだCSVに対して、CSVの指定カラムのカンマを正規表現で指定し取り除く処理をしたいのですが正規表現を学んだこともなくどうしたらよいかわかりません。 なにか解決法を提示して頂きたいです。
kuri's user avatar
  • 1
0
0 回答
2,004 閲覧数

PHPでサロゲートペア文字を含む文字列をPDF出力・CSV出力したい

CakePHP3でPDF出力とCSV出力がある機能を開発しており、 それぞれライブラリを使って実装しています。 (PDF出力はTCPDF+FPDIでフォントはIPAmj明朝、CSV出力はCsvViewでSJIS出力) また、DBはMySQLで文字コードをutf8mb4にしてます。 通常の文字はもちろん、文字化けしそうな「髙」なども問題なく出力されるのですが、 「𠮷」(サロゲートペア文字)...
zero's user avatar
  • 11