[csv] タグが付いた質問
161
質問
0
票
1
回答
102
閲覧数
ラズパイに格納したCSVデータを1秒ごとに1行ずつ抜き出し、MQTTを利用してIoTプラットフォームへ送信(転送)したい
表題の通り、1秒ごとの数値が1列ずつに格納されているCSVデータを読み取り、
1秒おきにIoTプラットフォームへ全くそのまま送信したいと考えております。
現在のコードは以下です。
### CSV_to_.py
import pandas as pd
import csv
import datetime
import subprocess
import sys
from pathlib ...
0
票
1
回答
86
閲覧数
IoTデバイスにCSVデータを格納後、別ファイルに変換したい
IoTデバイスへ以下のようなCSVデータを格納し、
'datetime', 'people', 'week', 'temperature', 'weather', 'precipitation', 'snowfall', 'snowcover', 'wind', 'humidity', 'holiday', 'vacation', 'event', 'eventtime', 'holidays', ...
-2
票
2
回答
124
閲覧数
CSVファイルを、含まれているデータを利用したaタグ入りのCSVファイルへ変換したい
下記のようなCSVファイルを、aタグ入りのCSVファイルへ変換したいのですが、どういう方法がありますか?
PHPやJavaScriptやテキスト処理などでできますか?
元データcsv
日時1,説明1,URL1,文字列1,,,
日時2,説明2,URL2,文字列2,,,
↓
作成したいデータcsv
日時1,<a href="URL1">説明1</a>,...
0
票
2
回答
295
閲覧数
csvファイルをPythonで特定の列だけを抽出して、さらに抽出した列の中で特定の列だけセル結合したい
1枚目の写真のcsvファイルであれば「メールアドレス」「姓」「名」「住所」だけを抽出して、さらに2枚目の写真のように「姓」と「名」の列のセルを結合して表示させたいと思っています。
写真では2行ですがもっと増えていくので、行が増えればcsvファイルで自動で特定の列を抽出して、特定のセルも結合して表示させる方法を教えていただきたいです。
0
票
2
回答
178
閲覧数
Pythonでcsvファイル内の特定の列だけ結合がしたい
初心者で質問の仕方が悪いかもしれませんがよろしくお願いいたします。
csvファイルをPythonで特定の列だけ結合したいです。1枚目のスクショのように「姓」と「名」のセルが分かれていますが、2枚目のように「姓名」のように結合させてその下のセルも自動で結合する方法を教えていただきたいです。
スクショは2行しかないですが、何十行、...
0
票
0
回答
26
閲覧数
Swift 条件によるボタン内の文字の変更方法
Swiftで, 予めcsvファイルをSwiftで読み込みができるようにしている状態でMainbordにボタンを設置し, csvファイルに保存しているURL情報を, 設置したボタンにURLとして出力したいと考えています.
現状としては, ボタンのコード内にURLを書き込んでいれば画面遷移は可能ですが, csvファイルからの出力はできていません.
私が行いたいことは, ...
0
票
2
回答
310
閲覧数
AWS CloudWatch Logs のログの成形ができない
実行環境
OS: Windows 10
言語: Python 3.x
ライブラリ: 標準ライブラリのみ (pandas, numpy等は使えない)
作成しているプログラムについて
AWS CloudWatch Logsのログをcsvで取得したものを成形するプログラムを作成しています。
CloudWatchでcsvデータを取得しますと、下記のcsvデータを取得します。
CloudWatch ...
0
票
2
回答
137
閲覧数
python リストの取り扱いと、CSV出力について
リストの取り扱いと、CSV出力について、どうも理解が出来ず困っております。
スクレイピング結果をCSVに書き出す学習をしておりますが、sample_02.pyのコードで、リストをCSVに書き出すことができません。
どの様にすれば、CSVに書き出すことができるかお教えください。
writer.writerow([elem.text, elem.get("href")])の部分で、...
1
票
1
回答
269
閲覧数
Python CSV出力が上手くいきません。
見よう見まねでトライしてみたスクレイピングをcsv出力しようとしました。
しかし添付の画像のような出力にしかなりません。
エラーは特にでていませんが、どこをどう修正すれば良いかご教授いただけたら幸いです。
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from ...
0
票
1
回答
566
閲覧数
tkinterの×ボタン(ウインドウを閉じるボタン)と自ら作成した閉じるボタンの動きがわからない
目的として、GUI画からテキストボックスに入力されて値を取得して、CSVファイルに書き込みすることです。画面のソースファイル(sample_tkinter.py)とCSVに書き込むためのソースファイル(merge.py)で構成しています。
現状word1に値を代入するところまでできていますが、
画面の右上にある×ボタン(ウインドウを閉じるボタン)を押すと、...
0
票
1
回答
694
閲覧数
tkinterモジュールでテキストボックスに値を入力したものを取得して、外部ファイルに1セルに文字列を格納したい
今回やりたいことは、GUI画面からテキストボックスに値を入力したのを、外部ファイル(CSVに書き込むためのファイル)に格納したい。
二つのファイルがあり、一つはGUIファイル(sample_tkinter.py),もう一つが実行ファイル(merge.py)になります。
GUIの機能は、
1テキストボックス
2テキストボックスの値を取得するボタン
3閉じるボタン
・...
0
票
3
回答
677
閲覧数
Python でログを CSV ファイルとして出力したい
以下ログをcsvに転記する方法を探しています。
各リストの空白スペースを1に統一するところまでは出来たのですが、
csvに転記するところで躓いております。
何か良案がありましたらご教示頂けると助かります。
data_list=
['12:00:01 AM kbmemfree kbmemused %memused kbbuffers kbcached kbcommit %commit ...
0
票
1
回答
598
閲覧数
pandasにてcsvを読み込んだときにカンマで区切られない
pandasにてcsvを読み込んだ時にカンマで区切ることができません。
図のように、columnが1と表示されてしまいます。
delimiterも試してみましたが、変化がありません。
何か足りない部分があるのでしょうか?
以下、追記--------------------
3行目と4行目を記載します。
行全体がダブルクォートで囲まれている様には見えないのですが。。
DATA No ...
0
票
1
回答
454
閲覧数
PythonでCSVファイルをYAMLに変換したいが、上手く出力されない
PythonでCSVをYAMLに変換したいのですが、想定した通りに出力されません。
CSVファイル
version,3
services,
db,
container_name,atcoder-stream-db
image,postgres:12.1
expose,"- ""5432"""
web-backend,
...
0
票
0
回答
98
閲覧数
複数の辞書に対してループで特定の処理を実行したい
不特定数の辞書をcsvに記載したいのですが、私の知識では方法をみつけることが出来ませんでした。
もし、何か方法ございましたらご教示頂けないでしょうか。
[試したコード]
以下コードは辞書が2つあった場合にやりたいことを実現出来たコードとなります。
ただ、実際は辞書(d1,d2...)はユーザー入力のため、不特定で対応できるコートが必要となります。
import csv
labels = ['...
0
票
2
回答
2,623
閲覧数
Pythonでテキストファイルの内容をリスト化してCSVで出力する
Pythonでテキストにある内容をリスト化してCSVに出力したいのですが、やり方が分からなくて困っています。
調べたものでコードを作ってみたのですが、想像している動きではないので皆様のお力が欲しいです。
対象のテキストファイル
名前:A
クラス:B
学年:C
成績:D
名前:AA
クラス:BB
学年:CC
成績:DD
以上の : 以降の内容を、Pythonで次のようにリスト化し
[A,B,C,...
0
票
2
回答
3,061
閲覧数
CSV から条件を満たした数値だけを抽出したい
このようなcsvファイルに対して、9列目=1.00 のときは3列目を出力し、9列目=0.00 のときは0またはスキップという処理を行いたいです。
excelで行うと =IF(J2=1,D2,"") という処理になります。
for文の中でif文を使う部分で躓いております。
import csv
with open('/Users/abc/Desktop/sample.csv',...
0
票
2
回答
1,266
閲覧数
csvで文字列が日付になる問題
Pythonでcsv出力処理を行なっているのですが
「1ー1」で出力すると日付になってしまいます
例えば、エクセルで「1ー1」を手入力すると1月1日になると思います。そうではなく「1ー1」のまま出力されたいです。
頭に‘をつけると文字列として認識してくれるのですが、プログラムで「’」+文字列でやるとただの文字列連結になって、「‘1ー1」になってしまいます。日付問題は解消されますが、頭に‘...
0
票
1
回答
334
閲覧数
csvファイルを任意の列で2つの配列に分割する方法について
初心者のため、C#に詳しくなくご相談します。
いま、CSVファイルがあり、3列目までが説明変数、
4列目が目的変数として、4組のデーターを解析したいと思っています。
・「inputfile.csv」
0.00625, 0.03448276, 0.0483871, 0.04
0.21875, 0.2068966, 0.2580645, 0.24
0.46875, 0.4137931, 0....
0
票
0
回答
209
閲覧数
Pandasのdataframeでcsvファイルの値を扱う際の"..."による省略が行われてしまう
以下の写真のように、csvファイルのある値(1枚目)を用いて、関数内で処理を行う際に、長すぎるためか2枚目の写真のように途中から"..."で省略が行われ、それがそのまま値として扱われてしまいます。
3枚目にエラーの内容も載せます。これを解決する方法はあるのでしょうか。
表示に関しては調べたら出てきましたが、自分が悩む問題に関しては関係なさそうでした。
宜しくお願いします。
3
票
4
回答
1,486
閲覧数
CSVファイルから特定の行を削除したい
CSVファイルの情報を書き換えたいです。
車の情報が並べてあるcsvファイルがあり、ユーザーが買いたい車の番号(x)を選ぶとcsvファイルから購入された車の行が削除されるようにしたいです。csvファイルの中身は以下にペーストしました。一番左にあるのがユーザーが選ぶ番号です。30と31に価格が記入されていませんが、今回のケースでは一番左のインデックス番号しかみないはずなので関係ないかと思います。
...
3
票
2
回答
1,354
閲覧数
複数のcsvファイル名の一部を変数化したうえで、それぞれを一括で読み込み格納したい
ご覧いただきありがとうございます。
表題の通りですが、例えば「首都圏」というフォルダ内に、
tokyo.csv
saitama.csv
kanagawa.csv
chiba.csv
があったときに、ある関数function()を用いると、
tokyo = pd.read_csv("./首都圏/tokyo.csv")
が他のcsvファイル(saitama.csv等)...
0
票
1
回答
353
閲覧数
VB で CSV ファイルの内容を一つの文字列として登録したい
vbでcsvファイルをdbに登録する際に、一つの文字(~、~、~))として登録したい。
string.joinを使うということは分かったが、csvの場合どうすればいいか分からない
該当コード
Dim strAry As String() = csv //ここが間違っている?
Dim s1 As String = String.Join(",", strAry)
...
1
票
3
回答
195
閲覧数
numpyでcsvファイルを読み込み、(csvファイルのデータが入った)タプルを用いた辞書を作成したい
【はじめに】
pythonでタプルを用いた辞書の作成を試みているのですが、エラーが起こり、作成できません。
恐れ入りますが、エラーの改善方法をご教授下さりますと幸いに存じます。
何卒よろしくお願い申し上げます。
【実現したいこと】
現在、グラフ理論を勉強しており、その過程で以下のような辞書を作成しております。
dicts = {(i_1,j_1):length_1, (i_2,j_2):...
0
票
1
回答
1,454
閲覧数
pythonとcsvファイルを使って3次元グラフを作りたい
pythonとcsvファイルを用いて3次元グラフを作りたいです。
画像のようなCSVファイルを用いて三次元グラフを作ることを目標としています。(エクセルで開いているのでコンマの位置でセル分けされています。)
pos=768,列はAMKまで存在しています。
この画像中の9行目がx軸、A列がy軸に該当し、中のデータがz軸で表現される量に該当します。
...
0
票
1
回答
247
閲覧数
VScodeで作ったCSVファイルをnumbersで開くと白紙の状態になる。
前提・実現したいこと
VScodeで作ったCSVファイルをnumbersで開くと白紙の状態になるので解決したい。
VScodeで作ったCSVファイルを作成する所まではできたのですが、作ったファイルをデスクトップに移動させ、numbersで開くと白紙の状態となってしまいます。
※PyCharmにて作成し、デスクトップに移動さした後numbersで開いた画像⬇︎
※VScodeにて作成し、...
1
票
1
回答
249
閲覧数
画面遷移を伴うスクレイピングで取得したデータをCSVファイルに出力したい
環境
ruby 2.7.2
rails 6.1
macOS
前提
ポートフォリオ作成のため、現在自作アプリを実装しております。
その中で、DBに必要なデータを保存するため、Rubyのnokogiriでスクレイピングを行なっています。
以前、スクレイピングについて質問させていただき、取得したデータをDBに保存することができたのですが、スクレイピング先のサイトの変更があったため、...
1
票
3
回答
1,758
閲覧数
一つのカラムの中にリストでデータが入っている場合、リストの各要素を分割して新たに列を増やし、各要素をダミー変数化方法はありますか?
データ分析初心者です。
初めて簡単なコンペのようなものに挑戦しています。
何からやればよいのかわからず手探りでググって一つ一つ進めてきたのですが、これについてはどのようにググれば答えが見つかるのかもわからずの状態です。
そのため、タイトルもなかなかうまく言語化できておらず、わかりにくくなってしまっていると思います。すみません。
コンペの内容としては民泊サービスの価格予測です。...
-1
票
2
回答
2,904
閲覧数
”CSVはUTF-8エンコードされていません”対処方法
環境は Windows10, Jupyter Lab です。
私はあるコードを実行して、Jupyter Labのデスクトップに出力された
CSVファイルをクリックすると、以下のエラーが出ました。
添付
で、CSVファイルを右クリックし”ダウンロード”をクリックすると
エクセルファイルで表示され、開きます。
又、エクスプローラーで見るCSVは、クリックすると開きます。
で、...
0
票
0
回答
306
閲覧数
QListWidgetに表示されている文字の情報を取得してJSONファイルを作成したい
Python初学者です。
CSVファイルから情報を取得して、QListWidgetに表示させました。
そのQListWidgetから情報を取得して、Jsonファイルを作成するコードを書きました。
しかし、ファイルは作成したのですが、最後の1行しか入ってません。
QListWidgetを使うことが間違っているのでしょうか?
環境:
Windows 10
Python3
PySide2
...
0
票
3
回答
5,469
閲覧数
行ごとに列の数が異なる CSV から、特定の値を取り出したい
形が整っていないcsvから特定の値を取り出したい。(行と列を指定して)
以下のようなcsvがあり、pandasを用いてデータを取り出そうとするとエラーが当然出てきます。
実現したいことは、
4行3列の値を取り出す
17行3列の値を取り出す
のような操作をできるようにしたいのです。
対象のCSV:
SetupTitle, 0_NMOS_id-vg_vg-0.5-1_step2m_vd0....
0
票
1
回答
3,980
閲覧数
Rでcsvファイルを読み込みたいがエラーがでる「入力コネクションには不正な入力があります」
大学でRを使ったデータ解析の授業があり、質問させていただきます。初質問なのでいたらない点などありましたら申し訳ございません。Rについては全くの初心者です。
csvファイルを読み込もうとしているのですが、エラーになってしまいます。
入力した式
read.csv("~.csv",fileEncoding="utf-8")
エラー
read.table(file ...
0
票
0
回答
921
閲覧数
SQLServerで複数のCSVファイルからテーブルを作成しインポートしたい
SQLServerのインポートウィザードにてCSVファイルからテーブルを作成することができます。
ただし、これは1ファイルずつの処理になるため複数ファイルある場合は非常に手間がかかります。
これを、1回の手順で複数のファイルに対して実行することはできないでしょうか?
CSVファイルのファイル名をテーブル名に、ヘッダをカラム名にしたいです。
以前、...
-1
票
2
回答
485
閲覧数
Excelの日付フォーマットを変換
CSVファイルのデータを抽出した日付のデータを変換したいです。
下記のようにエクセルのデータには日付+時間になっていますので、上手くいかないです。
format="%Y-%m-%d" 日付の形式を変換するにはどのようにすればよろしいでしょうか。
わかる方いらっしゃいましたらご教示願います。
お手数ですが、宜しくお願いいたします。
CSVのデータ:
A
21-...
1
票
1
回答
87
閲覧数
How to combine string and numeric arrays in Python for csv output [クローズ済み]
I'm writing a program in Python 3.
What we want to do
import numpy as np
# vals a numeric array of size [3,5]
vals = np.array([.
[ 1.0, 2.0, 3.0, 4.0, 5.0],
[ 50.0, 100.0, 150.0, 200.0, 250.0]...
0
票
0
回答
208
閲覧数
RでCSVファイルの読み込み時にエラー: 入力コネクション 'Data/Ramen.csv' に不正な入力がありました
Rを最近学び始めた者です。
CSVファイルをRで読み込もうとしたら以下のようなエラーが出てしまいます。
解決策をご教授お願い致します。
コード:
df <- read.csv("Data/Ramen.csv", header=T, fileEncoding="Shift-JIS")
エラーメッセージ:
1: read.table(file = ...
0
票
2
回答
396
閲覧数
RStudio で CSV の dateimport が出来ない
csvを指定してdateimorortしようとすると以下のダイアログが表示されます。
ここでyesを選択するとconsoleの部分に以下のメッセージが表示されます。
file(con, "r") でエラー: unable to translate 'C:/Users/髣夜宦・キ譎画、ェ陝カ<8c>/OneDrive/郢・87>郢ァ・ケ郢ァ・ッ郢晏現繝」郢・...
0
票
0
回答
379
閲覧数
RでCSVファイルを read.table で読み込む時にエラー: 入力コネクション 'Shugyoritu.csv' に不正な入力がありました
以下の通り実行すると、エラーが表示されてしまいます。
> shugyoritu <- read.csv("Shugyoritu.csv", header=T, fileEncoding="utf-8")
read.table(file = file, header = header, sep = sep, quote = quote, ...
0
票
1
回答
169
閲覧数
csvをheaderとして結合したい
同じ列数を持つcsvを片方をheaderに設定するように結合したい
やってみたこと
header.csv
Columns: [a,b,c] Index: []
axis.csv
Columns: [1,2,3]
[4,5,6]
df=pd.read_csv('header.csv')
df1=pd.read_csv('axis.csv')
df2=pd.concat([df1, ...
0
票
1
回答
598
閲覧数
JavaScriptでUTF-16でCSVファイルをダウンロード対応したい
CSVダウンロードをJavaScriptでやりたいと思っています。
「UTF-16 BOMあり」に対応したいのですが、実際下のコードで対応できたファイルを見ると文字コードがhexedicimelで、中身が000になってしまいどうもできていないようです。
どこが悪いのか知りたいです。
function exportCSV(records) {
let data = records.map((...
0
票
0
回答
661
閲覧数
2つファイルのCSVデータ比較について【重複・行の追加・空白】
やりたいこと
2つのcsvファイルを比較して、両ファイル内の差分を抽出し、別のファイルにデータを書き込みたいです。
下記のコードのように条件を指定して差分を抽出したいですが途中で行の追加と空白・Noの重複がありますので、
希望通りの出力結果にならないです。
csvデータ① (カンマ区切り)
No,テスト1,テスト日,New/Existing,テスト名,テスト数,テスト担当,テスト訪問日,テスト名,...
-1
票
1
回答
529
閲覧数
CSVのデータを比較について【行の追加と空白】
やりたいこと
2つのcsvファイルを比較して、両ファイル内の差分を抽出し、別のファイルにデータを書き込みたいです。
下記のコードのように条件を指定して差分を抽出したいですが途中で行の追加と空白がありますので、
希望通りの出力結果にならないです。
csvデータ① (A,B,Cカンマ区切り)
A,B,C
1,アメリカ,○
,カナダ,×
3,日本,×
,イタリア,〇
5,イギリス,□
,,×
...
1
票
1
回答
7,004
閲覧数
CSVファイルのidentically-labeled エラーの解決方法は?
やりたいこと
2つのcsvファイルを比較して、両ファイル内の差分を抽出し別のファイルにデータを書き込みたいですが、
下記のエラーが発生します。indexエラーだと思われます。
csvデータ① (A,B,Cカンマ区切り)
A B C
1 アメリカ ○
2 カナダ ×
3 日本 △
4 イタリア ○
5 イギリス □
6 メキシコ 空白
7 空白 空白
8 空白 ...
0
票
2
回答
1,525
閲覧数
CSVデータの日付形式を変換したい
CSVファイルのデータを抽出した日付のデータを変換したいです。
ただ下記のコードで試してみましたが、何も変化がないです。
日付の形式を変換するにはどのようにすればよろしいでしょうか。
CSVのデータ
A B C
アメリカ 1234 2020/01/02
カナダ 1234 2020/02/03
CSVのデータ→形式を変換後
A B ...
0
票
2
回答
287
閲覧数
CSVファイルのデータからJSON 形式のフォーマットでSFへインポート
やりたいこと:
csvファイルのデータを抽出したデータを1カラム・1行ずつでループさせてSFにインポートしたいです。
下記のコードで試してみましたがエラーが表示されます。
Json形式でデータをインポートしますので、抽出したデータを1カラム・1行ずつでループさせてSFにインポートする方法ありますでしょうか。
CSVのデータ
A B C D
アメリカ 1234 ...
0
票
2
回答
921
閲覧数
PythonでCSVファイルのデータを抽出、全ての列空白を除外
やりたいこと
csvファイルのデータを抽出し、全ての列に空白が一つでもあれば除外します。
その後、特定の列に文字列を追加し、1行ずつループさせてメッセージします。
今回はB列とC列だけを読み込んで空白が一つでもあれば除外します。
CSVのデータ
A B C D
アメリカ 1234 テキサス ワシントン
カナダ 空白 バンクーバー 空白
日本 ...
0
票
3
回答
1,234
閲覧数
CSVデータを抽出【空白除外】、データ加工について
やりたいこと:
csvファイルのデータを抽出し、B列に空白があれば除外した後に文字列を追加します。
CSVのデータ
A B C D
アメリカ 1234 空白 ワシントン
カナダ 空白 バンクーバー空白
日本 2345 東京 空白
イタリア 空白 空白 空白
①抽出したいデータ下記のように表示します。
1234
2345
...
1
票
1
回答
3,175
閲覧数
CSVのファイルを比較し、差分データを抽出する方法
やりたいこと:
下記の2つのcsvファイルを比較して、両ファイル内の差分を抽出し別のファイルにデータを書き込みたいです。
csvデータ①
A B C
1 アメリカ ○
2 カナダ ×
3 日本 △
4 イタリア ○
5 イギリス □
6 メキシコ 空白
7 空白 空白
csvデータ②
A B C
1 アメリカ ○
2 カナダ □...
0
票
1
回答
738
閲覧数
Googleスプレッドシートから特定のシートだけCSVに書き込む
やりたいこと:
Googleスプレッドシートから特定のシートだけを取得してCSVに書き込みたい。
現在下記のコードだと全てのシートを取得し、CSVで書き込むことはできます。
import csv
import gspread
from oauth2client.service_account import ServiceAccountCredentials
scope = ['https://...
0
票
1
回答
153
閲覧数
Pythonで特定の列を抽出しメールで送信する
csvの日付と内容の列だけを抽出し、昨日の日付だけが含んだ列だけを抽出しメールを送信したいです。
下記のコードで記載しましたが、エラーが発生します。
ilocではdataframeがemptyだとエラーになるからだと思います。
① csvの 特定の列 だけを抽出した pandasのDataFrame を作成する
② 昨日の列だけを抽出する
③ 作成したDataFrameの 1行目と2行目(...