2
票
Accepted
グループ別の合計に対する比率を出したい
SQL一般の話として回答します。
SELECT
sr.name AS name
, COUNT(*) AS user_count
, ag.age_group_id AS age_group_id
, (100 * COUNT(*) / sba.count_in_age_group) AS ratio_in_ag
FROM
score_data AS sd
...
2
票
BigQueryでJSON文字列を保存して配列になっている値を集計したい場合のやり方
がんばってやってみました!
SELECT
JSON_EXTRACT (logdata, '$.userno') AS userno,
"{"+ REGEXP_REPLACE ( SPLIT ( JSON_EXTRACT (json, '$.friends'), "},{"), "^\\[\\{|\\}\\]$","") + "}" AS friend
FROM
...
1
票
Accepted
App Engine Log TableからViewを生成したい
protoPayload.lineがRepeated DataなSchemaなのでFLATTENする必要があります。
https://cloud.google.com/bigquery/docs/data#flatten
なので以下のように修正して下さい。
SELECT
JSON_EXTRACT(protoPayload.line.logMessage, '$....
1
票
bigqueryで特定の構造体をもつレコードのみ出力する方法
すみません、自己解決しました。
質問時のjsonサンプルだと、以下のSQL文で想定した出力ができるようになりました。
select User, Books.History from `テーブル名`
where Books.History is not null
1
票
SQLを用いて、複数システム同一ユーザーのIDを紐付けしてIDを振るロジック
システム間でのユーザー ID 対応に多対一対応が無い、かつ、システムの数自体が動的に増減するといったことが無いのであれば、同一行にそれぞれのシステムでの ID が載ったテーブルを作れば良いのではないでしょうか。
つまり、以下のようなテーブルではなく、
src, ID1, dst, ID2
------------------------
sys01, A001, sys02, B002
...
1
票
指定した期間内のデータ抽出方法について: No matching signature for operator BETWEEN for argument types: TIMESTAMP, DATE, DATE
TIMESTAMP 型と DATE型を比較しようとしてエラーが発生してます。
ご利用のデータベースが何か不明ですが、CURRENT_DATE() 等で返される値を TIMESTANP 型に変換する関数を使えばいいかと思います。
1
票
BigQueryで取り込んだGAデータのdateを日付型に変えたい
ga_sessions_ の date には YYYYmmdd のような形式の文字列が入っており、DATE型として扱えない文字列のため、castしようとするとエラーになります。
そのため、PARSE_DATE()などを使用してDATE型に変換する必要があるかと思います。
https://cloud.google.com/bigquery/docs/reference/standard-sql/...
1
票
Accepted
bigqueryで2つのマスタからユニークkeyを作りたい
意図が違うような気がしますが、回答してみます。
T_DATEとT_PRODUCTテーブルが存在する際に以下のSQLでT_DATE_PRODUCTテーブルに指定の値を設定可能です。
insert into T_DATE_PRODUCT select * from T_DATE, T_PRODUCT;
以下蛇足です。
T_DATEとT_PRODUCTが変更された場合に、...
1
票
Accepted
配列の中に複数の条件全てみたすレコードを抽出する
SO本家の方で回答頂きましたので転記いたします。
https://stackoverflow.com/questions/54481011/how-to-extract-record-using-multiple-filter-to-array
Below is for BigQuery Standard SQL
standardSQL
SELECT id, arr_val
FROM `...
1
票
Accepted
big queryで日付を指定して取り出す方法
SELECT *
FROM
nyc-tlc.green.trips_201*
WHERE
pickup_datatime >= timestamp('YYYY-MM-DD')
AND pickup_datatime < timestamp('YYYY-MM-DD')
pickup_datatime の日時を選択
SELECT *
FROM
nyc-tlc.green....
1
票
Adwords Editorでのインポートエラー
自己解決しました。
Adwords editorで現在のアカウントの情報をエクスポートし、その一列目のAccountの列を追加したいファイルの一列目に追加したら無事インポートできました。
1
票
BigqueryでGoogle Drive(スプレッドシート)とCSVデータを統合したテーブルを用意する方法
Legacy SQLのTABLE_DATE_RANGEでは、federated tableに対してもクエリを実行することができました。
StandardSQLもしばらくしたら対応されるのではないかと思いますが、とりあえず今すぐ実行したいなら、Legacy SQLで書いちゃうのが早そうです。
SELECT
*
FROM
TABLE_DATE_RANGE(federated.t, ...
1
票
1
票
スプレッドシートからBigQueryに接続してデータを取得する時にトリガーだと失敗する
メニューから選択した場合と、トリガーで呼び出す場合でユーザが異なるケースはありえます。
始めてメニューからGASを呼び出した際に表示された認証画面で選択したユーザと、
トリガーを設定した際にに表示された認証画面で選択したユーザが異なる可能性が高いです。
一度トリガーを削除し、再度トリガーを作成、認証画面が表示されるはずなので権限を持っているユーザを選択してみてください。
1
票
bigqueryの性能についてまとめたページを探しています
BigQueryのStatusのHistoryを全部集計すれば、何か分かるかもしれません
https://status.cloud.google.com/
SLAなどについては、 https://cloud.google.com/bigquery/sla にあります。
Only top scored, non community-wiki answers of a minimum length are eligible
関連するタグ
google-bigquery × 36sql × 11
python × 5
google-cloud × 3
python3 × 2
mysql × 2
google-apps-script × 2
postgresql × 2
google-analytics × 2
php × 1
pandas × 1
laravel × 1
json × 1
firebase × 1
twitter × 1
web-scraping × 1
google-app-engine × 1
google-spreadsheet × 1
flask × 1
shell × 1
google-cloud-storage × 1