notebook

都内でWEB系エンジニアやってます。

2021-02-01から1ヶ月間の記事一覧

sqlparseを使い特定のSQLを抽出する

クエリログの中から特定のクエリを取り出したいという状況になったことがあったのでその際のメモ 今回はsqlparseというライブラリを使った sqlparse Python製のSQLパース用のライブラリ、パースだけでなくフォーマットなども行える andialbrecht/sqlparse: A…

CloudTasksの再試行設定覚書

公式ドキュメントを読んでもあんまりピンとこなかったので実際に動かしてみて感覚をつかむ 適当な関数を用意してcreate-http-taskでタスクを生成しCloudTasksのログから再実行の間隔を見る 再試行設定 CloudTasksでは指数関数的に再試行間隔が増加していくが…

BigQueryのMERGE文で削除、更新、追加を同時に行う

MERGE文はUPSERT的な操作をしたいときに取り上げられることが多いイメージだったがもう少し込み入った要件でも活用できそうということで試してみた MERGE文についてのドキュメントは下記 データ操作言語の構文 | BigQuery | Google Cloud cloud.google.com …

じぶん Release Notes (ver 0.33.4)

swfz (ver 0.33.4) がリリースされました、更新内容は次のとおりです 技術 やったこと TypeScript CloudFunction BigQuery 開発環境にdeltaをいれた イベント 1月は次のイベントに参加した(視聴) Engineer Career Study #1 - スペシャリストとしてのキャリ…