- すべて
- 画像・動画
自動更新
並べ替え:新着順
メニューを開く
databricksのNotebookでpyspark.sql.DataFrame.createOrReplaceTempViewを使ってビューを作成したが、BigQueryのDateTime型は勝手にタイムゾーンの変換が働いてしまって、時間がずれてしまう。 ということで、この場合はTimestamp型のカラムを使い、databricks側で型変換することで解決。
メガネ🇳🇿@Ricardinho
諸事情により、 databricks上で Azure内のテーブルと BigQuery内のテーブルを JOINするプログラムを作成。 解決したけど、パフォーマンスや型変換、費用など懸念点が残る。。。