2021-12-01から1ヶ月間の記事一覧
ZOZO Advent Calendar 2021 22日目の記事です。 今回はDataflow内に送られてくるログサイズの制限を行う実装をします。 経緯 検証環境 実装手順 実装 まとめ 経緯 下記の構成図のようにCloud Pub/Subに送られてくるログをBigQueryにinsertするような処理をDa…
ZOZO Advent Calendar 2021 12日目の記事です。 Swagger UIを利用する際、右下に以下のようなバッジが表示されます。 VAILIDで表示されている場合は良いですが、外部のアクセスを遮断した状態でSwagger UIをホスティングする際はErrorが常に表示され続けます…
ZOZO Advent Calendar 2021 5日目の記事です。 Apache Beam2.34.0(Python)のバージョンにおいてwith_exception_handling機能が追加されたので紹介します。 with_exception_handlingについて 実装 開発環境 テーブル定義 実装 結果 まとめ with_exception_han…
