AWSに関するnorthlightのブックマーク (2)
-
この記事はUMITRON Advent Calendar 20221日目の記事です。 こんにちは、UMITRONの宮山︵@jkatagi︶です。最近はSplatoon3とポケモンバイオレットの両作をプレイして忙しい日々を送っています。さて、今年も昨年に引き続きUMITRONでAdvent Calendarを開催することになりました。嬉しいことにたくさんの方から﹁Advent Calendar読みました!﹂という声をいただいております。UMITRON Advent Calendar 20221日目は技術的な話として、AWS GlueのworkflowsからAWS Step Functionsに乗り換えた話を書きます。UMITRONで取り扱うデータについてUMITRONでは持続可能な水産養殖を地球に実装するをミッションに、日々いろんなデータを取り扱っています。そのデータは魚の動画像から
-
<2023年12月19日追記> 本記事中に﹁①失敗したジョブから再実行が出来ない﹂という課題の記載がありますが、現時点で解消されています。詳しくは、﹁AWS Step Functions 待望の﹃リドライブ﹄機能がGAされました | TECH | NRI Digital﹂の記事をご参照ください。 こんにちは、NRIデジタルの島です。 AWSパブリッククラウド上でバッチジョブのワークフローを構築する際の選択肢はあまり多くありません。 弊社社内においても﹁JP1 ※1﹂や﹁Senju ※2﹂等のジョブ運用管理ツールを使ってAWSサービスと連携している事例が多いと思っております。 AWSサービスでは﹁Amazon Managed Workflows for Apache Airflow (MWAA)﹂や﹁AWS Step Functions︵以下Step Functions﹂、﹁AWS Glue
-
1