StepFunctions

generated by DALL-E3; "Illustration: Two distinct flowcharts in labeled boxes. The 'Python' flowchart on the left has various coding structures connected with arrows. The 'ASL' flowchart on the right depicts a task sequence. A prominent conversion arrow links the two charts." はじめに AWS Lambda と AWS S…

本記事の内容 こんにちは、AWSエンジニアの山口です。 みなさん、Step Functionsを使っていますか？ 非同期で疎結合なワークフローを組み込むときに便利なStep Functionsですが、定期的な実行が必要な処理に対して外部制御を加える際に自動化する際にも利用されます。そのような処置の場合、処理結果によって生成されるアウトプット名称に処理実行日付を付与することが多いかと思います。 今回は、Step Functions でステートマシン起動開始(実行開始)時刻をステートマシン内のデータとして利用する方法を書いていきます。 本記事のサマリ StepFunctionsでステートマシン起動…

個人的に待ち望んでいた、Step Functionsにおけるエクスポネンシャルバックオフの上限設定や、ジッターの設定が追加されたので試してみました。 2023/9/7のアップデートにおける enhanced error handling で追加されています。 aws.amazon.com

SREチームの藤原です。今回はAmazon ECSのサービス内のタスクを定期的に再起動することで、日々のメンテナンスコストを削減する話です。SRE連載 3月号になります。 3行でまとめ ECS Fargateのタスクは時々再起動が必要 人間が対応するのは面倒 Step Functionsを定期実行して常に新鮮なタスクに入れ換えて予防しよう ECS Fargateのタスクは時々再起動する必要がある ECS Fargateでサービスを運用していると、数ヶ月に一度ほどの頻度でこのようなお知らせがやってきます。 [要対応] サービス更新のお知らせ - AWS Fargate で実行されている Amaz…

はじめに hacomono VP of Platform Engineering のやじ(@srv)です。 大人になったらレーシングドライバーになるのが最近の夢です。 hacomono ではアプリケーションを支えるアーキテクチャの刷新を行っておりました。 私のブログではしばらく、このアーキテクチャ変更について紹介させて頂ければと思います。 TL;DR hacomono の元々のアーキテクチャはシングルテナント方式だった。 シングルテナントで多数のテナントを抱えるのは辛い。 マルチテナントアーキテクチャへ移行した。 今回の記事はお触りだけで、詳細は続編へ続く。 hacomono のアーキテクチャ…

AWS StepFunctionsがどんなサービスか分かったので使ってみる！ StepFunctionsで実現することはこちら おくすり登録lambda関数（引数に薬の名前・服用回数を受け取り、薬の名前と服用タイミングを返す） リマインダーlambda関数（引数に開始時間・イベント名を受け取り、SES送信） これだけだったら普通にlambdaの連続実行でいいんですけどね^^; なんちゃってマイクロサービスでリマインダー機能は独立させておいて今後の（あるか分からない）機能拡張により レッスン予定登録、資格勉強タスク登録…など他の機能からも汎用的に実行できる構成にしたということで！！ Lambda…

概要 この記事では、Step Functions localとSAM LocalをDocker内で実行するサンプルを作成します。 注意点 github.com 上記のissueに記載がありますが、以下の不具合があります。 SAM CLIのバージョンが1.27.2時点で、Docker内でSAM CLI使用時に--docker-volume-basedir のパスが正しく反映されません。 Lambdaを sam local invoke で実行すると Runtime.HandlerNotFound: index.handler is undefined or not exported エラーが発生…

良かったこと 1. AWSの方にBedrock Prompt Flowsのレクチャーをしてもらえたこと お客様がレクチャーしてもらう場にちゃっかり便乗。 ConnectのフローやStepFunctionsみたい。 2. PoC開発のワークショップをやったこと 今日はDockerを使ったコンテナ作成の一連の作業を実施。 身近なたとえ話に置き換えながらかみ砕いて説明してみたけど少しは伝わったかな・・。 3. 小学校の幼馴染の結婚祝いをしたこと 半年ぶりに会ってひたすら喋る。 プレゼントのスピングラス、喜んでもらえて良かった。

こんにちは、プロダクト開発部の中田です。 今回は、イベント連携基盤の技術選定の記事の続きです。 MessageBrokerの候補として挙げたAmazon EventBridge（以降、EventBridgeと記述）について、実際にさわってみて気づいた点をご紹介します。 イベント連携基盤の技術選定をした話 〜背景・課題編〜 イベント連携基盤の技術選定をした話 〜EventBridgeさわってみた編〜 ←今回はこの話 イベント連携基盤の技術選定をした話 〜Axon + MSKさわってみた編〜 イベント連携基盤の技術選定をした話 〜比較・結論編〜 本記事の概要 まず、イベント連携基盤のMessage…

これは、なにをしたくて書いたもの？ AWS Step Functionsのワークフローを見ていて、エラーハンドリングについて試しておいた方がいいかなと思いまして。 Step Functions ワークフローでのエラーの処理 - AWS Step Functions AWS Step Functionsのエラーハンドリング 内容としては、ドキュメントのこちらのページのものです。 Step Functions ワークフローでのエラーの処理 - AWS Step Functions ワークフローでは、PassステートとWaitステートを除くすべてのステートでランタイムエラーが発生する可能性があるとさ…

これは、なにをしたくて書いたもの？ LocalStackやAWS Step Functions Localを使って、AWS Step Functionsのチュートリアルや環境構築を試してきました。 今度は、練習ということで入出力を扱うAWS Lambda関数を書いてみたいと思います。 お題 こういう入力を与えると { "message": "Hello World" } こうなって { "result": "★★★Hello World★★★", "message": "★★★Hello World★★★", "inputOriginalMessage": "Hello World", "wi…

これは、なにをしたくて書いたもの？ 前に、LocalStackとTerraform、AWS SAMでAWS Step Functionsを作成してみました。 LocalStack × Terraform × AWS SAMでAWS Step Functionsを動かしてみる - CLOVER🍀 ただ、AWS SAMでもAWS Step Functionsのステートマシンを扱えるらしく、AWS Step Functionsを主体のテーマに扱う場合はAWS SAMで 一気に作ってしまうのもよいかなということで試してみます。 AWS SAMのAWS Step Functionsのサポート 全然気にし…

これは、なにをしたくて書いたもの？ こちらのエントリーでAWS Step Functions Localを試してみました。 AWS Step Functionsをローカルで試す（AWS Step Functions Localを動かしてみる） - CLOVER🍀 この時はとりあえず動かしただけなので、今度はAWS Lambdaと組み合わせてみましょう。AWS Step Functionsのチュートリアルのうち、 AWS Lambdaと組み合わせているものを少し選んでみます。 AWS Lambdaの関数はAWS SAMで作成することにします。 対象とするチュートリアル AWS Step Func…

これは、なにをしたくて書いたもの？ ちょっとAWS Step Functionsを調べてみようと思いまして。 ローカルで動かせる仕組みもあるみたいなので、こちらで試してみたいと思います。 AWS Step Functions AWS Step Functionsのドキュメントはこちら。 Step Functions とは - AWS Step Functions AWS Step Functionsはステートマシンと呼ばれるワークフローを使って、アプリケーションを構築するサービスです。 ワークフローには標準ワークフローとExpressワークフローがあります。 Step Functions とは…

? 近況 [ulとolの違い] [@gorhom/bottom-sheetで何故か常に最大snapPointsで開く] [sls step functions failed to deploy] [slsでパッケージサイズ削減] このあたりを書いた。 Microsoft Edgeをお試しで使ってみている。 左にタブが並んで、ファビコンのみが見えている感じ。右にはBing Chatやclaude.aiが並ぶ。 メモもすぐにアクセスできたり便利。Chromeの拡張機能もそのまま使える。 しかし、検索エンジンのbingが異様に見づらい。 stepfunctionsの実装でお世話になりましたサイト s…

こんにちは。 DevOpsが好きなアプリケーションサービス部の兼安です。 本記事は「Amazon Neptuneで始める初めてのグラフDB」というテーマの連載記事の5回目です。 Amazon Neptuneで始める初めてのグラフDB① NeptuneクラスターとNotebookの作成 Amazon Neptuneで始める初めてのグラフDB② Gremlinを用いたグラフデータの基本操作 Amazon Neptuneで始める初めてのグラフDB③ Amazon NeptuneとTom Sawyer Graph Database Browserとの接続 Amazon Neptuneで始める初めてのグ…

はじめに こんにちは！ 株式会社hacomonoの Engineering Office でアシスタントをしているみーこです。 hacomonoはフルリモート勤務の企業。 とはいえオフラインでの集まりも大切にしており、年間を通じて大小さまざまなイベントを開催しています。 そのなかで最も大きなイベントが、全社イベントのhacofes。 そしておそらく2番目に大きいであろうイベントが9月の終わりに開催されました。 そう、それがプロダクトチームの社内イベントである 「9月だョ！全員集合」！ 「全員集合」is 何？ いつもはフルリモートの私たちだからこそ、イベントのときはオンラインとのハイブリッド開催…

AWS CDK Tipsシリーズです。 先日久々にAWS CDKの新機能をマージしてもらえたので、その宣伝をさせてください。Step Functionsで別リージョンのAWS APIを呼び出すためのコンストラクトです。 github.com TL;DR 以下のコードで、Step FunctionsからクロスリージョンのAWS APIコールを行うSFnタスクを実装できます (CDK v2.148.0〜)。 // 例: us-west-2のS3バケットからgetObjectするSFnタスク const getObject = new tasks.CallAwsServiceCrossRegion(…

こんにちは。ES課で研修中の田原です。 研修中にAWSでSorryページをどのように構成するのが適切なのかを考える機会があり、 AWSで実装するSorryページ構成は奥が深いと感じましたので、その内容を共有できればと思います。 Sorryページとは？ 検討の前提 と Sorryページ構成パターンの概要 各Sorryページ構成パターンの詳細 構成1：Route53 フェイルオーバールーティング 切り替わり方式 構成のポイント メリット デメリット（制約） 構成2：CloudFrontオリジンフェールオーバー 切り替わり方式 構成のポイント メリット デメリット（制約） 構成3：ALB 固定レスポ…