MWAAとは 人気・最新記事を集めました - はてな
Hatena Blog Tags
はてなブログ トップ
MWAA
このタグでブログを書く
言葉の解説
ネットで話題
関連ブログ

MWAA

このタグの解説についてこの解説文は、すでに終了したサービス「はてなキーワード」内で有志のユーザーが作成・編集した内容に基づいています。その正確性や網羅性をはてなが保証するものではありません。問題のある記述を発見した場合には、お問い合わせフォームよりご連絡ください。
サーバーワークスエンジニアブログ•3ヶ月前

Job Schedulers on ECS , EKS によるサーバレス・バッチのご紹介

はじめに オンプレ型バッチ処理の特徴とクラウドネイティブ技術 バッチ処理の構成要素と概念 バッチ処理 バッチ処理の構成要素 商用ジョブ管理ソフトとバッチ処理 クラウドネイティブ技術によるバッチ処理の実現 Apache Airflow とは MWAA のアーキテクチャ スケジューラー ワーカー ウェブサーバー データベース オペレータ ポピュラーなオペレータ AWS Operator サーバレス化のメリット サーバレス・バッチの構成イメージ 可用性とスケーラビリティ MWAAの可用性とスケーラビリティ タスクの可用性とスケーラビリティ DevOpsの実践とアジリティの向上 Webアプリケーション…

#MWAA#ECS#EKS

関連ブログ

by shigemk2•21日前

awscli 2.18.13

payment-cryptography: ECC P-256およびP-384キーのサポートを追加 ec2: Graviton4プロセッサ搭載のX8g、C8g、M8gインスタンスをリリース。X8gは最も低コストなメモリ価格、C8gは高い計算性能、M8gは汎用ワークロード向けに最適化 mwaa: InvokeRestApiを導入し、指定された入力でApache Airflow REST APIを呼び出し可能に connect: Amazon ConnectでWeb通話のコンタクトに対する画面共有のサポートを追加 bedrock: converseサポートに関するドキュメント更新 payment-…

（フィリピン中部の）ボホール島に住んでいます•1ヶ月前

バンク・オブ・アメリカでシステム障害が発生し、顧客の口座残高がゼロに

【ナチュラルニュース】2024年10月7日 ラモン・トメイ著 https://www.naturalnews.com/2024-10-07-bofa-outage-leaves-customers-zero-balance-accounts.html バンク・オブ・アメリカ（BofA）で発生したシステム障害により、顧客の口座の残高がゼロになってしまった。 ナショナルパルスによると、10月2日に「不明な数」のBofA口座保有者がこの障害を経験した。 何千人もの顧客が銀行口座にアクセスできないと報告し、アクセスできた顧客は残高がゼロまたは不足していることに気づいた。 多くの顧客がオンラインの機能停…

サーバーワークスエンジニアブログ•4ヶ月前

2024年7月末頃より新規顧客の受け入れを停止した AWS サービスに関して

マネージドサービス部 佐竹です。 本日は、最近話題となっている一部の AWS サービスが新規顧客の受け入れを停止した件に関してです。今後も本情報に関する内容は都度更新がされると思われますため、2024年8月2日 12時現在の情報としてご覧ください。 はじめに 新規の停止を知らせる情報掲載箇所まとめ AWS CodeCommit Amazon CloudSearch Amazon Forecast S3 Select AWS Cloud9 AWS Data Pipeline (2024年8月15日 修正) Amazon SimpleDB これらの具体的な影響について 既存のお客様 新規、または追…

omuronの備忘録•4ヶ月前

「DevelopersIO 2024 OSAKA」 #devio2024 に参加しました

【7/31(水)】DevelopersIO 2024 OSAKA #devio2024 classmethod.connpass.com 大阪でのリアル開催ありがたい！ セッション レビューに向けて一工夫しませんか、というお話 高崎さん LineミニアプリはWebアプリなので脆弱性対策やライブラリのアップデートなど対応が必要 ドキュメントとソースだけなので要件や背景を残すことを考えた レビューでADRを残すことにした ADR確認内容 整理内容のチェック 方針や検討の是非 調査内容の是非 コストの確認 実装漏れの確認 レビューはレビューアーの振り返り KPTのKはどうすべきか？->褒めましょう …

Worries.com•4ヶ月前

【年収600万円〜900万円】ブックリスタ社が求めるデータアナリストとは？電子書籍とWebサービスの未来を創る仕事

※ 掲載内容は寄稿日現在の情報です。現在も本記事の職種が同条件で募集されているかどうかは要確認 はじめに 今回ご紹介するのは、株式会社ブックリスタが募集しているデータアナリストの仕事です。ブックリスタ社は、電子書籍ストアの運営やWebサービスの開発など、デジタルコンテンツ分野で幅広く事業を展開している企業です。本記事では、この求人情報を通じて、ブックリスタ社の事業内容や、データアナリストの仕事の魅力、さらには電子書籍業界の将来性について詳しく解説していきます。 ブックリスタ社の事業内容 ブックリスタ社は、デジタルコンテンツ分野で多角的に事業を展開しています。主な事業内容は以下の通りです： 電子…

ENGINEERING BLOG ドコモ開発者ブログ•5ヶ月前

Snowflake × dbtー75万円が溶けた「最恐」から「最強」のデータパイプラインができるまでー

1.概要 2.構築したdbt実行環境 3.最恐に至る道 4.最強に至る道 4-1.Snowflakeへの実行制御 4-2.並列処理の理解 4-3.クエリタグの設定 4-4.その他 5.まとめ 1.概要 NTTドコモ データプラットフォーム部(以下DP部)の外山です。 NTTドコモではプロダクトの改善及びシームレスなマーケティング施策を実施するために、全社でデータ活用を進めていますが、その実現において利用しやすいデータがあることは欠かせません。 それに関し、前回のブログでは、まずは、「イシューから始めよ」に則り、初期段階では解決の質にはこだわらず、分析者が利用しやすいデータを高速に整備するための…

FLINTERS Engineer's Blog•5ヶ月前

Cloud Composer Sizing Guide

こんにちは、株式会社FLINTERSに出向中のおさないです。 本記事はFLINTERSブログリレー企画「梅雨にも負けないブログ祭り」の一環で、実務でCloud ComposerのSizingを行う際にどのようにして構成の値を算出しているのかというテーマで、参照している箇所と値を決定するプロセスについてまとめてみます。 注: 本記事が対象とするCloud ComposerはCloud Composer 2を指します。 Sizingの前提知識 Sizingの考え方 おわりに 参考 Sizingの前提知識 Cloud Composer（以下Composer）のSizingに関係する環境構成の項目は以…

by shigemk2•6ヶ月前

awscli 2.15.52

api変更:connect: GetMetricDataV2 APIにコンタクトフローメトリクスを追加。 api変更:sagemaker: SageMaker WorkteamにWorkerAccessConfigurationを導入。顧客がワークチーム内のワーカーのリソースアクセスを設定可能。 api変更:mwaa: Amazon MWAAがAirflowウェブサーバーの自動スケーリングをサポートし、REST API、CLI、またはAirflow UIユーザーからの需要増加に自動的に対応。環境作成および更新ワークフロー時にウェブサーバーインスタンスの最大数と最小数を指定可能。 api変更:k…

omuronの備忘録•6ヶ月前

「JAWS-UG東京 ランチタイムLT会 #11」 #jawsug_tokyo 受講メモ

JAWS-UG東京 ランチタイムLT会 #11 jawsug.connpass.com セッション LT① インフラエンジニアがAthenaと格闘してみた 古林 信吾さん（CTCシステムマネジメント株式会社） zenn.dev 各 LLM に Athena のクエリを問い合わせて比較をしていました。 Copilot in Bing / Gemini / Claude 3 Sonnet を使ってましたが、Claude 3 Sonnect が賢そうですね。 生成AIがないと仕事にならないレベルで助かってます。 Athena については今後は Amazon Q に期待。 LT② IoT初心者にオスス…

omuronの備忘録•7ヶ月前

「JAWS-UG東京 ランチタイムLT会 #10」 #jawsug_tokyo 受講メモ

JAWS-UG東京 ランチタイムLT会 #10 jawsug.connpass.com セッション LT① AWS認定資格を取得したので初めてマネコンを触った時を振り返ってみた。 相川 奈槻さん（三菱電機株式会社） 初めてマネコンを触った時 ブロックチェーンや衛星などすごい驚きと興奮 高額請求の恐怖 認定資格を取ったら AWSが怖くなくなった 触って学ぶのは大事だけど高額請求があるからクラウドは怖いで勧められるかは微妙ですよね。 お勉強して知ってから触るのは安全対策としてはいいですね。 LT② API Gatewayと少し仲良くなってみた！ 升谷 直緒さん（株式会社エーピーコミュニケーションズ…

nozaki takahiroのテックブログ•8ヶ月前

AWS Certified Data Engineer - Associate(DEA-C01)試験対策資料

内容 試験には次の内容ドメインと重み付けがあります。 ドメイン 1: データの取り込みと変換 (34%) ドメイン 2: データ ストア管理 (26%) ドメイン 3: データの運⽤とサポート (22%) ドメイン 4: データ セキュリティとガバナンス (18%) ドメイン 1: データの取り込みと変換 1.1: データの取り込みを実⾏ データを取り込むAWSサービスのスループットとレイテンシの特性 Kinesis Data Streams - TB/時のスループットで、数十万のソースから大量のデータを取り込むことができます。データは1秒以内に処理できるため、待ち時間が短くなります。KCLま…

サーバーワークスエンジニアブログ•8ヶ月前

AWS SAW（AWS Support Automation Workflows）というソリューションを知ったのでまとめてみた

みなさん、こんにちは。AWS CLI が好きなテクニカルサポート課の市野です。 先日 AWS Expert Online に参加し、AWS SAW（AWS Support Automation Workflows）というソリューション（プログラム）をはじめて知りました。 普段サポート業務をしているのに知らなかったのは、まったくもってうかつだったのですが、AWS を利用していてよくあるシチュエーションのトラブルシュートに活用いただけると思いますので、以下まとめてみました。 公式ドキュメント ソリューション紹介ページ ページ中にも記載のある通り、AWS SAW は特定のサービス名称ではなく、AWS…

by shigemk2•8ヶ月前

awscli 2.15.17

mwaaでApache Airflow v2.8.1のサポート追加 lambdaでAWS Lambdaのドキュメント更新 grafanaでAmazon Managed Grafana Enterpriseプラグインのアップグレードの一環として新しいGrafanaTokenのサポート追加 verifiedpermissionsでGetIdentitySourceとListIdentitySources APIsにおいて詳細情報を設定情報に置き換え rdsでMulti-AZ DBクラスタのio2ストレージに関するAmazon RDSドキュメント更新 rdsでCreateDBClusterとModi…