2025-01-01から1年間の記事一覧
はじめに 今年もこの時期がやってきました。 執筆開始が2025/12/31 19:00とかなり駆け込み気味ですが、2025年の振り返りをやっていきます。 ↓2024年↓ 2024年を振り返ってみる - カピバラ好きなエンジニアブログ ↓2023年↓ 2023年を振り返ってみる - カピバラ…
前回はCFnを利用してEC2とDifyのコミュニティ版をデプロイしましたが、デフォルトだとDify上でファイルをアップロードするとEBSに格納されてしまうため、利用を続けているとEBS容量が膨らんでしまいます。 そこで、DifyのストレージにAmazon S3を利用するよ…
前回はCFnを利用してEC2とDifyのコミュニティ版をデプロイしました。 ただ、正常に実行されたかどうかを毎回SSHでログインして確認していたので、ログをCloudWatch Logsに出力してSSHログインしなくても確認できるようにしてみます。
前回はAWSマネジメントコンソールとユーザーデータを利用して手動でEC2とDifyを構築しましたが、手動で構築するのは手間なのでAWS公式のIaCツールであるCloudFormation(以下CFn)を利用してテンプレート化し、構築をもう少し楽にしてみます。
前回はローカルでDifyを動かしてみましたが、今回はAWSのEC2上でDifyを動かしてみます。
今更ながらローカルでDifyを構築することがあったので備忘として残しておきます。
はじめに こんにちは、半田です。 前回に引き続き、AWS 規範ガイダンス「Using Apache Iceberg on AWS」を読んでメモをしていきたいと思います。 docs.aws.amazon.com 前回は「Working with Apache Iceberg tables by using Amazon Data Firehose」のページ…
はじめに こんにちは、半田です。 前回に引き続き、AWS 規範ガイダンス「Using Apache Iceberg on AWS」を読んでメモをしていきたいと思います。 docs.aws.amazon.com 前回は「Working with Apache Iceberg in AWS Glue」のページを読みました。 今回は「Wor…
はじめに こんにちは、半田です。 前回に引き続き、AWS 規範ガイダンス「Using Apache Iceberg on AWS」を読んでメモをしていきたいと思います。 docs.aws.amazon.com 前回は「Getting started with Apache Iceberg tables in Amazon Athena SQL」のページを…
はじめに こんにちは、半田です。 前回に引き続き、AWS 規範ガイダンス「Using Apache Iceberg on AWS」を読んでメモをしていきたいと思います。 前回は「Introduction」と「Modern data lakes」のページを読みました。 今回は「Getting started with Apache…
はじめに こんにちは、半田です。昨年のre:Invent 2025でS3 Tablesが出た直後はよく触っていましたが、最近は別のことに時間を割かないといけない状況が続いていて、その後あまり技術的な検証などはできてませんでした。 久々に時間が空いたので色々調べてい…
はじめに こんにちは、半田です。 昨年不採択で悔しい思いをしたAWS Community Buildersですが、今年再チャレンジして無事に選出いただきました! このプログラムは1年ごとの更新制のようですので、今後の更新に向けた備忘と他に目指される方向けに昨年1年間…