CloundWatch で特定の文字列が来たらメール通知したい
ScrapyをLambdaで動かすようにしたが、今のままだといつの間にか失敗するようになっても気づけない。 Lambdaでは標準出力がCloudWatchに記録されるようになっているため、CloudWatch側でスタック …
カテゴリー: IT
MongoDB Atlas へ移行した後、Heroku にデプロイした mLab Data API が動いていなかった
heroku logs –tail –app アプリ名 でログを確認すると、SSLHandshakeException が出ている？？ 2020-12-17T09:38:32.199913+00: …
AWS LambdaでScrapyを動かす
pip install が必要なので、下記を使って動作確認とデプロイパッケージ作る方向で調査。 https://github.com/lambci/docker-lambda この Docker イメージを使うと、AWS …
AWS Lambda 実践ガイドの手順で cron 関数を作成時にエラー
AWS Lambda 実践ガイド「3.5 定期的に Lambda 関数を実行する」を試したところ、CloudWatch Event の新規ルール作成で権限エラーになった。 まずルールを選択するところに下記のようなエラーが …
Mac で git svn すると Can’t locate SVN/Core.pm エラー
Catalina にアップデートすると svn コマンドが使えなくなるという話があり、Homebrew で再セットアップしたのだが、git svn コマンドだとエラーが。 Can’t locate SVN/Core.pm …
クラウドのコンテナデプロイ環境
AWS, GCP, Azure いずれも似たようなサービスがある。 AWS Fargate Google Cloud Run Azure Container Instances いずれも各社のコンテナレジストリにイメー …
Scrapyによる日次のスクレイピングをクラウドにデプロイしたい
元々レンタルサーバーでcron実行していたが、データ保存先に使っていたmLabがMongo Atlasに移行する必要があったことから色々バージョン問題に遭遇し、どうしようか悩み中。 今のところAWS Lambdaが良さそ …
docker-composeでデプロイできる無料環境
バックアップ考えるとレンタルサーバーにDockerインストールが良いのかなと思いつつ、無料で使えるものがないか調べてみた。 どうも無期限で無料枠あるのはGCPだけみたい。ただいつ変わることやらという心配はある。 あとAW …
now コマンドでのデプロイで The specified token is not valid エラー
久しぶりに now でデプロイしようとすると、下記のエラー。 UPDATE AVAILABLE Run npm i now@latest to install Now CLI 21.0.1 Changelog: http …
CentOS 5.4 で Pyenv インストールして Python をバージョンアップできる？？
先日、mLab から MongoDB Atlas への移行で、ローカル開発環境では Python や Scrapy のバージョンアップをした。結構苦労したがなんとか解決。ただ、次はサーバで対応する必要がある。 このサーバ …