Serverless frameworkでお手軽lambda運用 at #nseg #93
0 likes785 views
Serverless frameworkでお手軽lambda運用 at #nseg #93
Serverless frameworkでお手軽lambda運用 at #nseg #93
- 1. serverless frameworkで お手軽Lambda運用 2017.10.14 nseg #93 於 GEEKLAB.NAGANO
- 3. FaaS: Function as a Service ● 関数実行基盤 ● 最近よく耳にする
- 4. AWS Lambda ● AWSのFaaS ● node/Java/C#(.NET Core)/Python を使用可能 ● サーバーレス≒デーモンレス ● 状態を持たず、callされるたびにプロセスが上がっては落ちる（実際にはちょっと違う） http://docs.aws.amazon.com/ja_jp/lambda/latest/dg/welcome.html
- 5. AWS Lambda ● https://aws.amazon.com/jp/lambda/pricing/ ○ “リクエストのうち毎月最初の 1,000,000 件は無料” ○ “その後は 0.20 USD/1,000,000 件のリクエスト（0.0000002 USD/リクエスト）” ○ 安い ● http経由でcallしたい場合は、API-Gatewayを通す必要がある
- 6. AWS Lambda ● API Gatewayの他にも様々な起動トリガーを使える ● CloudWatch Eventsによるcron実行が便利 ○ ちょっとした定期実行処理のための EC2が不要に ● RDBとの相性の悪さが言われていたが、最近は良く なってきている
- 7. 運用しているLambda ● http://b-sw.co/hokuto/index.html ○ 一日一回各サイトをクロールしてスクレイピング ←これがLambda関数 ○ 結果をjsonでS3に保存 ○ 上記静的サイトでjsonを読み取り ○ https://github.com/koty/hokuto_program_scraper ● https://twitter.com/glnagano/ ○ GEEKLAB.NAGANO関連のイベント情報を定期的に tweet ○ https://github.com/geeklabnagano/glnagano-lambda-bot ● 社内で使っているシステムと Slackとの連携いろいろ
- 8. deployが面倒 ● 簡単な処理（EC2を起動するとか）であれば、AWS管理コンソールに直接処理を書 けば良いが、、、 ● 外部パッケージを使うときは、当該パッケージを含むzipを作る必要がある ● →面倒。herokuのようにrequirements.txt（rubyで言うgemfile）をプラットフォーム 側でダウンロードしてほしい
- 9. deployツールを使う https://serverless.com “The Serverless Framework is a CLI tool that allows users to build & deploy auto-scaling, pay-per-execution, event-driven functions.”
- 10. install〜deploy npm install -g serverless serverless create -t aws-python3 -p serverless-test vim ~/.aws/credentials serverless deploy --aws-profile koty
- 11. 実行してみる serverless invoke -f hello --aws-profile koty
- 12. /tmp に書き込んでみる
- 14. requirements.txt を含むアプリのdeploy ● pip install時にコンパイルが走るパッケージはAmazon Linux上でzipを作る必 要がある ● Serverless Python Requirementsというプラグインを使うとlambdaのdockerコ ンテナ上でzipを作ってくれる 参考：https://qiita.com/mkisono/items/f04297775275c6b50774 5275c6b50774
- 16. cronの登録 serverless.yml functions: hello: handler: handler.handle - schedule: cron(50 * ? * * *) 参考：https://github.com/geeklabnagano/glnagano-lambda-bot/blob/master/serverless.yml
- 17. 環境変数の設定 serverless.yml provider: environment: CONSUMER_KEY: ${file(./serverless.env.yml):CONSUMER_KEY} CONSUMER_SECRET: ${file(./serverless.env.yml):CONSUMER_SECRET} ACCESS_TOKEN: ${file(./serverless.env.yml):ACCESS_TOKEN} ACCESS_TOKEN_SECRET: ${file(./serverless.env.yml):ACCESS_TOKEN_SECRET} DOCO_API_KEY: ${file(./serverless.env.yml):DOCO_API_KEY} AWS_S3_BUCKET_NAME: ${file(./serverless.env.yml):AWS_S3_BUCKET_NAME} 参考：https://github.com/geeklabnagano/glnagano-lambda-bot/blob/master/serverless.yml ヒミツの値はGit管理外のファイルから読み込み （もっとスマートな書き方あれば教えてください。。）
- 18. API Gateway の設定 serverless.yml functions: create: handler: todos/create.create events: - http: path: todos method: post cors: true 参考： https://github.com/serverless/examples/blob/master/aws-python-rest-api-with-dynamodb/serverless.yml
- 19. Djangoを動かしてみる ● serverless-wsgi というプラグインを利用 https://github.com/logandk/serverless-wsgi functions: api: handler: wsgi.handler events: - http: ANY / - http: ANY {proxy+} 参考：https://github.com/koty/dj-lambda-sample ルーティングはDjango側に委譲