標籤: aws

雲端架構部署救星！介紹 Terraform 是如何大幅改善雲端基礎建設的建立流程

Jumping發表留言
  1. 過去在建立基礎架構時有許多痛點
  2. Terraform 是什麼？
  3. Terraform 如何運作
  4. Terraform 基本檔案結構
    1. providers.tf
    2. main.tf
      1. BigQuery Dataset
      2. BigQuery Tables
      3. Pub/Sub Topic
      4. Pub/Sub Subscriptions
    3. variables.tf
    4. terraform.tfvars
    5. outputs.tf
  5. 總結
    1. Terraform 注意事項與缺點
    2. Terraform 帶來的好處
  6. 後記
  7. 參考資料

過去在建立基礎架構時有許多痛點

當我們想要在雲端上建立各種服務時，通常都是透過 UI 的方式進行，但當架構越來越複雜，甚至還需要整組搬遷的時候，就會遇到很多困難，例如重新設定後可能剛好忘記 region 是設在哪、這個專案是用哪一個 Docker image，或這台機器的規格到底是幾個 CPU 多少記憶體。

整體來說，傳統建立基礎架構時會遇到以下的痛點

  • UI 操作過程繁雜
  • 大量人工操作，易出錯且難以維持一致性，增加除錯時間
  • 難以自動化，導致部署效率低
  • 無法版本控管、追蹤變更，增加操作風險
  • 無法重複利用，缺乏模組化設計，每次建立的成本都很高

所以我們過去在建立基礎架構時，常常需要花費大量時間與人力，效率太差，甚至可能會有許多都是重複性高的操作，而 Terraform 就是可以解決這些痛點的重要工具。

Terraform 是什麼？

Terraform 是一種「基礎架構即程式碼」工具 (Infrastructure as Code, Iac) ，讓我們使用人類易讀的設定檔中定義雲端和地端資源，並可對這些檔案進行版本控管、可重複使用和分享共用，讓所有基礎架構能在配置和管理上達成一致。

Terraform 如何運作

Terraform 主要是透過 Providers 來跟特定的雲端 API 做溝通，例如 GCP providers, AWS providers 等

在使用 Terraform 時主要有三個步驟：

閱讀更多»

將 FastAPI 部署到 AWS API Gateway 教學（配合 Lambda 使用）

Jumping1 則迴響

本文將教學如何把寫好的 FastAPI 程式碼，配合 AWS Lambda 部署到 API Gateway 上（包含詳細圖文解說 API Gateway 的設定）

前情提要

這篇文章會使用到 AWS Lambda 的函式，若還不清楚怎麼使用的話，推薦可以先看下面這篇文章再回來，如果正在閱讀文章的你已經會使用，那就可以直接往下看囉！

在 AWS Lambda 上使用 Python 第三方套件教學

流程步驟

  1. 建立 API
  2. 設定 API
    • 建立方法
    • 建立資源
  3. 部署 API
  4. 實際呼叫 API 測試

1. 建立 API

首先要確定自己要建立的區域，建議使用比較近的國家地區，例如：東京、大阪、新加坡或香港，因為這將會嚴重影響 API 的速度，我之前誤闖美國東部 Ohio (us-east-2)，導致我在 GET / POST 都慢到懷疑人生，所以請先一定要選擇好！

接著就可以進入 AWS API Gateway 的頁面， API 類型選擇「REST API」並點選「建置」，若是第一次在這個國家地區建立 API 的話，會跳出一個教學視窗，大概看一看就可以按確定把它關掉了。

接下來會進入到以下頁面，此時預設可能是「範本 API」，請改成建立「新 API」，並且設定一個「API 名稱」，因為我的 API 是要來收集 cookie 的，所以我命名為 cookie_api，設定完成就可以按「建立 API」。

閱讀更多»

在 AWS Lambda 上使用 Python 第三方套件教學

Jumping1 則迴響

本文紀錄如何在 AWS Lambda 上安裝並使用 Python 第三方套件，步驟包含在本機先建立套件的 zip 檔，以及新增 Layer 到 Lambda 函式上

Lambda 函式預設無法使用 Python 第三方套件

我在 AWS Lambda 撰寫好函式（或是使用 $ zip <dest_filename>.zip <py_file>.py 製作 python zip 檔後上傳函式），函式中有使用到 requests 這個套件，執行 Test 時會顯示 No module named 'requests'，原因就是 AWS Lambda 預設是沒有 requests 這個套件的，需要另外上傳套件檔，以下是解決方法。

  1. 安裝所需套件至 python 資料夾
  2. 打包 python 套件資料夾為 zip 檔
  3. 建立新 Layer
  4. 將 Layer 新增至函式

前兩步驟是在本機完成，後兩步驟是在 AWS 上進行，接下來將詳細解說各步驟。

1. 安裝所需套件至 python 資料夾

AWS 官方文件說額外的套件必須使用 「python」 這個名稱的資料夾打包，所以要在專案資料夾內建立一個 python 資料夾，並將套件安裝到裡面，詳細 Terminal 指令如下：

$ mkdir python
$ cd python

# 安裝單一套件
$ pip install --target . requests

# 一次安裝多個套件
$ pip install --target . -r requirements.txt
閱讀更多»