Serverless 工程實踐|自建 Apache OpenWhisk 平台

作者 | 劉宇(江昱)

前言:OpenWhisk 是一個開源、無服務器的雲平台,可以在運行時容器中通過執行擴展的代碼響應各種事件,而無須用戶關心相關的基礎設施架構。

OpenWhisk 簡介

OpenWhisk 是基於雲的分佈式事件驅動的編程服務。OpenWhisk 提供一種編程模型,將事件處理程序註冊到雲服務中,以處理各種不同的服務。其可以支持數千觸發器和調用,可以對不同規模的事件進行響應。

OpenWhisk 是由許多組件構建的,這些組件讓 OpenWhisk 成為一款優秀的開源 FaaS 平台。

1.png
Apache OpenWhisk 組件結構

OpenWhisk 部署

實驗機器操作系統為 Ubuntu 18.04 Desktop。使用 GitHub 上所提供的 incubator-openwhisk 進行安裝,如果本機沒有安裝 Git,需要先安裝 Git:

apt install git

接下來克隆 repo 到本地目錄:

git clone //github.com/apache/incubator-openwhisk.git openwhisk

克隆完成之後,顯示如圖所示。

2.png
Apache OpenWhisk 項目 Clone

進入 OpenWhisk 目錄,並且執行腳本。OpenWhisk 是由 Scala 開發的,運行需要安裝 Java 環境。下面的腳本實現了 Java 環境的安裝,以及其他的所需要的軟件:

cd openwhisk && cd tools/ubuntu-setup && ./all.sh

Apache OpenWhisk 安裝配置如圖所示。

3.png
Apache OpenWhisk 安裝配置

OpenWhisk 使用 ansible 進行部署,環境變量定義在 ansible/environments/group_vars/all 下:

limits:
invocationsPerMinute: "{{ limit_invocations_per_minute | default(60) }}"
concurrentInvocations: "{{ limit_invocations_concurrent | default(30) }}"
concurrentInvocationsSystem:  "{{ limit_invocations_concurrent_system | default
    (5000) }}"
firesPerMinute: "{{ limit_fires_per_minute | default(60) }}"
sequenceMaxLength: "{{ limit_sequence_max_length | default(50) }}"

上面程序定義了 OpenWhisk 在系統中的限制。

  • invocationsPerMinute 表示同一個 Namespace 每分鐘調用 Action 的數量。
  • concurrentInvocations 表示同一個 Namespace 的並發調用數量。
  • concurrentInvocationsSystem 表示系統中所有 Namespace 的並發調用數量。
  • firesPerMinute 表示同一個 Namespace 中每分鐘調用 Trigger 的數量。
  • sequenceMaxLength 表示 Action 的最大序列長度。

如果需要修改上述的默認值,可以把修改後的值添加到文件 ansible/environments/local/group_vars/all 的末尾。例如,Action 的最大序列長度為 100,可以將 sequenceMaxLength: 120 添加到文件的末尾。

接下來,為 OpenWhisk 配置一個持久存儲的數據庫,有 CouchDB 和 Cloudant 可選。以 CouchDB 為例,配置環境:

export OW_DB=CouchDB
export OW_DB_USERNAME=root
export OW_DB_PASSWORD=PASSWORD
export OW_DB_PROTOCOL=http
export OW_DB_HOST=172.17.0.1
export OW_DB_PORT=5984

在 openwhisk/ansible 目錄下,運行腳本,如圖所示。

ansible-playbook -i environments/local/ setup.yml

4.png
執行腳本過程

接下來使用 CouchDB 部署 OpenWhisk,確保本地已經有了 db_local.ini。在 openwhisk/ 目錄下執行部署命令:

./gradlew distDocker

如果部署過程中出現問題(如下圖所示),可能是沒有安裝 npm 導致的,此時可以執行如下指令。

5.png
部署過程可能報錯示例

apt install npm

稍等片刻,可以看到 Build 成功頁面,如圖所示。

6.png
Build 成功示例

接下來進入 openwhisk/ansible 目錄:

ansible-playbook -i environments/local/ couchdb.yml
ansible-playbook -i environments/local/ initdb.yml
ansible-playbook -i environments/local/ wipe.yml
ansible-playbook -i environments/local/ apigateway.yml
ansible-playbook -i environments/local/ openwhisk.yml
ansible-playbook -i environments/local/ postdeploy.yml

執行腳本過程如圖所示。

7.png
圖片執行腳本過程

部署成功後,OpenWhisk 會在系統中啟動幾個 Docker 容器。我們可以通過 docker ps 來查看:

docker ps --format "{{.Image}} \t {{.Names }}"

安裝成功後的容器列表如圖所示。

8.png
安裝成功後的容器列表

開發者工具

OpenWhisk 提供了一個統一的命令行接口 wsk。生成的 wsk 在 openwhisk/bin 下。其有兩個屬性需要配置。

  • API host 用於部署 OpenWhisk 的主機名或 IP 地址的 API。
  • Authorization key(用戶名或密碼)用來授權操作 OpenWhisk 的 API。

設置 API host,在單機配置中的 IP 應該為 172.17.0.1,如圖所示。

./bin/wsk property set --apihost '172.17.0.1'

9.png
設置 API host

設置 key:

./bin/wsk property set --auth `cat ansible/files/auth.guest

權限設置如圖所示。

10.png
圖片設置權限

OpenWhisk 將 CLI 的配置信息存儲在 ~/.wskprops 中。這個文件的位置也可以通過環境變量 WSK_CONFIG_FILE 來指定。

驗證 CLI:

wsk action invoke /whisk.system/utils/echo –p message hello –result
{
    "message": "hello"
}

體驗測試

創建簡單的動作(action),代碼如下:

# test.py
def main(args):
    num = args.get("number", "30")
    return {"fibonacci": F(int(num))}
def F(n):
    if n == 0:
        return 0
    elif n == 1:
        return 1
    else:
        return F(n - 1) + F(n - 2)

創建動作:

/bin/wsk action create myfunction ./test.py  --insecure

函數創建如圖所示。
11.png
創建函數

觸發動作:

./bin/wsk -i action invoke myfunction --result --blocking --param nember 20

得到結果,如圖所示。

12.png
執行函數

至此,我們完成了 OpenWhisk 項目的部署以及測試。