Knative 實戰:基於 Knative Serverless 技術實現天氣服務-下篇

  • 2019 年 10 月 12 日
  • 筆記

上一期我們介紹了如何基於 Knative Serverless 技術實現天氣服務-上篇,首先我們先來回顧一下上篇介紹的內容:

  • 通過高德天氣 API 介面,每隔 3 個小時定時發送定時事件,將中國城市未來 3 天的天氣資訊,存儲更新到表格存儲
  • 提供 RESTful API 查詢天氣資訊

接下來我們介紹如何通過表格存儲提供的通道服務,實現 Knative 對接表格存儲事件源,訂閱並通過釘釘發送天氣提醒通知。

整體架構

回顧一下整體架構:

o1

  • 通過 CronJob 事件源,每隔 3 個小時定時發送定時事件,將中國城市未來 3 天的天氣資訊,存儲更新到表格存儲
  • 提供 RESTful API 查詢天氣資訊
  • 通過表格存儲提供的通道服務,實現 TableStore 事件源
  • 通過 Borker/Trigger 事件驅動模型,訂閱天氣資訊
  • 根據訂閱收到的天氣資訊進行釘釘消息通知。如明天下雨,提示帶傘等

基於 Knative 實現天氣服務-下篇

首先我們介紹一下表格存儲提供的通道服務。通道服務(Tunnel Service)是基於表格存儲數據介面之上的全增量一體化服務。通道服務為您提供了增量、全量、增量加全量三種類型的分散式數據實時消費通道。通過為數據表建立數據通道,您可以簡單地實現對表中歷史存量和新增數據的消費處理。通過數據通道可以進行數據同步、事件驅動、流式數據處理以及數據搬遷。這裡事件驅動正好契合我們的場景。

先看一下處理流程圖:

o2

  • 定義 TableStore 事件源,用於接收通道服務數據
  • 通過 Borker/Trigger 事件驅動模型,訂閱天氣資訊
  • 訂閱接收到的天氣資訊發送給天氣提醒服務,進行釘釘消息通知

下面我們來詳細介紹一下。

自定義 TableStore 事件源

在 Knative 中自定義事件源其實很容易,可以參考官方提供的自定義事件源的實例:https://github.com/knative/docs/tree/master/docs/eventing/samples/writing-a-source。

我們這裡定義數據源為 AliTablestoreSource。程式碼實現主要分為兩部分:

  1. 資源控制器-Controller:接收 AliTablestoreSource 資源,在通道服務中創建 Tunnel
  2. 事件接收器-Receiver:通過 Tunnel Client 監聽事件,並將接收到的事件發送到目標服務( Broker)

關於自定義 TableStore 事件源實現參見 GitHub 源程式碼:https://github.com/knative-sample/tablestore-source

部署自定義事件源服務如下:

https://github.com/knative-sample/tablestore-source/tree/master/config 中可以獲取事件源部署文件,執行下面的操作:

kubectl apply -f 200-serviceaccount.yaml -f 201-clusterrole.yaml -f 202-clusterrolebinding.yaml -f 300-alitablestoresource.yaml -f 400-controller-service.yaml -f 500-controller.yaml -f 600-istioegress.yaml

部署完成之後,我們可以看到資源控制器已經開始運行:

[root@iZ8vb5wa3qv1gwrgb3lxqpZ config]# kubectl -n knative-sources get pods  NAME                                 READY   STATUS    RESTARTS   AGE  alitablestore-controller-manager-0   1/1     Running   0          4h12m

創建事件源

由於我們是通過 Knative Eventing 中 Broker/Trigger 事件驅動模型對天氣事件進行處理。首先我們創建用於數據接收的 Broker 服務。

創建 Broker

apiVersion: eventing.knative.dev/v1alpha1  kind: Broker  metadata:    name: weather  spec:    channelTemplateSpec:      apiVersion: messaging.knative.dev/v1alpha1      kind: InMemoryChannel

創建事件源實例

這裡需要說明一下,創建事件源實例其實就是在表格存儲中創建通道服務,那麼就需要配置訪問通道服務的地址、accessKeyId 和 accessKeySecret,這裡參照格式:{ "url":"https://xxx.cn-beijing.ots.aliyuncs.com/", "accessKeyId":"xxxx","accessKeySecret":"xxxx" } 設置並進行 base64 編碼。將結果設置到如下 Secret 配置文件 alitablestore 屬性中:

apiVersion: v1  kind: Secret  metadata:    name: alitablestore-secret  type: Opaque  data:    # { "url":"https://xxx.cn-beijing.ots.aliyuncs.com/", "accessKeyId":"xxxx","accessKeySecret":"xxxx" }    alitablestore: "<base64>"

創建 RBAC 許可權:

apiVersion: rbac.authorization.k8s.io/v1  kind: ClusterRoleBinding  metadata:    name: eventing-sources-alitablestore  subjects:  - kind: ServiceAccount    name: alitablestore-sa    namespace: default  roleRef:    apiGroup: rbac.authorization.k8s.io    kind: ClusterRole    name: eventing-sources-alitablestore-controller    ---  apiVersion: v1  kind: ServiceAccount  metadata:    name: alitablestore-sa  secrets:  - name: alitablestore-secret

創建 AliTablestoreSource 實例,這裡我們設置接收事件的 sink 為上面創建的 Broker 服務。

---  apiVersion: sources.eventing.knative.dev/v1alpha1  kind: AliTablestoreSource  metadata:    labels:      controller-tools.k8s.io: "1.0"    name: alitablestoresource  spec:    # Add fields here    serviceAccountName: alitablestore-sa    accessToken:      secretKeyRef:        name: alitablestore-secret        key: alitablestore    tableName: weather    instance: knative-weather    sink:      apiVersion: eventing.knative.dev/v1alpha1      kind: Broker      name: weather

創建完成之後,我們可以看到運行中的事件源:

[root@iZ8vb5wa3qv1gwrgb3lxqpZ config]# kubectl get pods  NAME                                                              READY   STATUS      RESTARTS   AGE  tablestore-alitablestoresource-9sjqx-656c5bf84b-pbhvw             1/1     Running     0          4h9m

訂閱事件和通知提醒

創建天氣提醒服務

如何進行釘釘通知呢,我們可以創建一個釘釘的群組(可以把家裡人組成一個釘釘群,天氣異常時,給家人一個提醒),添加群機器人:

o3

獲取 webhook :

o4

這裡我們假設北京 (110000),日期:2019-10-13, 如果天氣有雨,就通過釘釘發送通知提醒,則服務配置如下:

apiVersion: serving.knative.dev/v1beta1  kind: Service  metadata:    name: day-weather  spec:    template:      spec:        containers:        - args:          - --dingtalkurl=https://oapi.dingtalk.com/robot/send?access_token=xxxxxx          - --adcode=110000          - --date=2019-10-13          - --dayweather=雨          image: registry.cn-hangzhou.aliyuncs.com/knative-sample/dingtalk-weather-service:1.2

關於釘釘提醒服務具體實現參見 GitHub 源程式碼:https://github.com/knative-sample/dingtalk-weather-service

創建訂閱

最後我們創建 Trigger訂閱天氣事件,並且觸發天氣提醒服務:

apiVersion: eventing.knative.dev/v1alpha1  kind: Trigger  metadata:    name: weather-trigger  spec:    broker: weather    subscriber:      ref:        apiVersion: serving.knative.dev/v1alpha1        kind: Service        name: day-weather

訂閱之後,如果北京 (110000),日期:2019-10-13, 天氣有雨,會收到如下的釘釘提醒:

o5

這裡其實還有待完善的地方:

  • 是否可以基於城市進行訂閱(只訂閱目標城市)?
  • 是否可以指定時間發送消息提醒(當天晚上 8 點準時推送第 2 天的天氣提醒資訊)?

有興趣的可以繼續完善當前的天氣服務功能。

小結

本文介紹了如何在 Knative 中自定義事件源,並通過事件驅動接收天氣變化資訊,訂閱並通過釘釘推送通知提醒。這樣基於 Knative Serverless 技術實現天氣服務整體實現就介紹完了。有興趣的同學可以針對上面提到的不足繼續研究。還是那句話,做好天氣服務不容易,但還好我有 Knative。

歡迎加入 Knative 交流群

o6

「 阿里巴巴雲原生微信公眾號(ID:Alicloudnative)關注微服務、Serverless、容器、Service Mesh等技術領域、聚焦雲原生流行技術趨勢、雲原生大規模的落地實踐,做最懂雲原生開發者的技術公眾號。」

本文由部落格一文多發平台 OpenWrite 發布!