接下来我们介绍如何通过表格存储提供的通道服务,实现 Knative 对接表格存储事件源,订阅并通过钉钉发送天气提醒通知。
整体架构
----
回顾一下整体架构:
![o1](https://yqfile.alicdn.com/b4bb37ed5338e0a138c76a2e72a4a9583dbf7236.png)
* 通过 CronJob 事件源,每隔 3 个小时定时发送定时事件,将国内城市未来 3 天的天气信息,存储更新到表格存储
* 提供 RESTful API 查询天气信息
* 通过表格存储提供的通道服务,实现 TableStore 事件源
* 通过 Borker/Trigger 事件驱动模型,订阅天气信息
* 根据订阅收到的天气信息进行钉钉消息通知。如明天下雨,提示带伞等
基于 Knative 实现天气服务-下篇
--------------------
首先我们介绍一下表格存储提供的通道服务。通道服务(Tunnel Service)是基于表格存储数据接口之上的全增量一体化服务。通道服务为您提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道,您可以简单地实现对表中历史存量和新增数据的消费处理。通过数据通道可以进行数据同步、事件驱动、流式数据处理以及数据搬迁。这里事件驱动正好契合我们的场景。
先看一下处理流程图:
![o2](https://yqfile.alicdn.com/56a3eb29dd62be0d6ca233c3e886b7e1243f1871.png)
* 定义 TableStore 事件源,用于接收通道服务数据
* 通过 Borker/Trigger 事件驱动模型,订阅天气信息
* 订阅接收到的天气信息发送给天气提醒服务,进行钉钉消息通知
下面我们来详细介绍一下。
### 自定义 TableStore 事件源
在 Knative 中自定义事件源其实很容易,可以参考官方提供的自定义事件源的实例:[https://github.com/knative/docs/tree/master/docs/eventing/samples/writing-a-source](https://yq.aliyun.com/go/articleRenderRedirect?url=https%3A%2F%2Fgithub.com%2Fknative%2Fdocs%2Ftree%2Fmaster%2Fdocs%2Feventing%2Fsamples%2Fwriting-a-source)。
我们这里定义数据源为 AliTablestoreSource。代码实现主要分为两部分:
1. 资源控制器-Controller:接收 AliTablestoreSource 资源,在通道服务中创建 Tunnel
2. 事件接收器-Receiver:通过 Tunnel Client 监听事件,并将接收到的事件发送到目标服务( Broker)
关于自定义 TableStore 事件源实现参见 GitHub 源代码:[https://github.com/knative-sample/tablestore-source](https://yq.aliyun.com/go/articleRenderRedirect?url=https%3A%2F%2Fgithub.com%2Fknative-sample%2Ftablestore-source)
部署自定义事件源服务如下:
从 [https://github.com/knative-sample/tablestore-source/tree/master/config](https://yq.aliyun.com/go/articleRenderRedirect?url=https%3A%2F%2Fgithub.com%2Fknative-sample%2Ftablestore-source%2Ftree%2Fmaster%2Fconfig) 中可以获取事件源部署文件,执行下面的操作:
```
kubectl apply -f 200-serviceaccount.yaml -f 201-clusterrole.yaml -f 202-clusterrolebinding.yaml -f 300-alitablestoresource.yaml -f 400-controller-service.yaml -f 500-controller.yaml -f 600-istioegress.yaml
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
部署完成之后,我们可以看到资源控制器已经开始运行:
```
[root@iZ8vb5wa3qv1gwrgb3lxqpZ config]# kubectl -n knative-sources get pods
NAME READY STATUS RESTARTS AGE
alitablestore-controller-manager-0 1/1 Running 0 4h12m
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
### 创建事件源
由于我们是通过 Knative Eventing 中 Broker/Trigger 事件驱动模型对天气事件进行处理。首先我们创建用于数据接收的 Broker 服务。
#### 创建 Broker
```
apiVersion: eventing.knative.dev/v1alpha1
kind: Broker
metadata:
name: weather
spec:
channelTemplateSpec:
apiVersion: messaging.knative.dev/v1alpha1
kind: InMemoryChannel
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
#### 创建事件源实例
这里需要说明一下,创建事件源实例其实就是在表格存储中创建通道服务,那么就需要配置访问通道服务的地址、accessKeyId 和 accessKeySecret,这里参照格式:`{ "url":"https://xxx.cn-beijing.ots.aliyuncs.com/", "accessKeyId":"xxxx","accessKeySecret":"xxxx" }` 设置并进行 base64 编码。将结果设置到如下 Secret 配置文件 `alitablestore` 属性中:
```
apiVersion: v1
kind: Secret
metadata:
name: alitablestore-secret
type: Opaque
data:
# { "url":"https://xxx.cn-beijing.ots.aliyuncs.com/", "accessKeyId":"xxxx","accessKeySecret":"xxxx" }
alitablestore: "<base64>"
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
创建 RBAC 权限:
```
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
name: eventing-sources-alitablestore
subjects:
- kind: ServiceAccount
name: alitablestore-sa
namespace: default
roleRef:
apiGroup: rbac.authorization.k8s.io
kind: ClusterRole
name: eventing-sources-alitablestore-controller
---
apiVersion: v1
kind: ServiceAccount
metadata:
name: alitablestore-sa
secrets:
- name: alitablestore-secret
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
创建 AliTablestoreSource 实例,这里我们设置接收事件的 `sink` 为上面创建的 Broker 服务。
```
---
apiVersion: sources.eventing.knative.dev/v1alpha1
kind: AliTablestoreSource
metadata:
labels:
controller-tools.k8s.io: "1.0"
name: alitablestoresource
spec:
# Add fields here
serviceAccountName: alitablestore-sa
accessToken:
secretKeyRef:
name: alitablestore-secret
key: alitablestore
tableName: weather
instance: knative-weather
sink:
apiVersion: eventing.knative.dev/v1alpha1
kind: Broker
name: weather
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
创建完成之后,我们可以看到运行中的事件源:
```
[root@iZ8vb5wa3qv1gwrgb3lxqpZ config]# kubectl get pods
NAME READY STATUS RESTARTS AGE
tablestore-alitablestoresource-9sjqx-656c5bf84b-pbhvw 1/1 Running 0 4h9m
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
### 订阅事件和通知提醒
#### 创建天气提醒服务
如何进行钉钉通知呢,我们可以创建一个钉钉的群组(可以把家里人组成一个钉钉群,天气异常时,给家人一个提醒),添加群机器人:
![o3](https://yqfile.alicdn.com/20ab7015b02ac2ecbdbe13c3eaab6c1c6054a48a.png)
获取 webhook :
![o4](https://yqfile.alicdn.com/6b114999789d1650673da5f1cf850cbd645dcb24.png)
这里我们假设北京 (110000),日期:2019-10-13, 如果天气有雨,就通过钉钉发送通知提醒,则服务配置如下:
```
apiVersion: serving.knative.dev/v1beta1
kind: Service
metadata:
name: day-weather
spec:
template:
spec:
containers:
- args:
- --dingtalkurl=https://oapi.dingtalk.com/robot/send?access_token=xxxxxx
- --adcode=110000
- --date=2019-10-13
- --dayweather=雨
image: registry.cn-hangzhou.aliyuncs.com/knative-sample/dingtalk-weather-service:1.2
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
关于钉钉提醒服务具体实现参见 GitHub 源代码:[https://github.com/knative-sample/dingtalk-weather-service](https://yq.aliyun.com/go/articleRenderRedirect?url=https%3A%2F%2Fgithub.com%2Fknative-sample%2Fdingtalk-weather-service)
#### 创建订阅
最后我们创建 Trigger订阅天气事件,并且触发天气提醒服务:
```
apiVersion: eventing.knative.dev/v1alpha1
kind: Trigger
metadata:
name: weather-trigger
spec:
broker: weather
subscriber:
ref:
apiVersion: serving.knative.dev/v1alpha1
kind: Service
name: day-weather
```
![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)![](data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw== "点击并拖拽以移动")
订阅之后,如果北京 (110000),日期:2019-10-13, 天气有雨,会收到如下的钉钉提醒:
![o5](https://yqfile.alicdn.com/b0c3889582c10fbb749132297cfda6b4e4925ff7.png)
这里其实还有待完善的地方:
* 是否可以基于城市进行订阅(只订阅目标城市)?
* 是否可以指定时间发送消息提醒(当天晚上 8 点准时推送第 2 天的天气提醒信息)?
有兴趣的可以继续完善当前的天气服务功能。
小结
--
本文介绍了如何在 Knative 中自定义事件源,并通过事件驱动接收天气变化信息,订阅并通过钉钉推送通知提醒。这样基于 Knative Serverless 技术实现天气服务整体实现就介绍完了。有兴趣的同学可以针对上面提到的不足继续研究。还是那句话,做好天气服务不容易,但还好我有 Knative。
本文作者:一绿舟
[原文链接](https://yq.aliyun.com/articles/720585?utm_content=g_1000080326)
本文为云栖社区原创内容,未经允许不得转载。
分享到:
相关推荐
* 高度抽象性:Knative 提供了 Serverless 应用的抽象,隐藏了底层的资源细节。 Knative 的应用场景非常广泛,包括: * Serverless 应用的开发和部署 * 服务器less 的微服务架构 * 云原生应用的开发和部署 ...
- 针对开发者在实践中可能遇到的问题,本章详细讲解了阿里云Serverless的最新技术创新,以及如何克服技术难点,提供弹幕应用和“盲盒抽奖”等实际案例,帮助读者掌握Serverless的实战技巧。 3. **Serverless实用...
knative入门:Knative入门-构建基于Kubernetes的现代化Serverless应用-https:www.servicemesher.comgetting-started-with-knative
【标题】:基于AWS的Serverless应用开发:Rust实战 【描述】:这个压缩包“serverless-aws-rust-master”包含了一个使用Rust语言构建的Serverless应用程序,特别针对Amazon Web Services (AWS)平台。Serverless架构...
serverless-plugin-typescript, 无服务器插件,支持零配置 serverless-plugin-typescript 无服务器插件,支持零配置特性零配置:不需要安装任何其他编译器或者插件就可以使用这个框支持ES2015语法 特性( export,...
【标题】"serverless-ktp-ocr-master"指的是一个基于Serverless架构的光学字符识别(OCR)项目。Serverless是一种计算执行模型,其中云服务提供商负责管理服务器资源,开发者只需编写代码并上传,无需关心底层基础...
《PyPI官网下载:makenew_serverless_python-4.12.0-py3-none-any.whl详解》 在Python的世界里,PyPI(Python Package Index)是开发者们发布和获取Python软件包的主要平台。它为全球的Python开发者提供了一个集中...
标题中提及的“NBF:新零售服务开放的Serverless架构与深度实践”指的是冯微峰作为阿里巴巴供应链中台基础技术团队负责人,在2016年开始基于盒马的业务场景设计的新零售服务开放框架NBF(New-Retail Business ...
知识点4:Knative和RocketMQ的技术优势 Knative和RocketMQ的结合可以提供高效、可扩展的Serverless应用系统。Knative的弹性可以帮助开发者轻松应对高峰期的流量,而RocketMQ的高性能可以提供高效的消息队列系统。 ...
【标题】"aws-serverless-face-recognition-sentiment"是一个基于Python实现的项目,它将人脸识别技术与情感分析相结合,特别是在处理社交媒体数据如Twitter时。这个项目的核心是利用AWS(亚马逊网络服务)的无...
如果使用此插件,则应禁用内置的Serverless选项以排除开发依赖关系,这反而较慢: package : excludeDevDependencies : false 还可以考虑使用serverless-plugin-common-excludes来进一步减小程序包大小,并考虑使用...
npm install --save-dev serverless-iam-roles-per-function 或者,如果您想尝试next即将发布的版本: npm install --save-dev serverless-iam-roles-per-function@next 将插件添加到serverless.yml: plugins : ...
综上所述,《Serverless 入门与实战》不仅是一本理论知识的宝典,更是一份实践指南,它将帮助开发者理解Serverless的全貌,掌握其核心技术和应用场景,为迎接云计算的下一个十年做好准备。通过本书,读者将能够深入...
用法要安装插件,只需从中央 npm 存储库安装它: npm install --save serverless-snowflake-external-function-plugin然后将serverless-snowflake-external-function-plugin到serverless.yml的plugins部分: plugins...
`monocdk_serverless_clamscan` 是一个基于AWS Cloud Development Kit (CDK) 的Python库,它允许开发者在无服务器环境中集成ClamAV的扫描功能。CDK是一个开源项目,由AWS开发,它允许使用熟悉的编程语言(如Python)...
### Serverless入门与实战知识点概览 #### 一、Serverless概述 **1.1 架构演进** - **传统架构**:开发者需管理服务器硬件、操作系统等基础设施。 - **虚拟化技术**:通过虚拟机减少物理资源的管理负担。 - **...
**PyPI 官网下载 | cdk_serverless_lamp-1.0.1-py3-none-...这个库对于那些想要利用Serverless技术,特别是基于AWS的开发者来说,是一个潜在的有价值的工具。通过这个库,用户可以更高效地实现云原生应用的开发和部署。