Flink 与Flink可视化平台StreamPark教程(CDC功能)
本文分享自天翼云开发者社区《》,作者:ln基本概念flinkCDC功能是面向binlog进行同步、对数据的增删改进行同步的工具,能够实现对数据的动态监听。目前其实现原理主要为监听数据源的binlog对数据的变化有所感知。在这里,我们只需引入相关依赖即可进行
flink on k8s的基本介绍
本文分享自天翼云开发者社区《》,作者:ln一、背景介绍ApacheFlink是一个流处理引擎,具有高效的流处理和批处理能力,以及良好的可伸缩性和容错性。Kubernetes(简称K8s)是一种容器编排系统,用于自动化容器部署、扩展和管理。将Flink部署在
使用gdb调试core文件
本文分享自天翼云开发者社区《》.作者:小谢不用谢GDB(GNUDebugger)是一个功能强大的调试工具,它可以用来调试C、C、ObjectiveC等多种语言编写的程序。调试core文件是GDB的一个重要功能,core文件是由操作系统生成的,它包含了程
nginx解决进程内存占用翻倍
本文分享自天翼云开发者社区《》.作者:zn1.问题某天,线上生成环境发现一个问题:某一台机器线上的nginx进程占用的内存是其他机器的2倍,尝试对nginx进行reload后,并没有恢复内存占用翻倍机器:正常机器:2.分析1.每次reload或者启动时wo
openresty共享内存的使用
本文分享自天翼云开发者社区《》.作者:王兰在OpenResty中,ngx.shared用于访问共享内存区域,这在处理高并发请求时非常有用。以下是一些常见的使用场景和示例代码。首先,需要在Nginx配置文件中定义一个共享内存区域。例如,在http块中添加以下
cdn请求设备间防回环一种简单有效实现方案
本文分享自天翼云开发者社区《》.作者:周鹤实施步骤:步骤一:配置设备唯一标识在CDN网络中的每一台cache设备上,配置其唯一的设备标识(如hostname)。确保该标识在CDN网络中全局唯一,以便在请求追踪过程中准确识别设备。步骤二:修改请求处理逻辑在请
警惕大数据处理中的“检查者悖论”
本文分享自天翼云开发者社区《》.作者:王淋什么是检查者悖论:观察的角度不同,得出的统计结论也不同。有时又称为"候车悖论","等待时间悖论"为了形象说明,我们设计了一种模拟场景:班级人数统计,来用实例说明这个问题模拟场景:班级人数统计小明与小华要完成一个任务
利特尔法则(little' law)在软件开发领域的应用
本文分享自天翼云开发者社区《》.作者:王淋一、引例(Example)先考虑一个小学数学问题:a)某小学每届1000名学生,6年制,请估算此刻该学校内学生总人数。很明显,6个年级每个都是1000,学生人数为100066000。这就是利特尔法则的直观体现。看上
探究Openresty中ngx.re与Lua string.re两种正则的选择
本文分享自天翼云开发者社区《》.作者:王淋0.背景openresty中存在2套正则API,即ngx.re与lua语言的string库,都可以实现正则匹配查找等功能,那么,这2个API有什么区别,又如何选择呢?1.性能测试1.1简单loop测试a)短字符串&
关于ats缓存的热迁和冷迁
本文分享自天翼云开发者社区《》,作者:LeonHao。在CDN的服务中,有些内容访问会比较频繁,这种资源在性能更好的SSD中,会带来更好的访问体验。另外一些内容访问较少,作为相对冷的资源,只需要在HDD磁盘获取内容,即可达到较好的性能。这时就需要有策略的实