所有文章

使用 Telegraf 构建数据流水线：从 OPC-UA 服务器采集数据，发送到 Kafka

2024-01-09约 1 分钟阅读

让 Telegraf 从 OPC-UA 订阅点位变化，转成 JSON 送进 Kafka，再用正则把各异的字段名拍平为统一的 Value。

#Telegraf #Kafka

检查远程服务器的端口

2023-12-29约 1 分钟阅读

用 nc 的 -zvw10 选项，就能快速探测远程服务器端口是否已打开。

#网络工具 #Linux

Go语言中的反射应用：获取结构体的类型名

2023-12-25约 1 分钟阅读

用 reflect.TypeOf(instance).Name() 取得类型名，再通过 Tabler 接口覆盖特殊结构体的名字。

#Go

Go语言中的反射应用：检查类型

2023-12-25约 1 分钟阅读

通过 reflect.TypeOf(v).Kind() 判断变量是否为切片，只需一行代码。

#Go

通过 OPC-UA 协议采集设备数据

2023-12-25约 1 分钟阅读

用 Telegraf 的 OPC UA Listener 与 Reader 插件采集设备点位数据，再输出到 Kafka 或 InfluxDB。

#Telegraf

Go语言中的反射应用：合并两个结构体的字段

2023-12-24约 1 分钟阅读

借助反射编写一个 Merge 函数，即可合并名称相同、类型不同的两个结构体字段。

#Go

使用代码画图

2023-12-22约 1 分钟阅读

Graphviz 用 C 编写、PlantUML 依赖 JVM、D2 只需单个可执行文件，三款代码画图工具各有取舍。

#画图

Kafka 的命令行工具 kaf

2023-12-21约 1 分钟阅读

不到 20MB 的单个可执行文件，就能持续消费 Topic、导出数据并删除 consumer group。

#Kafka

发布开源的Python包到PyPI

2023-12-16约 2 分钟阅读

从包结构、setup.py 元信息到 GitHub Actions 可信发布，一步步把 Python 包发布到 PyPI。

#Python

大模型之RAG应用的逻辑架构

2023-12-07约 1 分钟阅读

检索增强生成 RAG 是大模型成熟的应用场景，这里用一张架构图梳理它的逻辑组成。

#LLM

DMP与CDP

2023-12-07约 1 分钟阅读

看似功能重叠的 DMP 和 CDP，到底区别在哪？一个管获新，一个管存量促活。

#数字化营销

使用 pip 安装位于 Git 代码仓库中的软件包

2023-12-02约 2 分钟阅读

不用自建 PyPI，pip 也能直接从 Git 仓库安装私有包，并用 SSH 转发在 CI 中安全构建镜像。

#Python #Docker

使用 Caddy 自动配置 Web 服务器的 SSL 证书

2023-12-01约 1 分钟阅读

只需写好 Caddyfile 并重启 Caddy，它就会自动为站点申请并配置 HTTPS 证书。

#Caddy #HTTPS #SSL证书 #Ubuntu

在Ubuntu服务器上配置防火墙

2023-11-30约 1 分钟阅读

云服务器默认只放行 SSH，用 ufw allow 80 与 443 即可对外开放 Web 与 HTTPS 服务。

#Ubuntu #Linux #防火墙

在Github Actions中使用OIDC配置AWS登录凭证

2023-11-29约 1 分钟阅读

借助 configure-aws-credentials 插件与 OIDC Provider，无需长期密钥即可让 GitHub Actions 安全访问 AWS。

#AWS #Github Actions

构建 Docker 镜像时仅复制存在的文件

2023-11-28约 1 分钟阅读

借助 glob 通配符的方括号写法，让 COPY 指令在文件缺失时静默跳过而不报错。

#Docker

持续集成在数据工程中的实践

2023-09-04约 12 分钟阅读

数据平台也是软件系统，为什么数据工程的持续交付仍充满低效与不可靠？用成熟模板引擎和 DBT 可以破局。

#数据工程 #CI/CD

静态网站的Nginx配置示例

2022-01-01约 1 分钟阅读

一份开箱即用的 Nginx 配置，含 gzip 压缩、字体 MIME 类型、静态资源长缓存与单页应用回退。

#Nginx