Arvin的网络日志

关于

Sat, 09 May 2026 10:55:12 +0800

技术栈

Python/Golang
Web开发
Unix系统、网络编程
容器技术

关注领域

Web开发、Serverless
云、容器、PaaS

工作经历

老虎证券（2024——至今），高级云平台运维工程师
百度（2023——2024），高级运维开发工程师
新浪网（2020——2023），高级运维开发工程师
北京时代复兴投资管理有限公司（2018——2020）, 全栈研发工程师

社交

Github: https://github.com/Arvintian
Weibo: https://weibo.com/u/5803745670

开源项目

FaaS Platform: https://github.com/refunc/refunc
Python Web框架: https://github.com/Arvintian/nuxt

感谢您的关注

感谢您的支持

赞助者名单

赞赏者	赞赏金额	赞赏日期
闫*飞	70	2021-08-19
唐*	100	2022-10-21

SD卡速度规格详解及使用场景对照

Fri, 08 May 2026 20:42:18 +0800

SD卡速度规格详解及使用场景对照

SD卡的速度等级由多个不同的标准组成，分别针对最低写入速度、总线传输速度和应用性能。以下是详细的对照表和使用建议：

1. 核心速度等级对照表

标识图标	全称/含义	最低持续写入速度	主要应用场景
Class 2	Speed Class 2	2 MB/s	早期SD卡，仅适合低分辨率视频或音频存储（现已淘汰）
Class 4	Speed Class 4	4 MB/s	普通标清视频、非高清照片存储（现已较少见）
Class 6	Speed Class 6	6 MB/s	高清视频录制、普通数码相机
Class 10	Speed Class 10	10 MB/s	1080P全高清视频录制、单反相机连拍（经典入门标准）
U1	UHS Speed Class 1	10 MB/s	等同于Class 10，用于1080P视频、普通4K视频
U3	UHS Speed Class 3	30 MB/s	高码率4K视频、8K视频基础、高速连拍、专业摄影
V6	Video Speed Class 6	6 MB/s	低码率视频录制（较少见）
V10	Video Speed Class 10	10 MB/s	1080P视频录制
V30	Video Speed Class 30	30 MB/s	主流4K视频、高像素连拍（目前最通用的中高端标准）
V60	Video Speed Class 60	60 MB/s	高码率4K/8K视频、RAW格式高速连拍、双卡槽写入
V90	Video Speed Class 90	90 MB/s	极致专业视频（如8K 60fps）、高码率RAW连拍、电影制作

2. 总线传输速度层级 (UHS)

这代表了SD卡与读卡器/相机之间的理论最大传输带宽，影响照片/视频从卡导出到电脑的速度。

标准	理论最大读取速度	说明
UHS-I	104 MB/s	最常见，单排金手指。满足绝大多数消费级需求。
UHS-II	312 MB/s	双排金手指（底部多一排触点）。需配合UHS-II读卡器使用，导出速度极快，适合专业摄影师。
UHS-III	624 MB/s	较新标准，双排金手指，速度翻倍，目前高端专业设备开始支持。

3. 应用性能等级 (A-Class) - 主要针对手机/microSD

等级	含义	适用场景
A1	随机读取/写入性能提升	适合在手机上运行APP、存储游戏数据。
A2	随机读写性能大幅提升（IOPS更高）	推荐用于Android手机、Switch、无人机，能显著提升APP加载速度和系统流畅度。

选购建议与使用场景匹配

📷 场景一：普通家用 / 行车记录仪 / 监控摄像头

推荐规格：Class 10 或 U1 / V10
理由：这类设备对持续写入速度要求不高，10MB/s 足以应对1080P视频循环覆盖。
注意：监控/行车记录仪需选择“高耐久（High Endurance）”系列，因为它们是7x24小时不断写入。

📸 场景二：日常摄影 / 旅行 / 1080P 或基础 4K 视频

推荐规格：U3 / V30 + UHS-I
理由：V30保证30MB/s的持续写入，能稳定录制4K视频不卡顿。UHS-I接口足以应付日常照片导入。这是目前性价比最高、最通用的选择。

🎥 场景三：专业视频创作 / 8K视频 / 高码率4K

推荐规格：V60 或 V90 + UHS-II
理由：拍摄高码率视频（如4K 120fps或8K）时，数据量巨大，V60/V90能防止缓冲区溢出（爆红/停止录制）。UHS-II接口能实现秒传大量素材，节省后期时间。
注意：必须搭配支持UHS-II的读卡器和电脑接口（USB 3.1/3.2 Gen 2或Thunderbolt）。

📱 场景四：手机扩容 / Switch / 无人机 / 运动相机

推荐规格：microSDXC + A2 + V30/U3
理由：
- A2：确保在手机或Switch上运行大型游戏和APP时加载速度快。
- V30/U3：确保在GoPro、大疆无人机等设备上录制4K高清视频不掉帧。
- 耐用性：运动相机建议使用“加固版”或“高耐用”系列，以抵抗高温和震动。

。

RHEL系Linux更新内核

Thu, 11 Sep 2025 15:20:23 +0800

ELRepo 简介

项目主页：http://elrepo.org

Enterprise Linux 软件包的 RPM 存储库。ELRepo 支持 Red Hat Enterprise Linux (RHEL) 及其衍生产品，如CentOS Linux、AlmaLinux 和 Rocky Linux。

启用 ELRepo

从 CentOS 8 开始，ELRepo 已经加入到官方软件仓库中，名称为 “elrepo-release”。

AlmaLinux 和 Rocky Linux 同样适用。

启用 ELRepo 只需要执行命令：

dnf -y install elrepo-release

升级内核

查询 ELRepo 中的 kernel 版本

yum --disablerepo="*" --enablerepo="elrepo-kernel" list available
yum --disablerepo="*" --enablerepo="elrepo-kernel" list available --showduplicates #查看所有版本

kernel-ml 中的 ml 是英文 “mainline stable” 的缩写，elrepo-kernel 中列出来的是最新的稳定主线版本。
kernel-lt 中的 lt 是英文 “long term support” 的缩写，elrepo-kernel 中列出来的长期支持版本。

安装 kernel

yum --disablerepo="*" --enablerepo=elrepo-kernel install kernel-ml kernel-ml-core kernel-ml-devel kernel-ml-modules  kernel-ml-modules-extra

慎重装kernel-ml-headers包，会和发行版的kernel-headers包冲突

Error:
 Problem: package kernel-ml-headers-6.16.6-1.el8.elrepo.x86_64 from elrepo-kernel conflicts with kernel-headers < 6.16.6-1.el8.elrepo provided by kernel-headers-4.18.0-553.34.1.el8_10.x86_64 from @System
  - cannot install the best candidate for the job
  - problem with installed package kernel-headers-4.18.0-553.34.1.el8_10.x86_64

elrepo官方提示:

There is no need to install the kernel-lt-headers package. It is only necessary if you intend to rebuild glibc and, thus, the entire operating system. If there is a need to have the kernel headers installed, you should use the current distributed kernel-headers package as that is related to the current version of glibc. When you see a message like “your kernel headers for kernel xxx cannot be found …”, you most likely need the kernel-lt-devel package, not the kernel-lt-headers package.

kernel-headers包是给用户态程序用的，个人理解为类似libc标准库里的*unix规范接口函数，不同版本内核间相当稳定，所以使用发行版的即可。
kernel-devel包是给开发内核态程序\内核模块用的，不通版本内核间就有差异，所以需要单独装。

所以常规仅仅是使用新版本内核，不需要装kernel-ml-headers，保持使用发行版的kernel-headers，而且升级发行版的kernel版本时kernel-headers也可能不会一起更新，kernel-headers在需要时才会更新。

发行版源的其他软件，都依赖发行版的kernel-headers，忽略冲突安装可能造成其他软件安装失败，https://www.rockylinux.cn/notes/rocky-linux-9-nei-he-sheng-ji-zhi-6.html。

查询安装的 kernel 包

rpm -qa|grep kernel

查看和设置默认启动项

grubby 是一个命令行工具，用于更新和显示有关 grub2 和 zipl 引导加载程序的配置文件的信息。它主要设计用于安装新内核并需要查找有关当前引导环境的信息的脚本。同时也可以对启动内核的各项信息参数进行修改。

在 CentOS 8 在已经自带该命令，如果没有通过 yum install grubby 来安装即可。

查看当前的默认启动内核：

grubby --default-kernel
/boot/vmlinuz-5.15.4-1.el8.elrepo.x86_64

查看系统安装的全部内核：

grubby --info=ALL

index=0
kernel="/boot/vmlinuz-5.15.4-1.el8.elrepo.x86_64"
args="ro crashkernel=auto net.ifnames=0 $tuned_params"
root="UUID=56c34ece-6010-480e-aeac-dea98b8ffcd3"
initrd="/boot/initramfs-5.15.4-1.el8.elrepo.x86_64.img $tuned_initrd"
title="Rocky Linux (5.15.4-1.el8.elrepo.x86_64) 8.5 (Green Obsidian)"
id="032ed95ba9c0471381bbb6b416eff523-5.15.4-1.el8.elrepo.x86_64"
index=1
kernel="/boot/vmlinuz-4.18.0-348.2.1.el8_5.x86_64"
args="ro crashkernel=auto net.ifnames=0 $tuned_params"
root="UUID=56c34ece-6010-480e-aeac-dea98b8ffcd3"
initrd="/boot/initramfs-4.18.0-348.2.1.el8_5.x86_64.img $tuned_initrd"
title="Rocky Linux (4.18.0-348.2.1.el8_5.x86_64) 8.5 (Green Obsidian)"
id="032ed95ba9c0471381bbb6b416eff523-4.18.0-348.2.1.el8_5.x86_64"
index=2
kernel="/boot/vmlinuz-4.18.0-348.el8.x86_64"
args="ro crashkernel=auto net.ifnames=0 $tuned_params intel_iommu=on"
root="UUID=56c34ece-6010-480e-aeac-dea98b8ffcd3"
initrd="/boot/initramfs-4.18.0-348.el8.x86_64.img $tuned_initrd"
title="AlmaLinux (4.18.0-348.el8.x86_64) 8.5 (Arctic Sphynx)"
id="032ed95ba9c0471381bbb6b416eff523-4.18.0-348.el8.x86_64"
index=3
kernel="/boot/vmlinuz-0-rescue-032ed95ba9c0471381bbb6b416eff523"
args="ro crashkernel=auto net.ifnames=0"
root="UUID=56c34ece-6010-480e-aeac-dea98b8ffcd3"
initrd="/boot/initramfs-0-rescue-032ed95ba9c0471381bbb6b416eff523.img"
title="AlmaLinux (0-rescue-032ed95ba9c0471381bbb6b416eff523) 8.5 (Arctic Sphynx)"
id="032ed95ba9c0471381bbb6b416eff523-0-rescue"

查看特定内核的具体信息：

grubby --info=/boot/vmlinuz-4.18.0-348.el8.x86_64
index=1
kernel="/boot/vmlinuz-4.18.0-348.el8.x86_64"
args="ro crashkernel=auto net.ifnames=0 $tuned_params"
root="UUID=56c34ece-6010-480e-aeac-dea98b8ffcd3"
initrd="/boot/initramfs-4.18.0-348.el8.x86_64.img $tuned_initrd"
title="AlmaLinux (4.18.0-348.el8.x86_64) 8.5 (Arctic Sphynx)"
id="032ed95ba9c0471381bbb6b416eff523-4.18.0-348.el8.x86_64"

设置新的默认启动内核：

使用路径来指定内核，可以使用 –set-default=kernel-path

grubby --set-default=/boot/vmlinuz-4.18.0-348.el8.x86_64
The default is /boot/loader/entries/032ed95ba9c0471381bbb6b416eff523-4.18.0-348.el8.x86_64.conf with index 1 and kernel /boot/vmlinuz-4.18.0-348.el8.x86_64

grubby --default-kernel
/boot/vmlinuz-4.18.0-348.el8.x86_64

使用 index 来指定内核，则使用 –set-default-index=entry-index

grubby --set-default-index=1
The default is /boot/loader/entries/032ed95ba9c0471381bbb6b416eff523-4.18.0-348.el8.x86_64.conf with index 1 and kernel /boot/vmlinuz-4.18.0-348.el8.x86_64

grubby --default-kernel
/boot/vmlinuz-4.18.0-348.el8.x86_64

重启后生效

reboot

删除旧内核（可选）

从启动项中删除旧内核

grubby --remove-kernel=/boot/vmlinuz-4.18.0-348.el8.x86_64

删除旧内核文件

# 删除旧内核
yum remove kernel-4.18.0 kernel-core-4.18.0 kernel-modules-4.18.0 kernel-devel-4.18.0
# 需要注意，是否同时删除一些依赖包。

Kernel相关的RPM包说明

kernel-core
提供内核的二进制镜像、所有与 initramfs相关的对象来引导系统，以及确保核心功能的最小内核模块数量。

kernel-modules
提供 kernel-core 中不存在的其余内核模块。

kernel-modules-extra
为罕见硬件提供内核模块。默认禁用模块的加载。

kernel-debug
提供了启用了许多调试选项的内核，以便进行内核诊断，以降低性能为代价。

kernel-tools
提供了操作 Linux 内核和支持文档的工具。

kernel-devel
提供了内核标头和 makefile，来足以针对 kernel 软件包构建模块。

kernel-abi-stablelists
提供与 RHEL 内核 ABI 相关的信息，包括外部 Linux 内核模块所需的内核符号列表和 yum 插件以协助执行。

kernel-headers
包括指定 Linux 内核和用户空间库以及程序间接口的 C 标头文件。头文件定义构建大多数标准程序所需的结构和常量。

安装ELRepo历史版本内核

官方的elrepo, lt和ml都只有当前版本的包。

如果要指定安装指定版本的内核，可以从这里https://mirrors.coreix.net/elrepo-archive-archive/kernel/下载RPM包。

例如rockylinux8目前了mainline是6.x，安装高版本的5.x:

wget -c https://mirrors.coreix.net/elrepo-archive-archive/kernel/el8/x86_64/RPMS/kernel-ml-5.19.9-1.el8.elrepo.x86_64.rpm
wget -c https://mirrors.coreix.net/elrepo-archive-archive/kernel/el8/x86_64/RPMS/kernel-ml-core-5.19.9-1.el8.elrepo.x86_64.rpm
wget -c https://mirrors.coreix.net/elrepo-archive-archive/kernel/el8/x86_64/RPMS/kernel-ml-devel-5.19.9-1.el8.elrepo.x86_64.rpm
wget -c https://mirrors.coreix.net/elrepo-archive-archive/kernel/el8/x86_64/RPMS/kernel-ml-modules-5.19.9-1.el8.elrepo.x86_64.rpm
wget -c https://mirrors.coreix.net/elrepo-archive-archive/kernel/el8/x86_64/RPMS/kernel-ml-modules-extra-5.19.9-1.el8.elrepo.x86_64.rpm

# rpm -ivh --oldpackage kernel-ml-*
rpm -ivh kernel-ml-*

文章参考

https://sysin.org/blog/centos-8-upgrade-kernel/

本地Lambda函数几行代码实现MCP Server

Sat, 12 Apr 2025 16:56:26 +0800

文章视频教程: https://www.bilibili.com/video/BV1wWd8YNEZY/?vd_source=e14a954d1c7739b152548d58bf125603

MCP+Lambda

MCP服务器充当MCP客户端与Lambda函数之间的桥梁，使生成式AI模型能够访问和运行Lambda函数作为工具。

社区项目 https://github.com/danilop/MCP2Lambda

但是目前MCP在安全方面还比较弱，所以社区MCP工具基本都是本地工具，Lambda能不能也本地部署。

Refunc是基于K8S的一个本地化的Lambda平台，可以实现本地部署Lambda函数。

MCP+Refunc

Refunc社区跟进MCP发展，实现了任意函数通过MCP开放调用。

https://github.com/refunc/mcp-server

部署 Refunc

在 refunc-system 命名空间下部署所有 Refunc 组件。

kubectl apply -f https://raw.githubusercontent.com/refunc/mcp-server/refs/heads/main/deploy/play-all-in-one.yaml

接着，将 Refunc 服务代理到本地。

kubectl port-forward svc/aws-api 8000:http --address 0.0.0.0 -n refunc-system
kubectl port-forward svc/mcp-server 8001:http --address 0.0.0.0 -n refunc-system

注意：演示部署中的数据是非持久化的。

创建函数

使用 refunc-cli 创建一个函数。

pip install -U refunc-cli
mkdir mcp-demo && cd mcp-demo
rfctl init

在 main.py 中编写任意代码，演示将回显一条问候消息。

AWS_DEFAULT_ENDPOINT=http://127.0.0.1:8000 rfctl create

注意：您需要一个 Python 3 环境。

创建 MCP 端点

编辑 lambda.yaml 并粘贴以下代码。

metadata:
  name: mcp-demo
  namespace: refunc-system
spec:
  build:
    source: .
    manifest: requirements.txt
    language: python
    architecture: x86_64
  handler: main.lambda_handler
  timeout: 120
  runtime: "python3.10"
  concurrency: 1
  environment:
    ENV_TEST: TEST
#  url:
#    cors:
#      allowCredentials: true
#      allowHeaders: "*"
#      allowMethods: "*"
#      allowOrigins: "*"
#      exposeHeaders: "*"
#      maxAge: 300
  events:
    # - name: hourly
    #   type: cron
    #   mapping:
    #     cron: 0 * * * *
    #     location: Asia/Shanghai
    #     args:
    #       var1: value1
    #     saveLog: false
    #     saveResult: false
    - name: mcp
      type: mcp
      mapping:
        args:
          token: mcp-demo
          tools:
            - name: echo-hello
              desc: Echo a hello msg
              schema:
                type: object
                properties: {}
                required: []
        saveLog: false
        saveResult: false

接下来，运行以下命令更新配置：

AWS_DEFAULT_ENDPOINT=http://127.0.0.1:8000 rfctl update-config

演示的 MCP SSE 端点为：http://127.0.0.1:8001/refunc-system/mcp-demo/test/mcp-demo/sse

Refunc MCP SSE URL 路径格式为：/namespace/<token-secret-name>/<token>/<func-name>/sse

Refunc MCP 事件规范

- name: mcp
  type: mcp # 事件类型必须为 mcp。
  mapping:
    args:
      token: mcp-demo # 可以在 play-all-in-one.yaml 中找到的 token 秘钥名称。
      tools: # MCP 工具
        - name: echo-hello # MCP 工具名称
          desc: Echo a hello msg # MCP 工具描述
          schema: # MCP 工具参数，用有效的 JSON Schema 描述。
            type: object
            properties: {}
            required: []
    saveLog: false
    saveResult: false

事件的tools字段是一个数组，您可以通过一个函数实现多个tool。在调用函数时，Refunc 会添加两个内置参数：_call_type 和 _call_method，其中 _call_method 是tool的名称。_call_type会表示调用来自MCP的什么类型，Tool、Resource或者Prompts。

安伯尼可RG40xxV掌机设置远程管理游戏

Sat, 11 Jan 2025 14:17:56 +0800

开启SSH

使用系统自带的文件管理器，编辑系统设置文件

/mnt/mod/ctrl/configs/system.cfg

添加开启ssh配置

global.ssh=1

然后重启，连接WIFI，从系统菜单配置获取IP地址。

进入一个游戏，然后暂停，不然系统自动锁屏休眠，网络会断，配置好FTP以后传游戏时候也这样操作。

安装VSFTP服务器

使用xshell或者其他ssh终端工具登录，密码同用户名(猜出来的)，建议登录上去之后改掉，实测不影响系统使用。

ssh root@192.168.x.x

会发现周哥的系统就是原生的Ubuntu。

Welcome to Ubuntu 22.04 LTS (GNU/Linux 4.9.170 aarch64)

通过apt安装ftp服务器。

# 系统默认用的清华的源666
apt update
apt install vsftpd

配置VSFTP

直接在终端下vim配

mv /etc/vsftpd.conf /etc/vsftpd.conf.bak
vim /etc/vsftpd.conf

vsftp配置如下

listen=YES
anonymous_enable=NO
local_enable=YES
write_enable=YES
chroot_local_user=YES
chroot_list_enable=YES
chroot_list_file=/etc/vsftpd/chroot_list
local_root=/mnt
allow_writeable_chroot=YES
pasv_enable=YES

开启root使用ftp登录

vim /etc/ftpusers
删除或注释掉root行

重启vsftp

systemctl restart vsftpd

通过FTP管理游戏文件

下载FileZilla，FTP连接游戏机IP即可，FTP客户端使用参考其他教程。

系统卡目录

/mmc

扩展卡目录

/sdcard

Docker部署MySQL主从复制

Wed, 09 Oct 2024 15:05:47 +0800

运维现场

已有一个通过Docker部署的MySQL单实例，实例中有多个库，且已有数据，备份容灾目的现扩充从库。

docker run -d --name mysql --restart unless-stopped -p 3406:3306 --log-opt max-size=50m \
-v /data/mysql:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=xxx \
mysql:5.7

主库调整

The default configuration for MySQL can be found in /etc/mysql/my.cnf, which may !includedir additional directories such as /etc/mysql/conf.d or /etc/mysql/mysql.conf.d.

MySQL的镜像已经把主配置my.cnf映射到/etc/mysql/conf.d目录，所以只需自定义一个my.conf，通过目录挂载到容器里面即可。

[mysqld]
skip-host-cache
skip-name-resolve
server_id=1  //设置服务id
log_bin=mysql-bin //开启二进制日志
binlog-ignore-db=mysql
binlog_cache_size=1M
binlog_format=mixed
expire_logs_days=7
slave_skip_errors=1062

[mysql]

[mysqldump]
quick
quote-names
max_allowed_packet=16M

停止当前容器，修改启动命令，挂载my.cnf，重新启动。

docker run -d --name mysql --restart unless-stopped -p 3406:3306 --log-opt max-size=50m \
-v /data/mysql:/var/lib/mysql \
-v /data/mysql.conf.d:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=xxx \
mysql:5.7

查看master状态。

MySQL [(none)]> show master status;
+------------------+-----------+--------------+------------------+-------------------+
| File             | Position  | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+-----------+--------------+------------------+-------------------+
| mysql-bin.000002 | 452181159 |              | mysql            |                   |
+------------------+-----------+--------------+------------------+-------------------+

从库搭建

配置slave的my.cnf，在另外一台机器上，启动一个空实例。

[mysqld]
skip-host-cache
skip-name-resolve
server_id=2
log_bin=slave-bin
binlog-ignore-db=mysql
binlog_cache_size=1M
binlog_format=mixed
expire_logs_days=7
slave_skip_errors=1062
relay_log=slave-relay-bin
log_slave_updates=1
read_only=1

[mysql]

[mysqldump]
quick
quote-names
max_allowed_packet=16M

docker run -d --name mysql --restart unless-stopped -p 3406:3306 --log-opt max-size=50m \
-v /data/mysql:/var/lib/mysql \
-v /data/mysql.conf.d:/etc/mysql/conf.d \
-e MYSQL_ROOT_PASSWORD=xxx \
mysql:5.7

全量备份主库

首先锁表。

#全备主库时需要另开一个终端，给数据库加上读锁，避免在备份期间有其他人在写入导致数据不一致
#此锁表的终端必须在备份完成以后才能退出
mysql> flush tables with read lock;

记录binlog状态，锁表之后binlog的Position就不会再变了，记录下File和Position。

MySQL [(none)]> show master status;
+------------------+-----------+--------------+------------------+-------------------+
| File             | Position  | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+-----------+--------------+------------------+-------------------+
| mysql-bin.000002 | 461472295 |              | mysql            |                   |
+------------------+-----------+--------------+------------------+-------------------+

操作备份，备份完成，即可释放表锁。

mysqldump -h 172.x.x.10 -P 3406 -uroot -pxxx --all-databases > all-database-$(date '+%F-%H-%M-%S').sql

#解除主库的锁表状态，直接退出交互式界面即可
mysql> quit

把全量数据导入到从库中

mysql -h 172.x.x.11 -P 3406 -uroot -pxxx < all-database-2024-10-09-11-27-41.sql

配置从库同步

登录从库，执行change master，注意master_log_file和master_log_pos，填写在备份主库前记录值。

change master to master_host='172.x.x.10',master_port=3406,master_user='root',master_password='xxx',master_log_file='mysql-bin.000002',master_log_pos=461472295;

查看从库状态。

MySQL [(none)]> show slave status \G;
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 172.x.x.10
                  Master_User: root
                  Master_Port: 3406
                Connect_Retry: 30
              Master_Log_File: mysql-bin.000002
          Read_Master_Log_Pos: 479860795
               Relay_Log_File: slave-relay-bin.000003
                Relay_Log_Pos: 111190829
        Relay_Master_Log_File: mysql-bin.000002
             Slave_IO_Running: No
            Slave_SQL_Running: No
              Replicate_Do_DB:
          Replicate_Ignore_DB:
           Replicate_Do_Table:
       Replicate_Ignore_Table:
      Replicate_Wild_Do_Table:
  Replicate_Wild_Ignore_Table:
                   Last_Errno: 0
                   Last_Error:
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 479860795
              Relay_Log_Space: 432038788
              Until_Condition: None
               Until_Log_File:
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File:
           Master_SSL_CA_Path:
              Master_SSL_Cert:
            Master_SSL_Cipher:
               Master_SSL_Key:
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error:
               Last_SQL_Errno: 0
               Last_SQL_Error:
  Replicate_Ignore_Server_Ids:
             Master_Server_Id: 1
                  Master_UUID: cd0f01f3-27c4-11ef-9394-0242ac130002
             Master_Info_File: /var/lib/mysql/master.info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
                  Master_Bind:
      Last_IO_Error_Timestamp:
     Last_SQL_Error_Timestamp:
               Master_SSL_Crl:
           Master_SSL_Crlpath:
           Retrieved_Gtid_Set:
            Executed_Gtid_Set:
                Auto_Position: 0
         Replicate_Rewrite_DB:
                 Channel_Name:
           Master_TLS_Version:

可以看到Slave_IO_Running和Slave_SQL_Running，开始为No，需要执行slave start。

mysql> slave start
mysql> show slave status \G;
...
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
...

验证同步

通过主库创建库表，写入数据，验证从库同步。

StableDiffusion

Mon, 30 Sep 2024 16:12:41 +0800

Models

CheckPoint

WebUI

https://github.com/AUTOMATIC1111/stable-diffusion-webui

# ubuntu 22.04
sudo apt install libgl1 libglib2.0-0 libgoogle-perftools4 libtcmalloc-minimal4

git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui
# 切换到指定版本
git checkout -b v1-10-1 tags/v1.10.1

./webui.sh

# chinese interface
https://github.com/VinsonLaro/stable-diffusion-webui-chinese

WSL2使用CUDA

Mon, 30 Sep 2024 15:55:39 +0800

安装

windows安装新驱动，wsl2内部不需要安装驱动，直接安装cuda-toolkit

wget https://developer.download.nvidia.com/compute/cuda/repos/wsl-ubuntu/x86_64/cuda-wsl-ubuntu.pin
sudo mv cuda-wsl-ubuntu.pin /etc/apt/preferences.d/cuda-repository-pin-600
wget https://developer.download.nvidia.com/compute/cuda/12.8.1/local_installers/cuda-repo-wsl-ubuntu-12-8-local_12.8.1-1_amd64.deb
sudo dpkg -i cuda-repo-wsl-ubuntu-12-8-local_12.8.1-1_amd64.deb
sudo cp /var/cuda-repo-wsl-ubuntu-12-8-local/cuda-*-keyring.gpg /usr/share/keyrings/
sudo apt-get update
sudo apt-get -y install cuda-toolkit-12-8

nvidia-smi使用

ln -s nvidia-smi -> /usr/lib/wsl/lib/nvidia-smi

卸载

sudo apt --purge remove cuda-toolkit-12-8

dpkg -l | grep cuda

sudo dpkg --purge cuda-repo-wsl-ubuntu-12-8-local cuda-toolkit-12-8-config-common cuda-toolkit-12-config-common cuda-toolkit-config-common cuda-visual-tools-12-8

再次运行检查命令，确认系统中已无任何 CUDA 相关包。

dpkg -l | grep cuda

docker-toolkit

https://docs.nvidia.com/datacenter/cloud-native/container-toolkit/latest/install-guide.html#installing-the-nvidia-container-toolkit

参考文档

https://learn.microsoft.com/en-us/windows/ai/directml/gpu-cuda-in-wsl
https://docs.nvidia.com/cuda/wsl-user-guide/index.html#wsl-2-support-constraints
https://developer.nvidia.com/cuda-downloads?target_os=Linux&target_arch=x86_64&Distribution=WSL-Ubuntu&target_version=2.0&target_type=deb_local

使用nerdctl替代docker-ce

Wed, 18 Sep 2024 11:34:12 +0800

nerdctl是一个兼容Docker CLI的命令行工具, 用于管理containerd容器.

nerdctl

使用rootfull模式.

mkdir nerdctl
wget -c https://github.com/containerd/nerdctl/releases/download/v1.7.7/nerdctl-1.7.7-linux-amd64.tar.gz
tar -xzvf nerdctl-1.7.7-linux-amd64.tar.gz -C nerdctl
sudo cp -a nerdctl/nerdctl /usr/local/bin/

配置别名docker命令, 指向nerdctl.

# sudo vim /usr/local/bin/docker


#!/bin/bash


COMMAND="nerdctl"
if [[ $EUID -ne 0 ]]; then
    sudo $COMMAND "$@"
else
    $COMMAND "$@"
fi

containerd

复用k3s的containerd, 配置nerdctl.toml指向containerd sock.

mkdir /etc/nerdctl


cat << EOF > /etc/nerdctl/nerdctl.toml
debug          = false
debug_full     = false
address        = "unix:///run/k3s/containerd/containerd.sock"
namespace      = "k8s.io"
cni_path       = "/var/lib/nerdctl/cni/bin"
cni_netconfpath = "/var/lib/nerdctl/cni/net.d"
EOF

docker ps/exec/image 相关命令就可以使用了, 单纯管理k8s/k3s配置到这里就可以了.

如果需要完整的docker体验，docker run/build支持, 需要添加cni pulgin和buildkit支持.

cni plugin

使用docker run 创建启动容器, 需要配置cni plugin, 让nerdctl在创建容器的使用告诉containerd调用哪里的cni配置容器网络.

上面的nerdctl.toml已经配置了路径, 需要安装cni plugin到对应路径.

cni_path       = "/var/lib/nerdctl/cni/bin"
cni_netconfpath = "/var/lib/nerdctl/cni/net.d"

mkdir cni
wget -c https://github.com/containernetworking/plugins/releases/download/v1.5.1/cni-plugins-linux-amd64-v1.5.1.tgz
tar -xzvf cni-plugins-linux-amd64-v1.5.1.tgz -C cni
sudo cp cni/* /var/lib/nerdctl/cni/bin/

# docker run --rm -ti alpine sh
# docker network ls


NETWORK ID      NAME      FILE
17f29b073143    bridge    /var/lib/nerdctl/cni/net.d/nerdctl-bridge.conflist
                host
                none

会发现不做配置, nerdctl在执行docker run的时候回创建默认的网桥网络.

# ifconfig
nerdctl0: flags=4099<UP,BROADCAST,MULTICAST>  mtu 1500
        inet 10.4.0.1  netmask 255.255.255.0  broadcast 10.4.0.255
        inet6 fe80::a096:c4ff:fe7e:a72f  prefixlen 64  scopeid 0x20<link>
        ether a2:96:c4:7e:a7:2f  txqueuelen 1000  (Ethernet)
        RX packets 15  bytes 1000 (1000.0 B)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 13  bytes 1494 (1.4 KiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

主机查看网络, 多了一个nerdctl0网桥, 和docker的docker0体验是一样的.
注意这里在配置nerdctl.toml的时候故意将cni路径配置到了/var/lib/nerdctl, 因为默认会使用/opt/cni/bin和/etc/cni/net.d, 如果主机安装的k8s使用相同路径, 可能产生影响.

buildkit

安装buildctl和buildkitd.

mkdir buildkit
wget -c https://github.com/moby/buildkit/releases/download/v0.15.2/buildkit-v0.15.2.linux-amd64.tar.gz
tar -xzvf buildkit-v0.15.2.linux-amd64.tar.gz -C buildkit
sudo cp buildkit/bin/buildctl /usr/local/bin/
sudo cp buildkit/bin/buildkitd /usr/local/bin

配置buildkitd的worker使用k3s的containerd.

# mkdir /etc/buildkit
# vim /etc/buildkit/buildkitd.toml


[worker.oci]
  enabled = false


[worker.containerd]
  enabled = true
  namespace = "k8s.io"
  address = "/run/k3s/containerd/containerd.sock"

配置buildkitd守护启动.

# vim /etc/systemd/system/buildkit.service
# systemctl start buildkit.service
# systemctl enable buildkit.service


[Unit]



After=network.target local-fs.target


[Service]
#uncomment to enable the experimental sbservice (sandboxed) version of containerd/cri integration
#Environment="ENABLE_CRI_SANDBOXES=sandboxed"
ExecStartPre=-/sbin/modprobe overlay
ExecStart=/usr/local/bin/buildkitd


Type=notify
Delegate=yes
KillMode=process
Restart=always
RestartSec=5
# Having non-zero Limit*s causes performance problems due to accounting overhead
# in the kernel. We recommend using cgroups to do container-local accounting.
LimitNPROC=infinity
LimitCORE=infinity
LimitNOFILE=infinity
# Comment TasksMax if your systemd version does not supports it.
# Only systemd 226 and above support this version.
TasksMax=infinity
OOMScoreAdjust=-999


[Install]
WantedBy=multi-user.target

nerdctl的rootfull模式和buildkitd通信会使用/run/buildkit/buildkitd.sock.

multi-platform

添加docker run/build/image的跨平台支持, 首先要再主机上注册binfmt_misc使用qemu, 可以使用这个项目tonistiigi/binfmt.

主机在遇到binfmt是其他平台的指令时候, 会自动调用qemu(容器进程也是主机进程, 所以也可以).

# docker run --privileged --rm tonistiigi/binfmt:master --install all


# ls -1 /proc/sys/fs/binfmt_misc/qemu*
/proc/sys/fs/binfmt_misc/qemu-aarch64
/proc/sys/fs/binfmt_misc/qemu-arm
/proc/sys/fs/binfmt_misc/qemu-mips64
/proc/sys/fs/binfmt_misc/qemu-mips64el
/proc/sys/fs/binfmt_misc/qemu-ppc64le
/proc/sys/fs/binfmt_misc/qemu-riscv64
/proc/sys/fs/binfmt_misc/qemu-s390x


# docker run --rm --platform=arm64 alpine uname -a


Linux 20910835f3ab 4.18.0-553.16.1.el8_10.x86_64 #1 SMP Thu Aug 8 17:47:08 UTC 2024 aarch64 Linux

summary

以上组合nerdctl/containerd/cni-plugin/buildkit, 实现docker-ce的体验. 在k8s/k3s开发调试场景, 共用k8s的containerd, 还是会很方便的.

节点重启网络Flannel Pod IP不通排查记录

Mon, 19 Aug 2024 18:02:08 +0800

问题现场

自己的实验集群，使用的k3s v1.25.7+k3s1, 网络使用的默认flannel vxlan模式。

NAME          STATUS   ROLES                  AGE    VERSION
whoops-home   Ready    <none>                 253d   v1.25.7+k3s1
whoops-k3s    Ready    control-plane,master   268d   v1.25.7+k3s1

节点whoops-k3s是CentOS7.9，折腾网络，改了ifcfg-eth0配置，systemctl restart network重启网络，一开始没发现，第二天发现nginx到集群的访问504。

这个小集群是在家里NAS和软路由上跑的，whoops-home上有一个内网穿透了的nginx，集群流量都经过这个nginx转进来走traefik ingress controller。

链路大概这样：

域名流量->nginx(whoops-home)->traefik(nodeport)->pod

Nginx报504，那就是Nginx到traefik不通，现在nginx在whoops-home上，traefik在whoops-k3s上，查了下发现从whoops-home上ping不通whoops-k3s上的Pod，但是从whoops-k3s可以ping通whoops-home上的pod。

whoops-k3s上的flannel vxlan因为重启网络挂了？

原因分析

先来看看netfilter的FORWARD，没问题

iptables -t filter -nvL | grep FORWARD
Chain FORWARD (policy ACCEPT 0 packets, 0 bytes)

看看路由, 也没问题，whoops-k3s是10.42.0.0/24网段，whoops-home是10.42.1.0/24网段。

default via 192.168.31.1 dev eth0
10.42.0.0/24 dev cni0 proto kernel scope link src 10.42.0.1
10.42.1.0/24 via 10.42.1.0 dev flannel.1 onlink
...

看看fdb? 不应该啊，whoops-k3s都能ping通whoops-home上的pod，arp要是有问题，咋ping出去的包，一看果然没问题。

sudo bridge fdb show | grep flannel.1
# 192.168.31.166 是 whoops-home
d6:f8:ec:13:3c:07 dev flannel.1 dst 192.168.31.166 self permanent

vxlan是走的flannel.1设备，这个设备是flanneld创建的，重启网络影响它了？但是如果配置不对，flanneld是不是应该自己感知调整回去呢？重启下k3s试试。

systemctl restart k3s

好了！重启k3s/flanneld，因为重配了flannel.1? 复现一下，特意检查flannel.1，网段配置、路由、arp、设备状态重启前后都没问题，重配重不配flannel.1应该不影响的啊，而且个人认为flanneld不应该这么不健壮，节点重启下network，整个节点的pod网络都挂掉了。

flannel.1: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1450
        inet 10.42.0.0  netmask 255.255.255.255  broadcast 0.0.0.0
        inet6 fe80::b45b:f1ff:fe24:82e4  prefixlen 64  scopeid 0x20<link>
        ether b6:5b:f1:24:82:e4  txqueuelen 0  (Ethernet)
        RX packets 237089  bytes 37524217 (35.7 MiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 174244  bytes 32444345 (30.9 MiB)
        TX errors 29  dropped 5 overruns 0  carrier 29  collisions 0

抓包！

tcpdump -i flannel.1
tcpdump: verbose output suppressed, use -v or -vv for full protocol decode
listening on flannel.1, link-type EN10MB (Ethernet), capture size 262144 bytes
22:28:45.852513 IP 10.42.1.0 > 10.42.0.210: ICMP echo request, id 12, seq 48, length 64
22:28:46.872698 IP 10.42.1.0 > 10.42.0.210: ICMP echo request, id 12, seq 49, length 64
22:28:47.896618 IP 10.42.1.0 > 10.42.0.210: ICMP echo request, id 12, seq 50, length 64
22:28:49.851093 IP 10.42.1.0 > 10.42.0.210: ICMP echo request, id 13, seq 1, length 64
22:28:50.872665 IP 10.42.1.0 > 10.42.0.210: ICMP echo request, id 13, seq 2, length 64
22:28:51.896473 IP 10.42.1.0 > 10.42.0.210: ICMP echo request, id 13, seq 3, length 64

从whoops-home上的ping包到flannel.1了，但是没给到Pod网卡，丢哪了？重启网络操作到底干了啥？真的要研究kernel怎么实现的vxlan了么？debug flannel.1设备？

network.service

直接看/etc/rc.d/init.d/network脚本，看看重启网络做了哪些操作。

start)
    apply_sysctl
...
stop)
   sysctl -w net.ipv4.ip_forward=0 > /dev/null 2>&1
...
restart|force-reload)
    cd "$CWD"
    $0 stop
    $0 start
...

好嘛，stop时候关了net.ipv4.ip_forward，flannel.1当然不把包往pod的网卡转了，重启k3s/flanneld，flanneld动态又把参数改回来了，所以就通了，复现验证一下，还真是。
搞不懂network.service stop为啥关这个，但是start时候也应该把之前的参数还回来吧？对不起，没有持久化的sysctl在start的apply_sysctl里还不回来。

修复搞定

echo net.ipv4.ip_forward=1 >> /etc/sysctl.conf

验证一下，重启网络不影响Pod网络联通性了！

总结

之前特意研究了下flannel的vxlan模式，这次遇这么个case，又深刻了~

Arvin的网络日志

关于

技术栈

关注领域

工作经历

社交

开源项目

感谢您的关注

感谢您的支持

赞助者名单

SD卡速度规格详解及使用场景对照

SD卡速度规格详解及使用场景对照

1. 核心速度等级对照表

2. 总线传输速度层级 (UHS)

3. 应用性能等级 (A-Class) - 主要针对手机/microSD

选购建议与使用场景匹配

📷 场景一：普通家用 / 行车记录仪 / 监控摄像头

📸 场景二：日常摄影 / 旅行 / 1080P 或 基础 4K 视频

🎥 场景三：专业视频创作 / 8K视频 / 高码率4K

📱 场景四：手机扩容 / Switch / 无人机 / 运动相机

RHEL系Linux更新内核

ELRepo 简介

启用 ELRepo

升级内核

Kernel相关的RPM包说明

安装ELRepo历史版本内核

文章参考

本地Lambda函数几行代码实现MCP Server

MCP+Lambda

MCP+Refunc

部署 Refunc

创建函数

创建 MCP 端点

Refunc MCP 事件规范

安伯尼可RG40xxV掌机设置远程管理游戏

开启SSH

安装VSFTP服务器

配置VSFTP

通过FTP管理游戏文件

Docker部署MySQL主从复制

运维现场

主库调整

从库搭建

全量备份主库

配置从库同步

验证同步

StableDiffusion

Models

CheckPoint

WebUI

WSL2使用CUDA

安装

卸载

docker-toolkit

参考文档

使用nerdctl替代docker-ce

nerdctl

containerd

cni plugin

buildkit

multi-platform

summary

节点重启网络Flannel Pod IP不通排查记录

问题现场

原因分析

network.service

修复搞定

总结

📸 场景二：日常摄影 / 旅行 / 1080P 或基础 4K 视频