dd/docs/maintenance/FREENODE.md

# Freenode：来源、归属与分发

## 核实范围

2026-10-18（Asia/Shanghai；数据库首轮查询时间 17:38:50），经白色机 SSH 跳板只读核查 master-01 的 `/www/wwwroot/master.diaodu.us`：线上代码、数据库只读事务与原始文件统计。未访问下游站点，未测试节点连接，未运行采集/发布，未更改生产代码、配置或业务数据。统计是当次快照，不代表实时可用数。

## 分层含义

| 层次 | 位置 | 含义 |
| --- | --- | --- |
| 采集来源 | `crawl_freenode.name` | 来源标签；不证明节点运营所有权 |
| 采集适配 | `crawl_freenode.group` | 决定 `FreenodeCrawl::getFile__{group}` 的调用，与下游站点组不同 |
| 启用状态 | `crawl_freenode.status` | 采集及入池只读取 status=1 的来源 |
| 入池来源 | `freenode_pool.content[格式][hash].fromName` | 去重后保留的单一来源标签，不是完整多来源关系 |
| 协议/格式 | `protocolType` 与 content 的 v2ray/clash/singbox 键 | v2ray 在这里是 URI 订阅格式，里面包含多种协议；singbox 由 URI 节点转换 |
| 下游站点组 | `site_map.group_code` | fn_a、fn_b 为两套下游发布流程，nodehub 为集中接收方 |
| 文件版本 | `public/freenode/merge/` | base、各站版本、_admin 等；目录存在不证明仍在发布 |

## 采集来源快照

| name | group | status | 最近文件日期 | 入口主机 |
| --- | --- | --- | --- | --- |
| ripaojiedian | ripaojiedian | 0 | 2026-07-06 | raw.githubusercontent.com |
| v2rayshare | v2rayshare | 0 | 2026-07-06 | static.v2rayshare.net |
| shuaidaoya | common | 1 | 2026-10-18 | raw.githubusercontent.com |
| daily_free_vpn | common | 1 | 2026-10-18 | raw.githubusercontent.com |

四条来源均登记 v2ray、clash 两种输入。两个启用来源的当日原始文件修改时间均为 12:03:06 +08:00；shuaidaoya 原始条目为 URI 10、Clash 10，daily_free_vpn 为 URI 1916、Clash 1661。URI 数量按非空行计，不等于有效或去重节点数量。

## 首轮 17:38 节点池快照

| 格式 | 入池条目 | shuaidaoya 标签 | daily_free_vpn 标签 |
| --- | --- | --- | --- |
| v2ray | 1769 | 10 | 1759 |
| singbox | 1699 | 2 | 1697 |
| clash | 1670 | 9 | 1661 |

三个格式不能相加当作独立节点数；跨格式统一身份尚未实现。URI 池协议计数：vless 948、trojan 244、hysteria2 220、ss 216、vmess 98、socks 21、anytls 13、hysteria 5、tuic 2，另有 2 条协议名带 BOM 的 `ss`。尚未测试这些条目有效性。

线上 `FreenodePool::save()` 在每个格式内用配置 hash 作数组键，移除显示名称后去重；后遇到的相同键覆盖前值，包括 fromName。来源查询未显式排序，因此不应把当前保留标签理解为来源优先级。跨来源覆盖风险由代码确认；本次未逐项计算覆盖数量。

线上 Clash 入池明确跳过 anytls；URI 与 singbox 转换覆盖也不同。2026-10-17、18 两天的 content_custom/content_v2ray/content_clash 旧列均为空，现行主链读写 content；旧 save_custom 方法与管理字段仍存在，不能据此认定正在运行。

## 自有分支与宣传条目

代码存在 `_my` 自有来源适配及合并优先分支，但本次线上四条来源记录没有 `_my`，最近两日池的来源统计也没有它；不能认定自有节点正在接入。

`FreenodeMerge::save()` 复制一个实际节点生成站点、Telegram、日期三个宣传占位条目，baseToSite 再替换文案。最终订阅中的显示名称和条目数不宜用来识别独立节点或统计来源质量。`_admin` 是输出/检查目录标签，不能等同于 `_my` 自有来源。

## 下游登记与代码路径

| group_code | code_short | code | 配置格式 |
| --- | --- | --- | --- |
| fn_a | cvf | clashv2rayfree.com | v2ray、clash |
| fn_a | vcf | v2rayclashfree.com | v2ray、clash |
| fn_b | vfn | v2rayfreenode.com | v2ray、singbox、clash |
| fn_b | cfn | clashfreenode.com | v2ray、singbox、clash |
| nodehub | nh | nodehub | v2ray、clash |

上述五条 site_map 的 status 均为 1。nodehub 的配置格式与实际推送范围应分开看：`FreenodeSync::nodehub()` 按各来源站点的 freenode_client 构造数据，所以 fn_b 可推送 singbox，不只取 nodehub 自身的配置列表。

每六小时的代码调度依次采集、入池、生成 base、生成 fn_a/fn_b 站点版、推送 nodehub；另有每三小时 fn_a 旧直推，以及每日 11:03 fn_b 文章和 Telegram 发布。这里核实的是代码条件，没有把它等同为所有定时任务和下游接收已验收。当前同步查询按 group_code 筛选，未附加 status 筛选；停用站点不能仅凭 status 字段推断分发已停止。

merge 下仍有旧命名目录，不能据目录名推断当前站点归属。fn_a/fn_b 是源码中的路由组，不据此消解 GemDocs 关于各站源码项目归属的历史待核实事项。

## 测试点设计约束（尚未实施）

- 从启用来源原始数据保留完整来源集合，再规范化配置生成稳定节点 ID；只从现有池读取会失去被覆盖的来源关联。
- 连接测试按配置去重，一次结果关联多个来源；另记格式转换失败、协议不支持，不能算作节点不可用。
- 排除生成阶段复制的宣传条目，保留原始协议名清理前后的证据，处理 BOM。
- 各站是共享池的输出版本，不需要按四个站重复测试；结果绑定采集批次、配置版本及测试时间。
- 白色机单点可用性不代表国内可用性；本次未部署测试服务或改变分发策略。

## 导入/更新失败调查与重构边界

2026-10-18 用户反馈主要表现为“导入或更新失败”。本轮经白色机只读解析 master01 当日实际产物，未请求下游订阅 URL，未执行客户端导入或节点连接。下述产物更新时间为 UTC 10:09/10:12，即北京时间 18:09/18:12，晚于上文首轮池统计，不应直接将两轮数量比较为转换损失。

### 线上产物确认

| 检查项 | 现场结果 | 判断边界 |
| --- | --- | --- |
| 四个站点 URI 订阅 | 每份 2021 行；外层 Base64 可解码；84 条标准 vmess 前缀后的内容是直接 JSON，没有内层 Base64；2 条协议头带 BOM | 格式缺陷已确认；具体客户端是整份拒绝还是跳过坏条目未实测 |
| URI 的其他异常计数 | 每份 19 行多个原始 `#`，4 行在第一个 `#` 前有空格 | 可疑编码/输入异常，未逐条断定不可用，也未把计数直接相加为独立坏节点数 |
| fn_b 两站 Sing-box | JSON 可解析；1947 个 outbounds（含模板和宣传项）；无重复 tag；每份有 1 个不在 1—65535 范围的 server_port | JSON 合法不等于内核配置合法；无效端口已确认 |
| fn_b Sing-box 模板 | 含 inet4_address、block outbound、旧 DNS 格式及旧 inbound 字段 | 有官方文档明确的版本兼容问题，见下文 |
| 四站 Clash | YAML 可解析；每份 1875 个 proxies；无重复 name、无未定义的显式分组引用 | 未做 Mihomo/具体客户端原生配置校验，不能声称没有其他字段/协议兼容问题 |
| fn_a Sing-box 文件 | 当日两站均无文件 | 与当前站点未配置该格式相符，不算生成失败 |

本地与线上 SHA-256 对比：FreenodeCrawl、FreenodePool、FreenodeMerge、ServiceFnPoolV2rayTo、FreenodeController 和 Sing-box 模板均一致；Clash 模板不同。本地代码复现的上述服务逻辑可对应本次线上版本，不能把本地 Clash 模板当作线上原件。

### 已确认的问题与对应位置

1. **VMess 输出漏掉节点级 Base64。** `FreenodeMerge::save()` 将配置数组 JSON 编码后直接拼在 vmess:// 后，外层订阅 Base64 不能替代每条 VMess 链接内部的 Base64。线上 84 条已出现此形态。输出名称、宣传替换也在字符串和 JSON 之间混用，不能保证各协议语义一致。标准见 [v2rayN VMess 分享说明](https://github.com/2dust/v2rayN/wiki/Description-of-VMess-share-link)。
2. **BOM 是本项目主动写入的。** `FreenodeCrawl::save_utf8_file()` 无条件在文件开头添加 BOM。Pool 的 URI 解析未先清理，导致 BOM 成为协议名的一部分；Sing-box 转换器只在后续局部移除协议头 BOM，不能修复此前已绕过的 VMess 专门解析分支。
3. **URI 先整串解码，再拆结构，破坏参数边界。** Pool 使用 urldecode，转换器再 rawurldecode，随后 parse_str 或继续解码字段。编码的 &、+、#、@ 等可能被当作结构字符，查询路径、密码或公钥可能发生变化；编码层应由各字段所属语法负责，不能重复整串解码。SS 的 Base64URL、插件等还需要按 [SIP002](https://shadowsocks.org/doc/sip002.html) 明确处理。
4. **地址和协议参数解析不完整。** 多个 mod_to_* 用首个冒号拆 host:port，无法解析方括号 IPv6。VMess 转换使用 host/server 构造 TLS server_name，没有保留单独的 sni。VLESS 未处理的传输类型可能被默认成无 transport，而不是明确拒绝；SS 插件参数也未建模。
5. **客户端配置没有版本边界。** 同一 Sing-box 全量模板用于全部客户端。官方列明 inet4_address 等旧字段在 1.12.0 移除，block 等旧 special outbounds 及部分旧 inbound 字段在 1.13.0 移除，旧 DNS 格式在 1.14.0 移除。不能把“Hiddify/Sing-box”两个产品名称视为同一配置版本。依据：[官方废弃清单](https://sing-box.sagernet.org/deprecated/)、[迁移指南](https://sing-box.sagernet.org/migration/)。这里是文档支持的兼容判断，尚未在用户具体客户端版本导入验证。
6. **旧直出路由残留固定测试日期。** `FreenodeController::sub()` 将日期无条件写成 2025-12-22，缺文件最多回退 30 天后返回 false，调用者仍直接 file_get_contents。该缺陷本地/线上代码一致，但主要现行链接由 FreenodeHelperService 指向 Nodehub；未核实用户失败的链接是否走此旧路由，不能归因所有更新失败于它。

### 无生产副作用的本地复现

直接调用现行 ServiceFnPoolV2rayTo::singbox_row，使用 example.invalid、文档 IPv6 地址与虚构 UUID，不启动 Laravel、不访问数据库或网络：

| 输入语义 | 预期 | 实际 |
| --- | --- | --- |
| VLESS 地址 [2001:db8::1]:443 | server=2001:db8::1，port=443 | server=[2001，port=0 |
| WS path=%2Fa%26b | /a&b | /a |
| WS path=%2Fa%2Bb | /a+b | /a b |
| VLESS type=xhttp | 明确支持映射或明确拒绝 | 无 transport，继续返回节点 |
| VMess host=cdn.example.invalid、sni=tls.example.invalid | TLS 使用单独 sni | TLS 使用 host |

这些是确定性逻辑复现，证明转换错误；不等于对全部生产节点影响规模的统计。独立演示也确认重复 urldecode 会把编码的 + 最终变成空格。

### 发布可靠性缺口（代码确认，未伪装成已发生事故）

- 抓取无 HTTP 状态、内容类型/结构、完整性及显式超时校验，Base64 解码也未严格校验；上游错误页可能进入后续处理。
- common 适配里某一种格式失败会返回空列表；旧 file_real 指针可能保留。入池不核对同一采集批次/日期，存在新旧数据混合的路径。
- 按固定分钟分别触发采集、入池、合并、分发，无完成依赖、批次状态及本模块锁。单节点或单来源解析异常可以终止当次阶段；后续分钟仍可能继续消费此前数据。未检查外部调度是否另有锁，不声称全服务器无锁。
- 直接 file_put_contents 覆盖公开文件，无临时产物校验后原子切换；并发读取半成品的风险存在，但本次未观察到半文件。
- 分发在某格式缺失时继续构造剩余 payload，没有完整批次门禁；成功判断仅看响应 JSON 标志，未核实接收方持久化文件校验和与真实订阅交付。
- 现有 NasaTestFnSubfile 主要验页面/文件 HTTP 状态，不解析节点协议或运行配置内核校验。FreenodeWatch 目前只是占位实现。
- 日期/token 参与现行链接生成；用户长期订阅地址的有效期、下游保留策略、缓存及更新响应尚未核实。不能把 master 上文件正确等同于用户更新成功。

### 研究阶段的重构建议（实施状态见下文 V2 入口）

建议重构 Freenode 业务链，保留 Laravel 管理、站点映射、既有文章/Telegram 入口；不因本次问题重写整个 master01 或直接改下游项目。

1. **先建立验收样本与发布门禁。** 冻结当前输入和产物版本，在隔离目录复现问题；固定目标客户端/内核版本，分别做 URI 逐条解析、JSON/YAML 结构校验和内核原生配置校验。格式错误、协议不支持、节点连接失败分开统计。坏节点隔离并有明确原因；空结果/异常骤减不覆盖上一份可用订阅。
2. **规范化模型取代字符串互转。** 来源适配只下载/解包；协议解析层保留原始记录及完整来源关系；建立含 endpoint、认证、TLS/SNI、transport、插件等字段的节点模型。字段级编码、IPv6 与别名统一规范化，稳定节点 ID 不包含显示名称；输出渲染器不再重新解析别的输出格式。
3. **按能力和版本分别渲染。** URI、Mihomo、Sing-box 各自明确可表达的协议与参数，不支持就报告排除原因；必要时输出节点列表供客户端使用独立模板，完整配置与节点列表分开定义，不强行一种完整模板覆盖所有产品。
4. **批次化、原子发布、可回滚。** 每轮有 batch_id、来源时间、模型版本、产物 hash、数量、校验及分发状态；依赖前序成功，锁防重入。先写版本目录并验证，再原子切换发布指针；保留上一份合格产物。各接收方返回批次/hash，失败可幂等重试，是否需要变更 Nodehub 接口须另核实。
5. **新旧并行生成后再切换。** 先不分发新版，比较节点配置、来源覆盖、格式验证和兼容差异；用独立测试订阅做客户端导入/更新验收，再逐站切换。保持原链接契约，涉及链接调整时提供明确兼容/迁移方案。
6. **白色机测试点接入同一模型。** 本地格式与内核校验先完成，白色机承担真实连接检测；结果关联节点配置版本及批次，不用连通测试代替导入有效性检查。

客户端名称/版本及原失败链接的安全定位信息仍待用户提供，不能将固定内核检查当作所有GUI客户端验收。下文部署验收已覆盖服务端生成、运行路由及Nodehub落盘，但不代表公网CDN/浏览器下载链路均已测试。

## V2 实现与运维入口

2026-10-18 开始实施，用户授权重构及可回滚发布。默认 `FREENODE_ENGINE=legacy`，旧实现保留；设置为 `v2` 才切换。本节取代上文建议中的“未实施”状态，生产切换与最终验收以本节后续结果为准。

- `app/Services/Freenode/Codec.php`：URI 结构先拆分再字段解码，BOM 清理、IPv6、VMess 节点级 Base64、独立 SNI、确定性身份及来源关联。未知输出传输明确排除。
- `Builder.php`：从各启用来源的 URI 与 Clash 输入独立建模，分别去重、保留多来源；Sing-box 从 URI 模型渲染，Clash 保留来源节点字段并沿用服务器现有 Clash 策略模板。当前没有声称已统一识别跨 URI/Clash 的同一物理节点。
- `Renderer.php`：Sing-box 采用现代配置（原生验收目标 1.14.3），保留私网/中国规则直连、其余代理的路由意图；不再用复制真实节点的方式制造宣传占位。旧版 Sing-box/Hiddify 的具体兼容性须按产品内核验收，不能承诺所有客户端版本。
- `NativeValidator.php`：Sing-box/Mihomo 每种格式先整份检查；失败时优先按内核报错索引隔离坏节点，未知错误才二分定位，最后再验整份；整批原生校验限制240秒，超时保留旧产物。原生错误输出不进入日志或报告，报告只记录节点哈希及排除分类。不会启动内核代理服务或接管宿主路由。
- `ReleaseStore.php`：私有版本目录、SHA-256 清单、文件锁、数量骤减保护（默认低于上一版/旧产物的 50% 阻止发布）、逐文件原子替换兼容产物、原子切换当前清单。内部同步读取不可变版本，不能读半成品；兼容公开路径是逐文件原子更新，不能声称整个目录跨请求具备全局事务原子性。
- 首次发布前自动保留将被替换的旧产物版本。默认不迁移/删除数据库或旧代码，回滚代码和订阅产物是两个独立动作。
- 原时刻调度保留：采集后 :06 准备并原生校验，:09 不再重复旧合并，:12 发布准备批次，:15 按原接口分发。来源必须属于本轮六小时采集周期，失败则不覆盖上一份产物；准备批次超过 30 分钟不可发布。超过 24 小时的批次不继续自动推送。
- V2 不更新旧 freenode_pool.content 列；来源/排除/节点关系的权威运行报告在私有版本 report.json，旧后台池展示不能当作 V2 当前产物统计。
- 旧 `/sub/{site}/{client}/{date?}` 在 V2 下改读已校验版本，修复固定历史日期，返回对应 MIME、no-store；历史显式日期当前只支持当前已发布批次日期。主要 Nodehub 链接和接收接口契约未改变。

### 命令与恢复

`php tools/freenode/manage.php status` 只显示引擎、批次/hash 元数据；`prepare` 读取来源并在 `storage/app/freenode-v2/versions/` 生成私有候选，不分发；`publish` 校验哈希和时效后更新产物；`rollback RELEASE_ID` 恢复指定产物，省略 ID 时使用 previous。

官方内核由 `python3 tools/freenode/install_validators.py` 安装到 `/opt/master01-freenode/bin/`，仅支持 Linux amd64，固定官方压缩包 SHA-256：Sing-box 1.14.3、Mihomo 1.19.32；另固定Country.mmdb和geoip.metadb的SHA-256，校验目录使用离线GeoIP数据，避免每批自动下载。GeoIP下载入口虽然是latest，内容哈希仍严格固定，日后变化会拒绝安装，需重新核实摘要。不会改现有代理或系统服务。可通过 FREENODE_SINGBOX_BINARY/FREENODE_MIHOMO_BINARY 指向其他已核验版本。

运行目录需由实际 PHP/调度身份可写。发布前记录旧 Git 提交、并行修改、当前引擎配置及兼容文件哈希。切回旧链路须先停止/避开本轮生成发布，在配置中恢复 `FREENODE_ENGINE=legacy`，清除相应配置缓存，再恢复保留的旧产物；仅回退 Git 不会自动撤回已分发到 Nodehub/各站的文件，必要时按原接口再次同步旧产物。不能声称本地恢复等于全部下游已回滚。

本地验证命令：`TEST_SINGBOX=/path/to/sing-box TEST_MIHOMO=/path/to/mihomo php -d error_reporting=22527 vendor/bin/phpunit tests/Unit/Freenode --do-not-cache-result`。当前 15 项、36 断言通过，含真实原生内核检查、坏节点隔离、参数完整性、数量骤减保护、清单篡改拒绝及旧产物恢复。未安装原生内核时该集成测试会跳过，不能把跳过当作原生验收通过。

已完成：服务器内真实输入影子生成、生产切换、16文件旧产物恢复演练、Nodehub四站10文件落盘校验及实际PHP-FPM内部请求验收。尚未完成：用户具体GUI客户端更新、公网下载/CDN链路验收。白色机每日实际连通测试服务不包含在本次生成链切换中，尚未部署。

本机合成规模验证：2000 个虚构 URI 节点及 2000 个虚构 Clash 节点，各格式输出 2000 条，整批生成及原生检查约 1.081 秒，PHP 峰值 24 MiB，原生内核检查 6 次，实际节点联网测试 0 次。此结果只代表本机合成输入，不代表生产实测或联网测速性能。

### 2026-10-18 上线验收

- 用户明确授权向现有Gitea仓库推送并继续部署。功能代码提交为 `7f657cb01792d548fd0e2356b179e7345f79fb0d`；后续维护记录提交不改变生成逻辑。生产分支 `codex/freenode-v2`，旧代码基线 `ddf104f158f4d7da970bdc0c936e650864c1b6e9` 保留在master。上线前原有已删除/未跟踪内容及服务器Clash模板保留，不覆盖并行修改。
- 当前 `.env` 已启用 `FREENODE_ENGINE=v2`；上线时配置缓存不存在，未清空其他缓存、未重启服务、未修改数据库/凭据/网络/反代。
- 运行身份www-data；私有批次根 `storage/app/freenode-v2/`；独立校验器及离线数据 `/opt/master01-freenode/`。完整节点原文只在服务器内处理，不导出到本机或写入报告。
- 当前批次 `20261018114313-fe0b943ad776`；URI 2009、Clash 1830、Sing-box 1848。准备16个文件（含base、_admin和各站版本），通过固定版本原生校验。输入2个来源，9条无效URI输入被隔离，Sing-box转换阶段36条不支持的协议/传输被排除，原生校验进一步隔离Sing-box 125、Clash 29条；各分类不能相加当作跨格式唯一坏节点数。
- 本轮真实输入最终校验160次内核调用、106.03秒、GNU time最大RSS 86228 KiB（约84.2 MiB；不是整机总峰值，也不等于并发总和）。初版二分策略2076次调用，已优化；该真实输入性能优先于上文合成样本结果。没有逐节点联网或测速。
- 回滚演练：发布候选→恢复旧产物→逐一确认16文件SHA-256与发布前完全一致→重新发布候选。旧产物版本 `legacy-20261018114425-50ee6b49` 保留。恢复点与引擎原值元数据位于 `/var/backups/master01-freenode-20261018/`。这是产物恢复演练，不声称演练过全部下游代码/业务回滚。
- 已按现有API分发到独立项目 [Nodehub的唯一档案](/Users/hellcat/Documents/GemDocs/AI版/10-项目/nodehub.md)。接收方代码未改，仍返回旧isDone结果，不提供批次/hash ACK；本次在接收服务器只读校验真实落盘文件，四站10文件全部匹配。URI与Sing-box逐字节匹配；Clash经接收端既有首尾空白处理后匹配（末尾换行差异），不声称其原始字节hash相同。未额外手工验收fn_a旧直推接口。
- 实际PHP-FPM Unix socket请求 `/sub/clashfreenode.com/{v2ray,clash,singbox}`：均200，无stderr，返回MIME分别text/plain、application/yaml、application/json，响应体SHA-256与当前批次全部一致。此为服务器内部请求，不冒充公网TLS、CDN或GUI导入验收。
- 本机和生产Linux/PHP 8.4.23均通过15项、36断言测试，含实际固定内核。部署后的正常定时任务下一轮执行尚未等待观察；原有调度时刻未变。