@torrent-tv/proxy 2.88.3 → 2.88.4

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (473) hide show
  1. package/.claude/commands/opsx/apply.md +155 -155
  2. package/.claude/commands/opsx/archive.md +160 -160
  3. package/.claude/commands/opsx/explore.md +174 -174
  4. package/.claude/commands/opsx/propose.md +109 -109
  5. package/.claude/commands/opsx/sync.md +143 -143
  6. package/.claude/skills/openspec-apply-change/SKILL.md +159 -159
  7. package/.claude/skills/openspec-archive-change/SKILL.md +117 -117
  8. package/.claude/skills/openspec-explore/SKILL.md +289 -289
  9. package/.claude/skills/openspec-propose/SKILL.md +113 -113
  10. package/.claude/skills/openspec-sync-specs/SKILL.md +147 -147
  11. package/.dockerignore +5 -5
  12. package/AGENTS.md +322 -322
  13. package/CHANGELOG.md +2259 -2250
  14. package/Dockerfile +30 -30
  15. package/LICENSE +16 -16
  16. package/README.md +369 -369
  17. package/assets/calibration/NOTICE.md +100 -100
  18. package/assets/diagnostics/sctpstate.gdb +31 -31
  19. package/bin/cli.js +684 -684
  20. package/bin/thread-pool.js +30 -30
  21. package/biome.json +411 -411
  22. package/docs/browser-proxy-contract.md +23 -4
  23. package/docs/container-architecture.md +218 -218
  24. package/docs/download-architecture.md +261 -261
  25. package/docs/encode-architecture.md +729 -729
  26. package/docs/encode-run-state.md +96 -96
  27. package/docs/logs.md +97 -97
  28. package/docs/socks5-egress-research.md +114 -114
  29. package/docs/storage-architecture.md +267 -267
  30. package/knip.json +14 -14
  31. package/openspec/changes/adaptive-bitrate/design.md +92 -92
  32. package/openspec/changes/adaptive-bitrate/proposal.md +56 -56
  33. package/openspec/changes/adaptive-bitrate/specs/adaptive-bitrate/spec.md +51 -51
  34. package/openspec/changes/adaptive-bitrate/tasks.md +40 -40
  35. package/openspec/changes/binary-distribution/.openspec.yaml +2 -2
  36. package/openspec/changes/binary-distribution/proposal.md +53 -53
  37. package/openspec/changes/chunked-request-bodies/design.md +81 -81
  38. package/openspec/changes/chunked-request-bodies/proposal.md +53 -53
  39. package/openspec/changes/chunked-request-bodies/specs/chunked-request-bodies/spec.md +30 -30
  40. package/openspec/changes/chunked-request-bodies/tasks.md +40 -40
  41. package/openspec/changes/cold-start/design.md +98 -98
  42. package/openspec/changes/cold-start/proposal.md +62 -62
  43. package/openspec/changes/cold-start/specs/cold-start/spec.md +47 -47
  44. package/openspec/changes/cold-start/tasks.md +48 -48
  45. package/openspec/changes/disk-cap/.openspec.yaml +2 -2
  46. package/openspec/changes/disk-cap/proposal.md +37 -37
  47. package/openspec/changes/disk-cap/specs/disk-cap/spec.md +25 -25
  48. package/openspec/changes/disk-cap/tasks.md +19 -19
  49. package/openspec/changes/proxy-observability/.openspec.yaml +2 -2
  50. package/openspec/changes/proxy-observability/design.md +38 -38
  51. package/openspec/changes/proxy-observability/proposal.md +49 -49
  52. package/openspec/changes/proxy-observability/specs/observability/spec.md +33 -33
  53. package/openspec/changes/proxy-observability/tasks.md +21 -21
  54. package/openspec/changes/seek-debounce/design.md +118 -118
  55. package/openspec/changes/seek-debounce/proposal.md +59 -59
  56. package/openspec/changes/seek-debounce/specs/seek-debounce/spec.md +41 -41
  57. package/openspec/changes/seek-debounce/tasks.md +33 -33
  58. package/openspec/changes/subtitle-language/.openspec.yaml +2 -2
  59. package/openspec/changes/subtitle-language/proposal.md +50 -50
  60. package/openspec/changes/subtitle-language/specs/subtitle-language/spec.md +34 -34
  61. package/openspec/changes/subtitle-language/tasks.md +26 -26
  62. package/openspec/changes/track-selection/.openspec.yaml +2 -2
  63. package/openspec/changes/track-selection/design.md +47 -47
  64. package/openspec/changes/track-selection/proposal.md +45 -45
  65. package/openspec/changes/track-selection/specs/track-selection/spec.md +41 -41
  66. package/openspec/changes/track-selection/tasks.md +20 -20
  67. package/openspec/changes/transcode-quality/.openspec.yaml +2 -2
  68. package/openspec/changes/transcode-quality/proposal.md +51 -51
  69. package/openspec/changes/transcode-quality/specs/transcode-quality/spec.md +139 -139
  70. package/openspec/changes/transcode-quality/tasks.md +63 -63
  71. package/openspec/config.yaml +38 -38
  72. package/package.json +1 -1
  73. package/public/.well-known/appspecific/com.chrome.devtools.json +1 -1
  74. package/research/delivery-wedge-stand-ladder-2026-09-13.md +329 -329
  75. package/research/double-spawn-2026-09-10.md +171 -171
  76. package/research/handover-2026-09-13.md +209 -209
  77. package/research/handover-reader-claims-removal-2026-09-12.md +166 -166
  78. package/research/piece-withdrawn-but-still-claimed-2026-09-12.md +175 -175
  79. package/research/preset-benchmark-size-scaling-2026-08-22.md +55 -55
  80. package/research/priority-map-is-the-truth-2026-09-12.md +225 -225
  81. package/routes/api/client-logs/post.js +86 -86
  82. package/routes/api/delivery-sink/get.js +72 -72
  83. package/routes/api/link-probe/get.js +51 -51
  84. package/routes/api/playback-plan/audio-tracks/post.js +29 -29
  85. package/routes/api/playback-plan/post.js +53 -53
  86. package/routes/api/sources/post.js +36 -36
  87. package/routes/api/sources/stats/get.js +132 -132
  88. package/routes/api/sources/warm/post.js +217 -217
  89. package/routes/api/subtitles/get.js +230 -230
  90. package/routes/api/transcode-sessions/fragment-far/post.js +60 -60
  91. package/routes/api/transcode-sessions/net-report/post.js +138 -138
  92. package/routes/api/transcode-sessions/post.js +178 -173
  93. package/routes/api/transcode-sessions/progress/get.js +27 -27
  94. package/routes/api/transcode-sessions/release/post.js +41 -41
  95. package/routes/api/transcode-sessions/seek/post.js +63 -63
  96. package/routes/health/get.js +13 -13
  97. package/routes/healthz/get.js +13 -13
  98. package/routes/stream/get.js +380 -380
  99. package/routes/transcode/audio-file/get.js +64 -64
  100. package/routes/transcode/audio-warm/get.js +95 -84
  101. package/routes/transcode/session-file/get.js +52 -52
  102. package/routes/transcode/variant-file/get.js +95 -95
  103. package/routes/transcode/variant-warm/get.js +84 -84
  104. package/scripts/render-run-graph.js +173 -173
  105. package/server.js +725 -725
  106. package/services/encode/CoverageMap.js +428 -428
  107. package/services/encode/CushionReport.js +345 -345
  108. package/services/encode/EncodeAdmission.js +376 -376
  109. package/services/encode/EncodeOrchestrator.js +1217 -1217
  110. package/services/encode/EncodePlan.js +1366 -1366
  111. package/services/encode/EncodeRun.js +813 -813
  112. package/services/encode/EncodeRuns.js +1235 -1235
  113. package/services/encode/Encoder.js +142 -142
  114. package/services/encode/EncoderSelection.js +38 -38
  115. package/services/encode/LocalObservations.js +359 -359
  116. package/services/encode/NvencEncoder.js +50 -50
  117. package/services/encode/OutputOpening.js +783 -758
  118. package/services/encode/OutputTimes.js +579 -579
  119. package/services/encode/QsvEncoder.js +58 -58
  120. package/services/encode/Renditions.js +2282 -2184
  121. package/services/encode/RunProgress.js +84 -84
  122. package/services/encode/SegmentDemand.js +95 -95
  123. package/services/encode/SoftwareEncoder.js +121 -121
  124. package/services/encode/V4l2m2mEncoder.js +53 -53
  125. package/services/encode/VaapiEncoder.js +66 -66
  126. package/services/encode/args.js +418 -416
  127. package/services/encode/available-share.js +89 -89
  128. package/services/encode/calibration.js +361 -361
  129. package/services/encode/contention.js +128 -128
  130. package/services/encode/decode-cost-fit.js +363 -363
  131. package/services/encode/encode-exit.js +114 -114
  132. package/services/encode/encode-run-state.js +551 -551
  133. package/services/encode/encoder-readings.js +45 -45
  134. package/services/encode/fingerprint.js +322 -322
  135. package/services/encode/host-load.js +174 -174
  136. package/services/encode/hwaccel.js +1894 -1894
  137. package/services/encode/index.js +9 -9
  138. package/services/encode/learned-median.js +90 -90
  139. package/services/encode/output/EncodedOutput.js +57 -57
  140. package/services/encode/output/Output.js +131 -131
  141. package/services/encode/output/OutputCatalog.js +414 -414
  142. package/services/encode/output/OutputSpec.js +390 -390
  143. package/services/encode/output/Timeline.js +308 -308
  144. package/services/encode/output/cut-grid.js +107 -107
  145. package/services/encode/output/index.js +20 -20
  146. package/services/encode/output/ladder.js +32 -32
  147. package/services/encode/output/playlists.js +284 -284
  148. package/services/encode/output/rates.js +125 -125
  149. package/services/encode/output-key-format.js +21 -21
  150. package/services/encode/quality/EncodeCost.js +1150 -1141
  151. package/services/encode/quality/HostLoad.js +525 -525
  152. package/services/encode/quality/HostTimings.js +249 -249
  153. package/services/encode/quality/OutputQualityState.js +28 -28
  154. package/services/encode/quality/QualityController.js +935 -935
  155. package/services/encode/quality/QualityOffer.js +416 -416
  156. package/services/encode/quality/drain-threat.js +47 -47
  157. package/services/encode/quality/link-budget.js +349 -254
  158. package/services/encode/quality/output-format.js +319 -315
  159. package/services/encode/quality/serving-output.js +216 -216
  160. package/services/encode/quality/visible-rung.js +57 -57
  161. package/services/encode/run-budget.js +97 -97
  162. package/services/encode/run-command.js +754 -754
  163. package/services/encode/run-costs.js +155 -155
  164. package/services/encode/run-inputs.js +42 -42
  165. package/services/encode/segment-formats/fmp4.js +456 -456
  166. package/services/encode/segment-formats/index.js +85 -85
  167. package/services/encode/segment-formats/init-compat.js +324 -324
  168. package/services/encode/segment-formats/mpegts.js +134 -134
  169. package/services/encode/start-stop-cost.js +178 -178
  170. package/services/encode/throughput.js +97 -97
  171. package/services/encode/torrent-cost.js +88 -88
  172. package/services/identity/installation-id.js +38 -38
  173. package/services/media/ContainerOrchestrator.js +149 -149
  174. package/services/media/KeyframeTables.js +316 -316
  175. package/services/media/SourceFile.js +298 -298
  176. package/services/media/SubtitleCues.js +520 -520
  177. package/services/media/SubtitleOrchestrator.js +167 -167
  178. package/services/media/audio-inventory.js +298 -245
  179. package/services/media/container/AviContainer.js +266 -266
  180. package/services/media/container/Container.js +609 -603
  181. package/services/media/container/ContainerFactory.js +56 -56
  182. package/services/media/container/KeyframeTable.js +272 -272
  183. package/services/media/container/MatroskaContainer.js +1494 -1494
  184. package/services/media/container/Mp4Container.js +1344 -1244
  185. package/services/media/container/ebml-reader.js +159 -159
  186. package/services/media/ffmpeg-banner.js +260 -260
  187. package/services/media/keyframe-probe.js +157 -157
  188. package/services/media/media-info-probe.js +93 -93
  189. package/services/media/playback-planner.js +931 -931
  190. package/services/media/tracks/AudioTrack.js +143 -131
  191. package/services/media/tracks/ContainerTrack.js +75 -75
  192. package/services/media/tracks/ImageSubtitleTrack.js +19 -19
  193. package/services/media/tracks/SubtitleTrack.js +38 -38
  194. package/services/media/tracks/TextSubtitleTrack.js +287 -287
  195. package/services/media/tracks/VideoTrack.js +33 -33
  196. package/services/media/tracks/audio-bound.js +233 -0
  197. package/services/media/tracks/index.js +15 -15
  198. package/services/media/tracks/language-detect.js +174 -174
  199. package/services/server/OutputLifecycle.js +418 -418
  200. package/services/server/SegmentServing.js +1150 -1150
  201. package/services/server/ViewerRequests.js +760 -760
  202. package/services/server/WaitLedger.js +142 -142
  203. package/services/server/controllers/PlaybackController.js +40 -40
  204. package/services/server/controllers/SubtitleController.js +109 -109
  205. package/services/server/http-responses.js +60 -60
  206. package/services/server/transcode-session-files.js +325 -325
  207. package/services/server/wire-outputs.js +995 -992
  208. package/services/storage/Diagnostics.js +202 -202
  209. package/services/storage/MachineBudget.js +235 -235
  210. package/services/storage/allowance.js +107 -107
  211. package/services/storage/core-dumps.js +106 -106
  212. package/services/storage/files/CompletedFiles.js +391 -391
  213. package/services/storage/files/piece-from-whole-file.js +118 -118
  214. package/services/storage/free.js +71 -71
  215. package/services/storage/keep.js +48 -48
  216. package/services/storage/machine-memory.js +56 -56
  217. package/services/storage/memory-report.js +575 -575
  218. package/services/storage/piece-store/piece-disk-store.js +539 -539
  219. package/services/storage/piece-store/piece-lru.js +495 -495
  220. package/services/storage/piece-store/shared-piece-store.js +1931 -1931
  221. package/services/storage/returns.js +103 -103
  222. package/services/storage/segment-store/SegmentStore.js +1240 -1240
  223. package/services/storage/wire.js +175 -175
  224. package/services/torrent/demand/DemandRegister.js +202 -202
  225. package/services/torrent/demand/Urgency.js +137 -137
  226. package/services/torrent/demand/Window.js +118 -118
  227. package/services/torrent/demand/index.js +8 -8
  228. package/services/torrent/demand/pieces.js +140 -140
  229. package/services/torrent/download/SwarmSelection.js +386 -386
  230. package/services/torrent/download/registry.js +102 -102
  231. package/services/torrent/download/withdraw-claim.js +80 -80
  232. package/services/torrent/episode-naming.js +182 -182
  233. package/services/torrent/files.js +455 -455
  234. package/services/torrent/naming.js +619 -619
  235. package/services/torrent/piece-store-of.js +29 -29
  236. package/services/torrent/supply-margin.js +262 -262
  237. package/services/torrent/torrent-pool.js +2675 -2675
  238. package/services/torrent/worker/background-fill.js +213 -213
  239. package/services/torrent/worker/channel.js +271 -271
  240. package/services/torrent/worker/client.js +765 -765
  241. package/services/torrent/worker/fastest-wires.js +342 -342
  242. package/services/torrent/worker/handle-state.js +23 -23
  243. package/services/torrent/worker/held-bytes.js +155 -155
  244. package/services/torrent/worker/install-webrtc-shim.js +32 -32
  245. package/services/torrent/worker/piece-reader.js +1078 -1078
  246. package/services/torrent/worker/pool-adapter.js +371 -371
  247. package/services/torrent/worker/protocol.js +184 -184
  248. package/services/torrent/worker/resume-warm.js +107 -107
  249. package/services/torrent/worker/webrtc-shim.js +219 -219
  250. package/services/torrent/worker/worker.js +1129 -1129
  251. package/services/transport/data-channel-handler.js +1369 -1369
  252. package/services/transport/delivery-probe.js +842 -842
  253. package/services/transport/health-collector.js +53 -53
  254. package/services/transport/nat-classifier.js +231 -231
  255. package/services/transport/packet-witness.js +808 -808
  256. package/services/transport/port-mapper.js +235 -235
  257. package/services/transport/registry-api.js +81 -81
  258. package/services/transport/tunnel-client.js +447 -447
  259. package/services/transport/usrsctp-state.js +175 -175
  260. package/services/transport/webrtc-manager.js +484 -484
  261. package/services/viewer/Assignments.js +340 -340
  262. package/services/viewer/PriorityMap.js +390 -390
  263. package/services/viewer/PriorityOrchestrator.js +325 -325
  264. package/services/viewer/Viewer.js +691 -691
  265. package/services/viewer/Viewers.js +368 -368
  266. package/services/viewer/active-output.js +37 -37
  267. package/services/viewer/audio-start.js +46 -46
  268. package/services/viewer/buffer-trend.js +81 -81
  269. package/services/viewer/choices.js +647 -647
  270. package/services/viewer/positions.js +126 -126
  271. package/services/viewer/report-intake.js +46 -46
  272. package/store/source-registry.js +71 -71
  273. package/test/asset-paths.test.js +28 -28
  274. package/test/audio-buffer-continuity.test.js +70 -70
  275. package/test/audio-inventory.test.js +212 -212
  276. package/test/audio-track-bitrate.test.js +40 -40
  277. package/test/auto-quality-step.test.js +707 -707
  278. package/test/available-share.test.js +76 -76
  279. package/test/background-fill.test.js +190 -190
  280. package/test/client-log-file.test.js +110 -110
  281. package/test/completed-files.test.js +115 -115
  282. package/test/concurrent-cost.test.js +148 -148
  283. package/test/container-media-info.test.js +228 -228
  284. package/test/contention.test.js +76 -76
  285. package/test/core-dumps.test.js +57 -57
  286. package/test/coverage-follows-the-disk.test.js +228 -228
  287. package/test/coverage-map.test.js +195 -195
  288. package/test/cue-push-carries-what-the-walk-found.test.js +58 -58
  289. package/test/cut-times-timeline.test.js +65 -65
  290. package/test/cuts-follow-published-grid.test.js +109 -109
  291. package/test/data-channel-frame.test.js +63 -63
  292. package/test/data-channel-viewer-lifecycle.test.js +92 -92
  293. package/test/dead-torrent-handle.test.js +52 -52
  294. package/test/declared-rates.test.js +116 -116
  295. package/test/declared-tracks.test.js +43 -43
  296. package/test/decode-cost-fit.test.js +202 -202
  297. package/test/decode-cost.test.js +462 -462
  298. package/test/delivery-probe.test.js +393 -393
  299. package/test/demand-register.test.js +206 -206
  300. package/test/dht-bootstrap.test.js +72 -72
  301. package/test/drain-threat.test.js +65 -65
  302. package/test/duplicate-add.test.js +48 -48
  303. package/test/encode-admission.test.js +146 -146
  304. package/test/encode-cost.test.js +283 -283
  305. package/test/encode-exit.test.js +111 -111
  306. package/test/encode-orchestrator.test.js +419 -419
  307. package/test/encode-plan-viewers.test.js +718 -718
  308. package/test/encode-plan.test.js +545 -545
  309. package/test/encode-run-state.test.js +314 -314
  310. package/test/encode-run.test.js +162 -162
  311. package/test/encode-slope.test.js +46 -46
  312. package/test/encoded-output.test.js +39 -39
  313. package/test/encoder-kinds.test.js +122 -122
  314. package/test/encoder-readings.test.js +46 -46
  315. package/test/episode-naming.test.js +131 -131
  316. package/test/every-claimant-is-told-its-share.test.js +152 -152
  317. package/test/failed-encoder-still-serves-what-exists.test.js +354 -354
  318. package/test/failed-start-breaker.test.js +202 -202
  319. package/test/fastest-wires.test.js +143 -143
  320. package/test/ffmpeg-stream-counts.test.js +78 -78
  321. package/test/file-edges.test.js +191 -191
  322. package/test/fixtures/audio-frame-boundary.json +1 -1
  323. package/test/fmp4-presentation-clock.test.js +147 -147
  324. package/test/fmp4-self-contained.test.js +80 -80
  325. package/test/fmp4-timestamps.test.js +140 -140
  326. package/test/fmp4-track-completeness.test.js +41 -41
  327. package/test/format-keyed-outputs.test.js +78 -78
  328. package/test/health-metrics.test.js +38 -38
  329. package/test/held-request-width.test.js +157 -157
  330. package/test/helpers/encode-run.js +136 -136
  331. package/test/helpers/held-file.js +29 -29
  332. package/test/helpers/manager.js +57 -57
  333. package/test/helpers/output-spec.js +63 -63
  334. package/test/host-load.test.js +68 -68
  335. package/test/index-accuracy-is-about-the-file.test.js +128 -128
  336. package/test/init-compat.test.js +219 -219
  337. package/test/input-lost-quiets-the-plan.test.js +261 -261
  338. package/test/input-unavailable.test.js +48 -48
  339. package/test/installation-id.test.js +39 -39
  340. package/test/keeping-period.test.js +83 -83
  341. package/test/keyframe-index-accuracy.test.js +188 -188
  342. package/test/keyframe-table-budget.test.js +102 -102
  343. package/test/keyframes-belong-to-the-file.test.js +249 -249
  344. package/test/learned-median.test.js +37 -37
  345. package/test/letting-go-asks-who-is-watching.test.js +191 -191
  346. package/test/limit-row-by-area.test.js +60 -60
  347. package/test/link-budget.test.js +112 -111
  348. package/test/link-probe.test.js +56 -56
  349. package/test/local-encoding-data.test.js +273 -273
  350. package/test/logger-repeats.test.js +134 -134
  351. package/test/look-ahead-coverage.test.js +56 -56
  352. package/test/manager-surface.test.js +292 -292
  353. package/test/matroska-cues-track.test.js +192 -192
  354. package/test/memory-budget.test.js +390 -390
  355. package/test/move-cost.test.js +216 -216
  356. package/test/mp4-subtitles.test.js +173 -173
  357. package/test/one-authority.test.js +285 -285
  358. package/test/one-budget.test.js +149 -149
  359. package/test/one-output-one-session.test.js +270 -204
  360. package/test/one-resource-divided.test.js +185 -185
  361. package/test/one-serving-output-per-height.test.js +458 -458
  362. package/test/orchestrator-wired.test.js +206 -206
  363. package/test/output-catalog.test.js +39 -39
  364. package/test/output-shape.test.js +21 -21
  365. package/test/output-spec.test.js +251 -251
  366. package/test/output-speed.test.js +88 -88
  367. package/test/outputs-being-prepared.test.js +40 -40
  368. package/test/packet-witness-ring.test.js +236 -236
  369. package/test/packet-witness.test.js +148 -148
  370. package/test/piece-disk-store.test.js +401 -401
  371. package/test/piece-from-whole-file.test.js +129 -129
  372. package/test/piece-lru.test.js +319 -319
  373. package/test/piece-reader.test.js +162 -162
  374. package/test/piece-selection-offset.test.js +85 -85
  375. package/test/piece-store-eviction.test.js +595 -595
  376. package/test/piece-store-never-refuses.test.js +153 -153
  377. package/test/piece-store-reservations.test.js +403 -403
  378. package/test/piece-store-slow-disk.test.js +159 -159
  379. package/test/piece-tail.test.js +97 -97
  380. package/test/plan-host-timings.test.js +68 -68
  381. package/test/plan-is-steady.test.js +225 -225
  382. package/test/playback-readiness.test.js +453 -453
  383. package/test/playback-start-regressions.test.js +99 -99
  384. package/test/priority-map-download.test.js +174 -174
  385. package/test/priority-map-emptied.test.js +204 -204
  386. package/test/priority-map-per-output.test.js +215 -215
  387. package/test/priority-map.test.js +163 -163
  388. package/test/probe-wedge-certainty.test.js +60 -60
  389. package/test/produced-copy-choice.test.js +213 -213
  390. package/test/published-timeline.test.js +83 -83
  391. package/test/quality-offer.test.js +162 -162
  392. package/test/quality-variants.test.js +1257 -1229
  393. package/test/rate-control-in-the-output.test.js +180 -180
  394. package/test/read-survives-withdrawal.test.js +164 -164
  395. package/test/read-window.test.js +365 -365
  396. package/test/resume-warm.test.js +39 -39
  397. package/test/run-graph-drift.test.js +37 -37
  398. package/test/run-inputs.test.js +80 -80
  399. package/test/run-intervals.test.js +100 -100
  400. package/test/run-position-follows-published-grid.test.js +89 -89
  401. package/test/run-progress.test.js +65 -65
  402. package/test/same-height-switch.test.js +664 -664
  403. package/test/seek-frees-the-viewers-requests.test.js +217 -217
  404. package/test/seek-landing.test.js +109 -109
  405. package/test/seek-target-not-superseded.test.js +195 -195
  406. package/test/segment-closed-on-both-branches.test.js +96 -96
  407. package/test/segment-cut-times.test.js +63 -63
  408. package/test/segment-demand.test.js +80 -80
  409. package/test/segment-hold-supersede.test.js +91 -91
  410. package/test/segment-judged-by-its-own-header.test.js +221 -221
  411. package/test/segment-serve-wiring.test.js +475 -475
  412. package/test/segment-store-eviction.test.js +247 -247
  413. package/test/segment-store.test.js +323 -323
  414. package/test/segment-true-start.test.js +86 -86
  415. package/test/segments-are-shared.test.js +176 -176
  416. package/test/send-chunk-bytes.test.js +86 -86
  417. package/test/serving-existing-output.test.js +105 -102
  418. package/test/serving-output.test.js +102 -102
  419. package/test/shared-piece-store.test.js +310 -310
  420. package/test/sidecar-naming.test.js +142 -142
  421. package/test/soundtrack-rate-bound.test.js +289 -0
  422. package/test/source-file.test.js +133 -133
  423. package/test/source-files-route.test.js +113 -113
  424. package/test/source-registry.test.js +18 -18
  425. package/test/split-a-stretch.test.js +139 -139
  426. package/test/stale-request-after-seek.test.js +158 -158
  427. package/test/startup-readings.test.js +124 -124
  428. package/test/stream-route.test.js +209 -209
  429. package/test/subtitle-cue-framing.test.js +200 -200
  430. package/test/subtitle-cue-source.test.js +102 -102
  431. package/test/subtitle-cue-walk.test.js +370 -370
  432. package/test/subtitle-cursor.test.js +63 -63
  433. package/test/subtitle-defaults.test.js +118 -118
  434. package/test/subtitle-language.test.js +252 -252
  435. package/test/subtitle-track-numbering.test.js +386 -386
  436. package/test/supply-margin.test.js +177 -177
  437. package/test/swarm-follows-readers.test.js +174 -174
  438. package/test/swarm-reach.test.js +130 -130
  439. package/test/swarm-selection.test.js +220 -220
  440. package/test/tail-duplication.test.js +167 -167
  441. package/test/the-channel-has-both-ends.test.js +91 -91
  442. package/test/the-torrent-thread-serves-bytes.test.js +107 -107
  443. package/test/thread-pool.test.js +53 -53
  444. package/test/timeline.test.js +84 -84
  445. package/test/torrent-contents.test.js +235 -235
  446. package/test/torrent-cost.test.js +71 -71
  447. package/test/torrent-files.test.js +221 -221
  448. package/test/torrent-naming.test.js +255 -255
  449. package/test/tracks-begin-together.test.js +209 -209
  450. package/test/tunnel-renewal.test.js +167 -167
  451. package/test/two-viewers-one-picture.test.js +504 -407
  452. package/test/upload-hurry.test.js +186 -186
  453. package/test/usrsctp-state.test.js +131 -131
  454. package/test/video-facts.test.js +102 -102
  455. package/test/viewer-assignments.test.js +143 -143
  456. package/test/viewer-outputs.test.js +285 -285
  457. package/test/viewer-presence.test.js +116 -116
  458. package/test/viewer-requests-admission.test.js +89 -89
  459. package/test/viewer-states.test.js +189 -189
  460. package/test/viewer-subtitle-subscription.test.js +96 -96
  461. package/test/viewer.test.js +139 -139
  462. package/test/viewing-generations.test.js +390 -390
  463. package/test/visible-rung.test.js +37 -37
  464. package/test/wait-ledger.test.js +100 -100
  465. package/test/webrtc-shim.test.js +149 -149
  466. package/test/wedge-certainty.test.js +131 -131
  467. package/test/withdraw-piece-claim.test.js +212 -212
  468. package/test/worker-channel.test.js +158 -158
  469. package/utils/client-log-file.js +151 -151
  470. package/utils/logger.js +312 -312
  471. package/utils/parse-range.js +25 -25
  472. package/utils/perf.js +59 -59
  473. package/utils/torrent-source-key.js +38 -38
@@ -1,329 +1,329 @@
1
- # Клин доставки: лестница на стенде и чтение исходника usrsctp — 2026-09-13
2
-
3
- Всё ниже либо замерено на стенде, либо прочитано из исходника на закреплённом
4
- коммите. Где вывод не подтверждён замером, это сказано прямо.
5
-
6
- ## 0. Что установлено за день, одним абзацем
7
-
8
- Клин воспроизводится по требованию — четыре прогона из четырёх — и не зависит
9
- ни от чего, чем мы можем управлять: ни от размера сообщения, ни от
10
- ненадёжного канала, ни от видимости вкладки, ни от паузы между запросами, ни от
11
- торрента с кодировщиком. Разбор через учёт полёта в usrsctp построен и **сам же
12
- опровергнут** дальнейшим чтением. Наверх заведён `sctplab/usrsctp#750` с
13
- воспроизведением и с поправкой. Чего по-прежнему нет — счётчиков живой
14
- заклинившей ассоциации.
15
-
16
- ## 1. Стенд
17
-
18
- Три места, три роли:
19
-
20
- 1. **хост Home Assistant** — контейнер `ttv-wedge-stand` из образа дополнения
21
- `b34a1737/aarch64-addon-torrent_tv_proxy:0.74.4`, на порту 9090, с ключом
22
- `--delivery-sink`. Отправитель. Своё дополнение при этом остановлено;
23
- 2. **машина разработчика** — Chrome Canary с отладочным портом, вкладка на
24
- `webauth.courses`. Внутри страницы цикл поднимает СВОЁ соединение
25
- (`new WebRtcProxy(id)`) и подряд просит по 4 МБ. Приёмник и источник
26
- нагрузки;
27
- 3. **дроплет** — только сигналинг и отчёты цикла по HTTP.
28
-
29
- Выбранная пара за все прогоны: `2001:1c00:a603:2100:…:9090 -> 2001:1c00:a603:2100:…`
30
- (host/srflx), оба адреса в одном `/64` — то есть напрямую, внутри домашней сети,
31
- мимо дроплета. Это та же форма пары, что и в полевом клине 2026-09-12.
32
-
33
- Загрузчик — `stand/wedge/browser-loader.js` (в родительской папке, рядом с
34
- `driver.mjs`). Раньше он жил только во вкладке и пропадал вместе с ней.
35
-
36
- ### Три вещи, каждая из которых стоила прогона
37
-
38
- 1. **правка в контейнере дополнения не выживает.** `ha apps restart` пересоздаёт
39
- контейнер из образа, а убийство процесса внутри будит watchdog, который тоже
40
- пересоздаёт. Поэтому свой контейнер — watchdog его не трогает;
41
- 2. **целиться по идентификатору, а не по имени.** Локальный стенд разработчика
42
- назывался так же, и цикл подключился к нему;
43
- 3. **отладочный порт Chrome не открывается на профиле по умолчанию** начиная со
44
- 136-й версии. Нужен явный `--user-data-dir`. А чтобы перекрытое окно
45
- считалось видимым — `--disable-features=CalculateNativeWinOcclusion`.
46
-
47
- ## 2. Лестница: четыре плеча, четыре клина
48
-
49
- | плечо | что менялось | клин | скорость |
50
- |---|---|---|---|
51
- | опорное (2026-09-12) | — | 2696 МБ | 190-325 Мбит/с |
52
- | `16k` | сообщение 16 КБ вместо ≈65 КБ | 1220 МБ | 43-49 Мбит/с |
53
- | `nofast` | без канала `proxy-fast`, вкладка видима | 288 МБ | 40-64 Мбит/с |
54
- | `drain` | пауза 300 мс между запросами | 5300 МБ | 34 Мбит/с |
55
-
56
- Форма приговора одинакова во всех: запрос висит 30 с и не получает ничего,
57
- канал при этом `open`; со стороны прокси все каналы встают на одном счётчике,
58
- `queued[…0B]`, `rtt` 20-30 мс, `pc=connected ice=completed`. Это форма поля
59
- дословно.
60
-
61
- **Разброс 288-5300 МБ, восемнадцатикратный, при одном прогоне на плечо.** Ни
62
- одно плечо от другого не отделено: полевой разброс сам по себе был 485-2694 МБ.
63
- Поэтому «пауза помогает» утверждать нельзя, хотя `drain` и прошёл дальше всех.
64
-
65
- **Чего лестница не имеет и что надо снять первым делом:** нескольких прогонов
66
- опорного плеча подряд. Без измеренного разброса любое плечо нечитаемо — это та
67
- самая ошибка, что сделана сегодня дважды.
68
-
69
- ## 3. Что снято замерами
70
-
71
- 1. **размер сообщения** — не влияет. Клин и на 65 КБ, и на 16 КБ. Гипотеза, ради
72
- которой строился `--send-chunk-bytes`, закрыта;
73
- 2. **ненадёжный канал `proxy-fast`** (`ordered: false, maxRetransmits: 0`) — не
74
- нужен для клина. Прогон `nofast` не создавал его вовсе. Это же снимает
75
- подозрение, на котором стоит открытый с 2020 года `sctplab/usrsctp#427`;
76
- 3. **скрытая вкладка и торможение приёмника** — не при чём, `peerTab=visible`
77
- весь прогон `nofast`;
78
- 4. **пауза, дающая полёту вычерпаться** — не спасает;
79
- 5. **торрент, кодировщик, нарезка, хранилище кусков** — не при чём, стенд отдаёт
80
- синтетические байты.
81
-
82
- ## 4. Чтение usrsctp `fec583d5` — и почему разбор не устоял
83
-
84
- **Что прочитано и верно:**
85
-
86
- 1. `sctp_indata.c:5144` — `peers_rwnd = sctp_sbspace_sub(a_rwnd, total_flight +
87
- total_flight_count * 256)`. Наше представление об окне пира — это объявленное
88
- им окно МИНУС наш собственный учёт полёта;
89
- 2. `sctp_output.c:8481` — при `peers_rwnd == 0` и `total_flight > 0` ставится
90
- `no_data_chunks = 1`: данные не отправляются вовсе;
91
- 3. `sctp_output.c:9376` — зондирование окна ставится только при
92
- `total_flight == 0`;
93
- 4. `sctp_var.h:338` — вычет учёта несимметричен: прибавка безусловна, вычет
94
- только если байты сходятся, иначе оба счётчика обнуляются.
95
-
96
- Из 1-3 следует состояние, объясняющее каждый факт с провода: завышенный и не
97
- убывающий счётчик полёта делает окно нулевым при любом объявленном, данные не
98
- идут, зонда нет, ретрансмиссии нет, подтверждения обрабатываются.
99
-
100
- **Чем это опровергнуто — дальнейшим чтением того же файла.** Пустую очередь
101
- отправленного исправляют ТРИ места, а не одно:
102
-
103
- 1. `sctp_handle_sack:4836` — ловит «очередь пуста, полёт положителен», печатает
104
- предупреждение, под INVARIANTS падает, обнуляет `total_flight`;
105
- 2. `sctp_handle_sack:5007` — обнуляет полёт по всем путям, оба счётчика, и
106
- останавливает таймеры;
107
- 3. `sctp_express_handle_sack:4226` — то же.
108
-
109
- Подтверждения во время клина приходят — это доказано проводом. Значит состояние
110
- «байты числятся, очередь пуста» исправлялось бы на ближайшем подтверждении и
111
- существовать не может.
112
-
113
- Остаётся другая форма: очередь **не** пуста, а куски на ней учтены и никогда не
114
- будут подтверждены. Её и стережёт `sctp_fs_audit`, и вот он затворён
115
- (`j == 0`, `sent_queue_retran_cnt == 0`, `win_probe_recovered == 0`,
116
- `done_once == 0`, плюс ранний выход при `pr_sctp_cnt >= sent_queue_cnt`). Но эта
117
- форма плохо ложится на провод: куски на очереди должны держать таймер
118
- ретрансмиссии и порождать повторы, а повторов нет 178,8 с.
119
-
120
- **Механизма, который я готов защищать, на сегодня нет.**
121
-
122
- ## 5. Наверх
123
-
124
- `sctplab/usrsctp#750` — наблюдение, воспроизведение, снятые причины, вопросы,
125
- и отдельным сообщением поправка, снимающая разбор из раздела 4. PR не подан
126
- сознательно: подавать правку по опровергнутому разбору нельзя.
127
-
128
- `#427` открыт с 2020 года, сопровождающие не воспроизвели ни на FreeBSD, ни на
129
- usrsctp. У нас воспроизведение есть — это и есть то, чего им не хватало.
130
-
131
- ## 6. Что делать дальше, по убыванию пользы
132
-
133
- 1. **прочитать счётчики живой заклинившей ассоциации** — `total_flight`,
134
- `total_flight_count`, `peers_rwnd`, `cwnd`, состояние очереди отправленного.
135
- Единственный способ назвать причину. На БОЕВОМ прокси это однажды заморозило
136
- процесс (пункт 77); **на стенде безопасно** — отдельный контейнер, зрителей
137
- нет. Для этого построено плечо `hold`: оно не закрывает ассоциацию после
138
- приговора, чего не делало ни одно прежнее, поэтому читать было нечего;
139
- 2. **объявлять заклинивший канал потерянным — на ПРИЁМНИКЕ.** Детекторы прокси
140
- смотрят на его очередь, а она читается нулём: байты уже отданы в usrsctp. В
141
- поле 2026-09-06 прокси объявил клин на шестнадцать минут позже браузера.
142
- Браузер же знает сразу: висящий запрос без единого байта, когда предыдущие
143
- приходили за секунду. Порог не выбирается, а выводится из измеренного худшего
144
- времени ответа этого соединения;
145
- 3. **восстановление, и оно может быть незаметным.** Вторая ассоциация к тому же
146
- пиру поднимается за 232 мс и сразу даёт 310 Мбит/с — замерено трижды. Подушка
147
- зрителя 120 с. Лестница пересоединения уже есть и работает на ЗАКРЫТОМ канале
148
- (поле 2026-09-12, 20:03); не срабатывает она только потому, что заклинивший
149
- канал остаётся `connected`. То есть строить надо пункт 2, а не восстановление;
150
- 4. **несколько прогонов опорного плеча** — измеренный разброс, без которого
151
- лестница не читается.
152
-
153
-
154
- ## 6.1. Попытка прочитать счётчики: сделана, не удалась, причина названа
155
-
156
- Плечо `hold` заклинило на 1436 МБ и **удержало ассоциацию открытой** — первый
157
- раз, когда было что читать. `gdb` в контейнере стенда есть.
158
-
159
- Четыре подключения подряд, только чтение, срок жизни задан снаружи
160
- (`timeout -s KILL`). Результат:
161
-
162
- 1. `system_base_info` найден по адресу `0x7f5a9eb8b0` — но как символ **без
163
- отладочной информации**;
164
- 2. `ptype struct sctp_association` — `No struct type named sctp_association`;
165
- 3. `list sctp_output.c:8481` — `No source file named sctp_output.c`.
166
-
167
- Секции `.debug_info`, `.debug_abbrev`, `.debug_str` в `node_datachannel.node`
168
- присутствуют, но покрывают C++ часть libdatachannel; C-модули usrsctp собраны
169
- без `-g`. Значит разметки структур нет, и прочитать поля по имени нельзя.
170
-
171
- **Читать по жёстко забитым смещениям — нельзя.** Смещения зависят от флагов
172
- сборки (`INET6`, `SCTP_DEBUG` и прочих), а ошибка в смещении даёт правдоподобное
173
- число, которое ничем не отличить от верного.
174
-
175
- **Отдельный результат, важный для пункта 77 роадмапа: чтение отладчиком
176
- безопасно.** Процесс пережил все четыре подключения и отвечает на `/healthz`.
177
- Губителен был не отладчик как таковой, а **вызов функции внутри исследуемого
178
- процесса** (`usrsctp_getsockopt`), прерванный убийством: он оставил захваченный
179
- замок и тупик. Правило, которое из этого следует: подключаться можно, читать
180
- можно, вызывать внутри процесса — нельзя.
181
-
182
- **Что осталось для этого чтения:** собрать node-datachannel с `-g` под aarch64
183
- и поставить в контейнер стенда. Это не форк — те же исходники, отладочная
184
- сборка, и только для стенда.
185
-
186
-
187
- ## 6.2. ПРИЧИНА НАЗВАНА: таймер ретрансмиссии не запланирован
188
-
189
- Счётчики прочитаны из живой заклинившей ассоциации 2026-09-13. Это отменяет
190
- раздел 6.1, где сказано, что прочитать не удалось: не удавалось с поставляемым
191
- модулем, а с отладочной сборкой удалось.
192
-
193
- ### Как получена сборка (воспроизводимо)
194
-
195
- Сборочный контейнер из образа дополнения, `apk add cmake git ninja pkgconf
196
- openssl-dev linux-headers`, затем:
197
-
198
- ```
199
- git clone --depth 1 --branch v0.32.3 --recurse-submodules https://github.com/murat-dogan/node-datachannel.git
200
- npm i -g cmake-js && npm i --no-save --ignore-scripts node-addon-api
201
- cmake-js compile --CDCMAKE_BUILD_TYPE=RelWithDebInfo --CDOPENSSL_ROOT_DIR=/usr --parallel 4
202
- ```
203
-
204
- Две грабли: `npm ci` падает на рассинхроне замка, а нужен из всего этого только
205
- `node-addon-api` ради `napi.h`; и CMake не находит libcrypto, хотя он на месте —
206
- корень OpenSSL приходится указать явно. Получается 58 МБ с отладочной
207
- информацией; libdatachannel v0.24.2 и usrsctp `fec583d5` внутри — ровно те
208
- версии, что работают в поле.
209
-
210
- Модуль подменяется в контейнере стенда поверх поставляемого (копия рядом,
211
- `.orig`).
212
-
213
- ### Обход структур usrsctp
214
-
215
- `system_base_info.sctppcbinfo.listhead.lh_first` → цепочка `sctp_inpcb` по
216
- `sctp_list.le_next`; у каждого `sctp_asoc_list.lh_first` → цепочка `sctp_tcb`
217
- по `sctp_tcblist.le_next`; у каждого `asoc`, и пути по `asoc.nets` через
218
- `sctp_next.tqe_next`. Сценарии — `/tmp/sctp.gdb` и `/tmp/sctp3.gdb` в контейнере
219
- стенда. `ticks` — статическая в `sctp_callout.c`, по имени не берётся.
220
-
221
- ### Что прочитано
222
-
223
- Клин на 2356 МБ, ассоциация удержана открытой плечом, которое не закрывает её
224
- после приговора:
225
-
226
- ```
227
- TCB state=8 flight=95786 fcount=82 rwnd=4572914 sentq_cnt=82 sendq_cnt=0
228
- retran=0 prsctp=0 sentq_empty=0
229
- NET rxt_timer: flags=0x0 c_time=342660
230
- cwnd=95450 flight_size=95786 ssthresh=83634 RTO=200 error_count=0
231
- partial_bytes_acked=0 fast_retran_loss_recovery=0 dest_state=0x1c1
232
- ASOC last_acked_seq=1527044401 sending_seq=1527044484
233
- CHUNK tsn=1527044402 sent=1 snd_count=1 book_size=1172
234
- CHUNK tsn=1527044403 sent=1 snd_count=1 book_size=1172
235
- CHUNK tsn=1527044404 sent=1 snd_count=1 book_size=1172
236
- ```
237
-
238
- ### Диагноз
239
-
240
- **`rxt_timer.flags = 0x0`** — ни `SCTP_CALLOUT_PENDING` (0x0004), ни
241
- `SCTP_CALLOUT_ACTIVE` (0x0002). Таймер ретрансмиссии НЕ ЗАПЛАНИРОВАН, при том
242
- что 82 куска лежат неподтверждёнными, каждый отправлен ровно один раз
243
- (`snd_count=1`, `sent=SCTP_DATAGRAM_SENT`) и ни один не помечен к пересылке.
244
-
245
- **Полёт 95786 против окна перегрузки 95450** — окно заполнено, `sctp_med_chunk_output`
246
- нового не отправит.
247
-
248
- Замок замкнут сам на себя: подтвердить куски некому, переслать некому, полёт не
249
- убывает, окно не освобождается, не уходит ничего. Навсегда.
250
-
251
- Это объясняет каждое наблюдение с провода: ни пакета с данными, ни
252
- ретрансмиссии, ни зонда окна, подтверждения обрабатываются, лечит только новая
253
- ассоциация.
254
-
255
- ### Что этим снято ЧИСЛАМИ
256
-
257
- 1. **учёт полёта точен** — `fcount=82` против `sentq_cnt=82`, фантома нет.
258
- Раздел 4 опровергнут не только чтением, но и замером;
259
- 2. **окно пира 4 572 914 байт, распахнуто**, а не ноль. Затвор
260
- `peers_rwnd == 0 && total_flight > 0` не при чём;
261
- 3. **таймер не отодвинут после неудач**: `RTO=200` — минимум, `error_count=0`.
262
- Он просто не заведён.
263
-
264
- ### Чего НЕ установлено
265
-
266
- Какая дорога теряет таймер. Обе, что должны его заводить, на вид верны:
267
- `sctp_output.c:9417` заводит после отправки, если он не запланирован;
268
- `sctp_indata.c:4265` заводит для каждого пути с ненулевым полётом при обработке
269
- подтверждения. У `sctp_t3rxt_timer` ранние выходы только через
270
- `sctp_threshold_management`, а при `error_count=0` он не срабатывал. По одному
271
- снимку дорогу не назвать: нужен ряд снимков в секундах перед обрывом.
272
-
273
- ### Что это меняет для продукта
274
-
275
- Обнаружение на приёмнике и ротация остаются в силе, но теперь известно, что
276
- именно обходится: незаведённый таймер в конкретной ассоциации. **Ротация лечит
277
- это по построению** — новая ассоциация начинает с исправным таймером.
278
-
279
- Числа отправлены в `sctplab/usrsctp#750`.
280
-
281
-
282
- ### Подтверждено на втором клине — подпись детерминированная
283
-
284
- Клин на 96 МБ (ниже прежнего минимума; отладчик к прогону не прикасался, обе
285
- записи переменных сделаны до создания ассоциации):
286
-
287
- | | первый | второй |
288
- |---|---|---|
289
- | полёт | 95786 | 51568 |
290
- | окно перегрузки | 95450 | 50566 |
291
- | разрыв | 336 | 1002 |
292
- | кусков в полёте / в очереди | 82 / 82 | 44 / 44 |
293
- | окно пира | 4572914 | 4647668 |
294
- | помечено к пересылке | 0 | 0 |
295
- | ошибок пути | 0 | 0 |
296
- | `rxt_timer.flags` | 0x0 | 0x0 |
297
-
298
- Разрыв оба раза **меньше одного пакета** — отправка встала ровно там, где
299
- следующий кусок перестал влезать в окно. Само по себе это нормальное поведение
300
- при заполнении окна; ненормально, что оно не разгребается.
301
-
302
- Ряд объёмов до клина теперь: 96, 288, 1220, 1436, 2356, 2696, 5300 МБ. Порога
303
- нет, разброс пятидесятипятикратный.
304
-
305
- ### Вывод usrsctp: включается не тем флагом, каким кажется
306
-
307
- `option(sctp_debug "Provide debug information" 1)` в CMakeLists самого usrsctp
308
- включён по умолчанию — но у libdatachannel есть **свой** `option(SCTP_DEBUG
309
- "Enable SCTP debugging output to verbose log" OFF)`, и перекрывает именно он.
310
- Поэтому в обычной сборке вывода нет, хотя первый флаг говорит обратное.
311
-
312
- Проверено на живом процессе: `system_base_info.debug_printf` установлен в
313
- `rtc::impl::SctpTransport::DebugCallback`, а `sctpsysctl.sctp_debug_on` равен
314
- нулю — libdatachannel выставил бы `SCTP_DEBUG_ALL` сам, но его строка стоит под
315
- `#ifdef SCTP_DEBUG`, до C++ не дошедшим.
316
-
317
- Обе переменные пишутся отладчиком без вызова функций внутри процесса: указатель
318
- вывода можно перевести прямо на `printf`, минуя журнал libdatachannel и его
319
- уровень. Записи принимаются, но печатать нечего, пока нет пересборки с
320
- `--CDSCTP_DEBUG=ON`.
321
-
322
- ## 7. Чего этот день НЕ установил
323
-
324
- 1. ~~причину~~ — УСТАНОВЛЕНА, см. 6.2. Не установлена дорога, теряющая таймер;
325
- 2. повторяемость по плечам: один прогон на плечо, разброс восемнадцатикратный;
326
- 3. связь клина с полевыми эпизодами до 2026-08-26 — они старше и части нынешней
327
- нынешнего кода не имели;
328
- 4. что пауза в `drain` действительно помогает, а не попала в верхний край
329
- разброса.
1
+ # Клин доставки: лестница на стенде и чтение исходника usrsctp — 2026-09-13
2
+
3
+ Всё ниже либо замерено на стенде, либо прочитано из исходника на закреплённом
4
+ коммите. Где вывод не подтверждён замером, это сказано прямо.
5
+
6
+ ## 0. Что установлено за день, одним абзацем
7
+
8
+ Клин воспроизводится по требованию — четыре прогона из четырёх — и не зависит
9
+ ни от чего, чем мы можем управлять: ни от размера сообщения, ни от
10
+ ненадёжного канала, ни от видимости вкладки, ни от паузы между запросами, ни от
11
+ торрента с кодировщиком. Разбор через учёт полёта в usrsctp построен и **сам же
12
+ опровергнут** дальнейшим чтением. Наверх заведён `sctplab/usrsctp#750` с
13
+ воспроизведением и с поправкой. Чего по-прежнему нет — счётчиков живой
14
+ заклинившей ассоциации.
15
+
16
+ ## 1. Стенд
17
+
18
+ Три места, три роли:
19
+
20
+ 1. **хост Home Assistant** — контейнер `ttv-wedge-stand` из образа дополнения
21
+ `b34a1737/aarch64-addon-torrent_tv_proxy:0.74.4`, на порту 9090, с ключом
22
+ `--delivery-sink`. Отправитель. Своё дополнение при этом остановлено;
23
+ 2. **машина разработчика** — Chrome Canary с отладочным портом, вкладка на
24
+ `webauth.courses`. Внутри страницы цикл поднимает СВОЁ соединение
25
+ (`new WebRtcProxy(id)`) и подряд просит по 4 МБ. Приёмник и источник
26
+ нагрузки;
27
+ 3. **дроплет** — только сигналинг и отчёты цикла по HTTP.
28
+
29
+ Выбранная пара за все прогоны: `2001:1c00:a603:2100:…:9090 -> 2001:1c00:a603:2100:…`
30
+ (host/srflx), оба адреса в одном `/64` — то есть напрямую, внутри домашней сети,
31
+ мимо дроплета. Это та же форма пары, что и в полевом клине 2026-09-12.
32
+
33
+ Загрузчик — `stand/wedge/browser-loader.js` (в родительской папке, рядом с
34
+ `driver.mjs`). Раньше он жил только во вкладке и пропадал вместе с ней.
35
+
36
+ ### Три вещи, каждая из которых стоила прогона
37
+
38
+ 1. **правка в контейнере дополнения не выживает.** `ha apps restart` пересоздаёт
39
+ контейнер из образа, а убийство процесса внутри будит watchdog, который тоже
40
+ пересоздаёт. Поэтому свой контейнер — watchdog его не трогает;
41
+ 2. **целиться по идентификатору, а не по имени.** Локальный стенд разработчика
42
+ назывался так же, и цикл подключился к нему;
43
+ 3. **отладочный порт Chrome не открывается на профиле по умолчанию** начиная со
44
+ 136-й версии. Нужен явный `--user-data-dir`. А чтобы перекрытое окно
45
+ считалось видимым — `--disable-features=CalculateNativeWinOcclusion`.
46
+
47
+ ## 2. Лестница: четыре плеча, четыре клина
48
+
49
+ | плечо | что менялось | клин | скорость |
50
+ |---|---|---|---|
51
+ | опорное (2026-09-12) | — | 2696 МБ | 190-325 Мбит/с |
52
+ | `16k` | сообщение 16 КБ вместо ≈65 КБ | 1220 МБ | 43-49 Мбит/с |
53
+ | `nofast` | без канала `proxy-fast`, вкладка видима | 288 МБ | 40-64 Мбит/с |
54
+ | `drain` | пауза 300 мс между запросами | 5300 МБ | 34 Мбит/с |
55
+
56
+ Форма приговора одинакова во всех: запрос висит 30 с и не получает ничего,
57
+ канал при этом `open`; со стороны прокси все каналы встают на одном счётчике,
58
+ `queued[…0B]`, `rtt` 20-30 мс, `pc=connected ice=completed`. Это форма поля
59
+ дословно.
60
+
61
+ **Разброс 288-5300 МБ, восемнадцатикратный, при одном прогоне на плечо.** Ни
62
+ одно плечо от другого не отделено: полевой разброс сам по себе был 485-2694 МБ.
63
+ Поэтому «пауза помогает» утверждать нельзя, хотя `drain` и прошёл дальше всех.
64
+
65
+ **Чего лестница не имеет и что надо снять первым делом:** нескольких прогонов
66
+ опорного плеча подряд. Без измеренного разброса любое плечо нечитаемо — это та
67
+ самая ошибка, что сделана сегодня дважды.
68
+
69
+ ## 3. Что снято замерами
70
+
71
+ 1. **размер сообщения** — не влияет. Клин и на 65 КБ, и на 16 КБ. Гипотеза, ради
72
+ которой строился `--send-chunk-bytes`, закрыта;
73
+ 2. **ненадёжный канал `proxy-fast`** (`ordered: false, maxRetransmits: 0`) — не
74
+ нужен для клина. Прогон `nofast` не создавал его вовсе. Это же снимает
75
+ подозрение, на котором стоит открытый с 2020 года `sctplab/usrsctp#427`;
76
+ 3. **скрытая вкладка и торможение приёмника** — не при чём, `peerTab=visible`
77
+ весь прогон `nofast`;
78
+ 4. **пауза, дающая полёту вычерпаться** — не спасает;
79
+ 5. **торрент, кодировщик, нарезка, хранилище кусков** — не при чём, стенд отдаёт
80
+ синтетические байты.
81
+
82
+ ## 4. Чтение usrsctp `fec583d5` — и почему разбор не устоял
83
+
84
+ **Что прочитано и верно:**
85
+
86
+ 1. `sctp_indata.c:5144` — `peers_rwnd = sctp_sbspace_sub(a_rwnd, total_flight +
87
+ total_flight_count * 256)`. Наше представление об окне пира — это объявленное
88
+ им окно МИНУС наш собственный учёт полёта;
89
+ 2. `sctp_output.c:8481` — при `peers_rwnd == 0` и `total_flight > 0` ставится
90
+ `no_data_chunks = 1`: данные не отправляются вовсе;
91
+ 3. `sctp_output.c:9376` — зондирование окна ставится только при
92
+ `total_flight == 0`;
93
+ 4. `sctp_var.h:338` — вычет учёта несимметричен: прибавка безусловна, вычет
94
+ только если байты сходятся, иначе оба счётчика обнуляются.
95
+
96
+ Из 1-3 следует состояние, объясняющее каждый факт с провода: завышенный и не
97
+ убывающий счётчик полёта делает окно нулевым при любом объявленном, данные не
98
+ идут, зонда нет, ретрансмиссии нет, подтверждения обрабатываются.
99
+
100
+ **Чем это опровергнуто — дальнейшим чтением того же файла.** Пустую очередь
101
+ отправленного исправляют ТРИ места, а не одно:
102
+
103
+ 1. `sctp_handle_sack:4836` — ловит «очередь пуста, полёт положителен», печатает
104
+ предупреждение, под INVARIANTS падает, обнуляет `total_flight`;
105
+ 2. `sctp_handle_sack:5007` — обнуляет полёт по всем путям, оба счётчика, и
106
+ останавливает таймеры;
107
+ 3. `sctp_express_handle_sack:4226` — то же.
108
+
109
+ Подтверждения во время клина приходят — это доказано проводом. Значит состояние
110
+ «байты числятся, очередь пуста» исправлялось бы на ближайшем подтверждении и
111
+ существовать не может.
112
+
113
+ Остаётся другая форма: очередь **не** пуста, а куски на ней учтены и никогда не
114
+ будут подтверждены. Её и стережёт `sctp_fs_audit`, и вот он затворён
115
+ (`j == 0`, `sent_queue_retran_cnt == 0`, `win_probe_recovered == 0`,
116
+ `done_once == 0`, плюс ранний выход при `pr_sctp_cnt >= sent_queue_cnt`). Но эта
117
+ форма плохо ложится на провод: куски на очереди должны держать таймер
118
+ ретрансмиссии и порождать повторы, а повторов нет 178,8 с.
119
+
120
+ **Механизма, который я готов защищать, на сегодня нет.**
121
+
122
+ ## 5. Наверх
123
+
124
+ `sctplab/usrsctp#750` — наблюдение, воспроизведение, снятые причины, вопросы,
125
+ и отдельным сообщением поправка, снимающая разбор из раздела 4. PR не подан
126
+ сознательно: подавать правку по опровергнутому разбору нельзя.
127
+
128
+ `#427` открыт с 2020 года, сопровождающие не воспроизвели ни на FreeBSD, ни на
129
+ usrsctp. У нас воспроизведение есть — это и есть то, чего им не хватало.
130
+
131
+ ## 6. Что делать дальше, по убыванию пользы
132
+
133
+ 1. **прочитать счётчики живой заклинившей ассоциации** — `total_flight`,
134
+ `total_flight_count`, `peers_rwnd`, `cwnd`, состояние очереди отправленного.
135
+ Единственный способ назвать причину. На БОЕВОМ прокси это однажды заморозило
136
+ процесс (пункт 77); **на стенде безопасно** — отдельный контейнер, зрителей
137
+ нет. Для этого построено плечо `hold`: оно не закрывает ассоциацию после
138
+ приговора, чего не делало ни одно прежнее, поэтому читать было нечего;
139
+ 2. **объявлять заклинивший канал потерянным — на ПРИЁМНИКЕ.** Детекторы прокси
140
+ смотрят на его очередь, а она читается нулём: байты уже отданы в usrsctp. В
141
+ поле 2026-09-06 прокси объявил клин на шестнадцать минут позже браузера.
142
+ Браузер же знает сразу: висящий запрос без единого байта, когда предыдущие
143
+ приходили за секунду. Порог не выбирается, а выводится из измеренного худшего
144
+ времени ответа этого соединения;
145
+ 3. **восстановление, и оно может быть незаметным.** Вторая ассоциация к тому же
146
+ пиру поднимается за 232 мс и сразу даёт 310 Мбит/с — замерено трижды. Подушка
147
+ зрителя 120 с. Лестница пересоединения уже есть и работает на ЗАКРЫТОМ канале
148
+ (поле 2026-09-12, 20:03); не срабатывает она только потому, что заклинивший
149
+ канал остаётся `connected`. То есть строить надо пункт 2, а не восстановление;
150
+ 4. **несколько прогонов опорного плеча** — измеренный разброс, без которого
151
+ лестница не читается.
152
+
153
+
154
+ ## 6.1. Попытка прочитать счётчики: сделана, не удалась, причина названа
155
+
156
+ Плечо `hold` заклинило на 1436 МБ и **удержало ассоциацию открытой** — первый
157
+ раз, когда было что читать. `gdb` в контейнере стенда есть.
158
+
159
+ Четыре подключения подряд, только чтение, срок жизни задан снаружи
160
+ (`timeout -s KILL`). Результат:
161
+
162
+ 1. `system_base_info` найден по адресу `0x7f5a9eb8b0` — но как символ **без
163
+ отладочной информации**;
164
+ 2. `ptype struct sctp_association` — `No struct type named sctp_association`;
165
+ 3. `list sctp_output.c:8481` — `No source file named sctp_output.c`.
166
+
167
+ Секции `.debug_info`, `.debug_abbrev`, `.debug_str` в `node_datachannel.node`
168
+ присутствуют, но покрывают C++ часть libdatachannel; C-модули usrsctp собраны
169
+ без `-g`. Значит разметки структур нет, и прочитать поля по имени нельзя.
170
+
171
+ **Читать по жёстко забитым смещениям — нельзя.** Смещения зависят от флагов
172
+ сборки (`INET6`, `SCTP_DEBUG` и прочих), а ошибка в смещении даёт правдоподобное
173
+ число, которое ничем не отличить от верного.
174
+
175
+ **Отдельный результат, важный для пункта 77 роадмапа: чтение отладчиком
176
+ безопасно.** Процесс пережил все четыре подключения и отвечает на `/healthz`.
177
+ Губителен был не отладчик как таковой, а **вызов функции внутри исследуемого
178
+ процесса** (`usrsctp_getsockopt`), прерванный убийством: он оставил захваченный
179
+ замок и тупик. Правило, которое из этого следует: подключаться можно, читать
180
+ можно, вызывать внутри процесса — нельзя.
181
+
182
+ **Что осталось для этого чтения:** собрать node-datachannel с `-g` под aarch64
183
+ и поставить в контейнер стенда. Это не форк — те же исходники, отладочная
184
+ сборка, и только для стенда.
185
+
186
+
187
+ ## 6.2. ПРИЧИНА НАЗВАНА: таймер ретрансмиссии не запланирован
188
+
189
+ Счётчики прочитаны из живой заклинившей ассоциации 2026-09-13. Это отменяет
190
+ раздел 6.1, где сказано, что прочитать не удалось: не удавалось с поставляемым
191
+ модулем, а с отладочной сборкой удалось.
192
+
193
+ ### Как получена сборка (воспроизводимо)
194
+
195
+ Сборочный контейнер из образа дополнения, `apk add cmake git ninja pkgconf
196
+ openssl-dev linux-headers`, затем:
197
+
198
+ ```
199
+ git clone --depth 1 --branch v0.32.3 --recurse-submodules https://github.com/murat-dogan/node-datachannel.git
200
+ npm i -g cmake-js && npm i --no-save --ignore-scripts node-addon-api
201
+ cmake-js compile --CDCMAKE_BUILD_TYPE=RelWithDebInfo --CDOPENSSL_ROOT_DIR=/usr --parallel 4
202
+ ```
203
+
204
+ Две грабли: `npm ci` падает на рассинхроне замка, а нужен из всего этого только
205
+ `node-addon-api` ради `napi.h`; и CMake не находит libcrypto, хотя он на месте —
206
+ корень OpenSSL приходится указать явно. Получается 58 МБ с отладочной
207
+ информацией; libdatachannel v0.24.2 и usrsctp `fec583d5` внутри — ровно те
208
+ версии, что работают в поле.
209
+
210
+ Модуль подменяется в контейнере стенда поверх поставляемого (копия рядом,
211
+ `.orig`).
212
+
213
+ ### Обход структур usrsctp
214
+
215
+ `system_base_info.sctppcbinfo.listhead.lh_first` → цепочка `sctp_inpcb` по
216
+ `sctp_list.le_next`; у каждого `sctp_asoc_list.lh_first` → цепочка `sctp_tcb`
217
+ по `sctp_tcblist.le_next`; у каждого `asoc`, и пути по `asoc.nets` через
218
+ `sctp_next.tqe_next`. Сценарии — `/tmp/sctp.gdb` и `/tmp/sctp3.gdb` в контейнере
219
+ стенда. `ticks` — статическая в `sctp_callout.c`, по имени не берётся.
220
+
221
+ ### Что прочитано
222
+
223
+ Клин на 2356 МБ, ассоциация удержана открытой плечом, которое не закрывает её
224
+ после приговора:
225
+
226
+ ```
227
+ TCB state=8 flight=95786 fcount=82 rwnd=4572914 sentq_cnt=82 sendq_cnt=0
228
+ retran=0 prsctp=0 sentq_empty=0
229
+ NET rxt_timer: flags=0x0 c_time=342660
230
+ cwnd=95450 flight_size=95786 ssthresh=83634 RTO=200 error_count=0
231
+ partial_bytes_acked=0 fast_retran_loss_recovery=0 dest_state=0x1c1
232
+ ASOC last_acked_seq=1527044401 sending_seq=1527044484
233
+ CHUNK tsn=1527044402 sent=1 snd_count=1 book_size=1172
234
+ CHUNK tsn=1527044403 sent=1 snd_count=1 book_size=1172
235
+ CHUNK tsn=1527044404 sent=1 snd_count=1 book_size=1172
236
+ ```
237
+
238
+ ### Диагноз
239
+
240
+ **`rxt_timer.flags = 0x0`** — ни `SCTP_CALLOUT_PENDING` (0x0004), ни
241
+ `SCTP_CALLOUT_ACTIVE` (0x0002). Таймер ретрансмиссии НЕ ЗАПЛАНИРОВАН, при том
242
+ что 82 куска лежат неподтверждёнными, каждый отправлен ровно один раз
243
+ (`snd_count=1`, `sent=SCTP_DATAGRAM_SENT`) и ни один не помечен к пересылке.
244
+
245
+ **Полёт 95786 против окна перегрузки 95450** — окно заполнено, `sctp_med_chunk_output`
246
+ нового не отправит.
247
+
248
+ Замок замкнут сам на себя: подтвердить куски некому, переслать некому, полёт не
249
+ убывает, окно не освобождается, не уходит ничего. Навсегда.
250
+
251
+ Это объясняет каждое наблюдение с провода: ни пакета с данными, ни
252
+ ретрансмиссии, ни зонда окна, подтверждения обрабатываются, лечит только новая
253
+ ассоциация.
254
+
255
+ ### Что этим снято ЧИСЛАМИ
256
+
257
+ 1. **учёт полёта точен** — `fcount=82` против `sentq_cnt=82`, фантома нет.
258
+ Раздел 4 опровергнут не только чтением, но и замером;
259
+ 2. **окно пира 4 572 914 байт, распахнуто**, а не ноль. Затвор
260
+ `peers_rwnd == 0 && total_flight > 0` не при чём;
261
+ 3. **таймер не отодвинут после неудач**: `RTO=200` — минимум, `error_count=0`.
262
+ Он просто не заведён.
263
+
264
+ ### Чего НЕ установлено
265
+
266
+ Какая дорога теряет таймер. Обе, что должны его заводить, на вид верны:
267
+ `sctp_output.c:9417` заводит после отправки, если он не запланирован;
268
+ `sctp_indata.c:4265` заводит для каждого пути с ненулевым полётом при обработке
269
+ подтверждения. У `sctp_t3rxt_timer` ранние выходы только через
270
+ `sctp_threshold_management`, а при `error_count=0` он не срабатывал. По одному
271
+ снимку дорогу не назвать: нужен ряд снимков в секундах перед обрывом.
272
+
273
+ ### Что это меняет для продукта
274
+
275
+ Обнаружение на приёмнике и ротация остаются в силе, но теперь известно, что
276
+ именно обходится: незаведённый таймер в конкретной ассоциации. **Ротация лечит
277
+ это по построению** — новая ассоциация начинает с исправным таймером.
278
+
279
+ Числа отправлены в `sctplab/usrsctp#750`.
280
+
281
+
282
+ ### Подтверждено на втором клине — подпись детерминированная
283
+
284
+ Клин на 96 МБ (ниже прежнего минимума; отладчик к прогону не прикасался, обе
285
+ записи переменных сделаны до создания ассоциации):
286
+
287
+ | | первый | второй |
288
+ |---|---|---|
289
+ | полёт | 95786 | 51568 |
290
+ | окно перегрузки | 95450 | 50566 |
291
+ | разрыв | 336 | 1002 |
292
+ | кусков в полёте / в очереди | 82 / 82 | 44 / 44 |
293
+ | окно пира | 4572914 | 4647668 |
294
+ | помечено к пересылке | 0 | 0 |
295
+ | ошибок пути | 0 | 0 |
296
+ | `rxt_timer.flags` | 0x0 | 0x0 |
297
+
298
+ Разрыв оба раза **меньше одного пакета** — отправка встала ровно там, где
299
+ следующий кусок перестал влезать в окно. Само по себе это нормальное поведение
300
+ при заполнении окна; ненормально, что оно не разгребается.
301
+
302
+ Ряд объёмов до клина теперь: 96, 288, 1220, 1436, 2356, 2696, 5300 МБ. Порога
303
+ нет, разброс пятидесятипятикратный.
304
+
305
+ ### Вывод usrsctp: включается не тем флагом, каким кажется
306
+
307
+ `option(sctp_debug "Provide debug information" 1)` в CMakeLists самого usrsctp
308
+ включён по умолчанию — но у libdatachannel есть **свой** `option(SCTP_DEBUG
309
+ "Enable SCTP debugging output to verbose log" OFF)`, и перекрывает именно он.
310
+ Поэтому в обычной сборке вывода нет, хотя первый флаг говорит обратное.
311
+
312
+ Проверено на живом процессе: `system_base_info.debug_printf` установлен в
313
+ `rtc::impl::SctpTransport::DebugCallback`, а `sctpsysctl.sctp_debug_on` равен
314
+ нулю — libdatachannel выставил бы `SCTP_DEBUG_ALL` сам, но его строка стоит под
315
+ `#ifdef SCTP_DEBUG`, до C++ не дошедшим.
316
+
317
+ Обе переменные пишутся отладчиком без вызова функций внутри процесса: указатель
318
+ вывода можно перевести прямо на `printf`, минуя журнал libdatachannel и его
319
+ уровень. Записи принимаются, но печатать нечего, пока нет пересборки с
320
+ `--CDSCTP_DEBUG=ON`.
321
+
322
+ ## 7. Чего этот день НЕ установил
323
+
324
+ 1. ~~причину~~ — УСТАНОВЛЕНА, см. 6.2. Не установлена дорога, теряющая таймер;
325
+ 2. повторяемость по плечам: один прогон на плечо, разброс восемнадцатикратный;
326
+ 3. связь клина с полевыми эпизодами до 2026-08-26 — они старше и части нынешней
327
+ нынешнего кода не имели;
328
+ 4. что пауза в `drain` действительно помогает, а не попала в верхний край
329
+ разброса.