@tyhld/conductor 0.12.160 → 0.12.162
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
package/dist/relay.js
CHANGED
|
@@ -3663,17 +3663,36 @@ export async function sendPendingReportFiles(cfg, opts = {}) {
|
|
|
3663
3663
|
// ③ 上げ終わりを知らせる POST /api/conductor/commands/<id>/shots/complete
|
|
3664
3664
|
// 【決まり(えふさん決定 2026-10-30)】
|
|
3665
3665
|
// ・報告が管制へ渡った後(`processed/` に控えが在る便)だけ上げる=報告の送りを遅らせない。
|
|
3666
|
-
// ・上げるのは決まりに合う名前の PNG・JPEG だけ。合わない物・大きすぎる物は上げずに記録に残す。
|
|
3666
|
+
// ・上げるのは決まりに合う名前の PNG・JPEG だけ。合わない物・大きすぎる物は上げずに記録に残す。
|
|
3667
|
+
// 1便100枚まで(暴走止め・サムネは数えない)。1周に上げるのは12枚までで、残りは次の周へ。
|
|
3667
3668
|
// ・断りや失敗は記録に残し、便そのものは止めない。503 storage_not_ready(置き場がまだ無い)は静かに次の機会へ。
|
|
3668
3669
|
// ・上げ終わった物は控え(`shots/<id>/.uploaded.json`)に覚え、二度送らない。
|
|
3669
3670
|
// ・★写真の中身・署名付きの住所・置き場の道・鍵は記録(ログ)に出さない。出すのは写真の名前と断りの語だけ。
|
|
3671
|
+
// 【取り合いを止める(便 795e7f6a・下調べ a547119e)】
|
|
3672
|
+
// ・配り役は現場ごとに1つずつ動き(systemd/conductor@.service)、どれも同じ `shots/` を見る。
|
|
3673
|
+
// 前は全員が同じ便の写真を同時に上げ、中央の「消してから移す」が取り合いになって store_failed が出ていた。
|
|
3674
|
+
// ・★便ごとの札(`shots/<id>/.uploading.lock`)を先に取った配り役1つだけが、その便を上げる。
|
|
3675
|
+
// 札を取ってから控えを読み直すので、後から来た配り役は「もう上げ終わった」を見て何も送らない。
|
|
3676
|
+
// 現場名で分けないのは、報告の site と動いている配り役の名前が食い違うと、誰も上げなくなるから。
|
|
3677
|
+
// ・store_failed・missing・PUT の失敗・通信の失敗は「上げないと決めた物」にせず、間を空けて上げ直す
|
|
3678
|
+
// (1枚ごとに SHOTS_RETRY_MAX 回まで。上限に達したら理由を控えと記録に残して止める)。
|
|
3679
|
+
// 前の版が store_failed で控えに残した物も、上げ直しの対象に戻す(中央は同じ名前を置き換えて ok を返す=済みになる)。
|
|
3680
|
+
// ・写真でない物(`server-*.log` など)は記録に出さず静かに飛ばす。
|
|
3670
3681
|
// ───────────────────────────────────────────────────────────────────────────
|
|
3671
3682
|
/** 写真を置く下位フォルダの名前(報告の置き場の下・screen_compare.py の --out と同じ)。 */
|
|
3672
3683
|
export const SHOTS_DIR = 'shots';
|
|
3673
3684
|
/** 上げた物を覚えておく控えの名前(写真のフォルダの中・点で始めて写真と取り違えない)。 */
|
|
3674
3685
|
export const SHOTS_LEDGER = '.uploaded.json';
|
|
3675
|
-
/**
|
|
3676
|
-
|
|
3686
|
+
/**
|
|
3687
|
+
* 1便に上げる写真の上限(★中央の上限と同じ値にすること)。暴走止めの100枚(えふさん決定 2026-10-31)。
|
|
3688
|
+
* ★サムネ(thumb-…)は数えない。
|
|
3689
|
+
*/
|
|
3690
|
+
export const SHOTS_MAX_PER_COMMAND = 100;
|
|
3691
|
+
/**
|
|
3692
|
+
* 1周で1便ぶんに上げる枚数(サムネも数える)。残りは次の周で上げる。
|
|
3693
|
+
* ★札を古いと見なす時間(SHOTS_LOCK_STALE_MS)の中で1周が終わるように絞る。
|
|
3694
|
+
*/
|
|
3695
|
+
export const SHOTS_PER_ROUND = 12;
|
|
3677
3696
|
/** 1枚の大きさの上限(バイト・★中央の上限と同じ値にすること)。 */
|
|
3678
3697
|
export const SHOT_MAX_BYTES = 5_000_000;
|
|
3679
3698
|
/** 1周で見る便の数の上限(多すぎる分は次の周に回す)。 */
|
|
@@ -3686,6 +3705,17 @@ export const SHOTS_ERROR_PAUSE_MS = 5 * 60 * 1000;
|
|
|
3686
3705
|
export const SHOTS_NOT_FOUND_MAX = 3;
|
|
3687
3706
|
/** 写真1枚を PUT するときの上限時間(5MB まで送るので、ほかの口より長い)。 */
|
|
3688
3707
|
const SHOT_PUT_TIMEOUT_MS = 60 * 1000;
|
|
3708
|
+
/** 便ごとの札の名前(写真のフォルダの中・点で始めて写真と取り違えない)。先に取った配り役1つだけが上げる。 */
|
|
3709
|
+
export const SHOTS_LOCK = '.uploading.lock';
|
|
3710
|
+
/**
|
|
3711
|
+
* 札を古いと見なす時間。取った配り役が途中で落ちても、これを過ぎればほかの配り役が取り直す。
|
|
3712
|
+
* ★1周の上げにかかる最長(SHOTS_PER_ROUND=12枚×PUT 60秒+頼む・知らせる)より長くする。
|
|
3713
|
+
*/
|
|
3714
|
+
export const SHOTS_LOCK_STALE_MS = 20 * 60 * 1000;
|
|
3715
|
+
/** 上げ直せる失敗(store_failed・missing・PUT・通信)を、1枚ごとに何回まで試すか。 */
|
|
3716
|
+
export const SHOTS_RETRY_MAX = 5;
|
|
3717
|
+
/** 上げ直しの間を空ける時間(配り役が何本あっても、上限を数秒で使い切らない)。 */
|
|
3718
|
+
export const SHOTS_RETRY_GAP_MS = 2 * 60 * 1000;
|
|
3689
3719
|
/** 名前で断る語(中央が1枚を名指しして断る物)。★控えに残し、同じ写真は二度送らない。 */
|
|
3690
3720
|
const SHOT_NAMED_REJECTS = new Set([
|
|
3691
3721
|
'bad_name',
|
|
@@ -3696,24 +3726,36 @@ const SHOT_NAMED_REJECTS = new Set([
|
|
|
3696
3726
|
'not_image',
|
|
3697
3727
|
'bad_path',
|
|
3698
3728
|
'too_many',
|
|
3699
|
-
'store_failed',
|
|
3700
3729
|
]);
|
|
3730
|
+
/** 1枚の失敗のうち、上げ直す物(中央の置き場の一時の失敗・届いていない)。 */
|
|
3731
|
+
const SHOT_RETRYABLE = new Set(['store_failed', 'missing']);
|
|
3732
|
+
/** 写真らしい名前か(★違う物=`server-*.log` などは、記録に出さず静かに飛ばす)。 */
|
|
3733
|
+
function looksLikeImage(name) {
|
|
3734
|
+
return /\.(png|jpe?g|webp|gif)$/i.test(name);
|
|
3735
|
+
}
|
|
3701
3736
|
/**
|
|
3702
3737
|
* 写真の名前が決まりに合うか。合えば送る種類(Content-Type)、合わなければ null。純粋関数。
|
|
3703
3738
|
* 形:`<before|after|compare>-<画面>-<幅>.<png|jpg|jpeg>`(screen_compare.py の出す名前そのまま)
|
|
3739
|
+
* サムネは `thumb-<before|after|compare>-<画面>-<幅>.jpg`(撮るときに道具が1回だけ作る・幅は元の写真の幅)
|
|
3704
3740
|
* 画面=英小文字・数字・ハイフンだけ・40字まで・ハイフンで区切った1つが20字まで/幅=200〜4000。
|
|
3705
3741
|
*/
|
|
3706
3742
|
export function shotContentType(name) {
|
|
3707
|
-
const m = /^(before|after|compare)-([a-z0-9]+(?:-[a-z0-9]+)*)-(\d{3,4})\.(png|jpg|jpeg)$/.exec(String(name ?? ''));
|
|
3743
|
+
const m = /^(thumb-)?(before|after|compare)-([a-z0-9]+(?:-[a-z0-9]+)*)-(\d{3,4})\.(png|jpg|jpeg)$/.exec(String(name ?? ''));
|
|
3708
3744
|
if (!m)
|
|
3709
3745
|
return null;
|
|
3710
|
-
|
|
3746
|
+
if (m[1] && m[5] !== 'jpg')
|
|
3747
|
+
return null;
|
|
3748
|
+
const page = m[3];
|
|
3711
3749
|
if (page.length > 40 || page.split('-').some((s) => s.length > 20))
|
|
3712
3750
|
return null;
|
|
3713
|
-
const width = Number(m[
|
|
3751
|
+
const width = Number(m[4]);
|
|
3714
3752
|
if (width < 200 || width > 4000)
|
|
3715
3753
|
return null;
|
|
3716
|
-
return m[
|
|
3754
|
+
return m[5] === 'png' ? 'image/png' : 'image/jpeg';
|
|
3755
|
+
}
|
|
3756
|
+
/** サムネか(★1便の上限に数えない)。 */
|
|
3757
|
+
export function isShotThumb(name) {
|
|
3758
|
+
return name.startsWith('thumb-');
|
|
3717
3759
|
}
|
|
3718
3760
|
/** 中身の先頭バイトが、名前の種類と合う PNG・JPEG か。 */
|
|
3719
3761
|
function shotBytesMatch(bytes, type) {
|
|
@@ -3725,15 +3767,66 @@ function shotBytesMatch(bytes, type) {
|
|
|
3725
3767
|
function readShotsLedger(dir) {
|
|
3726
3768
|
try {
|
|
3727
3769
|
const data = JSON.parse(readFileSync(path.join(dir, SHOTS_LEDGER), 'utf8'));
|
|
3770
|
+
const skipped = data.skipped && typeof data.skipped === 'object' ? data.skipped : {};
|
|
3771
|
+
// ★前の版は store_failed を「上げないと決めた物」に入れていた。上げ直しの対象に戻す(便 795e7f6a)。
|
|
3772
|
+
for (const [name, v] of Object.entries(skipped)) {
|
|
3773
|
+
if (SHOT_RETRYABLE.has(v?.reason))
|
|
3774
|
+
delete skipped[name];
|
|
3775
|
+
}
|
|
3728
3776
|
return {
|
|
3729
3777
|
sent: data.sent && typeof data.sent === 'object' ? data.sent : {},
|
|
3730
|
-
skipped
|
|
3778
|
+
skipped,
|
|
3779
|
+
retry: data.retry && typeof data.retry === 'object' ? data.retry : {},
|
|
3731
3780
|
notFound: typeof data.notFound === 'number' ? data.notFound : 0,
|
|
3732
3781
|
gaveUp: typeof data.gaveUp === 'string' ? data.gaveUp : undefined,
|
|
3733
3782
|
};
|
|
3734
3783
|
}
|
|
3735
3784
|
catch {
|
|
3736
|
-
return { sent: {}, skipped: {}, notFound: 0 };
|
|
3785
|
+
return { sent: {}, skipped: {}, retry: {}, notFound: 0 };
|
|
3786
|
+
}
|
|
3787
|
+
}
|
|
3788
|
+
/**
|
|
3789
|
+
* 便ごとの札を取る(★先に取った配り役1つだけ。古い札は取り直す)。取れたら札の印、取れなければ null。
|
|
3790
|
+
* 印は自分の札だけを返すため(古い札を取り直された後に、他人の札を消さない)。
|
|
3791
|
+
*/
|
|
3792
|
+
function claimShotsLock(dir, now) {
|
|
3793
|
+
const lock = path.join(dir, SHOTS_LOCK);
|
|
3794
|
+
const token = `${process.pid}:${Math.random().toString(36).slice(2)}`;
|
|
3795
|
+
for (let i = 0; i < 2; i++) {
|
|
3796
|
+
try {
|
|
3797
|
+
const fd = openSync(lock, 'wx', 0o600);
|
|
3798
|
+
try {
|
|
3799
|
+
writeFileSync(fd, token);
|
|
3800
|
+
}
|
|
3801
|
+
finally {
|
|
3802
|
+
closeSync(fd);
|
|
3803
|
+
}
|
|
3804
|
+
return token;
|
|
3805
|
+
}
|
|
3806
|
+
catch (e) {
|
|
3807
|
+
if (e?.code !== 'EEXIST')
|
|
3808
|
+
return null;
|
|
3809
|
+
try {
|
|
3810
|
+
if (now - statSync(lock).mtimeMs < SHOTS_LOCK_STALE_MS)
|
|
3811
|
+
return null;
|
|
3812
|
+
unlinkSync(lock);
|
|
3813
|
+
}
|
|
3814
|
+
catch {
|
|
3815
|
+
return null;
|
|
3816
|
+
}
|
|
3817
|
+
}
|
|
3818
|
+
}
|
|
3819
|
+
return null;
|
|
3820
|
+
}
|
|
3821
|
+
/** 自分の札だけを返す。 */
|
|
3822
|
+
function releaseShotsLock(dir, token) {
|
|
3823
|
+
const lock = path.join(dir, SHOTS_LOCK);
|
|
3824
|
+
try {
|
|
3825
|
+
if (readFileSync(lock, 'utf8') === token)
|
|
3826
|
+
unlinkSync(lock);
|
|
3827
|
+
}
|
|
3828
|
+
catch {
|
|
3829
|
+
// 無い・読めない=古い札として取り直されている。触らない。
|
|
3737
3830
|
}
|
|
3738
3831
|
}
|
|
3739
3832
|
function writeShotsLedger(dir, ledger) {
|
|
@@ -3808,13 +3901,26 @@ export async function uploadReportShots(cfg, opts = {}) {
|
|
|
3808
3901
|
for (const [id, dir] of shotsDirs(env)) {
|
|
3809
3902
|
if (result.commands >= SHOTS_COMMANDS_PER_ROUND)
|
|
3810
3903
|
break;
|
|
3811
|
-
|
|
3812
|
-
if (ledger.gaveUp)
|
|
3904
|
+
if (readShotsLedger(dir).gaveUp)
|
|
3813
3905
|
continue;
|
|
3814
3906
|
// ★報告が管制へ渡る前は上げない(報告の送りを先にする・便の画面は報告の下に写真を出す)。
|
|
3815
3907
|
if (!reportDelivered(id, env))
|
|
3816
3908
|
continue;
|
|
3817
|
-
|
|
3909
|
+
// ★1台で1つの配り役だけが、その便を上げる(取れなければ、ほかの配り役が上げている最中)。
|
|
3910
|
+
const token = claimShotsLock(dir, clock());
|
|
3911
|
+
if (token === null)
|
|
3912
|
+
continue;
|
|
3913
|
+
let stop = false;
|
|
3914
|
+
try {
|
|
3915
|
+
// ★札を取ってから控えを読み直す(直前にほかの配り役が上げ終えていれば、何も送らない)。
|
|
3916
|
+
const ledger = readShotsLedger(dir);
|
|
3917
|
+
if (ledger.gaveUp)
|
|
3918
|
+
continue;
|
|
3919
|
+
stop = await uploadOneCommand(cfg, id, dir, ledger, { doFetch, logLine, state, clock, result });
|
|
3920
|
+
}
|
|
3921
|
+
finally {
|
|
3922
|
+
releaseShotsLock(dir, token);
|
|
3923
|
+
}
|
|
3818
3924
|
if (stop)
|
|
3819
3925
|
break;
|
|
3820
3926
|
}
|
|
@@ -3834,9 +3940,21 @@ async function uploadOneCommand(cfg, id, dir, ledger, ctx) {
|
|
|
3834
3940
|
const skip = (name, key, reason) => {
|
|
3835
3941
|
ledger.skipped[name] = { key, reason };
|
|
3836
3942
|
delete ledger.sent[name];
|
|
3943
|
+
delete ledger.retry[name];
|
|
3837
3944
|
result.skipped++;
|
|
3838
3945
|
logLine(`${tag} 写真 ${name} は上げませんでした(${reason})`);
|
|
3839
3946
|
};
|
|
3947
|
+
/** 上げ直せる失敗。上限までは次の機会に上げ直し、上限に達したら理由を残して止める。 */
|
|
3948
|
+
const fail = (name, key, code, what) => {
|
|
3949
|
+
const prev = ledger.retry[name];
|
|
3950
|
+
const tries = (prev?.key === key ? prev.tries : 0) + 1;
|
|
3951
|
+
if (tries >= SHOTS_RETRY_MAX) {
|
|
3952
|
+
skip(name, key, `${code}・${tries}回試して止めた`);
|
|
3953
|
+
return;
|
|
3954
|
+
}
|
|
3955
|
+
ledger.retry[name] = { key, tries, at: clock(), code };
|
|
3956
|
+
logLine(`${tag} 写真 ${name} ${what}(${code}・${tries}/${SHOTS_RETRY_MAX}回目・あとでもう一度試します)`);
|
|
3957
|
+
};
|
|
3840
3958
|
const cands = [];
|
|
3841
3959
|
let names;
|
|
3842
3960
|
try {
|
|
@@ -3856,9 +3974,15 @@ async function uploadOneCommand(cfg, id, dir, ledger, ctx) {
|
|
|
3856
3974
|
}
|
|
3857
3975
|
if (!st.isFile())
|
|
3858
3976
|
continue; // 下位フォルダ(試しの写真など)は見ない
|
|
3977
|
+
if (!looksLikeImage(name))
|
|
3978
|
+
continue; // ★写真でない物(server-*.log など)は記録に出さず静かに飛ばす
|
|
3859
3979
|
const key = `${st.size}:${Math.floor(st.mtimeMs)}`;
|
|
3860
3980
|
if (ledger.sent[name] === key || ledger.skipped[name]?.key === key)
|
|
3861
3981
|
continue;
|
|
3982
|
+
// ★上げ直しは間を空ける(撮り直した物=見分けが変わった物はすぐ上げる)。
|
|
3983
|
+
const r = ledger.retry[name];
|
|
3984
|
+
if (r?.key === key && clock() - r.at >= 0 && clock() - r.at < SHOTS_RETRY_GAP_MS)
|
|
3985
|
+
continue;
|
|
3862
3986
|
dirty = true;
|
|
3863
3987
|
const type = shotContentType(name);
|
|
3864
3988
|
if (type === null) {
|
|
@@ -3891,21 +4015,29 @@ async function uploadOneCommand(cfg, id, dir, ledger, ctx) {
|
|
|
3891
4015
|
writeShotsLedger(dir, ledger);
|
|
3892
4016
|
return false;
|
|
3893
4017
|
}
|
|
3894
|
-
// 1便
|
|
3895
|
-
|
|
3896
|
-
|
|
3897
|
-
const
|
|
4018
|
+
// 1便 SHOTS_MAX_PER_COMMAND 枚まで。★撮り直し(上げ終わった名前の置き直し)とサムネは数えない。
|
|
4019
|
+
// 並べた1枚 → 直した後 → 直す前 の順に残し、サムネは元の写真のすぐ後に置く。
|
|
4020
|
+
// 1周に上げるのは SHOTS_PER_ROUND 枚までで、残りは(上げないと決めずに)次の周で上げる。
|
|
4021
|
+
const plain = (n) => (isShotThumb(n) ? n.slice('thumb-'.length) : n);
|
|
4022
|
+
const rank = (n) => (plain(n).startsWith('compare-') ? 0 : plain(n).startsWith('after-') ? 1 : 2);
|
|
4023
|
+
const base0 = (n) => plain(n).replace(/\.(png|jpe?g)$/, '');
|
|
4024
|
+
cands.sort((a, b) => rank(a.name) - rank(b.name) ||
|
|
4025
|
+
base0(a.name).localeCompare(base0(b.name)) ||
|
|
4026
|
+
Number(isShotThumb(a.name)) - Number(isShotThumb(b.name)) ||
|
|
4027
|
+
a.name.localeCompare(b.name));
|
|
4028
|
+
const room = SHOTS_MAX_PER_COMMAND - Object.keys(ledger.sent).filter((n) => !isShotThumb(n)).length;
|
|
3898
4029
|
const batch = [];
|
|
3899
4030
|
let fresh = 0;
|
|
3900
4031
|
for (const c of cands) {
|
|
3901
|
-
|
|
3902
|
-
|
|
3903
|
-
fresh++;
|
|
3904
|
-
batch.push(c);
|
|
3905
|
-
}
|
|
3906
|
-
else {
|
|
4032
|
+
const counted = !isShotThumb(c.name) && !(c.name in ledger.sent);
|
|
4033
|
+
if (counted && fresh >= room) {
|
|
3907
4034
|
skip(c.name, c.key, 'too_many');
|
|
4035
|
+
continue;
|
|
3908
4036
|
}
|
|
4037
|
+
if (counted)
|
|
4038
|
+
fresh++;
|
|
4039
|
+
if (batch.length < SHOTS_PER_ROUND)
|
|
4040
|
+
batch.push(c); // 入りきらない分は次の周へ
|
|
3909
4041
|
}
|
|
3910
4042
|
if (batch.length === 0) {
|
|
3911
4043
|
writeShotsLedger(dir, ledger);
|
|
@@ -3941,9 +4073,12 @@ async function uploadOneCommand(cfg, id, dir, ledger, ctx) {
|
|
|
3941
4073
|
if (!res.ok) {
|
|
3942
4074
|
const code = rejectCode(data);
|
|
3943
4075
|
const named = typeof data?.name === 'string' ? batch.find((c) => c.name === data.name) : undefined;
|
|
3944
|
-
if (named && SHOT_NAMED_REJECTS.has(code)) {
|
|
3945
|
-
// 1枚が合わない=全部が断られた。その1
|
|
3946
|
-
|
|
4076
|
+
if (named && (SHOT_NAMED_REJECTS.has(code) || SHOT_RETRYABLE.has(code))) {
|
|
4077
|
+
// 1枚が合わない=全部が断られた。その1枚を控えに残し(一時の失敗なら上げ直し)、残りは次の周で頼み直す。
|
|
4078
|
+
if (SHOT_RETRYABLE.has(code))
|
|
4079
|
+
fail(named.name, named.key, code, 'の上げ先を頼めませんでした');
|
|
4080
|
+
else
|
|
4081
|
+
skip(named.name, named.key, code);
|
|
3947
4082
|
writeShotsLedger(dir, ledger);
|
|
3948
4083
|
return false;
|
|
3949
4084
|
}
|
|
@@ -4009,10 +4144,10 @@ async function uploadOneCommand(cfg, id, dir, ledger, ctx) {
|
|
|
4009
4144
|
if (res.ok)
|
|
4010
4145
|
put.push({ name: c.name, path: u.path });
|
|
4011
4146
|
else
|
|
4012
|
-
|
|
4147
|
+
fail(c.name, c.key, `HTTP ${res.status}`, 'を送れませんでした');
|
|
4013
4148
|
}
|
|
4014
4149
|
catch (err) {
|
|
4015
|
-
|
|
4150
|
+
fail(c.name, c.key, err instanceof Error ? err.name : '失敗', 'を送れませんでした');
|
|
4016
4151
|
}
|
|
4017
4152
|
}
|
|
4018
4153
|
if (put.length === 0) {
|
|
@@ -4049,13 +4184,15 @@ async function uploadOneCommand(cfg, id, dir, ledger, ctx) {
|
|
|
4049
4184
|
if (o.ok === true) {
|
|
4050
4185
|
ledger.sent[c.name] = c.key;
|
|
4051
4186
|
delete ledger.skipped[c.name];
|
|
4187
|
+
delete ledger.retry[c.name];
|
|
4052
4188
|
result.uploaded++;
|
|
4053
4189
|
done++;
|
|
4054
4190
|
}
|
|
4055
4191
|
else {
|
|
4056
4192
|
const code = typeof o.error === 'string' ? o.error : '理由なし';
|
|
4057
|
-
if (code
|
|
4058
|
-
|
|
4193
|
+
if (SHOT_RETRYABLE.has(code)) {
|
|
4194
|
+
// ★store_failed(中央の置き場の一時の失敗)・missing(届いていない)は上げ直す。
|
|
4195
|
+
fail(c.name, c.key, code, code === 'missing' ? 'は届いていませんでした' : 'を置けませんでした');
|
|
4059
4196
|
}
|
|
4060
4197
|
else {
|
|
4061
4198
|
skip(c.name, c.key, /^[a-z_]{1,40}$/.test(code) ? code : '理由なし');
|
|
@@ -4068,7 +4205,13 @@ async function uploadOneCommand(cfg, id, dir, ledger, ctx) {
|
|
|
4068
4205
|
}
|
|
4069
4206
|
catch (err) {
|
|
4070
4207
|
state.pauseUntil = clock() + SHOTS_ERROR_PAUSE_MS;
|
|
4071
|
-
|
|
4208
|
+
const code = err instanceof Error ? err.name : '失敗';
|
|
4209
|
+
logLine(`${tag} 写真の上げ終わりを知らせられませんでした(${code}・あとでもう一度試します)`);
|
|
4210
|
+
// ★通信の失敗も1枚ごとに数える(上限で止める)。
|
|
4211
|
+
for (const p of put) {
|
|
4212
|
+
const c = batch.find((x) => x.name === p.name);
|
|
4213
|
+
fail(c.name, c.key, code, 'の上げ終わりを知らせられませんでした');
|
|
4214
|
+
}
|
|
4072
4215
|
writeShotsLedger(dir, ledger);
|
|
4073
4216
|
return true;
|
|
4074
4217
|
}
|
package/package.json
CHANGED
|
@@ -185,7 +185,9 @@ description: 采配くんの便(プロンプト末尾に CONDUCTOR_JOB:<id>
|
|
|
185
185
|
--env NEXT_PUBLIC_SUPABASE_URL=https://ci-placeholder.supabase.co
|
|
186
186
|
# 直し終えたら同じ形で --label after(直す前の写真が在れば compare-<画面>-<幅>.png が出来る)
|
|
187
187
|
```
|
|
188
|
+
- **道具が1回で作る物(便 04099d29・えふさん決定 2026-10-31)。** 撮った1枚ごとに**サムネ** `thumb-<種類>-<画面>-<幅>.jpg`(幅480px・上から600px・JPEG 質70)を**撮るときに1回だけ**作る(管制はサムネを先に出し、押すと元の大きさ)。**画面の名前**は中央の決まり(英小文字・数字・ハイフン・40字まで)に収める(長い道は「頭+短い指紋」・同じ道は同じ名前)。配り役が管制へ上げる写真は1便100枚まで(暴走止め・サムネは数えない)で、並べた1枚 → 直した後 → 直す前 の順に上げる。**写真を残す期間は10日**。
|
|
188
189
|
- **起動に要る値は本物の鍵を使わない。** CI が使っている形だけの値など、現場に在る物を `--env` で渡す(`.github/workflows` の値・`.env.example` の雛形を Read の道具で読む=鉄則14)。★本物の `.env`・`.env.local` は読まない(鉄則12)。
|
|
190
|
+
- **本物のデータを写さない。** `next dev` は現場の `.env.local` を自分で読むので、渡さなかった値(DB の接続先など)は本物のまま使われ、本物の会社のデータ(実在の人の名前など)が写真に写り得る。そこで道具は起動のたびに、**DB の接続先と鍵の名前(`DATABASE_URL`・`DIRECT_URL`・`SUPABASE_SERVICE_ROLE_KEY`・`NEXT_PUBLIC_SUPABASE_URL` など+雛形に在る DB・鍵らしい名前)を必ず形だけの値で上書きして**起動する(Next.js は先に在る環境変数を `.env.local` で上書きしない)。値は読まない・名前だけで決める。`--env` で渡した名前はその値を使う。**上書きした名前は置き場の `env-<before|after>.txt` に残る**ので、報告に「形だけの値で起動した」と書く。★上書きのせいで画面が上がらない・中身が出ないときは、撮れなかった理由として報告に書く(本物の値を渡して撮り直さない)。
|
|
189
191
|
- **撮れない物は、撮れなかった理由を報告に書く**(ログインが要る画面=道具が「…へ移った」と出す/画面が上がらない/共有のブラウザが無い 等)。★**そこで止めない・回避しない**(ログインを抜ける細工・本物の鍵・別のブラウザの取り寄せをしない)。共有のブラウザが無いときは「人の手番=`APPLY=1 bash scripts/pw-browser-install.sh`」と書く(鉄則8-②)。
|
|
190
192
|
- **撮るだけで現場を書き換えない。** 道具は「AI が動かしている」の目印の環境変数をサーバーへ渡さない(Next.js 16 の `next dev` はこれを見ると `CLAUDE.md` に定型文を書き足す=実測 便 570f32d0)。それでも道具が「サーバーが現場を書き換えた」と出したら、その行を報告に書く(自分の起動で増えた物だと分かる1ファイルに限り、名指しの `git checkout -- <そのファイル>` で戻してよい・戻したことも書く)。
|
|
191
193
|
- **写真はリポに入れない。** 置き場はリポの外(上の報告の置き場の下)。道具は置き場がリポの中なら断る。**報告には写真の場所(並べた1枚のパス)を書く。**
|
|
@@ -12,6 +12,10 @@
|
|
|
12
12
|
# 並べ直すだけ: ... pair --out <写真の置き場>
|
|
13
13
|
|
|
14
14
|
【1回で行うこと】起動 → 待つ → 2つの幅(1280px・375px)で撮る → 止める →(after なら)並べる。
|
|
15
|
+
★撮った1枚ごとに、サムネ(thumb-<種類>-<画面>-<幅>.jpg・幅480px・上から600px・JPEG 質70)を1回だけ作る。
|
|
16
|
+
★起動のときは DB の接続先と鍵の名前(DATABASE_URL・DIRECT_URL・SUPABASE_SERVICE_ROLE_KEY など)を
|
|
17
|
+
必ず形だけの値で上書きする(.env.local の本物の値は使われない)。上書きした名前は env-<label>.txt に残す。
|
|
18
|
+
★画面の名前は中央の決まり(英小文字・数字・ハイフン・40字まで)に収める(長ければ頭+短い指紋)。
|
|
15
19
|
★別の命令で起動したサーバーには囲いの事情で届かないので、起動から止めるまでを1つの命令で行う。
|
|
16
20
|
★止めるのは、この道具が起動したサーバーの一団(専用のプロセスグループ)だけ。
|
|
17
21
|
この道具自身や、道具を呼んだ命令は止めない(killpg を自分の一団へ向けない)。
|
|
@@ -20,6 +24,7 @@
|
|
|
20
24
|
- ブラウザは共有の Chromium($HOME/.tyhld/pw-browsers)。自分でダウンロードしない(鉄則8)。
|
|
21
25
|
- localhost にはプロキシを通さない(鉄則8-③)。
|
|
22
26
|
- 起動に要る値は --env で渡す形だけの値(CI と同じ値)。本物の鍵・.env は読まない(鉄則12・14)。
|
|
27
|
+
雛形(.env.example など)からは名前だけを読む(値は使わない)。
|
|
23
28
|
- 写真はリポの外に置く(--out がリポの中なら断る)。
|
|
24
29
|
|
|
25
30
|
【終わりの番号】0 撮れた/2 使い方の誤り/3 画面が上がらなかった/4 共有のブラウザが無い/5 撮れなかった
|
|
@@ -28,6 +33,7 @@ from __future__ import annotations
|
|
|
28
33
|
|
|
29
34
|
import argparse
|
|
30
35
|
import base64
|
|
36
|
+
import hashlib
|
|
31
37
|
import os
|
|
32
38
|
import re
|
|
33
39
|
import signal
|
|
@@ -41,6 +47,14 @@ from urllib.parse import urlparse
|
|
|
41
47
|
|
|
42
48
|
WIDTHS = (1280, 375)
|
|
43
49
|
HEIGHT = {1280: 800, 375: 812}
|
|
50
|
+
# 画面の名前の決まり(★中央の受け口と同じ値にすること)。
|
|
51
|
+
PAGE_MAX = 40
|
|
52
|
+
PAGE_PART_MAX = 20
|
|
53
|
+
PAGE_MARK_LEN = 8
|
|
54
|
+
# サムネ(撮るときに1回だけ作る・管制の便の画面で先に出す小さい見本)。幅は固定・上から一定の高さ・JPEG。
|
|
55
|
+
THUMB_WIDTH = 480
|
|
56
|
+
THUMB_HEIGHT = 600
|
|
57
|
+
THUMB_QUALITY = 70
|
|
44
58
|
LABELS = ('before', 'after')
|
|
45
59
|
LABEL_JA = {'before': '直す前', 'after': '直した後'}
|
|
46
60
|
INSTALL_HINT = '人の手番=APPLY=1 bash scripts/pw-browser-install.sh(職人は入れない・鉄則8)'
|
|
@@ -53,10 +67,18 @@ def say(msg: str) -> None:
|
|
|
53
67
|
# ── 部品(ブラウザを使わない・試験で直に確かめる) ──────────────────────────
|
|
54
68
|
|
|
55
69
|
def page_name(url: str) -> str:
|
|
56
|
-
"""URL から写真の名前の部分を作る(/login → login、/ → top、/a/b?x=1 → a-b)。
|
|
70
|
+
"""URL から写真の名前の部分を作る(/login → login、/ → top、/a/b?x=1 → a-b)。
|
|
71
|
+
★中央の決まり(英小文字・数字・ハイフン・40字まで・ハイフンで区切った1つが20字まで)に合わせる。
|
|
72
|
+
合わないほど長いときは「頭+道の短い指紋」にする(便 d752b648:ID 入りの道で6枚すべてが bad_name)。
|
|
73
|
+
指紋は道から作るので、同じ道は何度撮っても同じ名前になる(直す前と直した後がそろう)。"""
|
|
57
74
|
p = urlparse(url).path.strip('/')
|
|
58
|
-
name = re.sub(r'[^0-
|
|
59
|
-
|
|
75
|
+
name = re.sub(r'[^0-9a-z]+', '-', p.lower()).strip('-') or 'top'
|
|
76
|
+
if len(name) <= PAGE_MAX and all(len(s) <= PAGE_PART_MAX for s in name.split('-')):
|
|
77
|
+
return name
|
|
78
|
+
mark = hashlib.sha1(p.encode('utf-8')).hexdigest()[:PAGE_MARK_LEN]
|
|
79
|
+
head = '-'.join(s[:PAGE_PART_MAX] for s in name.split('-'))
|
|
80
|
+
head = head[:PAGE_MAX - PAGE_MARK_LEN - 1].strip('-')
|
|
81
|
+
return f'{head}-{mark}' if head else mark
|
|
60
82
|
|
|
61
83
|
|
|
62
84
|
def shot_path(out: Path, label: str, name: str, width: int) -> Path:
|
|
@@ -67,6 +89,11 @@ def pair_path(out: Path, name: str, width: int) -> Path:
|
|
|
67
89
|
return out / f'compare-{name}-{width}.png'
|
|
68
90
|
|
|
69
91
|
|
|
92
|
+
def thumb_path(out: Path, kind: str, name: str, width: int) -> Path:
|
|
93
|
+
"""サムネの名前(kind=before/after/compare・width は元の写真の幅)。"""
|
|
94
|
+
return out / f'thumb-{kind}-{name}-{width}.jpg'
|
|
95
|
+
|
|
96
|
+
|
|
70
97
|
def parse_env(items: list[str]) -> dict[str, str]:
|
|
71
98
|
"""--env KEY=VALUE を辞書にする。形が違えば ValueError。"""
|
|
72
99
|
env: dict[str, str] = {}
|
|
@@ -119,6 +146,17 @@ def pair_html(before_png: bytes, after_png: bytes, title: str) -> str:
|
|
|
119
146
|
)
|
|
120
147
|
|
|
121
148
|
|
|
149
|
+
def thumb_html(png: bytes) -> str:
|
|
150
|
+
"""サムネを撮るページ(幅 THUMB_WIDTH に縮めた写真の上の方だけが画面に入る・外を読みに行かない)。"""
|
|
151
|
+
src = 'data:image/png;base64,' + base64.b64encode(png).decode('ascii')
|
|
152
|
+
return (
|
|
153
|
+
'<!doctype html><meta charset="utf-8"><style>'
|
|
154
|
+
'html,body{margin:0;background:#fff;overflow:hidden}'
|
|
155
|
+
f'img{{display:block;width:{THUMB_WIDTH}px;height:auto}}'
|
|
156
|
+
f'</style><img src="{src}">'
|
|
157
|
+
)
|
|
158
|
+
|
|
159
|
+
|
|
122
160
|
def wait_http(url: str, timeout: float, proc: subprocess.Popen | None = None,
|
|
123
161
|
interval: float = 1.0) -> bool:
|
|
124
162
|
"""url が HTTP で返事をするまで待つ(返事の番号は問わない)。上がらず終われば False。
|
|
@@ -157,6 +195,70 @@ def server_env(base: dict[str, str], extra_env: dict[str, str]) -> dict[str, str
|
|
|
157
195
|
return env
|
|
158
196
|
|
|
159
197
|
|
|
198
|
+
# 本物の DB・鍵につながる名前(★起動のたびに必ず形だけの値で上書きする)。
|
|
199
|
+
# ★next dev は現場の .env.local を自分で読むが、先に在る環境変数は上書きしない(vite なども同じ)。
|
|
200
|
+
# ここで形だけの値を先に置けば、.env.local の本物の接続先・鍵は使われず、本物の会社のデータ
|
|
201
|
+
# (実在の人の名前など)が写真に写らない(下調べ a547119e)。★値は読まない・名前だけで決める。
|
|
202
|
+
DB_SECRET_NAMES = (
|
|
203
|
+
'DATABASE_URL', 'DIRECT_URL', 'SHADOW_DATABASE_URL',
|
|
204
|
+
'POSTGRES_URL', 'POSTGRES_PRISMA_URL', 'POSTGRES_URL_NON_POOLING', 'POSTGRES_PASSWORD',
|
|
205
|
+
'SUPABASE_URL', 'NEXT_PUBLIC_SUPABASE_URL', 'SUPABASE_DB_URL',
|
|
206
|
+
'SUPABASE_SERVICE_ROLE_KEY', 'SUPABASE_SERVICE_KEY', 'SUPABASE_SECRET_KEY', 'SUPABASE_JWT_SECRET',
|
|
207
|
+
'SUPABASE_ANON_KEY', 'NEXT_PUBLIC_SUPABASE_ANON_KEY', 'NEXT_PUBLIC_SUPABASE_PUBLISHABLE_KEY',
|
|
208
|
+
)
|
|
209
|
+
# 現場の雛形(名前だけを読む)に在る名前のうち、DB・鍵らしい物も上書きする(現場ごとの名前を拾う)。
|
|
210
|
+
ENV_TEMPLATES = ('.env.example', '.env.sample', '.env.template')
|
|
211
|
+
DB_SECRET_PATTERN = re.compile(
|
|
212
|
+
r'DATABASE|POSTGRES|SUPABASE|MYSQL|MONGO|REDIS|(^|_)DB(_|$)|(^|_)PG(_|$)'
|
|
213
|
+
r'|SECRET|PASSWORD|PRIVATE_KEY|SERVICE_ROLE|API_KEY|TOKEN'
|
|
214
|
+
)
|
|
215
|
+
PLACEHOLDER = 'ci-placeholder'
|
|
216
|
+
|
|
217
|
+
|
|
218
|
+
def placeholder_for(name: str) -> str:
|
|
219
|
+
"""名前に合う形だけの値(形を確かめる部品で落ちないように、接続先は形の正しい行き止まりにする)。"""
|
|
220
|
+
if not re.search(r'(URL|URI|DSN)$', name):
|
|
221
|
+
return PLACEHOLDER
|
|
222
|
+
if 'SUPABASE' in name:
|
|
223
|
+
return 'https://ci-placeholder.supabase.co'
|
|
224
|
+
if 'REDIS' in name:
|
|
225
|
+
return 'redis://127.0.0.1:1'
|
|
226
|
+
if 'MONGO' in name:
|
|
227
|
+
return 'mongodb://127.0.0.1:1/ci-placeholder'
|
|
228
|
+
if 'MYSQL' in name:
|
|
229
|
+
return 'mysql://ci:ci-placeholder@127.0.0.1:1/ci-placeholder'
|
|
230
|
+
if re.search(r'DATABASE|POSTGRES|DIRECT|(^|_)DB(_|$)|(^|_)PG(_|$)', name):
|
|
231
|
+
return 'postgresql://ci:ci-placeholder@127.0.0.1:1/ci-placeholder'
|
|
232
|
+
return 'http://127.0.0.1:1'
|
|
233
|
+
|
|
234
|
+
|
|
235
|
+
def template_names(cwd: Path) -> list[str]:
|
|
236
|
+
"""現場の雛形(.env.example など)から名前だけを集める。★本物の .env・.env.local は開かない。"""
|
|
237
|
+
names: list[str] = []
|
|
238
|
+
for t in ENV_TEMPLATES:
|
|
239
|
+
try:
|
|
240
|
+
text = (cwd / t).read_text(encoding='utf-8', errors='replace')
|
|
241
|
+
except OSError:
|
|
242
|
+
continue
|
|
243
|
+
for ln in text.splitlines():
|
|
244
|
+
m = re.match(r'\s*(?:export\s+)?([A-Za-z_][A-Za-z0-9_]*)\s*=', ln)
|
|
245
|
+
if m:
|
|
246
|
+
names.append(m.group(1))
|
|
247
|
+
return names
|
|
248
|
+
|
|
249
|
+
|
|
250
|
+
def guard_env(cwd: Path, extra_env: dict[str, str]) -> tuple[dict[str, str], list[str]]:
|
|
251
|
+
"""起動に渡す値=DB・鍵の名前を形だけの値で上書きした上に、--env の形だけの値を重ねた物。
|
|
252
|
+
返り: (渡す値, 上書きした名前の一覧)。★--env で渡した名前はその値を使う(CI と同じ形だけの値)。"""
|
|
253
|
+
names = list(DB_SECRET_NAMES)
|
|
254
|
+
for n in template_names(cwd):
|
|
255
|
+
if DB_SECRET_PATTERN.search(n) and n not in names:
|
|
256
|
+
names.append(n)
|
|
257
|
+
env = {n: placeholder_for(n) for n in names}
|
|
258
|
+
env.update(extra_env)
|
|
259
|
+
return env, sorted(names)
|
|
260
|
+
|
|
261
|
+
|
|
160
262
|
def tracked_changes(cwd: Path) -> set[str] | None:
|
|
161
263
|
"""cwd が git の作業場所なら、記録に残る変更(git status の行)の集まり。違えば None。"""
|
|
162
264
|
try:
|
|
@@ -255,6 +357,7 @@ def take_shots(browser, urls: list[str], out: Path, label: str, wait_ms: int,
|
|
|
255
357
|
dst = shot_path(out, label, name, w)
|
|
256
358
|
page.screenshot(path=str(dst), full_page=True)
|
|
257
359
|
say(f'SHOT {dst}')
|
|
360
|
+
make_thumb(browser, dst, thumb_path(out, label, name, w))
|
|
258
361
|
final = page.url
|
|
259
362
|
if urlparse(final).path != urlparse(url).path:
|
|
260
363
|
notes.append(f'{url} は {final} へ移った(ログインが要る画面かもしれない)')
|
|
@@ -280,9 +383,24 @@ def make_pairs(browser, out: Path) -> list[Path]:
|
|
|
280
383
|
made.append(dst)
|
|
281
384
|
finally:
|
|
282
385
|
ctx.close()
|
|
386
|
+
make_thumb(browser, dst, thumb_path(out, 'compare', name, w))
|
|
283
387
|
return made
|
|
284
388
|
|
|
285
389
|
|
|
390
|
+
def make_thumb(browser, src: Path, dst: Path) -> None:
|
|
391
|
+
"""撮った PNG から、幅 THUMB_WIDTH・上から THUMB_HEIGHT の JPEG(質 THUMB_QUALITY)を作る。
|
|
392
|
+
★撮ったときにここで1回だけ作る(管制や配り役では作らない=新しい部品を足さず Playwright で)。"""
|
|
393
|
+
ctx = browser.new_context(viewport={'width': THUMB_WIDTH, 'height': THUMB_HEIGHT},
|
|
394
|
+
device_scale_factor=1)
|
|
395
|
+
page = ctx.new_page()
|
|
396
|
+
try:
|
|
397
|
+
page.set_content(thumb_html(src.read_bytes()), wait_until='load')
|
|
398
|
+
page.screenshot(path=str(dst), type='jpeg', quality=THUMB_QUALITY)
|
|
399
|
+
say(f'THUMB {dst}')
|
|
400
|
+
finally:
|
|
401
|
+
ctx.close()
|
|
402
|
+
|
|
403
|
+
|
|
286
404
|
# ── 入口 ─────────────────────────────────────────────────────────────────────
|
|
287
405
|
|
|
288
406
|
def check_out(out: Path) -> str | None:
|
|
@@ -309,7 +427,14 @@ def cmd_shot(a: argparse.Namespace) -> int:
|
|
|
309
427
|
before_changes = tracked_changes(cwd) if a.cmd else None
|
|
310
428
|
try:
|
|
311
429
|
if a.cmd:
|
|
312
|
-
|
|
430
|
+
# ★DB の接続先と鍵の名前を必ず形だけの値で上書きして起動する(本物のデータを写さない)。
|
|
431
|
+
env, guarded = guard_env(cwd, extra)
|
|
432
|
+
env_note = out / f'env-{a.label}.txt'
|
|
433
|
+
env_note.write_text(
|
|
434
|
+
'# 起動のときに形だけの値で上書きした名前(★値は書かない)\n' + '\n'.join(guarded) + '\n',
|
|
435
|
+
encoding='utf-8')
|
|
436
|
+
say(f'形だけの値で上書きした名前 {len(guarded)} 個: {" ".join(guarded)}(記録 {env_note})')
|
|
437
|
+
proc = start_server(a.cmd, cwd, env, log)
|
|
313
438
|
say(f'起動: {a.cmd}(記録 {log})')
|
|
314
439
|
if not wait_http(a.url[0], a.timeout, proc):
|
|
315
440
|
say(f'NG 画面が上がらなかった({a.timeout:.0f}秒): {a.url[0]}')
|