w-orm-reladb 1.1.12 → 1.1.14

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
@@ -22,10 +22,11 @@ import arrHas from 'wsemi/src/arrHas.mjs'
22
22
  import pmSeries from 'wsemi/src/pmSeries.mjs'
23
23
  import pm2resolve from 'wsemi/src/pm2resolve.mjs'
24
24
  import pmQueue from 'wsemi/src/pmQueue.mjs'
25
+ import chkOrmStr from 'wsemi/src/chkOrmStr.mjs'
25
26
  import WAutoSequelize from 'w-auto-sequelize/src/WAutoSequelize.mjs'
26
27
  import importModels from './importModels.mjs'
27
28
  import _genModelsByTabs from './genModelsByTabs.mjs'
28
- import cvFind, { getColKind, getColScale, normPk, chkFindShape, genDateChecker } from './cvFind.mjs'
29
+ import cvFind, { getColKind, getColScale, normPk, chkWf, chkFindShape, genDateChecker } from './cvFind.mjs'
29
30
 
30
31
 
31
32
  //放置於全域宣告, 若使用useStable=true才可於當創建多實例時仍能全域控管
@@ -37,6 +38,14 @@ let pmq = pmQueue(1)
37
38
  *
38
39
  * 注意: 各model內id欄位不是主鍵(primary key)時需要強制更改成為主鍵,否則sequelize無法匯入
39
40
  *
41
+ * 注意: opt.url、opt.db、opt.cl、opt.storage(儲存位址名稱與路徑)含孤立代理碼元(UTF-16代理對被拆開後只剩一半,String.prototype.isWellFormed()為false)者,
42
+ * 建構時即拋出invalid opt.<名>: string contains lone surrogate(不回顯值):UTF-8轉換會把孤立代理碼元改寫為U+FFFD,不同名稱將指向同一儲存
43
+ *
44
+ * 注意: 寫入與主鍵查詢之字串須良構(第66項):主鍵不得含孤立代理碼元或NUL,insert、insertBulk、save之數據字串值與鍵名(含巢狀、陣列元素)不得含孤立代理碼元(值之NUL不拒);
45
+ * 不合格者insert與insertBulk整批reject、save與del該筆ok為0附err、selectByPk回傳null,詳見各函數說明與README。
46
+ * 註: mssql預設排序規則(如SQL_Latin1_General_CP1_CI_AS)下字串相等由排序規則決定,良構字串亦可能相等('a'、'a'+emoji、'a'+U+FFFD),屬資料庫語意不在檢核範圍,
47
+ * 需精確比對時請以二進位排序規則(如Latin1_General_100_BIN2)建表
48
+ *
40
49
  * @class
41
50
  * @param {Object} [opt={}] 輸入設定物件,預設{}
42
51
  * @param {String} [opt.url='mssql://username:password@localhost:1433'] 輸入連接資料庫字串,資料庫可選'mssql'、'sqlite'、'mysql'、'mariadb'、'postgres',預設'mssql://username:password@localhost:1433'
@@ -87,6 +96,18 @@ function WOrmReladb(opt = {}) {
87
96
  if (!isestr(opt.storage)) {
88
97
  opt.storage = './worm.db' //storage, only use for sqlite
89
98
  }
99
+
100
+
101
+ //儲存位址名稱(opt.db、opt.cl、opt.url、opt.storage)含孤立代理碼元者建構時即拋出(第66項, R13):
102
+ //路徑與名稱經UTF-8轉換後孤立代理碼元被改寫為U+FFFD, 不同名稱會指向同一儲存(如兩個不同之storage路徑共用同一個sqlite檔);
103
+ //須先於opt.url之解析(其錯誤訊息會回顯opt.url); 訊息為固定詞彙且不回顯值, 此處不檢NUL(不屬本規則)
104
+ for (let k of ['db', 'cl', 'url', 'storage']) {
105
+ let why = chkOrmStr(opt[k], { nul: false })
106
+ if (why !== null) {
107
+ throw new Error(`invalid opt.${k}: ${why}`)
108
+ }
109
+ }
110
+
90
111
  opt.storage = path.resolve(opt.storage)
91
112
  if (!isbol(opt.useEncryption)) {
92
113
  opt.useEncryption = false
@@ -222,6 +243,8 @@ function WOrmReladb(opt = {}) {
222
243
  * 判定主鍵值是否有效(與主鍵欄型別無關之判定)
223
244
  * 註: select以外之五函數對主鍵之認定一律以本函數與normPkOf為準,令selectByPk之[命中]與insert、save、del內對既有數據之認定一致
224
245
  * 註: 有效即非空字串或有限數值(含0), new String與new Number取原始值; NaN、±Infinity、布林、物件等為無效(見cvFind.mjs之normPk)
246
+ * 註: 含孤立代理碼元或NUL之字串亦為無效(第66項, R13),故selectByPk回null;寫入側(insert、insertBulk、save、del)於procPk之前即由chkWf逐筆檢出,
247
+ * 令autoGenPk為true時呼叫端所給之不合格字串不被當成[未給主鍵]而以自動產生之主鍵取代
225
248
  *
226
249
  * @ignore
227
250
  * @param {*} v 輸入主鍵值
@@ -327,8 +350,8 @@ function WOrmReladb(opt = {}) {
327
350
  * 兩者命中之數據不同而會刪錯列, 故delAll遇此類model即拒絕
328
351
  * 註: defaultScope帶group或having時, findAll套用而destroy不套用(having過濾後只回部分列, 卻刪除全部符合where者);
329
352
  * 帶非空之include時, findAll以INNER JOIN篩列(required)而destroy不JOIN; 兩者亦拒絕
330
- * 註: defaultScope.where含Op.and時, sequelize以Object.assign合併scope與cvFind輸出之where, 後者頂層恆為Op.and而覆寫scope之條件(select與delAll皆然),
331
- * delAll會刪到scope範圍外之列, 故拒絕; 其他鍵(含Op.or)與cvFind輸出之Op.and並存而以AND結合, 不受影響
353
+ * 註: defaultScope.where含Op.and者, delAll一律拒絕(維持既有處置): 原因為sequelize預設以Object.assign合併scope與cvFind輸出之where而被頂層Op.and覆寫,
354
+ * delAll會刪到scope範圍外之列; 自R16起建構時設定whereMergeStrategy:'and', 兩者一律以AND結合(select亦正確套用該scope), 此拒絕為保守維持, 不再是越界之防線
332
355
  *
333
356
  * @ignore
334
357
  * @param {Object} md 輸入資料表model物件
@@ -365,17 +388,22 @@ function WOrmReladb(opt = {}) {
365
388
  * 正規化各筆數據之主鍵值並就地寫回, 型別不符者整批拋出
366
389
  * 註: 須於procPk之後、任何寫入之前一次完成; 已給主鍵而型別不符屬呼叫端未履行契約, 不以自動產生之主鍵取代
367
390
  * 註: 正規化值寫回數據, 令寫入值與其後各函數之比對值一致(如字串類主鍵欄之123存為'123'), 事件之數據亦為實際寫入者
391
+ * 註: 訊息只含筆數索引與主鍵欄名, 不回顯主鍵值(第66項, R13)
368
392
  *
369
393
  * @ignore
370
394
  * @param {Object} md 輸入資料表model物件
371
395
  * @param {Array} data 輸入已補齊主鍵之數據陣列
396
+ * @param {Array} [bads=[]] 輸入chkWf之逐筆訊息陣列, 非null者(save之不合格筆, 已另行處置為逐筆失敗)略過
372
397
  * @returns {undefined} 無回傳值
373
398
  */
374
- function normPks(md, data) {
399
+ function normPks(md, data, bads = []) {
375
400
  data.forEach((v, k) => {
401
+ if (get(bads, k, null) !== null) {
402
+ return
403
+ }
376
404
  let r = normPkOf(md, get(v, opt.pk))
377
405
  if (r.kind !== 'ok') {
378
- throw new Error(`invalid data[${k}].${opt.pk}[${get(v, opt.pk)}], type does not match pk column [${opt.pk}]`)
406
+ throw new Error(`invalid data[${k}].${opt.pk}, type does not match pk column [${opt.pk}]`)
379
407
  }
380
408
  v[opt.pk] = r.v
381
409
  })
@@ -393,11 +421,15 @@ function WOrmReladb(opt = {}) {
393
421
  * @ignore
394
422
  * @param {Object} md 輸入資料表model物件
395
423
  * @param {Array} data 輸入已補齊並正規化主鍵之數據陣列
424
+ * @param {Array} [bads=[]] 輸入chkWf之逐筆訊息陣列, 非null者(save之不合格筆, 已另行處置為逐筆失敗)略過
396
425
  * @returns {undefined} 無回傳值
397
426
  */
398
- function chkDates(md, data) {
427
+ function chkDates(md, data, bads = []) {
399
428
  let chk = genDateChecker(get(md, 'rawAttributes', {}))
400
429
  data.forEach((v, k) => {
430
+ if (get(bads, k, null) !== null) {
431
+ return
432
+ }
401
433
  let col = chk(v)
402
434
  if (col !== null) {
403
435
  throw new Error(`invalid data: date is not a valid time in years 1-9999 at [data[${k}].${col}]`)
@@ -494,7 +526,10 @@ function WOrmReladb(opt = {}) {
494
526
  //dialectOptions: {
495
527
  // collate: 'utf8_general_ci'
496
528
  //},
497
- timestamps: false
529
+ timestamps: false,
530
+ //model之defaultScope.where與select、delAll等傳入之where一律以AND結合(R16): sequelize預設為overwrite, 同名頂層鍵後者覆寫,
531
+ //scope.where為Sequelize.literal或Sequelize.where(非一般物件)時scope直接被丟棄, 致select與delAll越出scope
532
+ whereMergeStrategy: 'and'
498
533
  },
499
534
  // pool: {
500
535
  // max: 20,
@@ -527,6 +562,13 @@ function WOrmReladb(opt = {}) {
527
562
  //mds
528
563
  let mds = r.msg
529
564
 
565
+ //model自身指定whereMergeStrategy時以model選項為準而蓋過上列define預設(scope又被覆寫或丟棄), 故匯入後一律設為'and'(R16)
566
+ if (err === null) {
567
+ for (let md of Object.values(mds)) {
568
+ md.options.whereMergeStrategy = 'and'
569
+ }
570
+ }
571
+
530
572
  return {
531
573
  mds,
532
574
  err,
@@ -695,6 +737,7 @@ function WOrmReladb(opt = {}) {
695
737
  *
696
738
  * 註: 主鍵欄位取自opt.pk,預設為id,支援由呼叫端指定
697
739
  * 註: 主鍵未命中或主鍵值無效皆回傳null而不reject,[命中]之判定基準與insert、save、del內對既有數據之認定一致
740
+ * 註: 含孤立代理碼元或NUL之字串主鍵(含new String包裝者)為無效而回傳null,不連線、不送查詢(第66項, R13): UTF-8存放之資料庫會把孤立代理碼元改寫為U+FFFD,若照送會命中他筆
698
741
  * 註: 主鍵值依主鍵欄型別正規化後查詢: 字串類主鍵欄之有限數字以String(v)處置(selectByPk(123)即查'123'), 整數類主鍵欄之標準整數寫法字串轉為數值;
699
742
  * 型別不符(整數類主鍵欄給'012'、12.4、'abc'等)亦屬主鍵值無效而回傳null
700
743
  * 註: 本函數不得有副作用,故不創建資料表
@@ -723,10 +766,13 @@ function WOrmReladb(opt = {}) {
723
766
  return Promise.reject(err)
724
767
  }
725
768
 
726
- //check, 未給有效主鍵值視為查無數據, 不送查詢以免無效值被轉為null而誤中其他數據
727
- if (!isEffPk(pk)) {
769
+ //check, 未給有效主鍵值視為查無數據, 不送查詢以免無效值被轉為null而誤中其他數據;
770
+ //含孤立代理碼元或NUL之字串亦為無效(R13); 包裝物件(new String、new Number)只求值一次, 其後以原始值查詢(檢查之值即使用之值)
771
+ let r0 = normPk(pk, 'any')
772
+ if (r0.kind !== 'ok') {
728
773
  return null
729
774
  }
775
+ pk = r0.v
730
776
 
731
777
  //check
732
778
  if (opt.useEncryption && dialect === 'sqlite') {
@@ -827,6 +873,10 @@ function WOrmReladb(opt = {}) {
827
873
  * 錯誤訊息為invalid data: date is not a valid time in years 1-9999 at [data[索引].欄名],不回顯值;sqlite以文字存日期,範圍外年份之文字與時間序不一致,會使以日期為條件之delAll刪錯列,
828
874
  * 故兩方言一律於送出前拒收;無效時間(Invalid Date、NaN、無法解析之字串、空字串等,sqlite會存為字典序大於任何年份之文字Invalid date,mssql則由資料庫報錯)亦一併reject;
829
875
  * 庫內既有之範圍外日期不遷移,須自行清理或改寫(見README)
876
+ * 註: 主鍵與數據之字串須良構(第66項, R13): 主鍵不得含孤立代理碼元(UTF-16代理對被拆開後只剩一半, UTF-8存放時被改寫為U+FFFD而使不同主鍵寫成同一鍵)或NUL,
877
+ * 數據之字串值與鍵名(含巢狀物件、陣列元素、Map/Set等,不論欄位是否在model內)不得含孤立代理碼元(值之NUL不拒);U+FFFD本身與成對代理(emoji等)為良構,照常接受。
878
+ * 任一筆不合格即reject且同批皆不寫入,訊息為invalid id: 原因 at [data[索引].主鍵欄]或invalid data: 原因 at [data[索引].路徑],不回顯值;
879
+ * 不隨opt.autoGenPk改變(autoGenPk為true時亦不以自動產生之主鍵取代呼叫端所給之不合格主鍵),檢核先於連線與model載入,作用於複本
830
880
  * 註: option.returnList開啟時改回與輸入等長且保序之逐筆結果陣列[{n,nInserted,ok}],
831
881
  * 聚合計數只答得出[有幾筆是新的]而答不出[是哪幾筆],而後者正是去重之產出物;
832
882
  * 逐筆元素之n與ok恆為1,資訊由nInserted承載,不變式為
@@ -870,9 +920,6 @@ function WOrmReladb(opt = {}) {
870
920
  }
871
921
  }
872
922
 
873
- //cloneDeep
874
- data = cloneDeep(data)
875
-
876
923
  //isErr, res
877
924
  let isErr = false
878
925
  let res = null
@@ -880,13 +927,25 @@ function WOrmReladb(opt = {}) {
880
927
  //si
881
928
  let si = instance
882
929
 
930
+ //inited, 本次呼叫是否已進入initSequelize(僅此時finally才關閉sequelize; 預檢失敗於其前者不得關閉呼叫端先前持有之連線)
931
+ let inited = false
932
+
883
933
  try {
884
934
 
885
935
  //check, 實例已關閉屬整批性錯誤, 於入口快速失敗
886
936
  procClosed(instance)
887
937
 
938
+ //chkWf, 主鍵與資料之字串良構(孤立代理碼元、主鍵之NUL)逐筆檢核(R13): 先於連線、model載入與任何寫入, 檢查之物件即cloneDeep後之複本且其後只使用該複本;
939
+ //任一筆不合格即整批拋出(以索引最小者為準)而不寫入任何一筆, 不隨autoGenPk改變, 不以自動產生之主鍵取代不合格之主鍵
940
+ let bads = chkWf(isarr(data) ? data : [data], opt.pk, true)
941
+ let iBad = bads.findIndex((v) => v !== null)
942
+ if (iBad >= 0) {
943
+ throw new Error(bads[iBad])
944
+ }
945
+
888
946
  //initSequelize, 內部自動初始化須在try內: 其例外(如驅動缺失)與si.err同屬整批性錯誤, 方能於reject前發出error事件, 已建構之sequelize亦由finally關閉
889
947
  if (instance === null) {
948
+ inited = true
890
949
  si = await initSequelize()
891
950
  }
892
951
 
@@ -976,7 +1035,7 @@ function WOrmReladb(opt = {}) {
976
1035
  finally {
977
1036
 
978
1037
  //closeSequelize
979
- if (instance === null) { //內部自動初始化得close
1038
+ if (instance === null && inited) { //內部自動初始化得close
980
1039
  await closeSequelize('insert')
981
1040
  }
982
1041
 
@@ -1009,6 +1068,7 @@ function WOrmReladb(opt = {}) {
1009
1068
  * 註: 主鍵值依主鍵欄型別正規化後寫入(字串類主鍵欄之123存為'123');型別不符(整數類主鍵欄給'012'等)即reject且同批皆不寫入
1010
1069
  * 註: DATE、DATEONLY欄之值換算後年份須在1–9999,範圍外或無效者(如new Date(8.64e15)、new Date(NaN))即reject且同批皆不寫入,訊息為invalid data: date is not a valid time in years 1-9999 at [data[索引].欄名],
1011
1070
  * 不回顯值,兩方言一致於送出前拒收,規則同insert
1071
+ * 註: 主鍵與數據之字串須良構(孤立代理碼元、主鍵之NUL),不合格者整批reject且同批皆不寫入,規則同insert(第66項, R13)
1012
1072
  * 註: [全有全無]為獨立於T7之額外要求——T7僅保證每筆之[檢查主鍵不存在]與[寫入]為原子,不保證整批。
1013
1073
  * mssql因綁定參數數量上限會由驅動層自動拆為多語句送出,實測1000筆之批次於末筆撞主鍵時已有946筆落盤,
1014
1074
  * 故一律以交易包覆並於失敗時回滾;呼叫端已給transaction時改以巢狀交易(SAVEPOINT)包覆,
@@ -1045,9 +1105,6 @@ function WOrmReladb(opt = {}) {
1045
1105
  }
1046
1106
  }
1047
1107
 
1048
- //cloneDeep
1049
- data = cloneDeep(data)
1050
-
1051
1108
  //isErr, res
1052
1109
  let isErr = false
1053
1110
  let res = null
@@ -1055,13 +1112,25 @@ function WOrmReladb(opt = {}) {
1055
1112
  //si
1056
1113
  let si = instance
1057
1114
 
1115
+ //inited, 本次呼叫是否已進入initSequelize(僅此時finally才關閉sequelize; 預檢失敗於其前者不得關閉呼叫端先前持有之連線)
1116
+ let inited = false
1117
+
1058
1118
  try {
1059
1119
 
1060
1120
  //check, 實例已關閉屬整批性錯誤, 於入口快速失敗
1061
1121
  procClosed(instance)
1062
1122
 
1123
+ //chkWf, 主鍵與資料之字串良構(孤立代理碼元、主鍵之NUL)逐筆檢核(R13): 先於連線、model載入與任何寫入, 檢查之物件即cloneDeep後之複本且其後只使用該複本;
1124
+ //任一筆不合格即整批拋出(以索引最小者為準)而不寫入任何一筆, 不隨autoGenPk改變, 不以自動產生之主鍵取代不合格之主鍵
1125
+ let bads = chkWf(isarr(data) ? data : [data], opt.pk, true)
1126
+ let iBad = bads.findIndex((v) => v !== null)
1127
+ if (iBad >= 0) {
1128
+ throw new Error(bads[iBad])
1129
+ }
1130
+
1063
1131
  //initSequelize, 內部自動初始化須在try內: 其例外(如驅動缺失)與si.err同屬整批性錯誤, 方能於reject前發出error事件, 已建構之sequelize亦由finally關閉
1064
1132
  if (instance === null) {
1133
+ inited = true
1065
1134
  si = await initSequelize()
1066
1135
  }
1067
1136
 
@@ -1144,7 +1213,7 @@ function WOrmReladb(opt = {}) {
1144
1213
  finally {
1145
1214
 
1146
1215
  //closeSequelize
1147
- if (instance === null) { //內部自動初始化得close
1216
+ if (instance === null && inited) { //內部自動初始化得close
1148
1217
  await closeSequelize('insertBulk')
1149
1218
  }
1150
1219
 
@@ -1181,9 +1250,10 @@ function WOrmReladb(opt = {}) {
1181
1250
  * @param {Boolean} autoInsert 輸入是否於查無數據時自動改以插入處理布林值
1182
1251
  * @param {Object|null} transaction 輸入交易(transaction)物件
1183
1252
  * @param {Array} ks 輸入model之欄位名陣列
1253
+ * @param {Number} k 輸入數據於陣列內之索引,供訊息使用(訊息不回顯主鍵值)
1184
1254
  * @returns {Promise} 回傳Promise,resolve回傳本筆儲存結果,本筆失敗時亦resolve並以ok為0回報
1185
1255
  */
1186
- async function saveOne(md, v, autoInsert, transaction, ks) {
1256
+ async function saveOne(md, v, autoInsert, transaction, ks, k) {
1187
1257
 
1188
1258
  //nTry, 預測錯誤時重試, 給予有限次數令其收斂
1189
1259
  let nTry = 3
@@ -1322,7 +1392,7 @@ function WOrmReladb(opt = {}) {
1322
1392
  nInserted: 0,
1323
1393
  nModified: 0,
1324
1394
  ok: 0,
1325
- err: `can not save data by ${opt.pk}[${pkv}] in ${nTry} tries`,
1395
+ err: `can not save data[${k}].${opt.pk} in ${nTry} tries`,
1326
1396
  }
1327
1397
  }
1328
1398
 
@@ -1350,6 +1420,8 @@ function WOrmReladb(opt = {}) {
1350
1420
  * 註: 主鍵值依主鍵欄型別正規化(字串類主鍵欄之123即'123');型別不符(整數類主鍵欄給'012'等)屬呼叫端未履行契約,整批reject且同批皆不寫入
1351
1421
  * 註: DATE、DATEONLY欄之值換算後年份須在1–9999,範圍外或無效者(如new Date(8.64e15)、new Date(NaN))屬呼叫端未履行契約,整批reject且同批皆不寫入(含autoInsert為false而不會寫入者;不降為該筆ok為0),
1352
1422
  * 訊息為invalid data: date is not a valid time in years 1-9999 at [data[索引].欄名],不回顯值,兩方言一致於送出前拒收,規則同insert
1423
+ * 註: 主鍵與數據之字串須良構(孤立代理碼元、主鍵之NUL;規則同insert, 第66項, R13),但不合格者為該筆失敗而非整批reject:該筆ok為0並附err(invalid id: 原因 at [data[索引].主鍵欄]或invalid data: 原因 at [data[索引].路徑],不回顯值),
1424
+ * 不讀取資料庫、不寫入(含autoInsert為false),同批其他筆照常處理;不隨opt.autoGenPk改變。全部筆數皆不合格時不連線
1353
1425
  *
1354
1426
  * @memberOf WOrmReladb
1355
1427
  * @param {Object|Array} data 輸入數據物件或陣列
@@ -1366,9 +1438,6 @@ function WOrmReladb(opt = {}) {
1366
1438
  return []
1367
1439
  }
1368
1440
 
1369
- //cloneDeep
1370
- data = cloneDeep(data)
1371
-
1372
1441
  //instance
1373
1442
  let instance = get(option, 'instance', null)
1374
1443
 
@@ -1392,23 +1461,32 @@ function WOrmReladb(opt = {}) {
1392
1461
  //si
1393
1462
  let si = instance
1394
1463
 
1464
+ //inited, 本次呼叫是否已進入initSequelize(僅此時finally才關閉sequelize; 預檢失敗於其前者不得關閉呼叫端先前持有之連線)
1465
+ let inited = false
1466
+
1395
1467
  try {
1396
1468
 
1397
1469
  //check, 實例已關閉屬整批性錯誤, 於入口快速失敗
1398
1470
  procClosed(instance)
1399
1471
 
1400
- //initSequelize, 內部自動初始化須在try內: 其例外(如驅動缺失)與si.err同屬整批性錯誤, 方能於reject前發出error事件, 已建構之sequelize亦由finally關閉
1401
- if (instance === null) {
1472
+ //chkWf, 主鍵與資料之字串良構(孤立代理碼元、主鍵之NUL)逐筆檢核(R13): 先於連線、model載入與任何讀取、寫入、刪除, 檢查之物件即cloneDeep後之複本且其後只使用該複本;
1473
+ //不合格者為該筆失敗(ok為0附err, 同批其他筆照常), bads為逐筆訊息(合格者為null); 不隨autoGenPk改變
1474
+ let bads = chkWf(isarr(data) ? data : [data], opt.pk, true)
1475
+ let nOk = bads.filter((v) => v === null).length
1476
+
1477
+ //initSequelize, 內部自動初始化須在try內: 其例外(如驅動缺失)與si.err同屬整批性錯誤, 方能於reject前發出error事件, 已建構之sequelize亦由finally關閉; 全部不合格者無須連線
1478
+ if (instance === null && nOk > 0) {
1479
+ inited = true
1402
1480
  si = await initSequelize()
1403
1481
  }
1404
1482
 
1405
1483
  //check
1406
- if (si.err) {
1484
+ if (si !== null && si.err) {
1407
1485
  throw si.err
1408
1486
  }
1409
1487
 
1410
1488
  //md
1411
- let md = si.mds[opt.cl]
1489
+ let md = si === null ? null : si.mds[opt.cl]
1412
1490
 
1413
1491
  //check
1414
1492
  if (!isarr(data)) {
@@ -1417,21 +1495,34 @@ function WOrmReladb(opt = {}) {
1417
1495
 
1418
1496
  //procPk, 須於任何寫入之前一次完成, 令autoGenPk為false而拋錯時同批之有效筆數亦不會被寫入
1419
1497
  data = map(data, (v, k) => {
1420
- return procPk(md, v, k)
1498
+ return bads[k] !== null ? v : procPk(md, v, k)
1421
1499
  })
1422
1500
 
1423
1501
  //normPks, 主鍵值依主鍵欄型別正規化後寫回, 型別不符者整批reject且不寫入任何一筆
1424
- normPks(md, data)
1502
+ normPks(md, data, bads)
1425
1503
 
1426
1504
  //chkDates, DATE、DATEONLY欄之值須為年份在1–9999之有效時間, 範圍外或無效者整批reject且不寫入任何一筆(含autoInsert為false而不會寫入者; 與條件側共用範圍判定, 見R12)
1427
- chkDates(md, data)
1505
+ chkDates(md, data, bads)
1428
1506
 
1429
1507
  //ks, model之欄位名, 供合併後比對時濾除非欄位之鍵
1430
1508
  let ks = keys(get(md, 'rawAttributes', {}))
1431
1509
 
1432
1510
  //pmSeries
1433
- res = await pmSeries(data, async(v) => {
1434
- return saveOne(md, v, autoInsert, transaction, ks)
1511
+ res = await pmSeries(data, async(v, k) => {
1512
+
1513
+ //check, 字串不合格之筆為該筆失敗: 不讀取資料庫、不寫入, 同批其他筆照常
1514
+ if (bads[k] !== null) {
1515
+ emitError('save', [v], bads[k])
1516
+ return {
1517
+ n: 1,
1518
+ nInserted: 0,
1519
+ nModified: 0,
1520
+ ok: 0,
1521
+ err: bads[k],
1522
+ }
1523
+ }
1524
+
1525
+ return saveOne(md, v, autoInsert, transaction, ks, k)
1435
1526
  })
1436
1527
 
1437
1528
  }
@@ -1442,7 +1533,7 @@ function WOrmReladb(opt = {}) {
1442
1533
  finally {
1443
1534
 
1444
1535
  //closeSequelize
1445
- if (instance === null) { //內部自動初始化得close
1536
+ if (instance === null && inited) { //內部自動初始化得close
1446
1537
  await closeSequelize('save')
1447
1538
  }
1448
1539
 
@@ -1470,6 +1561,8 @@ function WOrmReladb(opt = {}) {
1470
1561
  * 不中斷其餘筆數,以此與[主鍵未命中]之ok為1區辨;主鍵值與主鍵欄型別不符者(整數類主鍵欄給'012'等)亦同
1471
1562
  * 註: 主鍵值依主鍵欄型別正規化後刪除(字串類主鍵欄之123即'123'),正規化值寫回該筆數據
1472
1563
  * 註: 本函數不受opt.autoGenPk影響,於任一設定下皆不補值
1564
+ * 註: 主鍵含孤立代理碼元或NUL者(含new String包裝者;UTF-8存放之資料庫會把孤立代理碼元改寫為U+FFFD而刪到他筆)為該筆失敗,ok為0並附err(invalid id: 原因 at [data[索引].主鍵欄],不回顯值),
1565
+ * 不送查詢,同批其他筆照常;只檢主鍵,其他欄位不檢(第66項, R13);全部筆數皆不合格時不連線。其他無效主鍵之err亦不回顯主鍵值(invalid data[索引].主鍵欄…)
1473
1566
  *
1474
1567
  * @memberOf WOrmReladb
1475
1568
  * @param {Object|Array} data 輸入數據物件或陣列,會查找各數據的opt.pk值,有存在者就刪除
@@ -1485,9 +1578,6 @@ function WOrmReladb(opt = {}) {
1485
1578
  return []
1486
1579
  }
1487
1580
 
1488
- //cloneDeep
1489
- data = cloneDeep(data)
1490
-
1491
1581
  //instance
1492
1582
  let instance = get(option, 'instance', null)
1493
1583
 
@@ -1508,23 +1598,32 @@ function WOrmReladb(opt = {}) {
1508
1598
  //si
1509
1599
  let si = instance
1510
1600
 
1601
+ //inited, 本次呼叫是否已進入initSequelize(僅此時finally才關閉sequelize; 預檢失敗於其前者不得關閉呼叫端先前持有之連線)
1602
+ let inited = false
1603
+
1511
1604
  try {
1512
1605
 
1513
1606
  //check, 實例已關閉屬整批性錯誤, 於入口快速失敗
1514
1607
  procClosed(instance)
1515
1608
 
1516
- //initSequelize, 內部自動初始化須在try內: 其例外(如驅動缺失)與si.err同屬整批性錯誤, 方能於reject前發出error事件, 已建構之sequelize亦由finally關閉
1517
- if (instance === null) {
1609
+ //chkWf, 主鍵之字串良構(孤立代理碼元、主鍵之NUL)逐筆檢核(R13): 先於連線、model載入與任何讀取、寫入、刪除, 檢查之物件即cloneDeep後之複本且其後只使用該複本;
1610
+ //不合格者為該筆失敗(ok為0附err, 同批其他筆照常), bads為逐筆訊息(合格者為null); 不隨autoGenPk改變
1611
+ let bads = chkWf(isarr(data) ? data : [data], opt.pk, false)
1612
+ let nOk = bads.filter((v) => v === null).length
1613
+
1614
+ //initSequelize, 內部自動初始化須在try內: 其例外(如驅動缺失)與si.err同屬整批性錯誤, 方能於reject前發出error事件, 已建構之sequelize亦由finally關閉; 全部不合格者無須連線
1615
+ if (instance === null && nOk > 0) {
1616
+ inited = true
1518
1617
  si = await initSequelize()
1519
1618
  }
1520
1619
 
1521
1620
  //check
1522
- if (si.err) {
1621
+ if (si !== null && si.err) {
1523
1622
  throw si.err
1524
1623
  }
1525
1624
 
1526
1625
  //md
1527
- let md = si.mds[opt.cl]
1626
+ let md = si === null ? null : si.mds[opt.cl]
1528
1627
 
1529
1628
  //check
1530
1629
  if (!isarr(data)) {
@@ -1532,11 +1631,23 @@ function WOrmReladb(opt = {}) {
1532
1631
  }
1533
1632
 
1534
1633
  //pmSeries
1535
- res = await pmSeries(data, async(v) => {
1634
+ res = await pmSeries(data, async(v, k) => {
1536
1635
 
1537
1636
  //rest
1538
1637
  let rest = null
1539
1638
 
1639
+ //check, 主鍵字串不合格之筆為該筆失敗: 不送查詢, 同批其他筆照常
1640
+ if (bads[k] !== null) {
1641
+ rest = {
1642
+ n: 0,
1643
+ nDeleted: 0,
1644
+ ok: 0,
1645
+ err: bads[k],
1646
+ }
1647
+ emitError('del', [v], rest.err)
1648
+ return rest
1649
+ }
1650
+
1540
1651
  //pkv
1541
1652
  let pkv = get(v, opt.pk)
1542
1653
 
@@ -1548,7 +1659,7 @@ function WOrmReladb(opt = {}) {
1548
1659
  n: 0,
1549
1660
  nDeleted: 0,
1550
1661
  ok: 0,
1551
- err: `invalid ${opt.pk}[${pkv}]`,
1662
+ err: `invalid data[${k}].${opt.pk}`,
1552
1663
  }
1553
1664
 
1554
1665
  //emit
@@ -1566,7 +1677,7 @@ function WOrmReladb(opt = {}) {
1566
1677
  n: 0,
1567
1678
  nDeleted: 0,
1568
1679
  ok: 0,
1569
- err: `invalid ${opt.pk}[${pkv}], type does not match pk column`,
1680
+ err: `invalid data[${k}].${opt.pk}, type does not match pk column`,
1570
1681
  }
1571
1682
 
1572
1683
  //emit
@@ -1632,7 +1743,7 @@ function WOrmReladb(opt = {}) {
1632
1743
  finally {
1633
1744
 
1634
1745
  //closeSequelize
1635
- if (instance === null) { //內部自動初始化得close
1746
+ if (instance === null && inited) { //內部自動初始化得close
1636
1747
  await closeSequelize('del')
1637
1748
  }
1638
1749
 
@@ -1889,6 +2000,24 @@ function WOrmReladb(opt = {}) {
1889
2000
  // return closeSequelize('external')
1890
2001
  // }
1891
2002
  ee.genTransaction = genTransaction
2003
+
2004
+
2005
+ //snap, 數據於呼叫當下即同步複製(R13): useStable時各函數經佇列延後執行(pmQueue於執行前delay), 若於函數內才複製,
2006
+ //呼叫端於呼叫後立即改動原數據(如重用同一陣列)會影響實際檢核與寫入之值; 函數內只使用此複本, 檢核與寫入皆作用於同一份複本
2007
+ //複製拋錯(如getter拋錯)與函數內之其他錯誤同為rejected promise
2008
+ let snap = (fn) => {
2009
+ return function(data, ...rest) {
2010
+ let d
2011
+ try {
2012
+ d = cloneDeep(data)
2013
+ }
2014
+ catch (err) {
2015
+ return Promise.reject(err)
2016
+ }
2017
+ return fn(d, ...rest)
2018
+ }
2019
+ }
2020
+
1892
2021
  if (opt.useStable) {
1893
2022
  //用佇列(同時最大執行數1且先進先執行)處理高併發之情形
1894
2023
  //若沒管控:
@@ -1900,18 +2029,18 @@ function WOrmReladb(opt = {}) {
1900
2029
  ee.selectByPk = function() {
1901
2030
  return pmq(selectByPk, ...arguments)
1902
2031
  }
1903
- ee.insert = function() {
1904
- return pmq(insert, ...arguments)
1905
- }
1906
- ee.insertBulk = function() {
1907
- return pmq(insertBulk, ...arguments)
1908
- }
1909
- ee.save = function() {
1910
- return pmq(save, ...arguments)
1911
- }
1912
- ee.del = function() {
1913
- return pmq(del, ...arguments)
1914
- }
2032
+ ee.insert = snap((...args) => {
2033
+ return pmq(insert, ...args)
2034
+ })
2035
+ ee.insertBulk = snap((...args) => {
2036
+ return pmq(insertBulk, ...args)
2037
+ })
2038
+ ee.save = snap((...args) => {
2039
+ return pmq(save, ...args)
2040
+ })
2041
+ ee.del = snap((...args) => {
2042
+ return pmq(del, ...args)
2043
+ })
1915
2044
  ee.delAll = function() {
1916
2045
  return pmq(delAll, ...arguments)
1917
2046
  }
@@ -1919,10 +2048,10 @@ function WOrmReladb(opt = {}) {
1919
2048
  else {
1920
2049
  ee.select = select
1921
2050
  ee.selectByPk = selectByPk
1922
- ee.insert = insert
1923
- ee.insertBulk = insertBulk
1924
- ee.save = save
1925
- ee.del = del
2051
+ ee.insert = snap(insert)
2052
+ ee.insertBulk = snap(insertBulk)
2053
+ ee.save = snap(save)
2054
+ ee.del = snap(del)
1926
2055
  ee.delAll = delAll
1927
2056
  }
1928
2057