@indodev/toolkit 0.2.0 → 0.3.0

package/dist/text/index.cjs

@@ -450,6 +450,741 @@ var ABBREVIATIONS = {
   "m3.": "meter kubik",
   "ha.": "hektar"
 };
+var PROFANITY = [
+  "anjing",
+  "babi",
+  "bangsat",
+  "bajingan",
+  "brengsek",
+  "goblok",
+  "tolol",
+  "idiot",
+  "perek",
+  "jablay",
+  "kontol",
+  "memek",
+  "ngewe",
+  "puki",
+  "jembut",
+  "asu",
+  "itil",
+  "lanjiao",
+  "pantek",
+  "anying",
+  "anjrit"
+];
+var STOPWORDS = [
+  "ada",
+  "adalah",
+  "adanya",
+  "adapun",
+  "agak",
+  "agaknya",
+  "agar",
+  "akan",
+  "akankah",
+  "akhir",
+  "akhiri",
+  "akhirnya",
+  "aku",
+  "akulah",
+  "amat",
+  "amatlah",
+  "anda",
+  "andalah",
+  "antar",
+  "antara",
+  "antaranya",
+  "apa",
+  "apaan",
+  "apabila",
+  "apakah",
+  "apalagi",
+  "apatah",
+  "artinya",
+  "asal",
+  "asalkan",
+  "atas",
+  "atau",
+  "ataukah",
+  "ataupun",
+  "awal",
+  "awalnya",
+  "bagai",
+  "bagaikan",
+  "bagaimana",
+  "bagaimanakah",
+  "bagaimanapun",
+  "bagi",
+  "bagian",
+  "bahkan",
+  "bahwa",
+  "bahwasanya",
+  "baik",
+  "bakal",
+  "bakalan",
+  "balik",
+  "banyak",
+  "bapak",
+  "baru",
+  "bawah",
+  "beberapa",
+  "begini",
+  "beginian",
+  "beginikah",
+  "beginilah",
+  "begitu",
+  "begitukah",
+  "begitulah",
+  "begitupun",
+  "bekerja",
+  "belakang",
+  "belakangan",
+  "belum",
+  "belumlah",
+  "benar",
+  "benarkah",
+  "benarlah",
+  "berada",
+  "berakhir",
+  "berakhirlah",
+  "berakhirnya",
+  "berapa",
+  "berapakah",
+  "berapalah",
+  "berapapun",
+  "berarti",
+  "berawal",
+  "berbagai",
+  "berikut",
+  "berikutnya",
+  "berjumlah",
+  "berkali-kali",
+  "berkata",
+  "berkeinginan",
+  "berkenaan",
+  "berlainan",
+  "berlalu",
+  "berlangsung",
+  "berlebihan",
+  "bermacam",
+  "bermacam-macam",
+  "bermaksud",
+  "bermula",
+  "bersama",
+  "bersama-sama",
+  "bersiap",
+  "bersiap-siap",
+  "bertanya",
+  "bertanya-tanya",
+  "berturut",
+  "berturut-turut",
+  "bertutur",
+  "berujar",
+  "berupa",
+  "besar",
+  "betul",
+  "betulkah",
+  "biasa",
+  "biasanya",
+  "bila",
+  "bilakah",
+  "bisa",
+  "bisakah",
+  "boleh",
+  "bolehkah",
+  "bolehlah",
+  "buat",
+  "bukan",
+  "bukankah",
+  "bukanlah",
+  "bukannya",
+  "bulan",
+  "bung",
+  "cara",
+  "caranya",
+  "cukup",
+  "cukupkah",
+  "cukuplah",
+  "cuma",
+  "dahulu",
+  "dalam",
+  "dan",
+  "dapat",
+  "dari",
+  "daripada",
+  "datang",
+  "dekat",
+  "demi",
+  "demikian",
+  "demikianlah",
+  "dengan",
+  "depan",
+  "di",
+  "dia",
+  "diakhiri",
+  "diakhirinya",
+  "dialah",
+  "diantara",
+  "diantaranya",
+  "diberi",
+  "diberikan",
+  "diberikannya",
+  "dibuat",
+  "dibuatnya",
+  "didapat",
+  "didatangkan",
+  "digunakan",
+  "diibaratkan",
+  "diingat",
+  "diingatkan",
+  "diinginkan",
+  "dijawab",
+  "dijelaskan",
+  "dijelaskannya",
+  "dikarenakan",
+  "dikatakan",
+  "dikatakannya",
+  "dikerjakan",
+  "diketahui",
+  "diketahuinya",
+  "dikira",
+  "dilakukan",
+  "dilalui",
+  "dilihat",
+  "dimaksud",
+  "dimaksudkan",
+  "dimaksudkannya",
+  "dimana",
+  "dimanalah",
+  "dimulai",
+  "dimulailah",
+  "dimulainya",
+  "diminta",
+  "dimintai",
+  "dimisalkan",
+  "dimungkinkan",
+  "dini",
+  "dipastikan",
+  "diperbuat",
+  "diperbuatnya",
+  "dipergunakan",
+  "diperkirakan",
+  "diperlihatkan",
+  "diperlukan",
+  "diperlukannya",
+  "dipersoalkan",
+  "dipertanyakan",
+  "dipunyai",
+  "diri",
+  "dirinya",
+  "disampaikan",
+  "disebut",
+  "disebutkan",
+  "disebutkannya",
+  "disini",
+  "disinilah",
+  "disitulah",
+  "diterangkan",
+  "diterangkannya",
+  "diteruskan",
+  "ditujukan",
+  "ditunjuk",
+  "ditunjuki",
+  "ditunjukkan",
+  "ditunjukkannya",
+  "ditunjuknya",
+  "dituturkan",
+  "dituturkannya",
+  "diucapkan",
+  "diucapkannya",
+  "diungkapkan",
+  "dua",
+  "dulu",
+  "empat",
+  "enggak",
+  "enggaknya",
+  "entah",
+  "entahlah",
+  "guna",
+  "gunakan",
+  "hal",
+  "hampir",
+  "hanya",
+  "hanyalah",
+  "hari",
+  "harus",
+  "haruslah",
+  "harusnya",
+  "hendak",
+  "hendaklah",
+  "hendaknya",
+  "hingga",
+  "ia",
+  "ialah",
+  "ibarat",
+  "ibaratkan",
+  "ibaratnya",
+  "ibu",
+  "ikut",
+  "ingat",
+  "ingat-ingat",
+  "ingin",
+  "inginkah",
+  "inginkan",
+  "ini",
+  "inikah",
+  "inilah",
+  "itu",
+  "itukah",
+  "itulah",
+  "jadi",
+  "jadilah",
+  "jadinya",
+  "jangan",
+  "jangankan",
+  "janganlah",
+  "jauh",
+  "jawab",
+  "jawaban",
+  "jawabnya",
+  "jelas",
+  "jelaskan",
+  "jelaslah",
+  "jelasnya",
+  "jika",
+  "jikalau",
+  "juga",
+  "jumlah",
+  "jumlahnya",
+  "justru",
+  "kala",
+  "kalau",
+  "kalaulah",
+  "kalaupun",
+  "kali",
+  "kalian",
+  "kami",
+  "kamilah",
+  "kamu",
+  "kamulah",
+  "kan",
+  "kapan",
+  "kapankah",
+  "kapanpun",
+  "karena",
+  "karenanya",
+  "ke",
+  "keadaan",
+  "kebetulan",
+  "kecil",
+  "kedua",
+  "keduanya",
+  "keinginan",
+  "kelak",
+  "kelihatan",
+  "kelihatannya",
+  "kelima",
+  "keluar",
+  "kembali",
+  "kemudian",
+  "kemungkinan",
+  "kemungkinannya",
+  "kenapa",
+  "kepada",
+  "kepadanya",
+  "kesampaian",
+  "keseluruhan",
+  "keseluruhannya",
+  "keterlaluan",
+  "ketika",
+  "khususnya",
+  "kini",
+  "kinilah",
+  "kira",
+  "kira-kira",
+  "kiranya",
+  "kita",
+  "kitalah",
+  "kok",
+  "kurang",
+  "lagi",
+  "lagian",
+  "lah",
+  "lain",
+  "lainnya",
+  "lalu",
+  "lama",
+  "lamanya",
+  "lanjut",
+  "lanjutnya",
+  "lebih",
+  "lewat",
+  "luar",
+  "macam",
+  "maka",
+  "makanya",
+  "makin",
+  "malah",
+  "malahan",
+  "mampu",
+  "mampukah",
+  "mana",
+  "manakala",
+  "manalagi",
+  "masih",
+  "masihkah",
+  "masing",
+  "masing-masing",
+  "mau",
+  "maupun",
+  "melainkan",
+  "melakukan",
+  "melalui",
+  "melihat",
+  "melihatnya",
+  "memang",
+  "memastikan",
+  "memberi",
+  "memberikan",
+  "membuat",
+  "memerlukan",
+  "memihak",
+  "meminta",
+  "memisalkan",
+  "memperbuat",
+  "mempergunakan",
+  "memperkirakan",
+  "memperlihatkan",
+  "mempersiapkan",
+  "mempersoalkan",
+  "mempertanyakan",
+  "mempunyai",
+  "memulai",
+  "memungkinkan",
+  "memutuskan",
+  "menanti",
+  "menanti-nanti",
+  "menantikan",
+  "menunjuk",
+  "menunjuknya",
+  "menuju",
+  "menurut",
+  "menurutnya",
+  "menurutmu",
+  "menurutku",
+  "menurutnya",
+  "menurut mereka",
+  "menyampaikan",
+  "menyebut",
+  "menyebutkan",
+  "menjelaskan",
+  "menjadi",
+  "menjadikan",
+  "menjalani",
+  "menjelang",
+  "menjawab",
+  "menunjukkan",
+  "menuangkan",
+  "menulis",
+  "menyatakan",
+  "merupakan",
+  "mereka",
+  "merekalah",
+  "meski",
+  "meskipun",
+  "mula",
+  "mulai",
+  "mulailah",
+  "mulanya",
+  "mungkin",
+  "mungkinkah",
+  "nah",
+  "naik",
+  "namun",
+  "nanti",
+  "nantinya",
+  "nyaris",
+  "oleh",
+  "olehnya",
+  "orang",
+  "pada",
+  "padahal",
+  "padanya",
+  "pakai",
+  "paling",
+  "panjang",
+  "pantas",
+  "para",
+  "pasti",
+  "pastilah",
+  "pagi",
+  "per",
+  "pernah",
+  "persoalan",
+  "pertama",
+  "pertama-tama",
+  "perlu",
+  "perlukah",
+  "perlulah",
+  "pernah",
+  "pihak",
+  "pihaknya",
+  "pukul",
+  "pula",
+  "pun",
+  "punya",
+  "rasa",
+  "rasanya",
+  "rata",
+  "rupanya",
+  "saat",
+  "saatnya",
+  "saja",
+  "sajalah",
+  "salam",
+  "saling",
+  "sama",
+  "sama-sama",
+  "sambil",
+  "sampai",
+  "sampai-sampai",
+  "sampaikan",
+  "sana",
+  "sangat",
+  "sangatlah",
+  "satu",
+  "saya",
+  "sayalah",
+  "sayang",
+  "seperti",
+  "seperti-itu",
+  "sepura",
+  "sebab",
+  "sebabnya",
+  "sebagai",
+  "sebagaimana",
+  "sebagainya",
+  "sebagian",
+  "sebaik",
+  "sebaik-baiknya",
+  "sebaiknya",
+  "sebaliknya",
+  "sebanyak",
+  "sebegini",
+  "sebegitu",
+  "sebelum",
+  "sebelumnya",
+  "sebenarnya",
+  "seberapa",
+  "sebesar",
+  "sebetulnya",
+  "sebisanya",
+  "sebuah",
+  "sebut",
+  "sebutkan",
+  "sebutnya",
+  "secara",
+  "secukupnya",
+  "sedang",
+  "sedangkan",
+  "sedikit",
+  "sedikitnya",
+  "sedemikian",
+  "sediakala",
+  "sedikit",
+  "sedikitnya",
+  "segala",
+  "segalanya",
+  "segera",
+  "seharusnya",
+  "sehingga",
+  "seingat",
+  "sejak",
+  "sejauh",
+  "sejenak",
+  "sejumlah",
+  "sekali",
+  "sekali-kali",
+  "sekalian",
+  "sekaligus",
+  "sekalipun",
+  "sekarang",
+  "sekaranglah",
+  "sekecil",
+  "seketika",
+  "sekiranya",
+  "sekitar",
+  "sekitarnya",
+  "sekurang",
+  "sekurangnya",
+  "sela",
+  "selalu",
+  "selama",
+  "selama-lamanya",
+  "selamanya",
+  "selanjutnya",
+  "seluruh",
+  "seluruhnya",
+  "semacam",
+  "semakin",
+  "semampu",
+  "semampunya",
+  "semasa",
+  "semata",
+  "semata-mata",
+  "semaunya",
+  "sementara",
+  "semisal",
+  "semisalnya",
+  "sempat",
+  "semua",
+  "semuanya",
+  "semula",
+  "sendiri",
+  "sendirinya",
+  "seolah",
+  "seolah-olah",
+  "seorang",
+  "sepanjang",
+  "sepantasnya",
+  "sepantasnyalah",
+  "seperempat",
+  "seperti",
+  "sepertinya",
+  "sepihak",
+  "sepuluh",
+  "seratus",
+  "seribu",
+  "sering",
+  "seringnya",
+  "serta",
+  "serupa",
+  "sesaat",
+  "sesama",
+  "sesampai",
+  "sesampainya",
+  "sesegera",
+  "sesekali",
+  "seseorang",
+  "sesuatu",
+  "sesuatunya",
+  "sesudah",
+  "sesudahnya",
+  "setelah",
+  "setempat",
+  "setengah",
+  "seterusnya",
+  "setiap",
+  "setidaknya",
+  "setinggi",
+  "seusai",
+  "sewaktu",
+  "siap",
+  "siapa",
+  "siapakah",
+  "siapapun",
+  "sini",
+  "sinilah",
+  "situ",
+  "situlah",
+  "suatu",
+  "sudah",
+  "sudahkah",
+  "sudahlah",
+  "supaya",
+  "tadi",
+  "tadinya",
+  "tahu",
+  "tak",
+  "tambah",
+  "tambahnya",
+  "tampak",
+  "tampaknya",
+  "tandas",
+  "tandasnya",
+  "tanpa",
+  "tanya",
+  "tanyakan",
+  "tanyanya",
+  "tapi",
+  "tegas",
+  "tegasnya",
+  "telah",
+  "tempat",
+  "tengah",
+  "tentang",
+  "tentu",
+  "tentulah",
+  "tentunya",
+  "tepat",
+  "terakhir",
+  "terasa",
+  "terbanyak",
+  "terdahulu",
+  "terdapat",
+  "terdiri",
+  "terdiri-dari",
+  "terhadap",
+  "terhadapnya",
+  "teringat",
+  "teringat-ingat",
+  "terjadi",
+  "terjadilah",
+  "terjadinya",
+  "terkira",
+  "terlalu",
+  "terlebih",
+  "terlihat",
+  "termasuk",
+  "ternyata",
+  "tersampaikan",
+  "tersebut",
+  "tersebutlah",
+  "tertentu",
+  "tertuju",
+  "terus",
+  "terutama",
+  "tetap",
+  "tetapi",
+  "tiap",
+  "tiba",
+  "tiba-tiba",
+  "tidak",
+  "tidakkah",
+  "tidaklah",
+  "tiga",
+  "tadi",
+  "tadinya",
+  "tinggi",
+  "toh",
+  "tuju",
+  "tunjuk",
+  "turut",
+  "tutur",
+  "tuturnya",
+  "ucap",
+  "ucapnya",
+  "ujar",
+  "ujarnya",
+  "umumnya",
+  "ungkap",
+  "ungkapnya",
+  "untuk",
+  "untaian",
+  "usai",
+  "usah",
+  "waduh",
+  "wah",
+  "wahai",
+  "walau",
+  "walaupun",
+  "wong",
+  "yaitu",
+  "yakin",
+  "yakni",
+  "yang"
+];
 
 // src/text/capitalization.ts
 function capitalize(text) {
@@ -787,6 +1522,78 @@ function contractAbbreviation(text, options) {
   return result;
 }
 
+// src/text/filter.ts
+function profanityFilter(text, mask = "*") {
+  let filtered = text;
+  PROFANITY.forEach((word) => {
+    const regex = new RegExp(`\\b${word}\\b`, "gi");
+    filtered = filtered.replace(regex, mask.repeat(word.length));
+  });
+  return filtered;
+}
+function removeStopwords(text) {
+  const words = text.split(/\s+/);
+  const filtered = words.filter(
+    (word) => !STOPWORDS.includes(word.toLowerCase())
+  );
+  return filtered.join(" ");
+}
+
+// src/text/normalization.ts
+var INFORMAL_MAP = {
+  gw: "saya",
+  gua: "saya",
+  lu: "kamu",
+  lo: "kamu",
+  elo: "kamu",
+  lagi: "sedang",
+  gue: "saya",
+  gwe: "saya",
+  gak: "tidak",
+  ga: "tidak",
+  nggak: "tidak",
+  kalo: "kalau",
+  karna: "karena",
+  tapi: "tetapi",
+  udah: "sudah",
+  dah: "sudah",
+  aja: "saja",
+  banget: "sekali",
+  emang: "memang",
+  pake: "pakai",
+  bikin: "membuat",
+  kasih: "memberi",
+  dapet: "dapat",
+  liat: "lihat",
+  ngasih: "memberi",
+  nyari: "mencari",
+  nanya: "bertanya",
+  bilang: "berkata"
+};
+function toFormal(text) {
+  const words = text.split(/\s+/);
+  const formalized = words.map((word) => {
+    const lower = word.toLowerCase().replace(/[^\w]/g, "");
+    const formal = INFORMAL_MAP[lower];
+    if (formal) {
+      if (word[0] === word[0].toUpperCase()) {
+        return formal.charAt(0).toUpperCase() + formal.slice(1);
+      }
+      return formal;
+    }
+    return word;
+  });
+  return formalized.join(" ");
+}
+function isAlay(text) {
+  if (!text) return false;
+  const alternatingCaps = /([a-z][A-Z][a-z]|[A-Z][a-z][A-Z])/.test(text);
+  const numberSub = /\b\w*[0431572]\w*\b/.test(text);
+  const qSub = /q/i.test(text) && !/u/i.test(text);
+  const excessiveChars = /(.)\1{2,}/.test(text);
+  return alternatingCaps || numberSub || qSub || excessiveChars;
+}
+
 // src/text/extract.ts
 function truncate(text, maxLength, options) {
   if (!text || maxLength <= 0) {
@@ -903,11 +1710,15 @@ exports.compareStrings = compareStrings;
 exports.contractAbbreviation = contractAbbreviation;
 exports.expandAbbreviation = expandAbbreviation;
 exports.extractWords = extractWords;
+exports.isAlay = isAlay;
 exports.normalizeWhitespace = normalizeWhitespace;
+exports.profanityFilter = profanityFilter;
 exports.removeAccents = removeAccents;
+exports.removeStopwords = removeStopwords;
 exports.sanitize = sanitize;
 exports.similarity = similarity;
 exports.slugify = slugify;
+exports.toFormal = toFormal;
 exports.toSentenceCase = toSentenceCase;
 exports.toTitleCase = toTitleCase;
 exports.truncate = truncate;