Upload folder using huggingface_hub

.gitattributes

@@ -1,35 +1,5 @@
-*.7z filter=lfs diff=lfs merge=lfs -text
-*.arrow filter=lfs diff=lfs merge=lfs -text
+*.mlpackage filter=lfs diff=lfs merge=lfs -text
+*.mlpackage/** filter=lfs diff=lfs merge=lfs -text
+weights/** filter=lfs diff=lfs merge=lfs -text
 *.bin filter=lfs diff=lfs merge=lfs -text
-*.bz2 filter=lfs diff=lfs merge=lfs -text
-*.ckpt filter=lfs diff=lfs merge=lfs -text
-*.ftz filter=lfs diff=lfs merge=lfs -text
-*.gz filter=lfs diff=lfs merge=lfs -text
-*.h5 filter=lfs diff=lfs merge=lfs -text
-*.joblib filter=lfs diff=lfs merge=lfs -text
-*.lfs.* filter=lfs diff=lfs merge=lfs -text
-*.mlmodel filter=lfs diff=lfs merge=lfs -text
-*.model filter=lfs diff=lfs merge=lfs -text
-*.msgpack filter=lfs diff=lfs merge=lfs -text
-*.npy filter=lfs diff=lfs merge=lfs -text
-*.npz filter=lfs diff=lfs merge=lfs -text
-*.onnx filter=lfs diff=lfs merge=lfs -text
-*.ot filter=lfs diff=lfs merge=lfs -text
-*.parquet filter=lfs diff=lfs merge=lfs -text
-*.pb filter=lfs diff=lfs merge=lfs -text
-*.pickle filter=lfs diff=lfs merge=lfs -text
-*.pkl filter=lfs diff=lfs merge=lfs -text
-*.pt filter=lfs diff=lfs merge=lfs -text
-*.pth filter=lfs diff=lfs merge=lfs -text
-*.rar filter=lfs diff=lfs merge=lfs -text
-*.safetensors filter=lfs diff=lfs merge=lfs -text
-saved_model/**/* filter=lfs diff=lfs merge=lfs -text
-*.tar.* filter=lfs diff=lfs merge=lfs -text
-*.tar filter=lfs diff=lfs merge=lfs -text
-*.tflite filter=lfs diff=lfs merge=lfs -text
-*.tgz filter=lfs diff=lfs merge=lfs -text
-*.wasm filter=lfs diff=lfs merge=lfs -text
-*.xz filter=lfs diff=lfs merge=lfs -text
-*.zip filter=lfs diff=lfs merge=lfs -text
-*.zst filter=lfs diff=lfs merge=lfs -text
-*tfevents* filter=lfs diff=lfs merge=lfs -text
+*.nemo filter=lfs diff=lfs merge=lfs -text

README.md

@@ -0,0 +1,57 @@
+---
+license: cc-by-4.0
+language:
+  - en
+tags:
+  - asr
+  - speech
+  - coreml
+  - nemo
+  - parakeet
+  - nvidia
+  - int8-per-channel-symmetric
+library_name: coremltools
+pipeline_tag: automatic-speech-recognition
+---
+
+# parakeet-ctc-0.6b-vi-coreml-int8
+
+CoreML conversion of [nvidia/parakeet-ctc-0.6b-Vietnamese](https://huggingface.co/nvidia/parakeet-ctc-0.6b-Vietnamese) — INT8 PER CHANNEL SYMMETRIC quantized.
+
+| | |
+|---|---|
+| **Architecture** | CTC |
+| **Language** | English |
+| **Sample rate** | 16000 Hz |
+| **Max audio** | 15.0s |
+| **Vocab size** | 1024 |
+| **Framework** | NVIDIA NeMo → CoreML (coremltools) |
+
+## Components
+
+| File | Component | Best compute |
+|------|-----------|--------------|
+| `parakeet_mel_encoder.mlpackage` | mel_encoder | ANE / GPU |
+| `parakeet_ctc_decoder.mlpackage` | ctc_decoder | ANE / GPU |
+
+## Usage
+
+```bash
+pip install ovos-stt-plugin-coreml
+```
+
+```python
+from ovos_stt_plugin_coreml import CoremlSTT
+from ovos_plugin_manager.utils.audio import AudioFile
+
+stt = CoremlSTT(config={"metadata": "metadata.json"})
+
+with AudioFile("speech.wav") as f:
+    audio = f.read()
+print(stt.execute(audio))
+```
+
+## Source model
+
+[nvidia/parakeet-ctc-0.6b-Vietnamese](https://huggingface.co/nvidia/parakeet-ctc-0.6b-Vietnamese)
+

infer.py

@@ -0,0 +1,65 @@
+#!/usr/bin/env python3
+"""CTC inference with CoreML parakeet-ctc-0.6b-vi.
+
+Usage:  python infer.py audio.wav
+"""
+import json, sys
+from pathlib import Path
+
+import coremltools as ct
+import numpy as np
+import soundfile as sf
+
+REPO_DIR = Path(__file__).parent
+SAMPLE_RATE = 16_000
+
+def load_models(compute_units="ALL"):
+    cu_map = {"ALL": ct.ComputeUnit.ALL, "CPU_ONLY": ct.ComputeUnit.CPU_ONLY,
+               "CPU_AND_NE": ct.ComputeUnit.CPU_AND_NE}
+    cu = cu_map.get(compute_units.upper(), ct.ComputeUnit.ALL)
+    mel_enc  = ct.models.MLModel(str(REPO_DIR / "parakeet_mel_encoder.mlpackage"), compute_units=cu)
+    ctc_dec  = ct.models.MLModel(str(REPO_DIR / "parakeet_ctc_decoder.mlpackage"), compute_units=cu)
+    return mel_enc, ctc_dec
+
+def load_audio(path, max_samples):
+    data, sr = sf.read(path, dtype="float32", always_2d=False)
+    if sr != SAMPLE_RATE:
+        raise ValueError(f"Expected {SAMPLE_RATE} Hz, got {sr} Hz.")
+    if data.ndim > 1: data = data[:, 0]
+    actual = min(len(data), max_samples)
+    data = np.pad(data, (0, max(0, max_samples - len(data))))[:max_samples]
+    return data.reshape(1, -1).astype(np.float32), actual
+
+def decode_ctc(log_probs, vocab, blank_id):
+    ids = np.argmax(log_probs[0], axis=-1)
+    out, prev = [], None
+    for t in ids:
+        if t != blank_id and t != prev: out.append(int(t))
+        prev = t
+    return "".join(vocab[i] for i in out).replace("▁", " ").strip()
+
+def transcribe(audio_path, compute_units="ALL"):
+    meta   = json.loads((REPO_DIR / "metadata.json").read_text())
+    vocab  = json.loads((REPO_DIR / "vocab.json").read_text())
+    blank  = meta["blank_id"]
+    n      = meta["max_audio_samples"]
+
+    mel_enc, ctc_dec = load_models(compute_units)
+    audio, actual = load_audio(audio_path, n)
+    length = np.array([actual], dtype=np.int32)
+
+    enc_out   = mel_enc.predict({"audio_signal": audio, "audio_length": length})
+    encoder   = enc_out["encoder"]
+    enc_len   = int(enc_out["encoder_length"][0])
+    ctc_out   = ctc_dec.predict({"encoder": encoder[:, :, :enc_len]})
+    return decode_ctc(ctc_out["log_probs"], vocab, blank)
+
+if __name__ == "__main__":
+    args = sys.argv[1:]
+    if not args:
+        print("Usage: python infer.py <audio.wav> [--compute-units ALL|CPU_ONLY|CPU_AND_NE]")
+        sys.exit(1)
+    cu = "ALL"
+    if "--compute-units" in args:
+        cu = args[args.index("--compute-units") + 1]
+    print(transcribe(args[0], cu))

metadata.json

@@ -0,0 +1,59 @@
+{
+  "model_id": "nvidia/parakeet-ctc-0.6b-Vietnamese",
+  "model_type": "ctc",
+  "language": "",
+  "sample_rate": 16000,
+  "max_audio_seconds": 15.0,
+  "max_audio_samples": 240000,
+  "vocab_size": 1024,
+  "blank_id": 1024,
+  "checkpoint": {
+    "type": "pretrained",
+    "model_id": "nvidia/parakeet-ctc-0.6b-Vietnamese"
+  },
+  "coreml": {
+    "compute_precision": "FLOAT32",
+    "quantization": "int8_per_channel_symmetric"
+  },
+  "components": {
+    "mel_encoder": {
+      "path": "parakeet_mel_encoder.mlpackage",
+      "inputs": {
+        "audio_signal": [
+          1,
+          240000
+        ],
+        "audio_length": [
+          1
+        ]
+      },
+      "outputs": {
+        "encoder": [
+          1,
+          1024,
+          188
+        ],
+        "encoder_length": [
+          1
+        ]
+      }
+    },
+    "ctc_decoder": {
+      "path": "parakeet_ctc_decoder.mlpackage",
+      "inputs": {
+        "encoder": [
+          1,
+          1024,
+          188
+        ]
+      },
+      "outputs": {
+        "log_probs": [
+          1,
+          188,
+          1025
+        ]
+      }
+    }
+  }
+}

parakeet_ctc_decoder.mlpackage/Data/com.apple.CoreML/model.mlmodel

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:0f660ae82203e0667e5e43363df6b86d509fd2edeffa2bd3b8a2517ad7141e1b
+size 3344

parakeet_ctc_decoder.mlpackage/Data/com.apple.CoreML/weights/weight.bin

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:3eba4ca991c8077fce09ad9c16dc4d4568d48cce5f306ff8d6d42092fbce906b
+size 1055170

parakeet_ctc_decoder.mlpackage/Manifest.json

@@ -0,0 +1,18 @@
+{
+    "fileFormatVersion": "1.0.0",
+    "itemInfoEntries": {
+        "1055B8A7-8FA3-4D81-A808-F816C0A400BD": {
+            "author": "com.apple.CoreML",
+            "description": "CoreML Model Specification",
+            "name": "model.mlmodel",
+            "path": "com.apple.CoreML/model.mlmodel"
+        },
+        "72656408-531A-4090-BBE6-44181920F5E6": {
+            "author": "com.apple.CoreML",
+            "description": "CoreML Model Weights",
+            "name": "weights",
+            "path": "com.apple.CoreML/weights"
+        }
+    },
+    "rootModelIdentifier": "1055B8A7-8FA3-4D81-A808-F816C0A400BD"
+}

parakeet_mel_encoder.mlpackage/Data/com.apple.CoreML/model.mlmodel

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:8c6f3abdfed0f0e1508d6094cfefefe55d54bce4a0e2a893fa8b6f8545a08f99
+size 781887

parakeet_mel_encoder.mlpackage/Data/com.apple.CoreML/weights/weight.bin

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:030f3649bcb7d6eeddc4f14880d7764fc8005d5a8beb607d0bd6fde7c52bda33
+size 593885312

parakeet_mel_encoder.mlpackage/Manifest.json

@@ -0,0 +1,18 @@
+{
+    "fileFormatVersion": "1.0.0",
+    "itemInfoEntries": {
+        "52C341DA-8AFD-4367-BCC6-7081E3164B13": {
+            "author": "com.apple.CoreML",
+            "description": "CoreML Model Specification",
+            "name": "model.mlmodel",
+            "path": "com.apple.CoreML/model.mlmodel"
+        },
+        "BFFB66AC-0F25-425C-B92D-B57556B8452F": {
+            "author": "com.apple.CoreML",
+            "description": "CoreML Model Weights",
+            "name": "weights",
+            "path": "com.apple.CoreML/weights"
+        }
+    },
+    "rootModelIdentifier": "52C341DA-8AFD-4367-BCC6-7081E3164B13"
+}

quantization_summary.json

@@ -0,0 +1,12 @@
+{
+  "parakeet_ctc_decoder": {
+    "original_mb": 2.0,
+    "int8_mb": 1.0,
+    "compression": 1.99
+  },
+  "parakeet_mel_encoder": {
+    "original_mb": 1130.2,
+    "int8_mb": 567.1,
+    "compression": 1.99
+  }
+}

vocab.json

@@ -0,0 +1,1026 @@
+[
+  "<unk>",
+  "ng",
+  "▁t",
+  "▁c",
+  "▁đ",
+  "nh",
+  "▁.",
+  "▁l",
+  "▁th",
+  "▁m",
+  "▁v",
+  "▁ch",
+  "▁h",
+  "▁b",
+  "▁k",
+  "▁n",
+  "▁,",
+  "▁nh",
+  "▁s",
+  "▁tr",
+  "▁kh",
+  "▁ng",
+  "▁g",
+  "▁là",
+  "ông",
+  "▁p",
+  "▁ph",
+  "▁r",
+  "▁d",
+  "▁gi",
+  "ời",
+  "ên",
+  "▁cá",
+  "▁và",
+  "qu",
+  "▁qu",
+  "▁có",
+  "iệ",
+  "ột",
+  "▁không",
+  "ôi",
+  "iế",
+  "▁một",
+  "ới",
+  "ủa",
+  "▁của",
+  "▁T",
+  "▁x",
+  "ười",
+  "ượ",
+  "ình",
+  "ất",
+  "ại",
+  "▁C",
+  "▁N",
+  "uy",
+  "ày",
+  "ai",
+  "▁người",
+  "ong",
+  "anh",
+  "ược",
+  "ch",
+  "iề",
+  "▁được",
+  "▁nó",
+  "ững",
+  "ân",
+  "▁cho",
+  "ay",
+  "ấy",
+  "▁như",
+  "▁ngh",
+  "▁mà",
+  "▁tôi",
+  "ươ",
+  "ải",
+  "▁những",
+  "▁thì",
+  "ây",
+  "ao",
+  "▁đã",
+  "ần",
+  "▁cái",
+  "▁đó",
+  "▁đi",
+  "an",
+  "on",
+  "▁với",
+  "ướ",
+  "▁trong",
+  "▁các",
+  "iều",
+  "▁này",
+  "ũng",
+  "em",
+  "úng",
+  "ăm",
+  "ồi",
+  "ạn",
+  "▁anh",
+  "uố",
+  "iên",
+  "▁?",
+  "ác",
+  "▁V",
+  "▁ra",
+  "▁cũng",
+  "▁mình",
+  "▁để",
+  "▁ta",
+  "ến",
+  "▁con",
+  "ành",
+  "ước",
+  "ết",
+  "▁sẽ",
+  "ang",
+  "▁ở",
+  "▁làm",
+  "ương",
+  "▁lại",
+  "▁cả",
+  "inh",
+  "▁phải",
+  "ầu",
+  "▁thể",
+  "▁M",
+  "▁Đ",
+  "ườ",
+  "âu",
+  "iết",
+  "ường",
+  "▁em",
+  "▁họ",
+  "ận",
+  "▁về",
+  "ào",
+  "ức",
+  "▁H",
+  "ực",
+  "▁hai",
+  "▁đến",
+  "iện",
+  "au",
+  "▁ho",
+  "ằng",
+  "àn",
+  "▁nói",
+  "▁độ",
+  "ơn",
+  "àng",
+  "▁rồi",
+  "ài",
+  "ính",
+  "ật",
+  "▁gì",
+  "▁khi",
+  "▁Ch",
+  "iể",
+  "▁B",
+  "▁Nh",
+  "▁công",
+  "òn",
+  "▁bạn",
+  "▁từ",
+  "ưa",
+  "ăn",
+  "▁chúng",
+  "ống",
+  "ung",
+  "▁vào",
+  "ản",
+  "▁sự",
+  "ậy",
+  "ối",
+  "▁Th",
+  "ùng",
+  "iệc",
+  "iến",
+  "in",
+  "ữa",
+  "▁thế",
+  "ái",
+  "át",
+  "▁nhà",
+  "▁việc",
+  "▁nhiều",
+  "▁nào",
+  "▁ông",
+  "úc",
+  "▁biết",
+  "▁đầu",
+  "▁chỉ",
+  "ơi",
+  "▁K",
+  "▁Ng",
+  "▁thấy",
+  "ôn",
+  "▁năm",
+  "áng",
+  "▁L",
+  "▁còn",
+  "▁giờ",
+  "▁rất",
+  "ội",
+  "ăng",
+  "▁thành",
+  "êu",
+  "▁chuy",
+  "ồng",
+  "án",
+  "▁vậy",
+  "▁đây",
+  "▁Tr",
+  "ộc",
+  "ắc",
+  "eo",
+  "ục",
+  "▁bị",
+  "▁đị",
+  "am",
+  "ọi",
+  "iệt",
+  "ẫn",
+  "▁ba",
+  "ắt",
+  "ập",
+  "▁hơn",
+  "ươi",
+  "ện",
+  "▁lu",
+  "òng",
+  "ổi",
+  "ếu",
+  "▁tiế",
+  "▁trên",
+  "▁đề",
+  "▁đang",
+  "áo",
+  "uộc",
+  "ích",
+  "ánh",
+  "▁mươi",
+  "▁y",
+  "▁quan",
+  "ặt",
+  "▁nghĩ",
+  "▁ngày",
+  "▁sao",
+  "iền",
+  "ách",
+  "▁nhưng",
+  "▁S",
+  "âm",
+  "▁quy",
+  "▁chính",
+  "▁lên",
+  "▁mới",
+  "ìn",
+  "ưng",
+  "ấn",
+  "▁nên",
+  "▁Kh",
+  "▁nước",
+  "uốn",
+  "▁số",
+  "ỏi",
+  "▁điều",
+  "▁nhất",
+  "▁A",
+  "▁vì",
+  "▁chị",
+  "▁tư",
+  "▁cô",
+  "▁Tôi",
+  "▁nữa",
+  "▁rằng",
+  "▁học",
+  "ặc",
+  "▁bả",
+  "▁sau",
+  "▁nhân",
+  "▁khác",
+  "ạo",
+  "▁tại",
+  "▁hay",
+  "▁động",
+  "ám",
+  "ền",
+  "iểu",
+  "ốc",
+  "▁cách",
+  "▁hiện",
+  "▁theo",
+  "ởng",
+  "ứng",
+  "iệu",
+  "▁ấy",
+  "▁thời",
+  "▁muốn",
+  "▁định",
+  "▁qua",
+  "▁to",
+  "▁do",
+  "▁trước",
+  "▁tới",
+  "áp",
+  "▁đâu",
+  "▁trăm",
+  "▁thu",
+  "ốt",
+  "ượng",
+  "ạnh",
+  "êm",
+  "ấu",
+  "▁cùng",
+  "ấp",
+  "ọng",
+  "ốn",
+  "ạt",
+  "ừng",
+  "▁nay",
+  "▁gia",
+  "▁Nhưng",
+  "▁chuyện",
+  "▁tự",
+  "▁lo",
+  "▁hàng",
+  "▁thực",
+  "▁P",
+  "▁đồng",
+  "▁chí",
+  "▁Và",
+  "ỗi",
+  "▁cơ",
+  "▁nhận",
+  "▁lý",
+  "▁vẫn",
+  "▁kho",
+  "▁ý",
+  "▁ăn",
+  "ắn",
+  "▁mười",
+  "áu",
+  "▁cứ",
+  "▁cuộc",
+  "▁tin",
+  "ừa",
+  "▁lớ",
+  "ắng",
+  "▁quá",
+  "uống",
+  "▁thứ",
+  "▁Anh",
+  "▁bộ",
+  "▁hội",
+  "▁vị",
+  "▁cảm",
+  "ậu",
+  "▁thôi",
+  "▁mẹ",
+  "ia",
+  "▁mọi",
+  "ịch",
+  "▁cần",
+  "▁sống",
+  "▁chưa",
+  "▁hết",
+  "▁ngo",
+  "ắm",
+  "▁trường",
+  "iêu",
+  "▁D",
+  "▁dụ",
+  "▁bà",
+  "▁nghiệ",
+  "▁chú",
+  "ảng",
+  "▁tâm",
+  "▁mặt",
+  "▁tình",
+  "▁lúc",
+  "▁tiếp",
+  "ua",
+  "▁đối",
+  "▁luôn",
+  "▁tiền",
+  "ẳng",
+  "▁Ph",
+  "▁ai",
+  "ồn",
+  "▁nhau",
+  "uyên",
+  "ễn",
+  "en",
+  "▁Q",
+  "▁phát",
+  "ửa",
+  "▁bằng",
+  "▁quân",
+  "▁hình",
+  "▁hành",
+  "▁lớn",
+  "▁phần",
+  "ôm",
+  "▁dân",
+  "▁thường",
+  "ợp",
+  "ệnh",
+  "▁hỏi",
+  "▁sinh",
+  "óng",
+  "▁!",
+  "▁tu",
+  "▁điể",
+  "▁thông",
+  "▁nhiên",
+  "▁viên",
+  "ầm",
+  "▁chủ",
+  "ọn",
+  "▁hợp",
+  "ìm",
+  "▁bên",
+  "▁nếu",
+  "▁trở",
+  "▁Có",
+  "▁đường",
+  "▁bắt",
+  "▁bao",
+  "ướng",
+  "▁nhìn",
+  "ởi",
+  "▁cao",
+  "▁năng",
+  "▁lần",
+  "▁dự",
+  "▁bảo",
+  "▁điểm",
+  "▁đo",
+  "iển",
+  "▁câu",
+  "▁bản",
+  "▁xu",
+  "▁gian",
+  "▁đại",
+  "▁đều",
+  "ưởng",
+  "▁trình",
+  "▁kinh",
+  "▁nghe",
+  "▁tay",
+  "▁tổ",
+  "▁khó",
+  "▁quốc",
+  "▁đúng",
+  "ãy",
+  "▁tốt",
+  "ợi",
+  "▁dụng",
+  "ạng",
+  "▁lời",
+  "▁toàn",
+  "▁tìm",
+  "ển",
+  "▁thức",
+  "ạc",
+  "▁G",
+  "▁giá",
+  "▁trọng",
+  "▁thân",
+  "▁giới",
+  "▁thật",
+  "▁lực",
+  "ặp",
+  "▁giải",
+  "▁tế",
+  "▁trung",
+  "▁bây",
+  "▁vừa",
+  "▁chiến",
+  "▁chứ",
+  "▁Một",
+  "▁đội",
+  "▁đánh",
+  "▁cầu",
+  "▁Việt",
+  "▁kết",
+  "▁yêu",
+  "▁tuy",
+  "▁thủ",
+  "▁Không",
+  "▁tháng",
+  "ầy",
+  "▁Nam",
+  "▁phòng",
+  "▁bốn",
+  "▁hiểu",
+  "▁tính",
+  "▁tiếng",
+  "▁đấy",
+  "▁chín",
+  "▁nghìn",
+  "▁xin",
+  "▁quyết",
+  "▁má",
+  "▁E",
+  "▁vụ",
+  "▁vô",
+  "▁tất",
+  "▁sản",
+  "▁nghiệp",
+  "▁hôm",
+  "ảnh",
+  "▁thương",
+  "úp",
+  "▁đưa",
+  "ọc",
+  "▁phí",
+  "uốc",
+  "út",
+  "im",
+  "ạy",
+  "▁bệnh",
+  "▁ngoài",
+  "▁bất",
+  "▁giả",
+  "▁quả",
+  "ét",
+  "▁tập",
+  "▁gọi",
+  "▁thị",
+  "ít",
+  "▁lấy",
+  "ẩn",
+  "▁đất",
+  "▁tạo",
+  "▁trị",
+  "▁sáu",
+  "▁xem",
+  "▁bỏ",
+  "▁bu",
+  "▁di",
+  "▁tiên",
+  "iệm",
+  "▁gặp",
+  "▁phương",
+  "▁thích",
+  "ộng",
+  "▁sử",
+  "▁á",
+  "uyền",
+  "▁vấn",
+  "▁xuất",
+  "▁lượng",
+  "ép",
+  "▁Trong",
+  "iếu",
+  "▁sĩ",
+  "▁lắm",
+  "▁mấy",
+  "ạm",
+  "▁bình",
+  "▁liên",
+  "▁xuống",
+  "ạch",
+  "▁tác",
+  "▁sáng",
+  "▁nghĩa",
+  "▁tài",
+  "ảy",
+  "▁giúp",
+  "▁Em",
+  "ẩm",
+  "ảo",
+  "▁Nếu",
+  "ỉnh",
+  "ứa",
+  "▁kỳ",
+  "▁xe",
+  "▁tưởng",
+  "▁đời",
+  "▁khu",
+  "óc",
+  "▁cậu",
+  "uối",
+  "▁đổi",
+  "uyện",
+  "▁dư",
+  "▁đấu",
+  "iểm",
+  "▁nhỏ",
+  "▁hoặc",
+  "▁nơi",
+  "▁báo",
+  "▁cấp",
+  "▁mạnh",
+  "▁R",
+  "▁Chúng",
+  "▁hoàn",
+  "▁trả",
+  "▁biệt",
+  "▁tho",
+  "▁hệ",
+  "▁tiêu",
+  "▁chức",
+  "▁pháp",
+  "▁lòng",
+  "▁triển",
+  "▁tám",
+  "▁Nó",
+  "▁bảy",
+  "▁tử",
+  "▁Những",
+  "▁gh",
+  "▁tên",
+  "▁giáo",
+  "▁chết",
+  "▁gần",
+  "▁thống",
+  "▁mất",
+  "▁cố",
+  "ấm",
+  "iếm",
+  "▁an",
+  "ãi",
+  "▁đình",
+  "ắp",
+  "▁Ô",
+  "▁thêm",
+  "▁sức",
+  "▁tục",
+  "▁khách",
+  "ẹp",
+  "▁cổ",
+  "▁ảnh",
+  "ằm",
+  "▁chơi",
+  "▁đạo",
+  "▁ngay",
+  "▁hoá",
+  "▁văn",
+  "▁mày",
+  "▁thay",
+  "▁ơi",
+  "▁mắt",
+  "▁Ông",
+  "▁quyền",
+  "▁từng",
+  "▁mang",
+  "▁chu",
+  "▁doanh",
+  "ặng",
+  "▁chắc",
+  "▁Các",
+  "▁chẳng",
+  "▁vật",
+  "▁giữa",
+  "▁đủ",
+  "▁mua",
+  "▁tăng",
+  "▁bóng",
+  "▁sách",
+  "▁bác",
+  "▁phía",
+  "▁mỗi",
+  "▁trí",
+  "▁bé",
+  "▁bán",
+  "▁thần",
+  "▁quý",
+  "▁trời",
+  "▁bàn",
+  "▁vi",
+  "▁cảnh",
+  "▁địa",
+  "▁Khi",
+  "iếc",
+  "▁lã",
+  "oi",
+  "▁phố",
+  "▁Nga",
+  "▁xã",
+  "▁rõ",
+  "▁Cái",
+  "▁hiệu",
+  "▁trận",
+  "▁Mỹ",
+  "▁trẻ",
+  "ưu",
+  "▁lợi",
+  "ui",
+  "▁hả",
+  "▁Qu",
+  "▁lập",
+  "▁nha",
+  "▁hãy",
+  "▁nguyên",
+  "▁án",
+  "▁Con",
+  "▁minh",
+  "▁chất",
+  "▁chân",
+  "▁dùng",
+  "▁so",
+  "▁ban",
+  "▁dịch",
+  "▁kia",
+  "▁chịu",
+  "▁chạy",
+  "▁ạ",
+  "▁Gi",
+  "▁tỉnh",
+  "▁ty",
+  "▁đứng",
+  "▁loại",
+  "▁sở",
+  "▁càng",
+  "▁vực",
+  "▁tiến",
+  "▁dẫn",
+  "▁cửa",
+  "▁sợ",
+  "▁điện",
+  "▁chỗ",
+  "▁thi",
+  "ệt",
+  "▁dù",
+  "▁ngồi",
+  "▁sát",
+  "▁tranh",
+  "▁giống",
+  "▁bởi",
+  "▁đồ",
+  "▁X",
+  "▁diễn",
+  "▁nhớ",
+  "▁chuyển",
+  "▁vui",
+  "▁đứa",
+  "▁giao",
+  "▁đơn",
+  "▁xa",
+  "▁phụ",
+  "▁lâu",
+  "▁đặc",
+  "▁kiến",
+  "ar",
+  "er",
+  "▁ít",
+  "▁khỏi",
+  "▁Người",
+  "▁tuổi",
+  "▁bố",
+  "▁sang",
+  "êng",
+  "▁thằng",
+  "▁phẩm",
+  "▁chung",
+  "▁máy",
+  "▁chiếc",
+  "▁Là",
+  "ĩnh",
+  "▁thiết",
+  "��chọn",
+  "▁đẹp",
+  "▁cây",
+  "▁dài",
+  "▁mục",
+  "àu",
+  "▁giữ",
+  "▁Quốc",
+  "▁đông",
+  "▁đáng",
+  "▁hướng",
+  "▁cứu",
+  "▁hoạt",
+  "▁truyền",
+  "▁xác",
+  "▁đặt",
+  "uyễn",
+  "▁bài",
+  "▁lẽ",
+  "▁dễ",
+  "▁biến",
+  "▁tham",
+  "▁cuối",
+  "▁phục",
+  "ùa",
+  "▁chương",
+  "▁xong",
+  "ậm",
+  "▁dưới",
+  "ảm",
+  "▁kể",
+  "▁khiến",
+  "▁U",
+  "▁Trung",
+  "▁sai",
+  "▁chứng",
+  "▁vợ",
+  "▁đừng",
+  "▁Nguyễn",
+  "▁triệu",
+  "▁gái",
+  "▁nè",
+  "▁Còn",
+  "▁bước",
+  "▁coi",
+  "▁khả",
+  "▁luật",
+  "▁tương",
+  "▁tối",
+  "▁khoảng",
+  "iêng",
+  "▁chế",
+  "▁ngu",
+  "▁trưởng",
+  "▁tích",
+  "▁mở",
+  "▁tượng",
+  "▁khí",
+  "éo",
+  "▁quay",
+  "▁đá",
+  "▁thái",
+  "ựa",
+  "▁tức",
+  "▁à",
+  "ẩy",
+  "▁Vì",
+  "▁nghiệm",
+  "▁nổi",
+  "▁tao",
+  "▁Đây",
+  "▁thuộc",
+  "▁Mà",
+  "▁Tuy",
+  "▁mức",
+  "âng",
+  "▁nhiệm",
+  "▁thanh",
+  "▁Đó",
+  "▁tổng",
+  "▁nhanh",
+  "▁nữ",
+  "óm",
+  "▁chia",
+  "▁kiểm",
+  "▁vệ",
+  "▁ứng",
+  "▁đàn",
+  "▁yếu",
+  "▁xảy",
+  "▁chi",
+  "▁hồi",
+  "iềm",
+  "▁vài",
+  "▁vọng",
+  "▁đem",
+  "▁duy",
+  "▁phủ",
+  "▁lịch",
+  "ượt",
+  "▁chút",
+  "▁hạn",
+  "▁kế",
+  "▁cực",
+  "▁chồng",
+  "▁",
+  "n",
+  "h",
+  "t",
+  "i",
+  "c",
+  "g",
+  "a",
+  "m",
+  "đ",
+  "u",
+  "à",
+  "o",
+  "l",
+  ".",
+  "ư",
+  "r",
+  "y",
+  "v",
+  "á",
+  "ô",
+  "b",
+  "k",
+  ",",
+  "ó",
+  "p",
+  "s",
+  "ế",
+  "ì",
+  "ạ",
+  "ộ",
+  "ờ",
+  "ả",
+  "ấ",
+  "ê",
+  "ố",
+  "â",
+  "ớ",
+  "ệ",
+  "d",
+  "ề",
+  "ể",
+  "ơ",
+  "ủ",
+  "ậ",
+  "ợ",
+  "e",
+  "q",
+  "ầ",
+  "ú",
+  "ị",
+  "ữ",
+  "T",
+  "í",
+  "ă",
+  "x",
+  "ứ",
+  "ự",
+  "ọ",
+  "ồ",
+  "ã",
+  "ở",
+  "C",
+  "N",
+  "ắ",
+  "ừ",
+  "ò",
+  "ụ",
+  "ũ",
+  "ổ",
+  "ặ",
+  "ẽ",
+  "ù",
+  "?",
+  "V",
+  "ằ",
+  "M",
+  "Đ",
+  "ỉ",
+  "ỏ",
+  "H",
+  "ý",
+  "ử",
+  "ĩ",
+  "B",
+  "é",
+  "ỗ",
+  "ẫ",
+  "ẹ",
+  "K",
+  "L",
+  "ẩ",
+  "ễ",
+  "S",
+  "ẻ",
+  "A",
+  "è",
+  "P",
+  "ẳ",
+  "D",
+  "Q",
+  "õ",
+  "!",
+  "ỹ",
+  "ỡ",
+  "G",
+  "ỳ",
+  "E",
+  "R",
+  "ỷ",
+  "Ô",
+  "X",
+  "U",
+  "ẵ",
+  "f",
+  "I",
+  "Ở",
+  "Â",
+  "Á",
+  "Y",
+  "J",
+  "z",
+  "ỵ",
+  "F",
+  "O",
+  "w",
+  "W",
+  "Ấ",
+  "Ý",
+  "Ừ",
+  "j",
+  "Ă",
+  "Ờ",
+  "À",
+  "Z",
+  "Ả",
+  "Í",
+  "Ồ",
+  "Ơ",
+  "Ê",
+  "Ư",
+  "Ứ",
+  "Ú",
+  "Ố",
+  "Ớ",
+  "Ủ",
+  "É",
+  "Ẩ",
+  "Ắ",
+  "Ổ",
+  "Ỷ",
+  "Ù",
+  "Ế",
+  "Ỳ"
+]