Célközönség: Ez a műszaki összefoglaló olyan hardver termékmenedzsereknek, hangmérnököknek és OEM/ODM beszerzőknek szól, akik azt vizsgálják, hogy egy SmartReadingPen olvasótoll képes-e kiszűrni egy gyermek hangját társalgási távolságból (0,3–1,5 m) valós osztálytermi környezetben (55–75 dB SPL) anélkül, hogy a gyermeknek a szájához kellene tartania a tollat.
Egy 5 cm-re a szájtól tartott olvasótoll hangolása egyszerű feladat. Egy marker méretű, az asztalon laposan fekvő olvasótoll, amely kiszűri a kilencéves, 80 cm-re ülő gyermek suttogó „fordítsd spanyolra” kérését, miközben 28 osztálytársa beszélget a háttérben – ez egy közeltéri (far-field) audió probléma. A mikrofon-array, a nyalábformáló algoritmus és a zajszűrő feldolgozási lánc mindegyikének rendben kell lennie, különben a toll abban a pillanatban csődöt mond, amint a tanár abbahagyja a kézben tartását.
Ez a műszaki összefoglaló a 2-MEMS mikrofon-array-ről, a hang DSP-n futó nyalábformáló és utószűrő feldolgozási láncról, valamint arról az osztálytermi SNR tesztelési protokollról szól, amelyet minden olcsó olvasótollak szállítmány átvétele előtt érdemes lefuttatni.
1. A közeltéri probléma számokban
Egy 6 éves gyermek társalgási hangerővel beszélve 55 dB SPL hangot produkál 1 m távolságban. Mire ugyanez a hang eljut az asztalon laposan fekvő tollhoz, a szint 6 dB-t esik (inverz négyzetes törvény közelterében), plusz további 4 dB-t a tolltest diffrakciója és a PCB földsík okozta árnyékolás miatt, így körülbelül 45 dB SPL a MEMS membránnál.
A környezeti osztálytermi zaj – 28 gyermek, egyenként 55 dB SPL-en, inkoherensen összegződve, plusz egy 50 dB SPL-es szellőzés – 62 dB SPL a toll mögött. A jel-zaj viszony a mikrofon membránjánál ezért −17 dB, ami bármely egymembrános ASR-motor zajszintje alatt van.
A megoldás egy mikrofon array + nyalábformálás folyamat, amely a spektrális zajcsillapításra helyez térbeli szelektivitást.
2. A 2-MEMS array geometriája
referencia arrayünk két Knowles SPH0645HT4H-1 MEMS mikrofont használ a fő PCB felső oldalán, 24 mm távolságra egymástól a toll hossztengelye mentén. Mindkét mikrofon előrefelé néz (a felhasználó kezétől elfelé). A geometriát úgy választottuk meg, hogy maximalizálja a térbeli diszkriminációt a azimutsíkban (a toll hegyétől balra/jobbra), miközben az array elég kicsi marad ahhoz, hogy beleférjen egy 142 mm-es tollházba.
| Paraméter | Érték | Mérnöki indoklás |
|---|---|---|
| Mikrofon távolság | 24 mm | λ/2 7,2 kHz-en, elnyomja a térbeli aliasingot a beszédtartományban (300 Hz – 4 kHz) |
| Mintavételi frekvencia | 16 kHz | A 8 kHz-es Nyquist lefedi a beszédtartományt |
| Bitmélység | 24 bit | 106 dB dinamikatartomány, tartalék a 95 dB SPL csúcsokhoz |
| Iránykarakterisztika (egyenként) | Gömbirányú (omni) | Lehetővé teszi a késleltetés-összegzéses nyalábformálást fáziszavar nélkül |
| Érzékenységillesztés | ±1 dB | Szükséges a null-irányítás pontosságához |
A két mikrofon időben szinkronizált, eltérésük kisebb mint ±5 µs, amelyet közös PDM órajel biztosít. A hőmérsékletfüggő driftet a firmware 30 másodpercenként kompenzálja.
3. A nyalábformálási folyamat
A DSP folyamat 16 ms-os sztereó PDM audió kereteken fut, 10 ms-onként:
- PDM dekimatáció 16 kHz PCM-re
- Egyenfeszültség-levágó szűrő (IIR felüláteresztő 80 Hz-en, 2. rend)
- Késleltetés-kompenzáció — 3 mintás előzetes irányítási késleltetés alkalmazva az A mikrofonra
- Késleltetés-összegzéses nyalábformáló — A mikrofon késleltetése
Δt = (d · cos θ) / c, összeadva a B mikrofonnal, aholθbecslése GCC-PHAT (Generalized Cross-Correlation with Phase Transform) kereséssel a 0°–180° félgömbön - MVDR posztszűrő — Minimum Variance Distortionless Response adaptív szűrő, 32 együtthatós, 100 ms-enként frissül
- RNNoise spektrális kapu — neurális posztszűrő, 220 kB modell, elnyomja a fonémák közötti maradék zajt
- AGC — lásd TC-143
A feldolgozási lánc 38 ms végponttól végpontig terjedő késleltetést ad hozzá Q8 platformon, ami jócskán a 120 ms-os ASR kereten belül van.
4. Mért SNR és ASR szófelismerési pontosság
| Forgatókönyv | Környezeti SPL | Hang SPL 1 m-en | SNR egy mikrofonnal | SNR nyalábformálás után | WER (en-US) |
|---|---|---|---|---|---|
| Csendes hálószoba | 35 dB | 50 dB | +15 dB | +21 dB | 4,2% |
| Nappali TV-vel | 60 dB | 55 dB | −5 dB | +4 dB | 7,8% |
| Tanterem, 28 gyerek | 62 dB | 55 dB | −7 dB | +2 dB | 9,4% |
| Tanterem csoportmunka közben | 70 dB | 55 dB | −15 dB | −4 dB | 13,6% |
| Kinti játszótér | 68 dB | 60 dB | −8 dB | +1 dB | 11,2% |
A tipikus +6 dB nyalábformálási nyereség jelenti a különbséget egy használható és egy visszaküldött toll között. A „tanterem csoportmunka közben” forgatókönyvben az egy mikrofonos 24%-os WER 13,6%-ra csökken — éppen az alatt a 15%-os küszöb alatt, amely alatt az NLU szándékosztályozás még helyre tud állni.
5. Miért 2 mikrofon, nem 4 vagy 6?
Megvizsgáltuk a 4 és 6 mikrofonos lineáris tömböket. Az egyensúlyok:
| Tömb mérete | Tengelyirányú nyereség | Nulla mélysége | Oldalirányú felbontás | BOM költség | PCB szélesség |
|---|---|---|---|---|---|
| 1 mikrofon (alap) | 0 dB | 0 dB | Nincs | 0,40 $ | 8 mm |
| 2 mikrofon, 24 mm | +6 dB | −12 dB | 30° | 0,80 $ | 28 mm |
| 4 mikrofon, 60 mm | +9 dB | −18 dB | 15° | 1,60 $ | 64 mm |
| 6 mikrofon, 100 mm | +11 dB | −22 dB | 10° | 2,40 $ | 104 mm |
A 4 és 6 mikrofonos opciók hosszabb tollházat igényelnek, amely megtöri a gyerekek által megszokott „filctoll-szerű” formát. Három ipari formatervezési tanulmány után, amelyekben 240 gyermek vett részt a Sencseni K+F felhasználói testületünknél, a 2-mikrofonos elrendezést választottuk, mint az akusztikai teljesítmény és a forma ideális egyensúlyát.
Vásárlási tipp: Ha egy beszállító „professzionális nyalábformálást” állít egy mikrofonos tollról, kérdezzen rá a WER értékre 65 dB SPL környezeti zaj mellett. Egy spektrális utószűrés nélküli egy mikrofonos toll valós osztálytermi körülmények között 20% feletti WER értéket produkál, és megbukik a tesztelésen.
6. A GCC-PHAT iránybecslő
A nyalábformálónak tudnia kell, hol ül a gyermek. A GCC-PHAT algoritmus a két mikrofonjel keresztkorrelációját végzi a spektrumok kifehérítése után, éles csúcsot adva az érkezési időeltolódásnak megfelelő késleltetésnél. A csúcsot szöggé alakítjuk:
θ = arccos((τ · c) / d)
ahol a τ az időeltolódás, a c a hangsebesség (343 m/s), a d pedig a mikrofonok távolsága (0,024 m). A becslő a ±5° pontosságig oldja fel a szögeket a 0°–150° félgömbön, és 100 ms-onként frissül. Amikor a gyermek mozog az asztal körül, a nyalábformáló 100 ms-on belül átirányítja a nyalábot.
Egy 30 fős osztályban az algoritmusnak meg kell különböztetnie a célzott gyermeket a másik 29 beszélőtől. Az MVDR utószűrő ezt úgy kezeli, hogy a teljes kimeneti teljesítményt minimalizálja a célirányban érvényesülő egységnyi erősítés feltétele mellett, így automatikusan térbeli nullákat helyez el a leghangosabb zavaróforrásokon.
7. RNNoise: Az utolsó 4 dB
A térbeli szűrés után a maradvány zaj SNR értéke körülbelül −4 dB. A neurális utószűrő az Xiph.org RNNoise modelljének 220 kB-os portja, amelyet 60 óra osztálytermi és háztartási zajon képeztek ki. A frekvenciatartományban működik, binenkénti erősítési maszkot jelez előre 10 ms-onként.
| RNNoise szakasz | SNR a szakasz után | WER (en-US) |
|---|---|---|
| Nyalábformált hang | −4 dB | 13,6% |
| RNNoise után | +2 dB | 9,8% |
| AGC + ASR front-end után | +5 dB | 7,4% |
A kombinált feldolgozási lánc (beamforming + RNNoise + AGC) a „csoportmunka közbeni osztálytermi” WER értéket 24%-ról (egyetlen mikrofon) 7,4%-ra csökkenti, ami az osztálytermi használhatóság határán van, de nem kritikus szándékoknál (fordítás, keresés) elfogadható. Kritikus szándékoknál (set_volume, set_voice, szülői PIN) megerősítő kérdést írunk elő.
8. Energia- és késleltetési keret
A beamforming folyamat az audio DSP-n fut a wake-word KWS-sel egy időben, de egy másik feldolgozási szigeten. Energia és késleltetés:
| Fázis | Energia (mW) | Késleltetés (ms) |
|---|---|---|
| PDM rögzítés + dekimináció | 0,6 | 2 |
| GCC-PHAT DoA becslés | 0,4 | 4 |
| Késleltetés-és összeg beamformer | 0,7 | 3 |
| MVDR adaptív szűrő | 1,2 | 5 |
| RNNoise inferencia | 1,8 | 18 |
| AGC | 0,3 | 1 |
| Kimenet az ASR felé | n/a | 5 |
| Összesen | 5,0 mW | 38 ms |
Az 5 mW többlet a mindig aktív 2,4 mW KWS felett, összesen 7,4 mW aktív hallgatás közben. Egy T2 (2 500 mAh) akkumulátorral ez 14 óra készenléti hallgatási időt biztosít.
9. Ellenőrzési protokoll OEM vásárlók számára
5 lépéses átvételi teszt a távoli hangfelvételhez egy jelölt tollon:
- Csendes szoba WER 1 m távolságból, 50 dB SPL környezeti zaj, 200 wake-word kísérlet. Cél: ≥ 99% wake arány.
- TV 3 m távolságban teszt folyamatos TV-híradással 60 dB SPL-en, 100 hangparancs 1 m-ről. Cél: ≤ 2 téves elfogadás.
- Zsivajteszt 4 hangszórós zsivajjal 65 dB SPL-en, 100 parancs 1 m-ről. Cél: ≥ 90% parancsikeretességi arány.
- Suttogás teszt 0,5 m-ről, 40 dB SPL hang, 50 parancs. Cél: ≥ 90% parancsikeretességi arány.
- Mozgó célpont teszt a gyermek 0°-tól 90°-ig sétál 1 m távolságban, 30 parancs. Cél: ≥ 85% parancsikeretességi arány.
Ez ugyanaz az 5 teszt, amelyet belsőleg minden firmware-kiadáson futtatunk.
10. Testreszabás és ütemterv
Egy múzeumi ajándékbolt vagy légitársasági gyermek-szórakoztató telepítéshez szélesebb felvevő lebenyre lehet szükség (a gyerekek többnyire tengelyen kívül vannak). Három testreszabási szintet kínálunk:
| Szint | Nyaláb szélessége | Erősítés | NRE | Átfutási idő |
|---|---|---|---|---|
| Keskeny (alapértelmezett) | 30° | +6 dB | $0 | 0 hét |
| Széles | 60° | +4 dB | $2,400 | 3 hét |
| Irányfüggetlen (csak utószűrő) | 180° | +2 dB | $4,800 | 5 hét |
A 2027-es ütemterv hozzáadja a neurális nyalábformálást — egy 2 rétegű Conv-TasFormert, amelyet 1,2 M osztálytermi klipre tanítottak — amely +8 dB erősítést ad egy 2 mikrofonos tömbön, és az osztálytermi WER-t 6% alá csökkenti. Ez a szélesebb AI-integrációs ütemtervünk 2024-2026.
Kapcsolódó cikkek
- Olvasótoll ébresztőszó-érzékelés és mindig aktív hallgatás
- Olvasótoll MEMS mikrofon és zajszűrés
- Olvasótoll AGC és automatikus erősítésszabályozás
- Olvasótoll visszhangszűrés és AEC
- Olvasótoll zajelnyomás és RNNoise
- Olvasótoll felhasználási eset – állami iskolai körzet beszerzése
11. Gyártási & akusztikai tesztelési fegyelem
A 2-MEMS tömb, a GCC-PHAT nyalábformáló firmware, az MVDR adaptív szűrő és az RNNoise utószűrő minden B1, B2, F8, K7, KF1, L5, P2, Q6, Q8, T2 és Y6 egységbe integrálva van a sencseni Longhua és a dongguani Houjie gyártósorainkon, mindkettő ISO 9001 és ISO 14001 tanúsítvánnyal. A Knowles SPH0645HT4H-1 mikrofonokat egy Yamaha YSM20 pick-and-place sor ±0,15 mm pozicionálási tűréssel helyezi el; a ±1 dB érzékenységillesztést egységenként ellenőrzik az FCT akusztikai kamrában egy 94 dB SPL @ 1 kHz referencia ellenében. A nyalábformáló firmware bináris állományt ugyanazon az állomáson írják alá és flashelik; a végső sori padteszt egy kalibrált 1 kHz-es hangot játszik le −45° azimuthból, és ellenőrzi a +6 dB ± 0,8 dB tengelyirányú erősítést és a −12 dB ± 1,5 dB oldalsó nullhelyet. A napi átlagos teljesítmény 6,800 kész egység, csúcs műszakban 11,400 egység 2025 szeptemberében. Az első megfelelési arány 98,6% AQL II szinten (kritikus 0, fő 1,0, mellék 2,5). A standard gyártási átfutási idő 75 nap, vagy 45 nap gyorsított (12% díj, MOQ ≥ 10 000). A minta átfutási ideje 7 nap a request-a-quote.
12. Tanúsítványi lefedettség
Minden nyalábformálással felszerelt toll a célpiac tanúsítványi portfóliójával kerül szállításra: CE (RED/EMC/LVD), FCC Part 15, UKCA, EN 71-1/2/3, ASTM F963, CPSIA/CPC, RoHS, REACH, PSE (Japán), KC (Korea), GCC/SFDA (Szaúd-Arábia), SNI (Indonézia), NOM (Mexikó), INMETRO (Brazília), RCM (Ausztrália/Új-Zéland), NRCS LOA (Dél-Afrika), valamint ESMA/TIS (EAE/Thaiföld). Az akkumulátor-szállítás az alábbi szabványokat követi: UN38.3 + IEC 62133 + MSDS. Az adatvédelmi megfelelés az alábbi jogszabályok szerint dokumentált: GDPR, COPPA, PIPL, LGPD, Thailand PDPA, valamint California Prop 65. A távoli hangfelvételi feldolgozási folyamat nem tárol nyers hanganyagot a 10 ms-os beamforming gyűrűpufferen kívül, ami a legerősebb megfelelési érv a(z) iskolai körzetes beszerzés számára, amely ellenőrizhető COPPA- és GDPR-K adatminimalizálási bizonyítékot igényel. A 47 országot lefedő alapcsomagon túli új jogrendszerekre 800 dollár/helyszín áron készítünk friss dokumentációt, 15 munkanapos átfutással.
13. OEM árképzés és SKU-kompromisszumok
A távoli hangfelvételi beamforming a standard firmware-csomagban, gyári áron 3,80–14,50 dollár/egység áron szerepel a 11 SKU-n keresztül. Árkategóriák: a P2 (500 mAh, 4 MB NAND) belépő szinten, a B1/B2/F8/K7/KF1 középkategória 5,40–8,60 dollárért, az L5/P2/Q6 középkategória 7,20–10,40 dollárért, a Q8/T2/Y6 prémium kategória 11,80–14,50 dollárért. A 2 mikrofonos tömb BOM-költsége 0,80 dollár tollanként (0,40 dollár × 2 mikrofon) 10K MOQ mellett; a 4 mikrofonos fejlesztés a csúcskategóriás OEM programokhoz 1,60 dollár tollanként és 64 mm-es PCB-szélességet igényel (ami meghaladja a marker formátumot). Egyedi hangminták árazása: keskeny (30°) alapfelszereltség, széles (60°) 2 400 dollár NRE költséggel, 3 hetes átfutással, mindenirányú (180°) 4 800 dollár NRE költséggel, 5 hetes átfutással. MOQ-kategóriák: 500 egység semleges készlethez, 1 000 egyedi színhez, 3 000 egyedi szitanyomásos logóhoz, 5 000 teljes private labelhez kiskereskedelmi csomagolással. Fizetési feltételek: T/T 30/70, L/C látra szóló, OA visszatérő vásárlók számára, PayPal mintarendelésekhez. OEM/ODM távoli hangfelvételi program indításához küldje el a célzott SKU-keveréket, a három legfontosabb célpiacot és az elfogadási teszt preferenciáját (alap, széles vagy mindenirányú) ide: request-a-quote; mérnöki csapatunk egy munkanapon belül méretezett firmware-csomagot, egységköltség-listát és megfelelőségi dokumentumlistát küld vissza.
14. Belső validációs metrikák 47 000+ egységből
A 2023 óta 47 országban bevetett 47 000+ egység után a beamforming feldolgozási folyamat 28,6 millió beamformált hangkockát rögzített, P95 késleltetéssel 38 ms a Q8 platformon. A leggyakoribb kedvezőtlen helyszíni forgatókönyv a „csoportmunka az osztályteremben" 70 dB SPL mellett (az ügyfélszolgálati jegyek 41,2%-ában rögzítve), ezt követi a „TV 3 méterre teszt" (24,6%), a „zsivaj 65 dB SPL mellett" (18,4%) és a „kinti játszótér" (15,8%). A beamformer az esetek 92,4%-ában 10% WER alá áll vissza a csoportmunka-forgatókönyvekben az RNNoise utószűrés után. A firmware-verziótérkép a standard 86 kiadásos alap: B1/B2 2.4.7, F8 3.1.2, K7/KF1 1.9.5, L5 4.2.0, P2 2.0.3, Q6/Q8 3.3.1, T2/Y6 2.6.4. A akusztikus kapu téves aktiválásai (a spektrális kapu alatti TV-hang által okozott hamis elfogadások) a(z) F8 platformokon a v3.1.2 firmware-frissítés után 1,4%-ról 0,4%-raaz F8 platformokon a v3.1.2-es firmware-frissítés után.
15. Mérnöki beszerzői tanulságok
Öt ökölszabály az OEM/ODM nagy hatótávolságú hangfelvétel beszerzéséhez:
- Mindig futtassa le a 5 lépéses átvételi tesztet a §9 részben, mielőtt aláírja a keret-megrendelést. A próbaüzem adatai felülmúlják bármely referencia-teszteredményt, mert rögzítik az Ön valós zajszintjét és a gyermekhangok valós eloszlását.
- Adja meg a nyaláb szélességét a firmware véglegesítésekor. Keskeny (30°) asztalhoz kötött tanteremhez; széles (60°) kiskereskedelmi/utazási célokra; mindenirányú (180°) csak múzeumi/légitársasági telepítésekhez, ahol a tengelyen kívüli hangfelvétel dominál.
- Tartson fenn 3 hetet a széles nyalábú változathoz és 5 hetet a mindenirányú változathoz. Az MVDR utószűrő újratanítása a hosszabb szakasz.
- Tervezzen 5%-os kanári OTA csoporttal a 2027-es neurális nyalábformáló (Conv-TasFormer) bevezetésekor. A kanári csoport kiszűri a regressziót a peremhelyzeti tantermekben, mielőtt az a teljes flottát elérné.
- A nagy hatótávolságú hangfelvételt mindig párosítsa az AGC folyamatlánccal — AGC nélkül a +6 dB nyalábformálási erősítés már beszélgetés-hangerőnél is túlvezérelheti az ASR front-endet.