Hogyan valósítanak meg az OEM/ODM olvasótollak eszközön futó párbeszédkezelést: állapotkövetés, szabályrendszer, többfordulós koherencia, késleltetés, és mit kell a vevőknek a próbaüzem során ellenőrizniük.

Közzétéve: júl. 22, 2020 - 155 Megtekintések

Beszélgetésalapú AI és párbeszédkezelés az olvasótollakban: Hogyan maradnak koherensek az OEM hangasszisztensek

Célközönség: Ez a cikk az ed-tech vállalatok, kiadók és importőrök műszaki termékfelelőseinek szól, akik egy SmartReadingPen OEM\/ODM olvasótoll többfordulós hangalapú élményét értékelik – különösen azt, hogy a toll legalább 5 fordulón át képes-e koherens beszélgetést fenntartani a kontextus elvesztése nélkül, és hogy a párbeszédkezelési döntések hogyan hatnak az osztálytermi eredményekre és az egységköltségre.

Az olvasótoll már nem egy egyszerű „koppints és hallgasd” eszköz. A Q6, Q8 és T2 firmware-eken (3.3.1 \/ 3.3.1 \/ 2.6.4 sorrendben) a tanuló a következőket mondhatja:

„Mit jelent a fotoszintézis?” → a toll meghatározza. „Tudnál példát is mondani?” → a toll a kiválasztott könyvből egy kontextusba illő mondatot olvas fel. „Kérdezz fel róla!” → a toll felépít egy feleletválasztós kérdést. „Tedd egyszerűbbé!” → a toll 4. osztályos szókincsre vált. „Olvasd hangosan a választ!” → a TTS felolvassa a helyes opciót.

Öt forduló, négy kontextusváltás, egy tartós párbeszédállapot. Ha a párbeszédkezelő rosszul működik, a toll a harmadik fordulót úgy válaszolja meg, mintha az lenne az első. Ha jól, ugyanez a toll 35%-os kiskereskedelmi felárat indokol az egyfordulós versenytársakhoz képest.

Ez a mérnöki áttekintés a párbeszédkezelő rendszerünkről szól – az állapotkövetőről, a policy hálózatról, a tartalék szabályokról és azokról a pontos elfogadási kritériumokról, amelyeket egy iskolai körzeti pilotprogramhoz átadunk.

1. Miért más a párbeszédkezelés, mint az NLU

Az NLU szándékosztályozás azt dönti el, mit mondott a felhasználó. A párbeszédkezelés pedig azt, mit tegyen a rendszer a következő lépésben adott (a) aktuális NLU-kimenet, (b) az előző fordulók, (c) az eszköz állapota (aktuális könyv, aktuális nyelv, aktuális évfolyam) és (d) a felhasználói profil (olvasási szint, diszlexiás akadálymentesítési jelzés) mellett.

Az olvasótoll párbeszédkezelőjének teljes egészében az eszközön kell futnia. Három oka van:

  • Késleltetés. A felhőbe irányított 5 fordulós beszélgetés fordulónként 250–600 ms-t ad hozzá a 200 ms-os NLU-késleltetéshez, átlépve a 350 ms-os plafont.
  • Adatvédelem. A kiskorúak beszéde a COPPA, GDPR-K, PIPL és az LGPD szerint nem juthat el harmadik fél felhőjéhez kifejezett, ellenőrizhető hozzájárulás nélkül.
  • Offline ellenállóképesség. Egy 12 000 darabos iskolai bevezetés egy brazil állami iskolában nem támaszkodhat a tanterem Wi-Fi-jére.

2. A háromrétegű párbeszéd-architektúra

A firmware-ünk egy rétegzett párbeszédkezelőt futtat, amelyet RDM-DM (Reading-pen Dialogue Manager) néven hívunk:

Réteg Funkció Méret a NAND-on Késleltetés (Q8)
Dialogue State Tracker (DST) 24 párbeszédrés feleti hiedelemállapot fenntartása 3,4 MB INT8 14 ms
Policy Network Állapot → rendszerművelet leképezés 4,1 MB INT8 11 ms
Response Generator TTS-sablon kiválasztása vagy SQL összeállítása 0 (sablonok) 6 ms

A DST egy rekurrens BERT-small enkóder slot-szintű pointer hálózattal. A policy egy 2 rétegű Transformer, amelyet Proximal Policy Optimization segítségével tanítottunk 84 000 szimulált párbeszéden és 6200 ember által gyűjtött párbeszéden ugyanazon gyermekkohorszból, amelyet az NLU-ismertetőnkben.

Reading Pen Dialogue Manager (RDM-DM) Stack

leírtunk.

3. A 24 slotból álló hiedelemállapotA DST valószínűségeloszlást tart fenn 24 párbeszédrés. Ezek közül tizenkettő tartalomfüggetlen (pl. , current_grade, voice_speed, tts_voicelanguage_pair); tizenkettő tartalomhoz kötött (pl. , current_chapter, current_word_id, quiz_score_session).

Slot csoport Példa slotok Perzisztencia
Felhasználói profil user_age_band, dyslexia_flag, preferred_voice 30 nap
Munkamenet-állapot current_book, current_page, last_intent session
Kvíz állapot quiz_active, quiz_score, quiz_streak session
Beállítások voice_speed, voice_pitch, tts_format 90 nap
Tartalom gyorsítótár last_definition, last_example, last_word 5 kör

A hiedelmi állapot minden körben frissül a következőkkel: 0,91-es átlagos slot-pontosság a 12 nyelvi környezetben, 1 − a 24 slot átlagos Bier-értéke alapján mérve. A DST emellett ellipszis feloldást ("olvasd lassabban" örökli az előző tts_speed értéket és frissíti azt), valamint koreferencia-feloldást végez ("mi van azzal?" erre mutat: last_word).

4. Hálózati szabályzat és akciótér

4. Policy Network és Action SpaceA policy network egy eloszlást ad ki 38 rendszerműveletre

  • , beleértve:, tts_read_word, tts_read_sentence
  • tts_read_page, dict_lookup, translate_to, quiz_next
  • quiz_repeat, set_speed, set_voice, set_grade
  • set_language, book_open, book_next_page, book_prev_page
  • visszakérdezés, opciók felajánlása, tartalék segítség

A legmagasabb posterior értékű művelet kerül végrehajtásra, az alábbi kemény biztonsági szűrő alkalmazásával, amely blokkol minden olyan műveletet, amely hitelesítés nélkül módosítaná a szülői felügyeleti PIN-kódot, kikapcsolná a COPPA jelzőket, vagy megváltoztatná a firmware-régiót.

A szabályzat testreszabott jutalomfüggvénnyel kerül betanításra, amely az alábbiakat kombinálja:

  • Feladat sikeressége (+1,0, ha a felhasználó célja 5 fordulón belül teljesül)
  • Forduló-hatékonyság (−0,05 minden további fordulóért a minimálisan szükséges felett)
  • Késleltetési büntetés (−0,001 minden ms-ért 250 ms felett)
  • Biztonsági bónusz (+0,2, ha egyetlen biztonsági szabály sem aktiválódik)

Ez a jutalom 84 000 szimulált párbeszéd alapján kerül kiszámításra, amelyeket egy felhasználószimulátor generál, amely egy 6 éves, egy 9 éves és egy 12 éves gyermeket utánoz, mindegyiket három zajprofillal (zajmentes, osztálytermi zaj, háztartási zaj).

5. Többfordulós koherencia a valós használatban

A 2023 óta kiszállított több mint 47 000 készüléken a többfordulós koherenciát úgy mérjük, hogy azon párbeszédek arányát vizsgáljuk, ahol a rendszer 5 fordulón belül legalább egy ellipszist vagy anaforát helyesen felold. A 12 hónapos gördülő érték 89,4% az en-US, 86,2% a zh-CN, 84,7% a de-DE nyelven.

Multi-Turn Coherence by Locale

6. Hibakezelés és pontosítási stratégiák

Egy beszélgetős ügynök, amely nem tud kilábalni a félreértésből, használhatatlan az osztályteremben. Szabályzatunk egy 3 szintes egyértelműsítési kaszkád:

  1. Implicit megerősítés — ismételje meg a felhasználó kérését („Te azt szeretnéd, hogy lassabban olvassam ezt, igaz?”) és folytassa.
  2. Explicit egyértelműsítés — tegyen fel igen/nem típusú pontosító kérdést („Azt értetted ‘fordítsd spanyolra’ vagy ‘fordítsd franciára’ alatt?”)
  3. Nyitott tartalék — kínáljon fel egy 3 legvalószínűbb szándékot tartalmazó, felolvasott menüt („Felolvashatom ezt a szót, lefordíthatom, vagy feladhatok egy kvízkérdést. Melyiket?”)

A kaszkádot a szabályzatkimenet konfidencia-küszöbértéke indítja: implicit, ha p ≥ 0,65, explicit, ha 0,40 ≤ p < 0,65, nyitott tartalék, ha p < 0,40. A 12 nyelvi lokalizációt tekintve a tartalék arány átlagosan a fordulatok 4,1%-a, a legmagasabb pedig de-DE (6,8%) az összetett szavak többértelműsége miatt.

Vevői tipp: Amikor mintát kér, rögzítsen legalább 20 többfordulós párbeszédet a célnyelvi osztály zajviszonyai között, és számolja meg, milyen gyakran kér egyértelműsítést a toll. A 8% feletti egyértelműsítési arány a 7 éves gyermekeknél frusztrációhoz és visszaküldéshez vezet.

7. Eszközön belüli erőforrásigény és akkumulátor-hatás

A teljes párbeszédkezelő — DST, szabályzat és sablonok — 7,5 MB-tel növeli a firmware-képet. Az INT8 kvantálás kötelező; az FP32 a Q8 NAND-kvótát 256 MB-ról 312 MB-ra növelné, és az áramköri lap áttervezését igényelné. A folyamatos többfordulós párbeszéd a névleges P95 késleltetésnél (38 ms) 31 mW-ot vesz fel a Q8 1 000 mAh-s akkumulátoráról, ami elhanyagolható a 480 mW TTS lejátszási teljesítményhez képest. Egy 30 perces beszélgetés nagyjából 6% akkumulátor, így a névleges 7,0 órás hanglejátszási ablak érintetlen marad normál olvasás mellett.

8. Személyre szabás felhő nélkül

Minden toll egy felhasználói profilt tárol titkosított NAND memóriában (AES-128-XTS), amelyet az eszköz sorozatszáma kulcsol. A profil a következőket tartalmazza:

  • Olvasási szint (a kvíz pontosságából automatikusan felismert, K–12 tartomány)
  • Diszlexia-kompenzáció jelzője (a szülő állítja be a kísérőalkalmazásban)
  • Előnyben részesített hang és sebesség (frissül, amikor a felhasználó legalább 3 alkalommal kiadja a set_speed parancsot)
  • 30 napos munkamenet-napló (az utolsó 200 párbeszédforduló, helyileg hash-elve)

A profilok soha nem kerülnek feltöltésre kifejezett, aláírt szülői hozzájárulás nélkül. Az alapértelmezett viselkedés a kizárólag helyi működés. Ez szerződéses kötelezettségvállalás a GDPR-megfelelőségi tájékoztatónk keretében, és tükröződik a COPPA szülői felügyeleti funkcióban.

9. OEM testreszabási útvonal kiadók és márkák számára

Egy kiadói társbrand vagy oktatási játékmárka jellemzően márkás párbeszéd-sablonokat szeretne: "Helló, én vagyok Kapitány Üstökös a Galaxy Books-tól. Mit szeretnél felfedezni?" Testreszabási lehetőségek:

Testreszabás Egyszeri NRE Egységenkénti jogdíj
Márkás üdvözlés (1 hang, 1 nyelv) $1,200 $0
Egyedi szándék (pl. open_publisher_activity) $2,400 $0,04
Egyedi párbeszéd-folyamat (max. 8 forduló) $8,500 $0,08
Márkás hang (egyedi TTS, lásd TC-136) $18,000-tól $0,25

Ezeket a következő részben idézzük: nagykereskedelmi olvasótollak mester megállapodás részeként ajánljuk, 3 000 darabos MOQ-val egyedi öntőformák esetén, és 5 000 darabos MOQ-val saját márkás címkézésnél. A kickofftól a tömeggyártásig terjedő átfutási idő 75 nap egy egyedi párbeszéd-folyamatnál, beleértve 14 nap tantermi próbaüzemet és 7 nap red team tesztelést.

10. Mit ellenőrizzen, mielőtt aláír

Öt nem alku tárgyát képező műszaki ellenőrzés minden olyan olvasótoll-szállító számára, amely „beszélgetős AI”-t hirdet:

  1. Végponttól végpontig eszközön fut?Követeljen hálózatkikapcsolási tesztet a próbaüzem alatt. Ha a párbeszéd leáll, az felhőfüggő volt.
  2. Többfordulós koherencia-metrika.Kérje el a nyelvenkénti 5-fordulós koherencia-értéket egy legalább 1 000 párbeszédből álló visszatartott tesztkészleten. 80% alatt nem tantermi használatra kész.
  3. Terhelés alatti késleltetés.Mérje a P95 késleltetést egy Q6 vagy Q8 modellen, háttérben futó TTS mellett. 350 ms felett a gyermekek elvesztik a türelmüket.
  4. Visszaesési arány.5% alatt en-US esetén, 7% alatt a leggyengébb nyelvi változatnál.
  5. Profil hordozhatósága.A gyermek áthelyezheti-e a profilját egy új tollra a kísérőalkalmazáson keresztül, vagy a profil eszközhöz van kötve? A közös eszközparkot, a válasz számít.
Ajánlatkérés — Gyors gyári válasz

Kapcsolódó cikkek

Ajánlatkérés — Gyors gyári válasz

11. Gyártási kapacitás és gyári háttér

A párbeszédkezelő modul — DST, policy network, válaszsablonok és a titkosított felhasználói profil — minden SmartReadingPen OEM/ODM olvasótoll firmware-képébe be van építve, amelyet a sencseni Longhua és a dongguani Houjie gyártósorainkon flashelünk. Mindkét sor ISO 9001 és ISO 14001 tanúsítvánnyal működik, és az IATF 16949 stílusú folyamatirányítási fegyelmet alkalmazza, amelyet a fogyasztói elektronikához igazítottunk. A napi átlagos teljesítmény 6 800 késztermék naponta, csúcsidőszakban 11 400 darabtermészés a 2025. szeptemberi iskolakezdési roham idején. A 7,5 MB-os párbeszédmodul egy aláírt firmware-partícióban található, amelyet SHA-256-tal ellenőrizünk a manifest ellen minden hidegindításkor; sikertelen ellenőrzés esetén a toll recovery módba lép, és az aranyképből újra flasheli magát a másodlagos NAND síkon. A B1, B2, F8, K7, KF1, L5, P2, Q6, Q8, T2 és Y6 SKU-k egyedi AES-128-XTS kulcsokkal szállítunk, amelyeket az FCT állomáson fuzionálunk be, így minden felhasználó állapota egy egyedi, nem exportálható kulcshoz van kötve. A tömeggyártás első átfutási yieldje átlagosan 98,6% AQL II szinten (Critical 0, Major 1,0, Minor 2,5). A gyártási ütemezés a kért szállítási dátum előtt 75 nappal foglalható standard SKU-k esetén, és 105 nappal egyedi szerszám vagy márkás párbeszédfolyamat esetén. Gyártási slot foglalásához vagy minta párbeszédfolyamat előnézet kéréséhez programkezelő csapatunk egy munkanapon belül válaszol.

12. Tanúsítványi lefedettség 47 országban

Minden párbeszédkezelővel szállított toll a célpiachoz igazított tanúsítványi portfólióval érkezik: CE (RED/EMC/LVD), FCC Part 15, UKCA, EN 71-1/2/3, ASTM F963, CPSIA/CPC, RoHS, REACH, PSE (Japán), KC (Korea), GCC/SFDA (Szaúd-Arábia), SNI (Indonézia), NOM (Mexikó), INMETRO (Brazília), RCM (Ausztrália/Új-Zéland), NRCS LOA (Dél-Afrika) és ESMA/TIS (EAU/Thaiföld). Az akkumulátor szállítását az UN38.3 és IEC 62133 és MSDS dokumentációval; az adatvédelem dokumentált a GDPR, COPPA, PIPL, LGPD, Thaiföldi PDPA, valamint a Kaliforniai Prop 65 szerint. Maga a párbeszédkezelő nem továbbít hanganyagot vagy belső állapotot az eszközön kívülre, ami a legerősebb megfelelőségi előny a iskolai körzetes közbeszerzési ciklusok során, ahol igazolható COPPA és GDPR-K adatminimalizálási bizonyíték szükséges. A meglévő 47 országot lefedő lábnyomon kívüli új joghatóságokhoz új dokumentáció készül 1 800 dollár/régió áron, 15 munkanapos átfutással; több országra szóló csomagok árajánlatkérésre request-a-quote felületen kérhetők.

13. OEM árképzés és átfutási idő referencia

A párbeszédkezelő a standard firmware-csomagban gyári áron, 3,80–14,50 dollár/darab áron érhető el a 11 gyártási SKU-n. Árkategóriák: a P2 (500 mAh) belépő szint a legalsó sávban, a B1/B2/F8/K7/KF1 középső sáv 5,40–8,60 dollár, az L5/P2/Q6 középső sáv 7,20–10,40 dollár, a Q8/T2/Y6 prémium kategória 11,80–14,50 dollár, nagyobb NAND és akkumulátorral. Egyedi márkás üdvözlések 1 200 dollár NRE költséggel, jogdíjmentesen; egyedi szándékok 2 400 dollár NRE és 0,04 dollár/darab; egyedi 8 lépéses párbeszédfolyamok 8 500 dollár NRE és 0,08 dollár/darab; teljesen klónozott egyedi hang (a prozódiás feldolgozósorunkkal kiegészítve) 18 000 dollár NRE-től indul, 0,25 dollár/darab jogdíjjal. MOQ-szintek: 500 darab semleges készletre, 1 000 egyedi színre, 3 000 egyedi szitanyomott logóra, 5 000 teljes private labelhez kiskereskedelmi csomagolással. Az átfutási idő 75 nap a PO-tól az ex-works szállításig, gyorsított 45 napossávok állnak rendelkezésre a 12%-os gyorsítási felárral érhető el 10 000 darab feletti rendelések esetén. Fizetési feltételek: T/T 30/70, L/C látra, OA visszatérő vásárlóknak, PayPal mintarendelésekhez.

14. Belső validációs metrikák 47 000+ leszállított egységből

2023 óta 47 országban telepített 47 000+ egység után a párbeszédkezelő 2,4 millió párbeszéd-munkamenetet és 11,4 millió egyedi lépést rögzített. A leggyakrabban indított művelet a tts_read_word (a lépések 38,2%-a), ezt követi a translate_to (22,7%), a dict_lookup (14,1%), a quiz_next (9,4%), a set_speed (5,8%) és a book_next_page (4,3%). A fennmaradó 5,5% 32 ritkábban használt művelet között oszlik el, beleértve a clarify_ask_back, fallback_help, és pair_device. Az átlagos munkamenet-hosszúság 6,2 kör, a 95 percentilis hosszúság pedig 11,4 kör. A munkamenetok elhagyása (olyan körök, amelyek kifejezett stop vagy close_book művelet nélkül zárulnak) 3,8%, és főként az okozza, hogy egy szülő vagy testvér menet közben felveszi a fizikai tollat. A wholesale reading pens főmegállapodás eddig 86 firmware-kiadást fed le a 11 SKU-n keresztül, az aktuális verziótérkép pedig: B1/B2 2.4.7, F8 3.1.2, K7/KF1 1.9.5, L5 4.2.0, P2 2.0.3, Q6/Q8 3.3.1, valamint T2/Y6 2.6.4.

Dialogue Manager Action Distribution (11.4M turns)

15. Mérnöki beszerzői tanulságok

Öt ökölszabály az OEM/ODM párbeszéd-kezelő beszerzéséhez:

  1. Mindig futtasson egy 30 eszközből álló, 14 napos próbaüzemet a fő beszerzési megbízás előtt. A próbaüzem adatai megmutatják a valódi tartalék (fallback) arányt (4,1%-os en-US alapvonal) és a valódi koherencia-értéket az Ön tartalomkészletén.
  2. Határozza meg az indításkor a munkamenet maximális körszámát. Alapértelmezetten 12 kört alkalmazunk a hiedelmi állapot visszaállítása előtt; a hosszabb munkamenetek esetén fennáll a slot-drift kockázata.
  3. Rögzítse a sablon szövegét a kiadó csapattal a firmware zárolása előtt. A firmware 3.x utáni sablonmódosítás egységenként 0,08 $-ba kerül, amíg az összes forgalomban lévő eszközre újra OTA-n kijuttatjuk.
  4. Tartson fenn 5 munkanapot a biztonsági szabályok felülvizsgálatára a megfelelőségi csapatunkkal. A szülői PIN-kód, a COPPA-jelző és a régiózár-biztonsági szabályok nem képezhetők alkura, és OEM-kérésre sem kapcsolhatók ki.
  5. Tervezzen 5%-os kanári csoportot bármely párbeszédfolyamat-módosítás első OTA-telepítéséhez. A kanári csoport a teljes flottát elérése előtt kiszűri a szabályzat-visszaeséseket.

Frequently Asked Questions

Hány beszélgetési fordulót kezel koherensen egy SmartReadingPen olvasótoll?
Akár 12 fordulót, mielőtt a policy network visszaállítja a belief state-et a slot drift elkerülése érdekében. Az 5 fordulós párbeszéd koherenciája átlagosan 89,4% en-US és 84,7% de-DE nyelven, 11 400 mért párbeszéd alapján, amelyekben 1840, 4–11 éves gyermek vett részt.
A olvasótoll párbeszédkezelője küld hangot a felhőbe?
Nem. A dialogue state tracker, a policy network és a sablonok mind az eszközön futnak, összesen 7,5 MB-os INT8 memóriaterülettel és 31 ms-os P95 késleltetéssel egy Q8 platformon. A hang soha nem hagyja el a tollat, így megfelel a COPPA, a GDPR-K, a PIPL és az LGPD követelményeinek a K-12 telepítéseknél.
Mi történik, ha az olvasótoll nem ért egy parancsot?
Egy 3 szintű tisztázási kaszkád indul: implicit megerősítés policy konfidencia ≥ 0,65 esetén, explicit igen/nem 0,40–0,65 között, és nyílt top-3 menü 0,40 alatt. A fallback arány átlagosan 4,1% 12 nyelvi területen, a legmagasabb 6,8% a német összetett szavaknál.
A kiadó márkázhatja a párbeszédet egyedi üdvözlésekkel és szándékokkal?
Igen. A márkázott üdvözlések 1 200 USD NRE költséggel járnak, royalty nélkül, az egyedi szándékok 2 400 USD NRE plusz 0,04 USD egységenként, az egyedi 8 fordulós párbeszédfolyamok 8 500 USD NRE plusz 0,08 USD egységenként. A MOQ 3 000 egység egyedi formák esetén; átfutási idő 75 nap, beleértve egy 14 napos osztálytermi próbaüzemet.
Hogyan védett a párbeszéd állapota, ha a toll elveszik vagy ellopják?
A 24 slotból álló belief state, a 30 napos munkamenet-napló és a felhasználói profil AES-128-XTS titkosítással, NAND-ban tárolódik, és csak a TrustZone biztonságos világán belül dekódolható. Az elveszett toll nem olvasható az eszközspecifikus kulcs nélkül, amelyet a gyártás során égettek be és soha nem exportálnak.
Az Ön kosara
Az élmény javul, ha engedélyezi a sütiket. Süti szabályzat
Chat on WhatsApp