En span-transduktor mappar en inmatningstextspan (sammenhängande tokensekvens) till en utmatningsspan, vilket möjliggör strukturerade text-till-text-transformationer.
Formalismer
- Finit tillståndstransduktorer (FST): Effektiva, linjär tid; bra för tokenisering, morfologi, enkla omskrivningsregler.
- Reguljära uttryck med fångstgrupper: Lättviktiga mönsterbaserade spann.
- Trädtransduktorer / synkrona grammatik: Hanterar hierarkisk struktur (syntaxträd).
- Neurala seq2seq med span-kopiering: Pointer-generator, span-baserad extraktion (t.ex. extraktiv sammanfattning).
NLP-tillämpningar
- Sammanfattning: Välj relevanta spann → konkatenera.
- Översättning: Frasbaserad MT = span-transduktor (källfras → målfras).
- Parafrasering: Span-nivå synonymsubstitution, syntaktisk omarrangemang.
- Informationsutvinning: Entitet/relationsspann → normaliserad utmatning.
- Dataaugmentering: Span-ersättning/back-översättning.
Fördel
Explicit span-justering bevarar proveniens, möjliggör tolkbarhet och begränsar sökutrymme vs fri generering.
