scieee Science in your language
[en] (orig) [lt] [de] [fr] [it] [es] [pt]

The System for Automatic Stylometric Analysis of Ukrainian Media Texts TextAttributor 1.0 (Techniques, Means, Functionality)

Abstract

This paper presents the structure, algorithms, implementation, and experimental results of the automatic TextAttributor system developed by the authors of the paper for statistical Ukrainian-language text parameterisation using a multiparametric set of statistical indices, characterising the author’s text style and applicable to authorship attribution tasks. Based on the created linguistic resources and software, the system generates a linguistic analysis based on the calculated statistical indices and performs a comparative study of two texts. An additional criterion for statistical indexing is the text toxicity index, calculated through the method of verbal identification of toxic sentiment. Authorship and toxicity detection tasks are addressed using two methods: dictionary- and rule-based statistical calculations and machine learning. The current findings implemented in the beta version of TextAttributor are thoroughly examined.

Read accessible full text
Machine-translated document

This is a machine-generated translation of the original document and may contain errors, omissions, or changes in meaning. Do not rely on this translation for quotations, citations, or authoritative references. Please consult and cite the original document.

The System for Automatic Stylometric Analysis of Ukrainian Media Texts TextAttributor 1.0 (Techniques, Means, Functionality)

Author: Nataliia Darchuk; Oksana Zuban; Valentyna Robeiko; Yuliia Tsyhvintseva; Victor Sorokin; Mykola Sazhok
Year: 2024
DOI: 10.35321/all91-09
Source: https://journals.lki.lt/actalinguisticalithuanica/article/download/2328/2430
 S aipsniai / A icles 223
NATALIIADARCHUK
Ta asShe chenkoNa ionalUni e si yo Kyi
ORCIDid:o cid.o g/0000-0001-8932-9301
Fo schungsbe eiche: Compu e linguis ik, Ko puslinguis ik,
quan i a i e Linguis ik, G amma ik und Seman ik de
Uk ainische Sp ache.
OKSANA ZUBAN (in de anzösischen Sp ache)
Ta as She chenko Na ional Uni e si y o Kyi ORCID id:
o cid.o g/0000-0002-2644-3892 Fo schungsbe eiche:
Compu e linguis ik, linguis ische Expe ise, quan i a i e Linguis ik,
G amma ik und Seman ik de Linguis ik
Uk ainische Sp ache.
VALENTYNA ROBEIKO (englisch)
Ta as She chenko Na ional Uni e si y o Kyi ORCID id:
o cid.o g/0000-0003-2266-7650 Fo schungsbe eiche:
Sp achanalyse, Sp ache kennung und -syn hese, Phone ik,
Ve a bei ung na ü liche Sp ache.
YULIIA TSYHVINTSEVA
Ta as She chenko Na ional Uni e si y o Kyi , Ins i u ü
die uk ainische Sp ache de Na ionalen Akademie de
Wissenscha en de Uk aine ORCID id:
o cid.o g/0000-0002-9684-3840 Fo schungsbe eiche:
uk ainische Neologie, Lexikologie und Lexikog aphie.
VICTOR SOROKIN (englisch)
Ta as She chenko Na ionale Uni e si ä Kiew
ORCIDid:o cid.o g/0000-0002-3637-0535
Fieldso  esea ch:au oma icsyn axanalysis,au oma ic
seman ische Analyse, Ve a bei ung na ü liche Sp ache.
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
224 Ac a Linguis ica Li huanica XCI (Li wische Sp ach e zeichnis)
Mykola Sazoch
Ins i u ü In o ma ions echnologien und -sys eme de
Na ionalen Akademie de Wissenscha en de Uk aine
ORCID-Id: o cid.o g/0000-0003-1169-6851 Die Da en we den on de ORCID-Diens s elle im Au ag on de ORCID-Diens s elle im Au ag on de ORCID-Diens s elle im Au ag on de ORCID-Diens s elle im Au ag on de ORCID-Diens s elle im Au ag on de ORCID-Diens s elle im Au ag on de ORCID-Diens s elle
Fo schungsbe eiche: Sp achanalyse, E kennung und
Syn hese, Ve a bei ung na ü liche Sp ache.
DOI: doi.o g/10.35321/all91-09
THESYSTEMFORAUTOMATIC
STYLOMETRICANALYSIS
OFUKRAINIANMEDIA
TEXTSTEXTATTRIBUTOR1.0
(Techniken, Mi el,
Funk ionali ä )
Tex A ibu o 1.0 is ein Uk ainisches
Medien ex -Au oma isches S ilome ie-Analysesys em.
(Me hoden, Maßnahmen, Funk ionali ä en)
Anme kung
Dieses Papie p äsen ie die S uk u , Algo i hmen, Implemen ie ung und expe imen elle E gebnisse des on
den Au o en des Pape s en wickel en au oma ischen Tex A ibu o -Sys ems ü die s a is ische
Pa ame e isie ung on uk ainischsp achigen Tex en un e Ve wendung eines mul ipa ame ischen Sa zes
on s a is ischen Indizes, die den Tex s il des Au o s cha ak e isie en und au
Au o scha szuweisungsau gaben anwendba sind. Basie end au den e s ell en linguis ischen Ressou cen
und So wa e gene ie das Sys em eine linguis ische Analyse basie end au den be echne en s a is ischen
Indizes und üh ein e gleichendes S udium on zwei Tex en du ch. Ein zusä zliches K i e ium ü das
s a is ische S udium is de Tex -Toxizi ä sindex, be echne du ch die Me hode de e balen Iden i izie ung
on Tex -Au ho scha und -Toxizi ä .
Gelei e on den ak uellen Au gaben de mode nen quan i a i en Linguis ik und de na ü lichen
Sp ach e a bei ung ha unse Team ein Sys em ü die au oma ische
S aipsniai A ikel 225
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
ANOTACIJA
Šiame s aipsnyje p is a oma s aipsnio au o ių suku os au oma inės sis emos
Tex A ibu o , Ski os s a is iniam uk ainiechischen Sp ache Tex zu pa ame iza imui Lösung un e
Ve wendung iele Pa ame iniau s a is ischen Rodiklis inkinį, beschūdinan į au o iaus S il des Tex es i
aikys ės au o i ä s užda iniams, s uk u , algo i mai, įdiegimas i ekspe imen iniai ezul a ai. Suku ų
ling is inių i p og aminių pag indu sis ema gene uoja ling is inę analizę pagal s a is inius indeksus i a
a s a inių eks ų lyginamąsias indeksa imo k i e ijus y a nuoka sukeliančio indeksas, skydymo ikowa
me odika.
ezul a ai,gau inaudojan is„Tex A ibu o “be a e sija,išsamiaiišnag inė i.
 ESMINIAIŽODŽIAI:kompiu e inėling is ika,uk ainiečiųkalba,jausmingumoanalizė,
1. Einlei ung
Tex ological esea chgainednewscien i icimpo ancewi h head ancemen 
o compu a ionallinguis icsme hods,whichcon ibu ed o he o ma iono a
linguis isch-s a is ische Analyse on Medien ex en en wickel , das als Webanwendung mi dem
Namen Tex A ibu o 1.0 (Tex A ibu o 202) implemen ie wu de. Das Sys em a bei e in
ie Be eichen: 1) ex liche Idiome ie; 2) S ilome ie: Bes immung de au oma isie en
Linguis ik-Techniken, gepaa mi s a is ischen Modellen ü die quan i a i e Tex analyse; 3)
Addi ion: Bes immung de Scha ung on ähnlichen Funk ionen zwischen Tex en; und 4)
Zusammense zung: Bei de Iden i izie ung on Tex en inne halb des Sys ems we den die
E gebnisse au oma isch gene ie .
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
226 Ac aLinguis icaLi huanicaXCI
enhancingin o ma ionde ences a egiesdu ing heongoingRussian-Uk ainian
Das Konzep de En wicklung eines au oma ischen Sys ems uk ainischsp achige We kzeuge
ex a ibu iona ose om heanalysiso  esea chin he ieldo Uk ainian
co puslinguis ics(Da čuk 2013)ands a is icals udieso  heau ho ’s s yle
(Da čuke al.2021;Da chuk,So okin2022;Zuban’2019)conduc edusing he
des Uk ainischen Sp achko pus (KUM) du ch die P ojek au o en. Sen imen analyse
Du ing he de elopmen  o  he Tex A ibu o  sys em, he ollowing
me hodswe eemployed:componen analysis,dis ibu i eanalysis,andcon en 
analysis.Con en analysis,aquan i a i eandquali a i eme hod o ex ac ing
iden i izie au oma isch die Tex onali ä basie end au de emo ionalen Fä bung und de
Bewe ung on E eignissen ode Objek en du ch den Au o , was mi Hil e on Wö e buch- und
egelbasie en s a is ischen Be echnungen e eich wu de. Da übe hinaus wu den Me hoden
des maschinellen Le nens, einschließlich des ie en Le nens, in eg ie . Die s a is ische
S uk u eines Tex es, e s anden als sein quan i a i es Modell, e möglich die Iden i izie ung
seines unk ionalen S ils, de Au o scha und de Zei de E s ellung. In diese A bei wu den
die s a is ischen S uk u komponen en du ch Analyse lexikalische und g amma ikalische
s a is ischen Me kmale mi Hil e on Indexie ungs echniken und euklidische
En e nungsme iken ex ahie . Die euklidische En e nung, die den Abs and zwischen zwei
Punk en in einem n-dimensionalen euklidischen Raum miss , is eine de am wei es en
e b ei e en Me ik in de Clus e s a is ik.
The no el y o  he esul s is he i s  implemen a ion in compu a ional
linguis ics o  an au oma ed mo pho-syn ac ic-seman ic s ylome ic model
Ein s ilome isches Modell is eine Reihe on s a is ischen Pa ame e n eines Tex es (lexikalisch,
mo phologisch, syn ak isch usw.), au de G undlage de e eine e gleichende Analyse dieses
Tex es mi dem ussischen s ylome ischen Modell des unk ionalen Tex s du chge üh
wi d.Unse e Meinung nach is es möglich, ein s enges, de e minis isches, wissenscha lich
beg ünde es Sys em gemeinsame und un e wechselba e Me kmale in S ilen, Gen es usw. zu
e hal en, indem s a ische Me hoden bei de Kons uk ion eines s ilome ischen Modells
e wende we den.
S aipsniai A ikel 227 und
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
au ho shipinUk ainian:1) h oughdic iona yand ule-basedapp oaches,and
2) iamachinelea ning,includingdeeplea ning.
2. Ve wand e A bei en
In de mode nen uk ainischen Sp achwissenscha wu den e hebliche
linguis isch-s a is ische S udien übe die Idiolek e uk ainische Sch i s elle und Dich e
du chge üh , da un e Ta as She chenko, Lesya Leshinka, Vasyl S us (Zuban […] 2019), I an
F anko (Buk […] 2021), Roman I anychuk (Lo ka […] 2020), Vale y She chuk (Volos, Le chenko […]
2023), Ma ia Ma ios, Ya as And ukho ych, Oksana Zabuzhko (K […] 2020), Le chenko Tex o , I an
D ach, Mykola Ving ano sky (Da chuk […] 202 […] 202 […] 2019; Duban […] 202 […] 2021) un e
ande em. Diese S udien wu den au ep äsen a i en P obenen (langen Tex en) du chge üh ,
wobei häu ig nu wenige (nich meh als ün ) s a is ische Pa ame e e wende wu den,
ohne s a is ische Phänomene anzuwenden.
Das Tex A ibu o -Sys em ha Vo eile im Ve gleich zu seinen Kollegen in de globalen
Wissenscha . Die meis en bes ehenden Sys eme und Modelle konzen ie en sich auch au die
Ve wendung einzelne linguis isch-s a is ischen Module zu Iden i izie ung eines ode
wenige , meis o male (n-G amme, häu igs e Wö e , Buchs aben) Tex pa ame e (Ede
2015; Canhasi e al. 2022; LIWC-22; Khomy ska e al. 2023; ALIAS). Im Gegensa z dazu bie e
Tex A ibu o 1.0 eine um assende He angehensweise, einschließlich eine in e ak i en
s a is ischen Analyse de syn ak ischen, mo phologischen, lexikalischen und seman ischen
S uk u des Tex es in Ech zei .
Die A ibu ion on Tex en wi d in ausländischen Tex s udien ak i en wickel ,
insbesonde e die Bu ows-Me hode (Bu ows 2002; A gamon 2007; Ede , Rybicki 2013;
Bu ows e al. 2014) Die Wi ksamkei wi d in ielen S udien an g oßen Mengen on
ex lichen Da en e schiedene S ile wie: englische P osa des ühen 20. Jah hunde s
(Hoo e 2004); englische mode ne Poesie (Hoo e 2005); poe ische We ke au La ein (Rybicki,
2011); P osawe ke de wich igs en Gen es au Englisch, F anzösisch, I alienisch, Deu sch,
Polnisch, Unga isch sowie La ein und A abisch (Ede , 2011; E e e al. 2015; Jannidis e al.
2015).

NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
228 Ac aLinguis icaLi huanicaXCI
hea ibu iono speecheso Ame icanp esiden s(Sa oy2015).Onemo e
In den le z en Jah en wu den bei den Au gaben de au oma ischen Tex a ibu ion
übe wiegend egelbasie e s ilome ische Me hoden ode Me hoden des ie en Le nens
e wende (Ede 2015; Canhasi e al. 2022). Beide Me hoden wu den im
Tex A ibu o -Sys em implemen ie , unk ionie en e ek i , lie e n abe
un e schiedliche E gebnisse: 1) Die egelbasie e Me hode e möglich die Au oma isie ung
de Gene ie ung on linguis ischen Schluss olge ungen übe die Toxizi ä on Idiolek en
und Tex en; 2) Die maschinelle Le nme hode bes imm nu den G ad de Toxizi ä und die
Ähnlichkei on Tex en und kann bei Klassi ika ionsau gaben e wende we den.
Die jüngs en Me hoden des maschinellen Le nens ü die Analyse on S immungen und die
Iden i izie ung de Au o en on Tex en basie en au s a is ischen Ansä zen (STYLE-IDF, La en
Di ichle Alloca ion) und Deep Lea ning-Techniken mi e schiedenen A chi ek u en (CNN, LSATM,
BERT) in Kombina ion mi s ilome ischen Me hoden (Gup a e al. 2019; Canhasi e al. 2022; Bone i e
al. 2023) Die E gebnisse sind äuße s abhängig on de Anzahl de Klassen (Typen on Toxizi ä ,
Au o en), Gen e, Länge des Tex es und o allem dem Volumen des ü das T aining e wende en
ich ig s uk u ie en Tex ko pus.
u n, o co po acon ainingless han1500documen s he epo edaccu acy
isabou 70%(Khane al.2023).Fo  heUk ainianlanguage, ex au ho ship
(Lupeie al.2020),mo eo e ,suchsys emsdono p oducelinguis icexpe ise
andcanno beusedas ools o linguis ic esea ch.
 S aipsniai / A icles 229
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
1. Tex -Tokenisie ung: Au schlüsselung des Tex es in Sä ze und Wö e zu Analyse.
2. Mo phologische Kennzeichnung: Die Zuweisung on Kennzeichnungen an
Wö e anhand ih e g amma ikalischen Fo men.
3. Kon ex analyse: Ak ualisie ung de mo phologischen E ike en im
Zusammenhang mi dem Kon ex .
4. Syn ak ische Analyse: E s ellung on binä en Beziehungen zwischen Wö e n in
Sä zen, um ih e g amma ikalische S uk u zu e s ehen. 5. E s ellung on
syn ak ischen Beziehungen: Bes immung syn ak ische Ve bindungen au de
G undlage o de inie e Regeln.
6. Emo ional Nega i e Vocabula y Ma ching: Iden i izie ung on Wö e n aus einem
o de inie en Sa z on nega i em Vokabula . 7. Auswe ung s a is ische
Pa ame e : Auswe ung s a is ische Pa ame e ü den Eingabe ex un e
Ve wendung au oma isch zusammenges ell e F equenz okabeln. 8. Visualisie ung de
E gebnisse: Da s ellung de E gebnisse de s a is ischen Pa ame e isie ung
g aphically,wi hempi ical aluesandcon idencein e als.
9.Compa ison o Resul s:Visualizings a is icalpa ame e iza ionou comes
o  womedia-s yle ex s, acili a ingcompa ison.
10.Euclidean Dis ance E alua ion:Quan i ying hedissimila i ybe ween
womedia-s yle ex s.
E s ellung on Expe enmeinungen: E s ellung on zwei Expe enmeinungen: eine
übe die Zusch eibung on Tex en und eine übe die Toxizi ä on Tex en du ch
linguis ische Un e suchung. 12. De ek ion on Toxizi ä und Iden i izie ung de
Au o en: Nu zung on maschinellen Le n echniken, insbesonde e on
Neu alne zmodellen, zu De ek ion on Toxizi ä und zu Iden i izie ung on Au o en.
Die E gebnisse des Sys ems sind in die olgenden Ab eilungen un e eil : Tex A ibu ion
Index G oup, Tex A ibu ion Expe Opinion, Ve gleich on Tex A ibu ion, Linguis ic
Expe ise o Tex Toxici y und Neu al Ne wo k
Meinungen.
In Tex A ibu ion Index G oup (Fig. 1), s a is ical pa ame e s a e
o ganizedbasedon heinpu  ex :column1displays heIndex i le,column
2 zeig den empi ischen nume ischen We , und Spal e 3 lie e eine isuelle Re e enz du ch
Ve gleich des empi ischen We es des Index mi dem Ve auensin e all
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
230 Ac a Linguis ica Li huanica XCI-Schwellen (un e e und obe e) abgelei e on uk ainischen
Medien-S il-Tex en. De empi ische nume ische We wi d au de Skala du ch ein ge üll es
umgekeh es D eieck da ges ell . In Tex A ibu ion Expe Opinion (Bild 2) p äsen ie en
wi Schluss olge ungen zu den ypischen ode indi iduellen linguis ischen s a is ischen
Me kmalen, die aus dem analysie en Tex ü jeden geschä z en Index ex ahie wu den.
Diese Schluss olge ungen s ammen aus An wo en au die F age: Fäll de nume ische
We des Indizes inne halb des Ve auensin e alls des Mediens ils de uk ainischen
Sp ache? Au de G undlage eines Ve gleichs de nume ischen We e mi den
Schwellenwe en des Ve auensin e alls gene ie das Sys em d ei mögliche An wo en
( ypische Zeichen des Mediens ils, Zeichen des idios yls un e halb des no malen Mediens ils
und Zeichen des idios yls).
Im Ve gleich de Tex a ibu ion (Bild 4, Un e abschni 4.2) we den die Tabellenda en
bei de Auswahl "Vek o en e nung be echnen" umgehend wie olg ak ualisie :
Spal e 1 en häl die on dem Benu ze eingegebenen Tex e zusammen mi dem zu o
analysie en Tex ; Spal e 2 zeig die Anzahl de Sä ze in jedem Tex ; Spal e 3 zeig die
Wo zahl; Spal e 4 zeig die euklidische En e nung zwischen dem analysie en Tex und
jedem Tex in de Tabelle; Spal e 5, mi de Bezeichnung "Ve gleiche",
ini ia esanau oma iccompa isono s a is icalindicesbe ween heanalyzed ex 
and heselec ed ex .Uponac i a ing heco esponding“Compa e”elemen ,
comp ehensi ein o ma ionon hes a is icalcompa isonbe ween wo ex sis
p o idedin he“Tex A ibu ionIndices”g oup(Fig.3).
S aipsniai A ikel 231 und
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
FIGURE 2: Ein Beispiel ü ein gene ie es Expe enmeinungsmodell, das die Toxizi ä on
In Linguis ic Expe ise o Tex Toxici y (subsec ion 4.3), a lexical-
seman icin e p e a iono  hecalcula ed oxici yindexisp esen ed(Fig.6).
InNeu al Ne wo k Opinionswep esen  heou pu o ou deeplea ning
Tex en au eine Skala on 0 (nich oxisch) bis 1 (hohe Toxizi ä ) quan i izie . Wi bewe en
auch die Ähnlichkei on Tex en mi bekann en Au o en, mi We en on 0 (keine Ähnlichkei )
bis 1 (hohe Ähnlichkei ), basie end au den Au o en, au denen das Modell ausgebilde wu de. 4.
A ibu ion on uk ainischsp achigen Tex en: Expe imen e,
E gebnisse und Diskussionen
Das en wickel e s ylome ische Modell lös zwei Au gaben: 1) Iden i izie ung einzelne
Me kmale des S ils eines Au o s (S ylome ie); 2) Beu eilung de Ähnlichkei zwischen zwei
Tex en anhand linguis ische und s a is ische Pa ame e (A ibu ion).
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
238 Ac a Linguis ica Li huanica XCI Heu e is die In o ma ionskomponen e in de hyb iden
K iegs üh ung besonde s wich ig gewo den. Dahe wa das Ma e ial unse e S udie ein
Fo schungsko pus on Online-Medien ex en des poli ischen Disku ses mi einem Volumen on 10
Millionen Wö e n. Wi e wenden den Beg i " oxische Tex " im b ei en Sinne. Diese Tex e
zeichnen sich du ch Beläs igung, D ohungen, Obszöni ä , Cybe -Bullying, T olling und
iden i ä sbasie e Hass ex e aus und en hal en Emo ionen, die Phänomene und Objek e sind,
die nega i e Emo ionen in eine Pe son e u sachen (z. B. K ieg, Lu ang i , Ko up ion). Das
Ziel dieses P ojek s wa es, das Po enzial ü die Realisie ung nega i e S immung in
uk ainischen Tex en zu e mi eln und ein au oma isie es Sys em zu Iden i izie ung
oxische Inhal e zu en wickeln. Sehen wi uns die E üllung de e s en Au gabe an. Dazu
gehö en die Baupe sonen (1620), obszöne Beg i e (613) und beleidigende Sp ache (787). Beispiele
hie ü sind Wes le (западенець: ein ab ällige Name ü Menschen aus den wes lichen
Regionen de Uk aine) und Hucks e ; 3) Toxische Sä ze: Eine Sammlung on 1500 idioma ischen
Ausd ücken, die nega i e Emo ionen e mi eln. Beispiele sind G imaces wie ein A e, küss
seinen A sch und ö ne seinen Mund.
o alexicog aphicda abasehousing h eedis inc dic iona ies:
1)Emo iogendic iona y:Acompila iono 5000wo ds(acco ding o he
meaningso lexical-seman ic a ian s)wi hnega i esen imen  ones, a edon
ascaleo –2.Examplesincludeimmo al,impuni y,b ibe yands eal;
2) Ha e Speech Dic iona y: Comp ising 3000 wo ds, including names o 
Jede Ein ag in diesen Lis en wu de mi seman ischen Me kmalen kommen ie , wobei das
Ha e Speech Dic iona y 18 Me kmale und die Toxic Ph ases-Lis e 26 ha e. Zum Beispiel wu den
Wö e im Ha e Speech Dic iona y mi Me kmalen wie […]s[…] ü Sexismus, […] […] ü
Rassismus und […]e[…] ü Ageismus gekennzeichne . Diese lexicog aphische Da enbank, ein
mul ipa ame isches Sys em, weis seman ische Me kmale an Einhei en (Wö e ode
Ph asen) zu, die in Kombina ion mi F equenzda en aus analysie em Tex die Toxizi ä
analysie en.
De Toxizi ä sindex des Tex es wi d nach de Fo mel be echne :
I ox = (e + |K| (m + )) n * 10, Hie is n das Tex olumen; e is die Anzahl de emo ionalen
Wö e ; m is die Anzahl de Wo e de Hass ede; is die Anzahl de gi igen Ph asen; K is
ein Koe izien gleich 2, es be on Wo e de Hass ede und gi ige Ph asen, die au eine
Skala on

 S aipsniai / A icles 239
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
Fün Zi e n (+2, +1, 0, 1, 2) en sp echen […]2. Die Indexwe e a iie en on 0 bis
+1.
Zum Beispiel be äg de Toxizi ä sindex des Tex es "Menschen mi o em S i " (12.129
Wö e ) 1,01, was au seine hohe Toxizi ä hindeu e , da de Schwellenwe ü solche ku zen
Tex e on 0,1 bis 0,7 eich . Gleichzei ig gene ie das Sys em die E gebnisse eine
au oma ischen linguis ischen Un e suchung de Tex oxizi ä (siehe Abbildung 6). Has du eine
Ahnung da on, wie ne ös du bis ? Ich s udie e Ih e P o ile absich lich, ich bin neugie ig au die
Wel , in de Sie exis ie en. Diese Wel mach mi iel Angs . Ich ho e au ich ig, dass sich
unse e Wege im wi klichen Leben un e keinen Ums änden k euzen we den.
(оці люди, які ходять з червоною ручкою і виправляють помилки в чужих
постах: ви хто взагалі такі? Ви хоч уявляеєте, як ви бісите? Я спеціально
вивчаю ваші профілі, мені цікаво в якому світі ви існуєте. Мене цей світ дуже
лякає. Щиро сподіваюся, що в реальному житті ми з вами не пересічемося
nich ü welche Obs a in). Hie ma kie das Sys em au oma isch die olgenden
Wö e mi eine nega i en Komponen e in Fe : Fehle (помилки), ande e Menschen
(чужих), läs ig (бисите), beängs igend (лякае).
Abbildung 6: Ein F agmen de au oma isie en sp achlichen P ü ung de Tex oxizi ä
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
240 Ac a Linguis ica Li uanica XCI (Li auische Sp ach e zeichnis)
5. MACHINELEARNINGAPPROACHES:
EXPERIMENTS,RESULTSAND
Diskussionen
Wi konzen ie en uns au den zwei en Be iebsmodus des Tex A ibu o -Sys ems ü
maschinelle Le n echniken. Bei de Eingabe ü das Modell aining haben wi Tex ko po a e, die
nach dem Ziel jede Un e au gabe gekennzeichne sind: (a) Tex in o ma ionen zu
Toxizi ä se kennung und (b) Au o scha siden i ika ion. Jedes Ko pus is in T ainings- und
Kon ollsä ze un e eil , sowie ü aus eichend g oße Ko pusen ein Validie ungssa z. Die
Pa ame e des gewähl en P oblemlösungsmodells we den au dem T ainingssa z geschä z .
alida ionse .The inalpe o manceindica o so  hemodela emeasu edona
con olse , akingin oaccoun  hea ailabili yo compu ing esou ces,which
a enecessa y o  hemodel’sope abili y.Aco pus o eachsub askhasbeen
de elopedinpa allelwi h heTex A ibu o machinelea ningcomponen ,so
5.1 Nachweis de Toxizi ä
Als E gebnis eine Reihe on expe imen ellen S udien wu de eine echne isch e izien e
A chi ek u au de G undlage de as Tex -Me hode und ih e We kzeuge gewähl (Joulin e
al. 2016). Diese Me hode bie e Wo einbe ungen und schä z die Wah scheinlichkei s e eilung
on Dokumen en nach o de inie en Klassen. Wö e we den in Vek o o m p äsen ie ,
basie end au de au oma ischen Wo eilung in Teile (Un e wö e ), die die O enhei des
Wö e buchs simulie . Die Un e wö e p äsen a ion is wich ig, da die uk ainische Sp ache
seh in lek i is und iele unsich ba e Wö e sowie Wö e mi Rech sch eib ehle
abgedeck we den müssen. Fü die binä e Klassi izie ung zu E kennung oxische Inhal e
wu de ein o be ei e e Ko pus on e wa 12.000 Tex dokumen en e wende . Das bes e
E gebnis basie au de e allgemeine en Me ik (F1 = 79,4%) und wu de mi den olgenden
Hype pa ame e -Eins ellungen e ziel : eine Wo ek o -Dimensionali ä on 500, eine
an ängliche Le n a e on 0,5, T ainingsepochen, lexikalische Kon ex , da ges ell du ch
Big ams, Un e wo längen on 2 bis 5 Zeichen und eine En scheidungsschwelle on 56,0.4.
70%.
 S aipsniai / A icles 241
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
5.2 Iden i izie ung des Au o s
Die expe imen elle E o schung on Modellen ü die Iden i izie ung de Au o en on Tex en
wu de anhand eines Teils des Ko pus ö en lich zugängliche gesellscha spoli ische Tex e
du chge üh , in dem es möglich is , die Pe son zu iden i izie en, die de Au o des Dokumen s
is . Insgesam wu den 702 Tex e on ie Au o en ausgewähl , die die g öß e Anzahl on
Dokumen en zwischen 60 und 1000 Zeichen e ö en lich haben. Diese E gebnisse zeigen, dass
es möglich is , ein e ek i es Sys em zu en wickeln, das in de Lage is , Tex e on Au o en, die
im T ainingsse aus eichend e e en sind, genau abzudecken. Die ausgebilde en neu onalen
Ne zwe kmodelle wu den in das Tex A ibu o -Sys em in de "Clien -Se e "-A chi ek u
Thebes  esul ,acco ding o hegene alizedme ic(F1=81%),wasachie ed
wi h he ollowinghype pa ame e  alues:awo dembeddingspacedimension
in eg ie , wo die E gebnisse zweie Au gaben p äsen ie we den: (a) Toxizi ä sbes immung
und (b) Au o scha sde ek ion.
adecision-making h esholdo 0.5.No ably, o ce ainmodelcon igu a ions,
hesensi i i y o heau ho wi h hela ges numbe o documen sin heda ase 
6. Schluss olge ungen
Das Tex A ibu o -Sys em be inde sich de zei in eine Tes phase, um F agen de
A ibu ion und Toxizi ä sbes immung in uk ainischsp achigen Tex en anzugehen.
784 uk ainische Tex e on 226 Benu ze n.
Unse e E gebnisse zeigen die Wi ksamkei unse e Me hode, die die Quan i izie ung e bale
Elemen e anhand o male g amma ikalische und seman ische Pa ame e beinhal e ,
pa icula ly o nega i eemo ionali y.Thisisachie ed h oughacombina ion
o dic iona yand ule-basedapp oaches,complemen edbymachinelea ning
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
Die en wickel en Tex analyse- und A ibu ionsschema können auch au ande e
echniques.Expe imen almachinelea ning esea ch o  oxici yde ec ionand
au ho ship iden i ica ion by ex  allowed us oob ain esul s compa able o
esul so expe imen swi hsimila modelcha ac e is ics(numbe o documen s
Sp achen angewende we den.
obus nessagains lexicalopennessand ex uale o s.
Theconduc ed esea chpa es heway o sol ingsuchp oblems o Uk ainian
as de ec ingand moni o ing oxic con en ,ha e speechandmisin o ma ion,
Mi Blick au die Zukun planen wi , unse au oma isches Tex a ibu ion- und
Toxizi ä sde ek ionswe kzeug mi seman ische , syn ak ische , psycholinguis ische und
soziolinguis ische Analyse zu in eg ie en. Diese In eg a ion wi d uns ein ie e es
Ve s ändnis de Auswi kungen au den Lese geben. Du ch die seman ische Analyse de
lexikalischen Taxonomie wollen wi na a i e Elemen e iden i izie en, die dem Tex inhä en
sind, wodu ch die Zu e lässigkei de Tex a ibu ion bei
Au o scha siden i ika ions e ah en e höh wi d.
Dankba kei
The sys em has been c ea ed wi hin a p ojec  suppo ed by he B i ish
EmbassyinKyi andca iedou bya eamo educa o sand esea che so  he
Uk ainische Sp ache und angewand e Linguis ik, Ta as She chenko Na ional
Uni e si ä on Kiew.
Wi möch en unse e au ich ige Dankba kei an die S uden en des Bildungsp og amms "App
(Compu e ) Linguis ics and English Language" de Ta as She chenko Na ional Uni e si y in Kiew
ausd ücken. Sie haben ih e Zei , ih Fachwissen und ih e Bemühungen zu Bildung des Ko pus
de uk ainischen oxischen Tex e beige agen. Wi sind Oksana Goncholochko, einem
Bachelo -Absol en unse es Bachelo -P og amms, besonde s dankba ü die E s ellung eines
onalen Wö e buchs de uk ainischen Sp ache, mi dem wi eine Lis e on emo ionalen
Nega i en zusammenges ell haben.
hiss udywi h hei ad iceandconsul a ions.
 S aipsniai / A icles 243
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
REFERENCES
ALIAS–Au oma ed Linguis ic Iden i ica ion & Assessmen Sys em.A ailablea :h ps://
alias echnology.com/alias-o e iew/.
Alkomah Fa imah, Ma Xiaogang 2022:ALi e a u eRe iewo Tex ualHa e
Speech De ec ion Me hods and Da ase s. – In o ma ion 13(6), 273. DOI: 10.3390/
in o13060273.
A gamonShlomo2007:In e p e ingBu ows’sDel a:Geome icandP obabilis ic
Founda ions. – Li e a y and Linguis ic Compu ing 23, 131–147. DOI: 10.1093/llc/
qn003.
Bone i And ea, Ma ínez-Sobe  Ma celino, To es Julio, Vega Jose,
Pelle in Sebas ien, Vila-F ancés Joan 2023:Compa isonbe weenMachine
Lea ningandDeepLea ningApp oaches o  heDe ec iono ToxicCommen son
SocialNe wo ks.–Applied Sciences13(10),6038.DOI:10.3390/app13106038.
Buk Solomija 2021: Long p ose ic ion by I. F anko: elec onic co pus, equency
dic iona ies and o he in e disciplina y con ex s,LNUimeniI anaF anka[I anF anko
Na ionalUni e si yo L i ].
Bu ows John 2002: “Del a”: a Measu e o  S ylis ic Di e ence and a Guide o
LikelyAu ho ship.–Li e a y and Linguis ic Compu ing17(3),267–287.DOI:10.1093/
llc/17.3.267.
Bu ows S e en, Ui denboge d Alexand a, Tu pin And ew 2014:
Compa ing echniques o au ho shipa ibu iono sou cecode.–So wa e: P ac ice
and Expe ience44(1),1–32.DOI:10.1002/spe.2146.
CanhasiE can,Kad iuA bana,MisiniA a2022:ASu eyonAu ho ship
Analysis Tasks and Techniques. – SEEU Re iew 17(2), 153–167. DOI: 10.2478/
seeu -2022-0100.
Chuhuno Vadym2009:Diahnos yka psykho e apii a psykho e ape ychnyi diahnoz,
Kha ki :Nauka.
Da chuk Na alia, So okin Vik o  2022: Pa ame e iza ion o  he Uk ainian
Tex  Co pus based on pa sing. – Compu a ional Linguis ics and In elligen Sys ems,
P oceedings o  he 6 h In e na ional Con e ence on Compu a ional Linguis ics and
In elligen Sys ems(COLINS-2022)1:Main Con e ence,eds.V.Ly yn,N.Sha ono a,
I.Jonek-Kowalska,A.Kowalska-S yczen,V.Vyso ska,Ye.Kup iiano ,O.Kanishche a,
O.Che ednichenko,Th.Hamon,N.G aba ,Poland,12–13May,2022,256–265.
Da chuk Na alia, Zuban’ Oksana, So okin Vik o  2024: On s ylis ic
di e en ia ion in Uk ainian poe ic speech based on he syn ac ic s uc u e o 

NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
244 Ac aLinguis icaLi huanicaXCI
sen ences.–Bulle in o Ta as She chenko Na ional Uni e si y o Kyi . Li e a y S udies.
Linguis ics. Folklo e S udies1(35),5–10.DOI:10.17721/1728-2659.2024.35.01.
Da čuk Na alija 2013: Kompju e ne ano u annja uk ajins’koho eks u: ezul’ a y i
pe spek y y,Kyi :Os i aUk ajiny.
Da čukNa alija,Vasyl’je aI yna,Vasyl’je Oleksij2021:Vek o namodel’
analizus ylis yky eks i .–Uk ajins’kyj izyčnyj žu nal66(5),373–378.
Ede  Maciej 2015:Doessizema e ?Au ho shipa ibu ion,smallsamples,big
p oblem.–Digi al Schola ship in he Humani ies30(2),167–182.DOI:10.1093/llc/
q 066.
Ede  Maciej, Rybicki Jan 2013:Dobi dso a ea he  eally lock oge he ,o 
how ochoose ainingsamples o au ho ship a ibu ion.–Li e a y and Linguis ic
Compu ing28(2),229–236.DOI:10.1093/llc/ qs036.
E e S e an,P oislThomas,SchöchCh is o ,JannidisFo is,Piels öm
S e en, Vi  Tho s en 2015:ExplainingDel a,o :Howdodis ancemeasu es
o  au ho ship a ibu ion wo k? – Co pus Linguis ics 2015: Abs ac  Book, Uni ed
Kingdom,21July2015,eds.F.Fo ma o,A.Ha die,Lancas e :UCREL.A ailablea :
h ps://zenodo.o g/ eco ds/18308.
Gup aSh iyaT.P.,SahooJaja iK.,RoulRajend aK.2019:Au ho ship
iden i ica ionusing ecu en neu alne wo ks.–ICISDM’19:P oceedingso  he2019
3 dIn e na ionalCon e enceonIn o ma ionSys emandDa aMining,Uni edS a es,
06 Ap il 2019, New Yo k: Associa ion o  Compu ing Machine y, 133–137. DOI:
10.1145/3325917.3325935.
Hoo e  Da id 2004:Tes ingBu ows’sdel a.–Li e a y and Linguis ic Compu ing
19(4),453–475.DOI:10.1093/llc/19.4.453.
Hoo e Da id2005:Del a,Del aP ime,andMode nAme icanPoe y:Au ho ship
A ibu ionTheo yandMe hod.–ACH/ALLC 2005:P oceedingso  he17 hJoin 
In e na ionalCon e enceo  heAssocia ion o Compu e sand heHumani ies(ACH)
and heAssocia ion o Li e a yandLinguis icCompu ing,Canada,15–18June2005,
Uni e si yo Vic o ia:Humani iesCompu ingandMediaCen e,79–80.
JannidisFo is,Piels ömS e en,SchöchCh is o ,Vi Tho s en2015:
Imp o ingBu ows’Del a–Anempi icale alua iono  ex dis ancemeasu es.–DH
2015:Digi alHumani ies,Abs ac so  heGlobalDigi alHumani iesCon e ence11,
Aus alia,29June–3July2015,Sydney.DOI:h ps://zenodo.o g/ eco ds/1321296.
Joulin A mand, G a e Edoua d, Bojanowski Pio , Douze Ma hijs,
JégouHé e,Mikolo Tomas2016:Fas Tex .zip:Comp essing ex classi ica ion
models.–A Xi e-p in s 1612.03651.DOI:10.48550/a Xi .1612.03651.
 S aipsniai / A icles 245
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
Ka aso  Vi alii, Le chenko Olena 2024:S a is icalp o ileo O.Zabuzhko’s
idios yle. – CEUR Wo kshop P oceedings 3722: P oceedings o he 8 h In e na ional
Con e ence on Compu a ional Linguis ics and In elligen Sys ems,L i ,Ap il12–13,2024,
251–264.
KhanTalhaF.,Anwa Waheed,A shadHume a,AbbasSyedN.2023:
An Empi ical S udy on Au ho ship Ve i ica ion o  Low Resou ce Language Using
Hype -Tuned CNN App oach. – IEEE Access 11, 80403–80415. DOI: 10.1109/
ACCESS.2023.3299565.
Khomy skaI yna,TeslyukVasyl,Bazyle ychI yna,Ka amyshe aI yna
2023:Au oma edIden i ica iono Au ho ialS yles.–CEUR Wo kshop P oceedings:
P oceedings o he 7 h In e na ional Con e ence on Compu a ional Linguis ics and In elligen
Sys ems, 3396, Kha ki , Ap il 20–21, 2023. A ailable a : h ps://ceu -ws.o g/Vol-
3396/pape 26.pd .
KUM–Ko pus uk ajins’koji mo y:Linh is yčnyjpo alMo a.in o.A ailablea :h p://
www.mo a.in o/co pus.aspx.
LIWC-22–Linguis ic Inqui y and Wo d Coun .A ailablea :h ps://www.liwc.app.
Lo o ska Na aliia 2022:S a is icalCha ac e is icso RomanI anychuk’sIdiolec 
(BasedonW i e ’sTex Co pus).–CEUR Wo kshop P oceedings3171,487–500.
LupeiMaksym,Mi saAlexande ,Repa iukVolodymy ,Sha kanVasyl
2020: Iden i ica ion o  au ho ship o  Uk ainian-language ex s o  jou nalis ic s yle
usingneu alne wo ks.–Eas e n-Eu opean Jou nal o En e p ise Technologies1/2(103),
30–36.DOI:10.15587/1729-4061.2020.195041.
McInnes Leland, Healy John, Mel ille James 2020: UMAP: Uni o m
Mani oldApp oxima ionandP ojec ion o DimensionReduc ion.–A Xi e-p in s
1802.03426.DOI:10.48550/a Xi .1802.03426.
Meie Tabea,BoydRyan,Pennebake James,MehMa hiasl,Ma in
Mike,Wol Ma kus,Ho nAnd ea2019:“LIWCau Deu sch”:Thede elopmen ,
psychome ics, and in oduc ion o  DE-LIWC2015. – PsyA Xi P ep in s. DOI:
10.31234/os .io/uq8z .
Rybicki Jan, Ede  Maciej 2011: Deepe  Del a ac oss Gen es and Languages:
DoWeReallyNeed heMos F equen Wo ds?–Li e a y and Linguis ic Compu ing
26(3),315–321.DOI:10.1093/llc/ q 031.
Sa oy Jacques 2015: Compa a i e e alua ion o  e m selec ion unc ions o 
au ho shipa ibu ion.–Digi al Schola ship in he Humani ies30(2),246–261.DOI:
10.1093/llc/ q 047.
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
246 Ac aLinguis icaLi huanicaXCI
Tex A ibu o  1.0 2024: Tex A ibu o 1.0: The sys em o au oma ic s ylome ic
analysis o Uk ainian media ex s.A ailablea : a.mo a.in o.
Volos Yana, Le chenko Olena 2023:S a is icalp o ileo Vale ieShe chuk’s
idios yle(mo phologicalle el).–Slobozhan Scien i ic Bulle in, Se . Philology,3,32–36.
DOI:10.32782/philspu/2023.3.6.
Zuban’Oksana2019:TheMo phemicSys emS ylome icAnalysiso  heUk ainian
Poe s’ Idios yles: Co pus Based App oach. – Linh is yčni s udiji 38, 96–104. DOI:
10.31558/1815-3070.2019.38.15.
Uk ainisches Medien ex -Au oma isches
S ilome ie-Analysesys em
Tex A ibu o 1.0
(Me hoden, Maßnahmen, Funk ionali ä en)
SANTRAUKA
Tex A ibu o s a is isch pa ame isie die Au o i ä s- und Neu ausp üchungen des uk ainischen
Tex es. Naudodama iele Pa ame inia 15 e wende s a is ische Index-Ringie ung, Tex A ibu o
beschūdina au o ines s ilis ines besonde hei en. In eg eoja die Me hode de Komponen enanalyse, die
P ü ung des Tex es, die P ü ung de Komponen enanalyse, die P ü ung des Tex es, die P ü ung des
Sys ems, die P ü ung des Tex es, die P ü ung des Tex es, die P ü ung des Tex es, die P ü ung des
Tex es.
i į e in i eks opanašumą,ypačpoli iniodisku soi nemandagioskomunikacijosžinias-
klaidoskon eks eRusijosi Uk ainoska ome u.S aipsnyjepab ėžiamap ak inėi  eo i-
nė„Tex A ibu o “ eikšmė,demons uojan jose ek y umądidelėms eks oapim imsi 
iksliomsanali inėmsgalimybėms.Sėkmingasžodynais, aisyklėmispag įs ųi mašininio
be ykdomų y imų ezul a aiy anuodugniaiišnag inė i,obūsimosjųk yp ysnus a omos
siekian išplės ikalbinįko pusąi  obulin imašininiomokymosimodelius,siekian page-
in i ikslumąi p i aikomumą.
S aipsniai A ikel 247 Į eik a
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
2024 m. No embe 25 d.
Na alia Da chuk
Ta as She chenko Na ionale Uni e si ä on Kiew
Die S aße Volodymy ska 60
Kiew, 01033, Uk aine
n.da [email protected]
OKSANA ZUBAN (in de anzösischen Sp ache)
Ta as She chenko Na ionale Uni e si ä on Kiew
Die S aße Volodymy ska 60
Kiew, 01033, Uk aine
[email protected]
VALENTYNA ROBEIKO (englisch)
Ta as She chenko Na ionale Uni e si ä on Kiew
Die S aße Volodymy ska 60
Kyi , 01033, Uk aine
alen yna. obeik[email p o ec ed]
YULIIA TSYHVINTSEVA Ta as She chenko
Na ionale Uni e si ä on Kiew
Die S aße Volodymy ska 60
Kiew, 01033, die Uk aine
Ins i u ü die uk ainische Sp ache de
Na ionalen Akademie de Wissenscha en de Uk aine
Mykhailo H ushe skyi S aße 4
Kiew, 01001, Uk aine
Juli o [E-Mail geschü z ]
VICTOR SOROKIN (englisch)
Ta as She chenko Na ionale Uni e si ä on Kiew
Die S aße Volodymy ska 60
Kiew, 01033, Uk aine
ic o .so ok[E-Mail geschü z ]
Mykola Sazoch
Ins i u ü In o ma ions echnologien und -sys eme
o he Na ional Academy o Sciences o Uk aine
40 Akademika Hlushko a A enue
Kyi , 03187, Uk aine
s[email p o ec ed]om