scieee Science in your language
[en] (orig) [lt] [de] [fr] [it] [es] [pt]

The System for Automatic Stylometric Analysis of Ukrainian Media Texts TextAttributor 1.0 (Techniques, Means, Functionality)

Abstract

This paper presents the structure, algorithms, implementation, and experimental results of the automatic TextAttributor system developed by the authors of the paper for statistical Ukrainian-language text parameterisation using a multiparametric set of statistical indices, characterising the author’s text style and applicable to authorship attribution tasks. Based on the created linguistic resources and software, the system generates a linguistic analysis based on the calculated statistical indices and performs a comparative study of two texts. An additional criterion for statistical indexing is the text toxicity index, calculated through the method of verbal identification of toxic sentiment. Authorship and toxicity detection tasks are addressed using two methods: dictionary- and rule-based statistical calculations and machine learning. The current findings implemented in the beta version of TextAttributor are thoroughly examined.

Read accessible full text
Machine-translated document

This is a machine-generated translation of the original document and may contain errors, omissions, or changes in meaning. Do not rely on this translation for quotations, citations, or authoritative references. Please consult and cite the original document.

The System for Automatic Stylometric Analysis of Ukrainian Media Texts TextAttributor 1.0 (Techniques, Means, Functionality)

Author: Nataliia Darchuk; Oksana Zuban; Valentyna Robeiko; Yuliia Tsyhvintseva; Victor Sorokin; Mykola Sazhok
Year: 2024
DOI: 10.35321/all91-09
Source: https://journals.lki.lt/actalinguisticalithuanica/article/download/2328/2430
 S aipsniai / A icles 223
NATALIIADARCHUK
Ta asShe chenkoNa ionalUni e si yo Kyi
ORCIDid:o cid.o g/0000-0001-8932-9301
Campi di ice ca: linguis ica in o ma ica, linguis ica dei co pus,
linguis ica quan i a i a, g amma ica e seman ica del
Lingua uc aina.
OKSANA ZUBAN
Ta as She chenko Na ional Uni e si y o Kyi (ORCID id: o cid.o g
00000002-2644-3892) Campi di ice ca: linguis ica in o ma ica,
compe enza linguis ica, linguis ica quan i a i a, g amma ica e
seman ica della lingua.
Lingua uc aina.
Valen ina Roubeiko
Ta as She chenko Na ional Uni e si y o Kyi ORCID id:
o cid.o g/0000-0003-2266-7650 Campi di ice ca: analisi del
linguaggio, iconoscimen o e sin esi, one ica, elabo azione
del linguaggio na u ale.
YULIIA TSYHVINTSEVA
Ta as She chenko Uni e si à Nazionale di Kie , Is i u o
della Lingua Uc aina dell'Accademia Nazionale delle Scienze
dell'Uc aina ORCID id: o cid.o g/0000-0002-9684-3840 Campi di
ice ca: neologia uc aina, lessicologia e lessicog a ia.
VICTOR SOROKIN
Ta as She chenko Uni e si à Nazionale di Kie
ORCIDid:o cid.o g/0000-0002-3637-0535
Fieldso  esea ch:au oma icsyn axanalysis,au oma ic
analisi seman ica, elabo azione del linguaggio na u ale.
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
224 Ac a Linguis ica Li huanica XCI
Mykola Sajok
Is i u o pe le ecnologie e i sis emi dell'in o mazione
dell'Accademia nazionale delle scienze dell'Uc aina
ORCID id: o cid.o g/0000-0003-1169-6851
Campi di ice ca: analisi del linguaggio, iconoscimen o e
sin esi, elabo azione del linguaggio na u ale.
DOI: doi.o g/10.35321/all91-09
THESYSTEMFORAUTOMATIC
STYLOMETRICANALYSIS
OFUKRAINIANMEDIA
TEXTSTEXTATTRIBUTOR1.0
(TECNICHE, SOCIALI,
Funzionali à)
Uk ainos žiniasklaidos eks ų au oma inės s ilome inės
analizės sis ema Tex A ibu o 1.0
(me odi, s umen i, unzioni)
Anno azione
Ques o documen o p esen a la s u u a, gli algo i mi, l'implemen azione e i isul a i spe imen ali del sis ema
au oma ico Tex A ibu o s iluppa o dagli au o i dello s udio s a is ico pe la pa ame izzazione
s a is ica del es o in lingua uc aina u ilizzando un insieme mul ipa ame ico di indici s a is ici, che
ca a e izzano lo s ile del es o dell'au o e e applicabili ai compi i di a ibuzione dell'au o e.Sulla base delle
iso se linguis iche e del so wa e c ea i, il sis ema gene a un'analisi linguis ica basa a sugli indici s a is ici
calcola i e esegue uno s udio compa a i o di due es i.
L'analisi linguis ica compu azionale, la lingua uc aina, l'analisi dei sen imen i, l'a ibuzione
dell'au o e, la s ilome ia, la classi icazione del es o. una nuo a di ezione che può esse e
S aipsniai A icoli 225 e 225
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
ANOTACIJA
Šiame s aipsnyje p is a oma s aipsnio au o ių suku os au oma inės sis emos
Tex A ibu o , ski os s a is iniam uk ainiečių kalbos eks ų pa ame iza imui sp endžian naudojan
daugiapa ame inį s a is inių odiklių inkinį, apibūdinan į au o iaus s ilių i aikys ės au o ys ės
užda iniams, s uk ū a, algo i mai, įdiegimas i ekspe imen iniai ezul a ai. Suku ų ling is inių i
p og aminių pag indu sis ema gene uoja ling is inę analizę pagal s a is inius indeksus i a a a s a inių
eks ų lyginamąją analizio s a is inio indeksa imo k i e ijus y a pag įmas nuokas sukeliančio indeksas,
aikan nuokaseli ma ema ikos me odą.
ezul a ai,gau inaudojan is„Tex A ibu o “be a e sija,išsamiaiišnag inė i.
 ESMINIAIŽODŽIAI:kompiu e inėling is ika,uk ainiečiųkalba,jausmingumoanalizė,
1. INTRODUZIONE
Tex ological esea chgainednewscien i icimpo ancewi h head ancemen 
o compu a ionallinguis icsme hods,whichcon ibu ed o he o ma iono a
conside a a la ex ologia digi ale. all'in e no di ques a disciplina eme gen e, concepdiamo la
ex ologia digi ale come s u amen o di ecniche linguis iche di co pus au oma izza e,
accoppia e con modelli ma ema ici pe l'analisi quan i a i a del es o. Guida i dai compi i
a uali della linguis ica quan i a i a mode na e dell'elabo azione del linguaggio na u ale, il
nos o eam ha s iluppa o un sis ema pe l'analisi linguis ico-s a is ica au oma ica dei es i
mul imediali, che è s a o implemen a o come un'applicazione web chiama a Tex A ibu o 1.0
(Tex A ibu o 2020).
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
226 Ac aLinguis icaLi huanicaXCI
enhancingin o ma ionde ences a egiesdu ing heongoingRussian-Uk ainian
Il conce o di s iluppo di un sis ema au oma ico di s umen i in lingua uc aina del Co pus
ex a ibu iona ose om heanalysiso  esea chin he ieldo Uk ainian
co puslinguis ics(Da čuk 2013)ands a is icals udieso  heau ho ’s s yle
(Da čuke al.2021;Da chuk,So okin2022;Zuban’2019)conduc edusing he
linguis ico uc aino (KUM) da pa e degli au o i del p oge o. L'analisi dei sen imen i iden i ica
Du ing he de elopmen  o  he Tex A ibu o  sys em, he ollowing
me hodswe eemployed:componen analysis,dis ibu i eanalysis,andcon en 
analysis.Con en analysis,aquan i a i eandquali a i eme hod o ex ac ing
au oma icamen e la onali à del es o in base sia alla colo azione emo i a che alla alu azione
dell'au o e di e en i o ogge i, che è s a a aggiun a u ilizzando calcoli s a is ici basa i su
diziona i e egole. La s u u a s a is ica di un es o, in esa come modello quan i a i o,
consen e l'iden i icazione del suo s ile unzionale, dell'au o e e del pe iodo di c eazione.In
ques o la o o, i componen i della s u u a s a is ica sono s a i es a i analizzando le
ca a e is iche s a is iche lessicali e g amma icali u ilizzando ecniche di indicizzazione e
me iche di dis anza euclidiane.La dis anza euclidiana, che misu a la dis anza a due pun i in
uno spazio euclidiano n-dimensionale, è una delle me iche più u ilizza e nella s a is ica pe
l'analisi di clus e in linguome ia e a ibuzione di au o e.
The no el y o  he esul s is he i s  implemen a ion in compu a ional
linguis ics o  an au oma ed mo pho-syn ac ic-seman ic s ylome ic model
Il modello s ilome ico è un insieme di pa ame i s a is ici di un es o (lessico, mo ologico,
sin a ico, ecc.), in base ai quali iene e e ua a un'analisi compa a i a di ques o es o con il
modello s ilome ico usso dello s ile unzionale. secondo noi, è possibile o ene e un sis ema
igo oso, de e minis ico, scien i icamen e onda o di ca a e is iche comuni e dis in i e in s ili,
gene i, ecc. U ilizzando me odi s a ici nella cos uzione di un modello s ilome ico. pe la p ima
ol a, il modello s ilome ico in oduce il pa ame o di ossici à, che de inisce
ca a e is icamen e i es i di indice du an e la gue a uc aino-uc aina.
S aipsniai A icoli 227 e 227
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
au ho shipinUk ainian:1) h oughdic iona yand ule-basedapp oaches,and
2) iamachinelea ning,includingdeeplea ning.
2. La o i co ela i
Nella mode na linguis ica uc aina, sono s a i condo i sos anziali s udi linguis ici-s a is ici
sugli idiole i di sc i o i e poe i uc aini, a cui Ta as She chenko, Lesya Leshynka, Vasyl S us
(Zubano , 2019), I an F anko (Buko , 2021), Roman I anychuk (Lo ka), Vale y She chuk (Volos,
Le chenko, 2023), Ma ia Ma ios, Ya as And ukho ych, Oksana Zabuzhko (K4, 2020), Le chenko,
I an D ach, Mykola Ving ano sky (Da chuk e al., 2020) a gli al i. Ques i s udi sono s a i
condo i su campioni app esen a i i ( es i lunghi) u ilizzando p e alen emen e uno o più di
cinque pa ame i s a is ici, senza applica e enomeni linguis ici.
La maggio pa e dei sis emi e dei modelli esis en i si concen ano anche sull'uso di singoli
moduli linguis ico-s a is ici pe iden i ica e uno o pochi pa ame i di es o, pe lo più o mali
(n-g ammi, pa ole più equen i, le e e) (Ede 2015; Canhasi e al. 2022; LIWC-22; Khomy ska e
al. 2023; ALIAS).
L'a ibuzione dei es i è a i amen e s iluppa a negli s udi es uali s anie i, in
pa icola e, il me odo di Bu ows (Bu ows 2002; A gamon 2007; Ede , Rybicki 2013; Bu ows
e al. 2014) l'e icacia è es a a in mol i s udi su g andi olumi di da i es uali di a i s ili
come: p osa inglese dei p imi anni del XX secolo (Hoo e 2004); poesia inglese mode na
(Hoo e 2005); ope e poe iche in la ino (Rybicki, 2011); ope e in p osa di g andi gene i in
inglese, ancese, i aliano, edesco, polacco, unghe ese, nonché in la ino e a abo (Rybicki,
2011; E e e al. 2015; Jannidis e al. 2015).

NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
228 Ac aLinguis icaLi huanicaXCI
hea ibu iono speecheso Ame icanp esiden s(Sa oy2015).Onemo e
Il me odo di analisi linguis ica au oma izza a chiama o "Linguis ic Inqui y and Wo d Coun "
(LIWC) è implemen a o come applicazione comme ciale e ada a o a di e se lingue (Meie e
al. 2019; LIWC-22). Negli ul imi anni, i compi i di a ibuzione au oma ica del es o hanno
u ilizza o p e alen emen e me odi s ilome ici basa i su egole o me odi di app endimen o
p o ondo (Ede 2015; Canhasi e al. 2022).
2) I isul a i sono es emamen e dipenden i dal nume o di classi ( ipi di ossici à, au o i), gene e,
lunghezza del es o e, sop a u o, dal olume del co pus di es o adegua amen e s u u a o
u ilizza o pe la p ocedu a di addes amen o. 3) Pe an o, l'ele a a p ecisione nelle a i i à di
ile amen o della ossici à e dell'odio (CNN, LSATM, BERT) in combinazione con me odi s ilome ici
(Gup a e al. 2019; Canhasi e al. 2022; Bone i e al. 2023) sono basa e su un sis ema di analisi
au oma izza a dei es i di es o (GREATATION) che u ilizza un modello di 15000 documen i, u ilizzando
un modulo di iden i icazione di 6000 au o i e 15000 au o i. 3) Du an e l'esecuzione del p ocesso di
analisi del sis ema di analisi del ca a e e linguis ico, sono s a i s iluppa i i seguen i pa ame i:
u n, o co po acon ainingless han1500documen s he epo edaccu acy
isabou 70%(Khane al.2023).Fo  heUk ainianlanguage, ex au ho ship
(Lupeie al.2020),mo eo e ,suchsys emsdono p oducelinguis icexpe ise
andcanno beusedas ools o linguis ic esea ch.
 S aipsniai / A icles 229
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
1. Tokenizzazione del es o: suddi isione del es o in asi e pa ole pe l'analisi.
2. E iche a u a mo ologica: Assegnazione di e iche e alle pa ole in base
alle lo o o me g amma icali.
3. Analisi con es uale: aggio namen o delle e iche e mo ologiche
igua dan i il con es o.
4. Analisi sin a ica: s abili e elazioni bina ie a le pa ole nelle asi pe
comp ende e la lo o s u u a g amma icale. 5. S abilimen o di elazioni
sin a iche: De e minazione di connessioni sin a iche basa e su egole
p ede ini e.
6. co ispondenza del ocabola io emo i amen e nega i o: iden i ica e pa ole da un
insieme p ede ini o di ocabola io nega i o. 7. Valu azione dei pa ame i s a is ici:
alu azione dei pa ame i s a is ici pe il es o di inpu u ilizzando ocabola i di
equenza compila i au oma icamen e. 8. Visualizzazione dei isul a i: p esen azione
dei isul a i della pa ame izzazione s a is ica
g aphically,wi hempi ical aluesandcon idencein e als.
9.Compa ison o Resul s:Visualizings a is icalpa ame e iza ionou comes
o  womedia-s yle ex s, acili a ingcompa ison.
10.Euclidean Dis ance E alua ion:Quan i ying hedissimila i ybe ween
womedia-s yle ex s.
11. Gene azione di pa e i di espe i: gene a e due pa e i di espe i: uno
sull'a ibuzione del es o e l'al o sulla ossici à del es o a a e so l'esame
linguis ico. 12. Rile amen o della ossici à e iden i icazione dell'au o e: S u a e le
ecniche di app endimen o au oma ico, in pa icola e i modelli di e i neu ali, pe
ile a e la ossici à e iden i ica e gli au o i.
I isul a i del sis ema sono o ganizza i nelle seguen i pa izioni: G uppo di indice di
a ibuzione del es o, Opinione di espe i sull'a ibuzione del es o, Con on o
dell'a ibuzione del es o, Espe ienza linguis ica sulla ossici à del es o e Re e neu ale
Opinioni.
In Tex A ibu ion Index G oup (Fig. 1), s a is ical pa ame e s a e
o ganizedbasedon heinpu  ex :column1displays heIndex i le,column
2 p esen a il alo e nume ico empi ico e la colonna 3 o nisce un i e imen o isi o
con on ando il alo e empi ico dell'indice con l'in e allo di iducia
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
230 Ac a Linguis ica Li huanica soglie XCI (in e io i e supe io i) de i a e da es i di s ile
media ico uc aino. Il alo e nume ico empi ico è app esen a o sulla scala da un iangolo
in e i o iempi o. FIGURA 1: Un ammen o del isul a o dell'a ibuzione del es o In Tex
A ibu ion Expe Opinion (Fig. 2), p esen iamo conclusioni igua dan i le ca a e is iche
s a is iche linguis iche ipiche o indi iduali es a e dal es o analizza o pe ogni indice
s ima o. Ques e conclusioni de i ano dalle ispos e alla domanda: Il alo e nume ico
dell'indice ien a nell'in e allo di iducia dello s ile media ico della lingua uc aina? Sulla base
di un con on o a i alo i nume ici con i alo i di soglia dell'in e allo di iducia, il sis ema
gene a e possibili ispos e (segni ipici di s ile media ico, segni di s ile idios ile in e io e
allo s ile media ico no male).
Nel con on o dell'a ibuzione del es o (Fig. 4, so osezione 4.2), al momen o della
selezione "Calcola e la dis anza e o iale", i da i abula i engono p on amen e
aggio na i come segue: Colonna 1 elenca i es i inse i i dall'u en e insieme al es o
p eceden emen e analizza o; Colonna 2 mos a il nume o di asi in ogni es o; Colonna 3
mos a il nume o di pa ole; Colonna 4 p esen a la dis anza euclidea a il es o
analizza o e ogni es o nella abella; Colonna 5, e iche a a "Compa a e",
ini ia esanau oma iccompa isono s a is icalindicesbe ween heanalyzed ex 
and heselec ed ex .Uponac i a ing heco esponding“Compa e”elemen ,
comp ehensi ein o ma ionon hes a is icalcompa isonbe ween wo ex sis
p o idedin he“Tex A ibu ionIndices”g oup(Fig.3).
S aipsniai A icoli 231 e 231
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
FIGURA 2: Un esempio di modello di opinione di espe i gene a o, che quan i ica la ossici à del
In Linguis ic Expe ise o Tex Toxici y (subsec ion 4.3), a lexical-
seman icin e p e a iono  hecalcula ed oxici yindexisp esen ed(Fig.6).
InNeu al Ne wo k Opinionswep esen  heou pu o ou deeplea ning
es o su una scala da 0 (non ossica) a 1 (al a ossici à). 4. ATTRIBUZIONE DEI TESTI IN LINGUA
UCRAINA: espe imen i,
Risul a i e discussioni
4.1. Indici di pa ame izzazione s a is ica Il modello s ilome ico s iluppa o isol e due
compi i: 1) Iden i ica e le ca a e is iche indi iduali dello s ile di un au o e (s ilome ia); 2)
Valu a e la somiglianza a due es i in base a pa ame i linguis ici e s a is ici
(a ibuzione).
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
Ac a Linguis ica Li uanica XCI Oggi, la componen e dell'in o mazione è di en a a
pa icola men e impo an e nella gue a ib ida. Pe an o, il ma e iale del nos o s udio è
s a o un co pus di ice ca di es i media ici online di disco so poli ico con un olume di 10 milioni
di pa ole. Usiamo il e mine " es o ossico" in senso ampio. Ques i es i sono ca a e izza i da
moles ie, minacce, osceni à, cybe -bullying, olling e es i di odio basa i sull'iden i à e
con engono emo iogeni, che sono enomeni e ogge i che causano emozioni nega i e in una
pe sona (ad esempio gue a, aid ae eo, co uzione). Ques o p oge o mi a a a de e mina e il
po enziale pe la ealizzazione di sen imen i nega i i nei es i uc aini e a s iluppa e un sis ema
au oma izza o pe l'iden i icazione di con enu i ossici.Ques o compi o comp ende a due
so o compi i consecu i i: p imo, s iluppa e un sis ema di esame linguis ico del es o con la
de e minazione degli indici di ossici à a a e so l'analisi del diziona io e me odi basa i su
egole; secondo, cos ui e un se di da i di addes amen o pe scopi di app endimen o
au oma ico e lo s iluppo di una e e neu ale pe la p e isione degli indici di ossici à del es o.
Gua diamo il comple amen o del p imo compi o, che igua da a gli indi idui della cos uzione
(1620), i e mini osceni (613), e il linguaggio o ensi o (787). 3) F asi ossiche: una accol a di 1500
esp essioni idioma iche che asme ono emozioni nega i e. Gli esempi includono g imacce come
o alexicog aphicda abasehousing h eedis inc dic iona ies:
1)Emo iogendic iona y:Acompila iono 5000wo ds(acco ding o he
meaningso lexical-seman ic a ian s)wi hnega i esen imen  ones, a edon
ascaleo –2.Examplesincludeimmo al,impuni y,b ibe yands eal;
2) Ha e Speech Dic iona y: Comp ising 3000 wo ds, including names o 
una scimmia, bacia il culo e ap e la bocca.
Ogni oce in ques i elenchi è s a a anno a a con ca a e is iche seman iche, con il Diziona io di
disco si di odio con 18 ca a e is iche e l'elenco di asi ossiche con 26. Ad esempio, le pa ole
nel Diziona io di disco si di odio sono s a e e iche a e con ca a e is iche come […]s[…] pe
sessismo, […] […] pe azzismo e […]e[…] pe e à.
L'indice di ossici à del es o è calcola o u ilizzando la o mula:
I ox = (e + |K| (m + )) n * 10, qui, n è il olume di es o; e è il nume o di pa ole emo i e; m è il
nume o di pa ole di odio; è il nume o di asi ossiche; K è un coe icien e pa i a […]2,
en a izza le pa ole di odio e le asi ossiche, che su una scala di

 S aipsniai / A icles 239
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
cinque ci e (+2, +1, 0, […]1, […]2) co ispondono a […]2. I alo i dell'indice a iano da 0 a
+1.
Ad esempio, l'indice di ossici à del es o "People wi h a ed pen (Люди с червоною ручкою) " (12
asi, 129 pa ole) è 1,01, indicando la sua al a ossici à, poiché la soglia pe ali b e i es i a da
0,1 a 0,7. Con empo aneamen e, il sis ema gene a i isul a i di un esame linguis ico au oma ico
della ossici à del es o ( i e i e alla igu a 6), che comp ende: 1) una mappa s a is ica delle
classi seman iche del ocabola io nega i o secondo i ma ca o i di classi icazione delle lis e
lexicog a iche (emogeni […] 5, ulga sen imen ismo […] 2); 2) un es o con pa ole speci iche di
sesso, e balizzando le ca ego ie della mappa s a is ica. Hai idea di quan o u sia as idioso?
S o s udiando i os i p o ili di p oposi o, sono cu ioso del mondo in cui i e e. Ques o mondo
mi a mol o pau a. Spe o since amen e che nella i a eale le nos e s ade non si
inc oce anno in nessuna ci cos anza.
(оці люди, які ходять з червоною ручкою і виправляють помилки в чужих
постах: ви хто взагалі такі? Ви хоч уявляеєте, як ви бісите? Я спеціально
вивчаю ваші профілі, мені цікаво в якому світі ви існуєте. Мене цей світ дуже
лякає. Щиро сподіваюся, що в реальному житті ми з вами не пересічемося
né pe i quali obs a in). Qui, il sis ema e idenzia au oma icamen e in g asse o le
seguen i pa ole con una componen e nega i a: e o i (помилки), al e pe sone (чужих),
as idiose (бисите), spa en ose (лякае).
FIGURA 6: Un ammen o di esame linguis ico au oma izza o della ossici à del es o
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
240 Ac a Linguis ica Li uanica XCI
5. MACHINELEARNINGAPPROACHES:
EXPERIMENTS,RESULTSAND
Discussioni
Concen a iamoci sulla seconda modali à di unzionamen o del sis ema Tex A ibu o
dedica o alle ecniche di app endimen o au oma ico: all'inpu pe l'addes amen o del modello,
abbiamo co pus di es o e iche a i in base all'obie i o di ogni so o-a i i à: (a) in o mazioni
di es o di ile amen o della ossici à e (b) iden i icazione dell'au o e.
alida ionse .The inalpe o manceindica o so  hemodela emeasu edona
con olse , akingin oaccoun  hea ailabili yo compu ing esou ces,which
a enecessa y o  hemodel’sope abili y.Aco pus o eachsub askhasbeen
de elopedinpa allelwi h heTex A ibu o machinelea ningcomponen ,so
5.1 Rile amen o della ossici à
Come isul a o di una se ie di s udi spe imen ali, è s a a scel a un'a chi e u a
compu azionalmen e e icien e basa a sul me odo as Tex e sui suoi s umen i (Joulin e al.
2016). Ques o me odo o nisce inco po azioni di pa ole e s ima la dis ibuzione di p obabili à dei
documen i in base a classi p ede ini e. Le pa ole sono p esen a e in o ma e o iale basa a
sulla di isione au oma ica delle pa ole in pa i (so o pa ole), che simula l'ape u a del diziona io.
Un co pus p epa a o di ci ca 12.000 documen i di es o è s a o u ilizza o pe la classi icazione
bina ia pe ile a e il con enu o ossico. il miglio isul a o, basa o sulla me ica gene alizza a
(F1 = 79,4%), è s a o o enu o con le seguen i impos azioni di ipe pa ame o: una dimensionali à
del e o e di 500 pa ole, un asso di app endimen o iniziale di 0,15, epoche di addes amen o,
con es o lessicale app esen a o da big amma, lunghezze di so o es e che anno da 2 a 5
ca a e i e una soglia di decisione di 56,0.4.
70%.
 S aipsniai / A icles 241
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
5.2 Iden i icazione dell'au o e
La ice ca spe imen ale dei modelli pe l'iden i icazione dell'au o e del es o è s a a
e e ua a u ilizzando una pa e del co pus di es i socio-poli ici disponibili al pubblico, in cui è
possibile iden i ica e la pe sona che è l'au o e del documen o. sono s a i seleziona i un o ale
di 702 es i di qua o au o i che hanno pubblica o il maggio nume o di documen i a 60 e 1000
ca a e i. I isul a i dimos ano la a ibili à di s iluppa e un sis ema e icace in g ado di
cop i e accu a amen e i es i di au o i su icien emen e app esen a i nel se di
o mazione. I modelli di e e neu ale addes a i sono s a i in eg a i nel sis ema
Tex A ibu o nell'a chi e u a "clien -se e ", do e sono p esen a i i isul a i di due
Thebes  esul ,acco ding o hegene alizedme ic(F1=81%),wasachie ed
wi h he ollowinghype pa ame e  alues:awo dembeddingspacedimension
compi i: (a) de e minazione della ossici à e (b) ile amen o dell'au o e.
adecision-making h esholdo 0.5.No ably, o ce ainmodelcon igu a ions,
hesensi i i y o heau ho wi h hela ges numbe o documen sin heda ase 
6. Conclusioni
Il sis ema Tex A ibu o è a ualmen e in ase di es pe a on a e i p oblemi di
a ibuzione e de e minazione della ossici à all'in e no dei es i in lingua uc aina.
784 es i in uc aino da 226 u en i.
I nos i isul a i dimos ano l'e icacia del nos o me odo, che p e ede la quan i icazione di
elemen i e bali basa i su pa ame i g amma icali e seman ici o mali,
pa icula ly o nega i eemo ionali y.Thisisachie ed h oughacombina ion
o dic iona yand ule-basedapp oaches,complemen edbymachinelea ning
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
I modelli di so o-pa ole hanno mos a o una maggio e e i ica e de-o uscazione
echniques.Expe imen almachinelea ning esea ch o  oxici yde ec ionand
au ho ship iden i ica ion by ex  allowed us oob ain esul s compa able o
esul so expe imen swi hsimila modelcha ac e is ics(numbe o documen s
dell'au o e, p o ilazione e dia izzazione dell'au o e, p o ilazione psicolinguis ica,
obus nessagains lexicalopennessand ex uale o s.
Theconduc ed esea chpa es heway o sol ingsuchp oblems o Uk ainian
as de ec ingand moni o ing oxic con en ,ha e speechandmisin o ma ion,
modellazione di s ile e acciamen o della on e di con enu i alsi, ecc. Lo schema di
analisi e a ibuzione del es o s iluppa o può esse e applica o anche ad al e lingue.
Gua dando in a an i, piani ichiamo di in eg a e il nos o s umen o au oma ico di
a ibuzione del es o e ile amen o della ossici à con analisi seman iche, sin a iche,
psicolinguis iche e sociolinguis iche. Ques a in eg azione ci da à una comp ensione più
p o onda dell'impa o sul le o e. U ilizzando l'analisi seman ica della assonomia lessicale,
mi iamo a iden i ica e elemen i na a i i ine en i al es o, aumen ando così l'a idabili à
dell'a ibuzione del es o nelle p ocedu e di iden i icazione dell'au o e.
Ring aziamen i
The sys em has been c ea ed wi hin a p ojec  suppo ed by he B i ish
EmbassyinKyi andca iedou bya eamo educa o sand esea che so  he
Chai di lingua uc aina e linguis ica applica a, Ta as She chenko Na ional
Uni e si à di Kie .
Vogliamo esp ime e il nos o since o app ezzamen o all'ambascia a b i annica a Kie pe il lo o
sos egno inanzia io a ques o p oge o di ice ca. Siamo g a i a S i lana Ya o ska e I yna
Bezko o ayna pe la lo o guida e assis enza du an e u o il p oge o. Un ing aziamen o
speciale a Kos ian yn Goncha enko pe l'o ganizzazione e il suppo o documen a io del
p oge o. Inol e, siamo g a i agli s uden i del p og amma educa i o "App (Compu e )
Linguis ica e Lingua inglese" dell'Uni e si à Nazionale Ta as She chenko di Kie .
hiss udywi h hei ad iceandconsul a ions.
 S aipsniai / A icles 243
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
REFERENCES
ALIAS–Au oma ed Linguis ic Iden i ica ion & Assessmen Sys em.A ailablea :h ps://
alias echnology.com/alias-o e iew/.
Alkomah Fa imah, Ma Xiaogang 2022:ALi e a u eRe iewo Tex ualHa e
Speech De ec ion Me hods and Da ase s. – In o ma ion 13(6), 273. DOI: 10.3390/
in o13060273.
A gamonShlomo2007:In e p e ingBu ows’sDel a:Geome icandP obabilis ic
Founda ions. – Li e a y and Linguis ic Compu ing 23, 131–147. DOI: 10.1093/llc/
qn003.
Bone i And ea, Ma ínez-Sobe  Ma celino, To es Julio, Vega Jose,
Pelle in Sebas ien, Vila-F ancés Joan 2023:Compa isonbe weenMachine
Lea ningandDeepLea ningApp oaches o  heDe ec iono ToxicCommen son
SocialNe wo ks.–Applied Sciences13(10),6038.DOI:10.3390/app13106038.
Buk Solomija 2021: Long p ose ic ion by I. F anko: elec onic co pus, equency
dic iona ies and o he in e disciplina y con ex s,LNUimeniI anaF anka[I anF anko
Na ionalUni e si yo L i ].
Bu ows John 2002: “Del a”: a Measu e o  S ylis ic Di e ence and a Guide o
LikelyAu ho ship.–Li e a y and Linguis ic Compu ing17(3),267–287.DOI:10.1093/
llc/17.3.267.
Bu ows S e en, Ui denboge d Alexand a, Tu pin And ew 2014:
Compa ing echniques o au ho shipa ibu iono sou cecode.–So wa e: P ac ice
and Expe ience44(1),1–32.DOI:10.1002/spe.2146.
CanhasiE can,Kad iuA bana,MisiniA a2022:ASu eyonAu ho ship
Analysis Tasks and Techniques. – SEEU Re iew 17(2), 153–167. DOI: 10.2478/
seeu -2022-0100.
Chuhuno Vadym2009:Diahnos yka psykho e apii a psykho e ape ychnyi diahnoz,
Kha ki :Nauka.
Da chuk Na alia, So okin Vik o  2022: Pa ame e iza ion o  he Uk ainian
Tex  Co pus based on pa sing. – Compu a ional Linguis ics and In elligen Sys ems,
P oceedings o  he 6 h In e na ional Con e ence on Compu a ional Linguis ics and
In elligen Sys ems(COLINS-2022)1:Main Con e ence,eds.V.Ly yn,N.Sha ono a,
I.Jonek-Kowalska,A.Kowalska-S yczen,V.Vyso ska,Ye.Kup iiano ,O.Kanishche a,
O.Che ednichenko,Th.Hamon,N.G aba ,Poland,12–13May,2022,256–265.
Da chuk Na alia, Zuban’ Oksana, So okin Vik o  2024: On s ylis ic
di e en ia ion in Uk ainian poe ic speech based on he syn ac ic s uc u e o 

NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
244 Ac aLinguis icaLi huanicaXCI
sen ences.–Bulle in o Ta as She chenko Na ional Uni e si y o Kyi . Li e a y S udies.
Linguis ics. Folklo e S udies1(35),5–10.DOI:10.17721/1728-2659.2024.35.01.
Da čuk Na alija 2013: Kompju e ne ano u annja uk ajins’koho eks u: ezul’ a y i
pe spek y y,Kyi :Os i aUk ajiny.
Da čukNa alija,Vasyl’je aI yna,Vasyl’je Oleksij2021:Vek o namodel’
analizus ylis yky eks i .–Uk ajins’kyj izyčnyj žu nal66(5),373–378.
Ede  Maciej 2015:Doessizema e ?Au ho shipa ibu ion,smallsamples,big
p oblem.–Digi al Schola ship in he Humani ies30(2),167–182.DOI:10.1093/llc/
q 066.
Ede  Maciej, Rybicki Jan 2013:Dobi dso a ea he  eally lock oge he ,o 
how ochoose ainingsamples o au ho ship a ibu ion.–Li e a y and Linguis ic
Compu ing28(2),229–236.DOI:10.1093/llc/ qs036.
E e S e an,P oislThomas,SchöchCh is o ,JannidisFo is,Piels öm
S e en, Vi  Tho s en 2015:ExplainingDel a,o :Howdodis ancemeasu es
o  au ho ship a ibu ion wo k? – Co pus Linguis ics 2015: Abs ac  Book, Uni ed
Kingdom,21July2015,eds.F.Fo ma o,A.Ha die,Lancas e :UCREL.A ailablea :
h ps://zenodo.o g/ eco ds/18308.
Gup aSh iyaT.P.,SahooJaja iK.,RoulRajend aK.2019:Au ho ship
iden i ica ionusing ecu en neu alne wo ks.–ICISDM’19:P oceedingso  he2019
3 dIn e na ionalCon e enceonIn o ma ionSys emandDa aMining,Uni edS a es,
06 Ap il 2019, New Yo k: Associa ion o  Compu ing Machine y, 133–137. DOI:
10.1145/3325917.3325935.
Hoo e  Da id 2004:Tes ingBu ows’sdel a.–Li e a y and Linguis ic Compu ing
19(4),453–475.DOI:10.1093/llc/19.4.453.
Hoo e Da id2005:Del a,Del aP ime,andMode nAme icanPoe y:Au ho ship
A ibu ionTheo yandMe hod.–ACH/ALLC 2005:P oceedingso  he17 hJoin 
In e na ionalCon e enceo  heAssocia ion o Compu e sand heHumani ies(ACH)
and heAssocia ion o Li e a yandLinguis icCompu ing,Canada,15–18June2005,
Uni e si yo Vic o ia:Humani iesCompu ingandMediaCen e,79–80.
JannidisFo is,Piels ömS e en,SchöchCh is o ,Vi Tho s en2015:
Imp o ingBu ows’Del a–Anempi icale alua iono  ex dis ancemeasu es.–DH
2015:Digi alHumani ies,Abs ac so  heGlobalDigi alHumani iesCon e ence11,
Aus alia,29June–3July2015,Sydney.DOI:h ps://zenodo.o g/ eco ds/1321296.
Joulin A mand, G a e Edoua d, Bojanowski Pio , Douze Ma hijs,
JégouHé e,Mikolo Tomas2016:Fas Tex .zip:Comp essing ex classi ica ion
models.–A Xi e-p in s 1612.03651.DOI:10.48550/a Xi .1612.03651.
 S aipsniai / A icles 245
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
Ka aso  Vi alii, Le chenko Olena 2024:S a is icalp o ileo O.Zabuzhko’s
idios yle. – CEUR Wo kshop P oceedings 3722: P oceedings o he 8 h In e na ional
Con e ence on Compu a ional Linguis ics and In elligen Sys ems,L i ,Ap il12–13,2024,
251–264.
KhanTalhaF.,Anwa Waheed,A shadHume a,AbbasSyedN.2023:
An Empi ical S udy on Au ho ship Ve i ica ion o  Low Resou ce Language Using
Hype -Tuned CNN App oach. – IEEE Access 11, 80403–80415. DOI: 10.1109/
ACCESS.2023.3299565.
Khomy skaI yna,TeslyukVasyl,Bazyle ychI yna,Ka amyshe aI yna
2023:Au oma edIden i ica iono Au ho ialS yles.–CEUR Wo kshop P oceedings:
P oceedings o he 7 h In e na ional Con e ence on Compu a ional Linguis ics and In elligen
Sys ems, 3396, Kha ki , Ap il 20–21, 2023. A ailable a : h ps://ceu -ws.o g/Vol-
3396/pape 26.pd .
KUM–Ko pus uk ajins’koji mo y:Linh is yčnyjpo alMo a.in o.A ailablea :h p://
www.mo a.in o/co pus.aspx.
LIWC-22–Linguis ic Inqui y and Wo d Coun .A ailablea :h ps://www.liwc.app.
Lo o ska Na aliia 2022:S a is icalCha ac e is icso RomanI anychuk’sIdiolec 
(BasedonW i e ’sTex Co pus).–CEUR Wo kshop P oceedings3171,487–500.
LupeiMaksym,Mi saAlexande ,Repa iukVolodymy ,Sha kanVasyl
2020: Iden i ica ion o  au ho ship o  Uk ainian-language ex s o  jou nalis ic s yle
usingneu alne wo ks.–Eas e n-Eu opean Jou nal o En e p ise Technologies1/2(103),
30–36.DOI:10.15587/1729-4061.2020.195041.
McInnes Leland, Healy John, Mel ille James 2020: UMAP: Uni o m
Mani oldApp oxima ionandP ojec ion o DimensionReduc ion.–A Xi e-p in s
1802.03426.DOI:10.48550/a Xi .1802.03426.
Meie Tabea,BoydRyan,Pennebake James,MehMa hiasl,Ma in
Mike,Wol Ma kus,Ho nAnd ea2019:“LIWCau Deu sch”:Thede elopmen ,
psychome ics, and in oduc ion o  DE-LIWC2015. – PsyA Xi P ep in s. DOI:
10.31234/os .io/uq8z .
Rybicki Jan, Ede  Maciej 2011: Deepe  Del a ac oss Gen es and Languages:
DoWeReallyNeed heMos F equen Wo ds?–Li e a y and Linguis ic Compu ing
26(3),315–321.DOI:10.1093/llc/ q 031.
Sa oy Jacques 2015: Compa a i e e alua ion o  e m selec ion unc ions o 
au ho shipa ibu ion.–Digi al Schola ship in he Humani ies30(2),246–261.DOI:
10.1093/llc/ q 047.
NATALIIA DARCHUK, OKSANA ZUBAN, VALENTYNA ROBEIKO,
YULIIA TSYHVINTSEVA, VICTOR SOROKIN, MYKOLA SAZHOK
246 Ac aLinguis icaLi huanicaXCI
Tex A ibu o  1.0 2024: Tex A ibu o 1.0: The sys em o au oma ic s ylome ic
analysis o Uk ainian media ex s.A ailablea : a.mo a.in o.
Volos Yana, Le chenko Olena 2023:S a is icalp o ileo Vale ieShe chuk’s
idios yle(mo phologicalle el).–Slobozhan Scien i ic Bulle in, Se . Philology,3,32–36.
DOI:10.32782/philspu/2023.3.6.
Zuban’Oksana2019:TheMo phemicSys emS ylome icAnalysiso  heUk ainian
Poe s’ Idios yles: Co pus Based App oach. – Linh is yčni s udiji 38, 96–104. DOI:
10.31558/1815-3070.2019.38.15.
Sis ema di analisi s ilome ica au oma ica dei
es i dei media uc aini
[…]Tex A ibu o 1.0[…]
(me odi, s umen i, unzioni)
SANTRAUKA
[…]Tex A ibu o […] s a is iche pa ame izazione dei es i uc ainiechi au o izza i a pažinimo e
nuo aikų analiz ai. Naudodama mol ipa ame inį 15 u ilizza e s a is iche indexų inkinį,
[…]Tex A ibu o […] apibūdina au o ines s ilis ines ypa ybes. in eg ooja me odus kaip komponen inė
analizė, paski s ymo analizė, k an a imas i nuo aikų analizė ski an ynus i in mokinio me odus,
nemandagaus i i i ys ės au o ys ės ekspe imen imui Sis ema Be aja apdo oja eks us aikiza ,
mo ologinį analizį i aksinio, sis ema sin e iškai i odymo, isualizio i akija i imasio i imasio.
i į e in i eks opanašumą,ypačpoli iniodisku soi nemandagioskomunikacijosžinias-
klaidoskon eks eRusijosi Uk ainoska ome u.S aipsnyjepab ėžiamap ak inėi  eo i-
nė„Tex A ibu o “ eikšmė,demons uojan jose ek y umądidelėms eks oapim imsi 
iksliomsanali inėmsgalimybėms.Sėkmingasžodynais, aisyklėmispag įs ųi mašininio
be ykdomų y imų ezul a aiy anuodugniaiišnag inė i,obūsimosjųk yp ysnus a omos
siekian išplės ikalbinįko pusąi  obulin imašininiomokymosimodelius,siekian page-
in i ikslumąi p i aikomumą.
S aipsniai A icoli 247 Į eik a
The Sys em o Au oma ic S ylome ic Analysis
o Uk ainian Media Tex s Tex A ibu o 1.0
(Techniques, Means, Func ionali y)
2024 m. no emb e 25 d.
NATALIIA DARCHUK
Uni e si à nazionale Ta as She chenko di Kie
S ada Volodymy ska 60
Kyi , 01033, Uc aina
n.da [email protected]
OKSANA ZUBAN
Uni e si à nazionale Ta as She chenko di Kie
S ada Volodymy ska 60
Kyi , 01033, Uc aina
[email protected]
Valen ina Roubeiko
Uni e si à nazionale Ta as She chenko di Kie
S ada Volodymy ska 60
Kyi , 01033, Uk aine
alen yna. obeik[email p o ec ed]
YULIIA TSYHVINTSEVA Uni e si à nazionale di
Kie Ta as She chenko
S ada Volodymy ska 60
Kyi , 01033, Uc aina
Is i u o della lingua uc aina dell'Accademia
nazionale delle scienze dell'Uc aina
S ada Mykhailo H ushe skyi 4
Kyi , 01001, Uc aina
juli o[email p o ec ed]
VICTOR SOROKIN
Uni e si à nazionale Ta as She chenko di Kie
S ada Volodymy ska 60
Kyi , 01033, Uc aina
ic o .so ok[email p o ec ed]
Mykola Sajok
Is i u o pe le ecnologie e i sis emi dell'in o mazione
o he Na ional Academy o Sciences o Uk aine
40 Akademika Hlushko a A enue
Kyi , 03187, Uk aine
s[email p o ec ed]om