Retour sur une expérience d'annotation collaborative - Journée REUSE - 25 septembre 2020 - Angers
←
→
Transcription du contenu de la page
Si votre navigateur ne rend pas la page correctement, lisez s'il vous plaît le contenu de la page ci-dessous
Retour sur une expérience d’annotation collaborative Journée REUSE – 25 septembre 2020 - Angers
Annoter pour quoi faire ? ● Approche centrée sur les sources (data-driven approach) ● Validation du modèle de données ● Mise en œuvre de l’ontologie ● Fournir massivement des données d’entraînement ● Construire le modèle prédictif
Le modèle de données
L’ontologie
28/03/2020 draw.io
E1 CRM Entity
E77 Persistent item
histC10 Name use in a
E42 Identifier language
E2 Temporal Entity E52 Time-Span
E53 Place
Reading P4 has time-span
(is time-span of) REO10 Nationality P48 has prefered
histP11 refers to name
identifier E82 Actor E70 Thing
P87 is identified by process E4 Period by
Appellation
re
(identifies)
fied
P7 (w
a
enti
histC28 Gender
dP
E49 Time Appellation
to itne
is id
2
ok s
is
31 nder
P1 has ge
pl sed
E44 Place Appellation
na
histP38
ac )
tio
e
na
at
P78 is identified by
lity
(identifies) histC34 Occupation
of
E5 Event
E21 Person histP45 is occupation of
E50 Date
read
E48 Place Name P4 is
rn) life
P100 (died in)
religio
t by n of E71 Man-made
REO8 Lighting rried ou
(wa ght into
P14 ca rmed) REO15 Religion thing
was
P1 (perfo
s bo
6
brou
death
E7 Activity
P98
ity of
of
REO7 intensity is intens
readP9 P15
Reading
was
in
(influ fluenced P7
P1
ence by t E67 Birth E69 Death
REO17 Habit d) ea to
2
de
s lac (w ok p
oc
readP12 k p d)
agent
P12
itn lac
ce
cu
e too sse es
se e at
P7 witne
re
pr d)
d
(
P2 has
4
in
P1 E53 Place
th
ad P4 P4 E28 Conceptual
e
re
pr
e
object
se
type
readP15
nc
REO18 Aim REO2 Disposition E52 Time-Span
e
of
E53 Place
REO9 Location
REO3
s
Environment
llow
readP13 REO13 Position_type
0 fo
REO19 Skill E89 Propositional object E49 Time Appellation
dP1
readP8 is
frequency of
rea
P78 is identified by
(identifies)
REO4 Frequency
REO20 Belief rea E50 Date
dP
16
E73 Information object
REO21 Feeling readP18 REO12 Outcomes REO16 Status readP7
19
dP
rea
ge
s langua
P72 ha uage of) R42 is rep manifestation singleton for
REO22 Judgement (is lang F2 Expression (has rep manifestation singleton)
17
R4 com
dP E56 Language
rea
(
Ca pr
itle
st
rri ise
er s c
ha f)
REO23 Effects 02 le o
s a
pr rri
P1 is tit
ov er
(
histP22
id s o
f) e
ed f)
e o nr
nr ge
by
by
ge as
eated
(is 5 h
E35 Title
P
ad
F4 Manifestation
was cr
re
histC21 F3 Manifestation product singleton
Expression type
R17i
CIDOC-CRM type
histP20
REO6 Genre
histP
mp of
xa ple
le)
21
s e am
FRBRoo F28 Expression
(ha is ex
creation
Reading histC17
R7
histC19 Type of
Manifestation
Reading Experiences Manifestation
Ontology (REO) ressource P14 carried out by
(performed) F5 Item
product type
singleton type
read
P6
Historical Data Management E39 Actor 5
P2
and Interoperability (histDMI) hi
st
histC23
REO14 Provenance
Item type
chrome-extension://pebppomjfocnoigkeepgbmcifnnlndla/index.html 1/2
Quels outils ?
●
Interface dédiée
Quels outils ?
1
Short Annotation Guide
Introduction to Concepts, Examples and Definitions
Version: 1.3
Guide d’annotation
Last Update: 04/02/2020
●
This short document is made to help users take charge of the annotation platform of the READ-IT
program, by explaining how to characterize and annotate a reading experience and how to upload
documents to contribute to the platform. It summarizes READ-IT data model and classes of notions
/ concepts, provides an easy-to-use annotation guide for textual and visual documents describing
reading experiences and a short, non-exhaustive list of the elements or attributes encompassed
within these classes and a list of labels for the relationships between notions.
These documents are by nature post-experience presentations or memories, thus reconstructed or
incomplete; they won’t describe all potential aspects or circumstances of the reading experiences.
The annotation process is organized in two steps. The first (mandatory) consist in attributing
category to portions of text and the second (optional) in linking these items to other items. For
example, linking a material being read (content) to the reader.
Campagne du printemps 2020 ● Groupe de 10 étudiants M2 ECI en stage rémunéré (majoritairement anglophones) ● 1er mars-20 mai 2020 ● Formation en présentiel début mars ● Réunions plénières hebdomadaires en visio ● Réunions par groupes de 2 ou 3 (x4) ● Une contrainte : pas de repentir
Campagne du printemps 2020
●
Corpus à annoter : commentaires de lecture Babelio (français) +
Goodreads (anglais)
●
Sets aléatoires de 100 commentaires en moyenne avec toujours 50 %
des commentaires en commun entre 2 ou 3 annotateurs
●
Calcul de l’accord inter-annotateurs (Kappa de Fleiss // Krippendorf)
●
Nature des tâches :
●
Délimitation (span)
●
Identification des composantesCampagne du printemps 2020 Délimiter l’expérience de lecture au sein du commentaire (span) id: Babelio_0a98f0a2-846d-11ea-bf3c-b8ca3aad223a text: Complètement décousu, on ne réussit pas à avoir envie de suivre l'histoire. Relu le début 3x et abandonné à la page 53. On se demande ce que l'auteur a voulu faire. Essayer autre chose que du Scarpetta? Mauvaise idée, c'est grotesque cette tentative d'humour et de fantastique. id: Babelio_4e3271ec-64fd-11ea-a728-b8ca3aad223a text: Minjun, Sena et les chats poursuivent leurs actions pour retrouver l'épée du soleil et sauver le village. Voici enfin le dénouement, avec toujours autant de magie et de merveilleux. Quant aux illustrations, elles sont toujours d'une grande qualité.
Campagne du printemps 2020 Délimiter l’expérience de lecture au sein du commentaire (span) id: Babelio_b833aaf8-630d-11ea-80d0-b8ca3aad223a text: Je viens de finir "La Perle et la Coquille" de Nadia Hashimi et je tenais à partager mon opinion avec vous. Cependant, je me rends compte que j'éprouve quelques difficultés à trouver les mots adéquats pour ainsi faire. Ce fut une lecture bouleversante, révoltante et je peine à croire que de nos jours il y ait encore des femmes qui soient vendues ou offertes par leur propre famille, comme de simples objets; des femmes qui doivent se soumettre à leur mari, à leur belle-famille et qui, sans aucune autre possibilité, doivent se conformer à vivre des vies misérables, de mépris et de violence; des femmes qui préfèrent mourir qu'endurer les souffrances infligées par leur nouvelle famille. Ce fut avec une révolte et un mal être constants que je finis cette lecture, et que je vous conseille tout de même, malgré la tristesse que nous dévoile cette histoire au fil des pages.
Campagne du printemps 2020 Identification des composantes
Campagne du printemps 2020
Campagne du printemps 2020 Quel bilan : ● Turkeurs ? ● Clarté des consignes à revoir ● Difficulté intrinsèque du maniement des catégories ● Ambiguïté de certaines sources ● Certains concepts sujets à interprétation ● Confinement ...
francois.vignale@univ-lemans.fr guillaume.le-noe-bienvenu@irisa.fr
Vous pouvez aussi lire
