slides - Université Lyon 2

Transcription

slides - Université Lyon 2
Le langage figuratif
dans le web social :
cas de l'ironie et du sarcasme
2013-2014

L’analyse des sentiments est un domaine de recherche
extrêmement actif en traitement automatique des langues
(Liu, 2012).

Les systèmes actuels ont obtenus de bons résultats sur la
classification automatique du caractère subjectif ou objectif
d’un document (Turney, 2002)(Pang et al., 2002)(Mullen and
Nigel, 2004)(Blitzer et al., 2007).

Les résultats de la tâche d’analyse de polarité restent encore
peu concluants (Pang and Lee, 2005)(Lizhen et al., 2010)
(Leung et al., 2011)
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
2

L’échec est dû à l’incapacité des algorithmes actuels à
comprendre toutes les subtilités du langage humain :
 Les négations et les modalités
▪ @Malek404 - Du temps où il n'avait pas le pouvoir d'être efficacement fou,
Marzouki a aussi écrit un livre intitulé ‘’Dictateurs en sursis’’ #ironie
 Le conditionnel
▪ Si vous êtes célibataire, allez voir ce film.
 L’opinion implicite
▪ Le film restera longtemps dans votre armoire à DVD.
 Les phrases comparatives
▪ Il est rapide comme une tortue
 etc.
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
3

L’échec est dû à l’incapacité des algorithmes actuels à comprendre
toutes les subtilités du langage humain :
 Les négations et les modalités





▪ @Malek404 - Du temps où il n'avait pas le pouvoir d'être efficacement
fou, Marzouki a aussi écrit un livre intitulé ‘’Dictateurs en sursis’’ #ironie
Le conditionnel
▪ Si vous êtes célibataire, allez voir ce film.
L’opinion implicite
▪ Le film restera longtemps dans votre armoire à DVD.
Les phrases comparatives
▪ Il est rapide comme une tortue
etc.
Parmi les subtilités :
 Sarcasme
IRONIE / SARCASME
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
4



État de l’art
 Définition de l’ironie et du sarcasme
 Analyses linguistiques
 Détection automatique
Première expérimentation
Perspectives
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
5
L'ironie recouvre un ensemble de phénomènes distincts dont les
principaux sont l'ironie verbale et l'ironie situationnelle (Niogret,
2004).
l’ironie verbale : exprime une contradiction entre la pensée
du locuteur et son expression.
L’ironie situationnelle : (ou ironie de fait) renvoie aux
situations, aux états du monde, qui sont perçus comme étant
ironiques .
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
6
Selon (Simedoh, 2008), le sarcasme est une ironie
mordante. Le locuteur choisit de blesser et il le fait en
présence de celui qu’il vise.
 Le sarcasme souligne donc l’agressivité.
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
7
 « Il n’est pas complètement stupide » à quelqu’un qui vient de




résoudre un problème compliqué. (ironie)
« Quels courage ! », pour se moquer d’un lâche. (ironie)
Putain de dictature Socialo-Pollueurs merde. (sarcasme)
« comment peux-tu garder cette chambre si propre? » au lieu de
« cette chambre est une porcherie ». (sarcasme)
Votre frère dit « bien joué » lorsque vous renversez de l’eau sur la
table, il veut exactement dire le contraire. (ironie situationnelle)
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
8

‫@‏‬YannBertrand Et pour bien faire comprendre qu'il n'y a pas de
neige, un palmier dessiné sur la piste #ironie (ironie situationnelle)
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
9
 On ne fera pas de distinction entre ironie et sarcasme :
▪ Au niveau linguistique : frontière floue entre ces deux notions
▪ Au niveau computationnel : difficulté de différencier
automatiquement ces deux notions dans un texte.
 On ne se focalise que sur l’ironie verbale
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
10



État de l’art
 Définition de l’ironie et du sarcasme
 Analyses linguistiques
 Détection automatique
Première expérimentation
Perspectives
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
11

Objectif : analyse pragmatique et cognitive de ces
phénomènes dans un contexte d’interaction.
 Grice (1975), Sperber et Wilson (1981), Clarck et Gerrig (1984),
Kumon-Nakamura et al. (1995), Attardo (2000), etc.
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
12

Objectif : analyse pragmatique et cognitive de ces
phénomènes dans un contexte d’interaction.
 Grice (1975), Sperber et Wilson (1981), Clarck et Gerrig (1984),
Kumon-Nakamura et al. (1995), Attardo (2000), etc.

Grice, 1975 : L’ironie consiste dans l’emploi d’un énoncé qui
normalement signifierait « p » pour transmettre « non-p ».
« Encore un très beau but ! » pour signifier que le footballeur a
mal joué
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
13

Sperber et Wilson, 1981 : l’ironie est une forme spéciale de la
mention du langage par laquelle un locuteur répète une
proposition ou une pensée attribuée à quelqu’un d’autre
(mention échoïque).
« Olivier était vraiment en grande forme aujourd’hui ! »
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
14
Limites :
 La théorie de Grice : dire quelque chose c’est signifier cette chose
(maxime de qualité). Mais l’ironie contredit cette maxime.

La théorie de Sperber et Wilson : incapacité à distinguer les
différents types d’énoncés échoïques (la différentiation entre
l’ironie et les autres mentions échoïques comme les citations, le
discours rapporté,…)
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
15
Ajustement théoriques :

La théorie de Grice : il y a des cas particuliers – et l’ironie est l’un
d’entre eux – où le locuteur ne pense pas ce qu’il dit, mais il fait
semblant de le dire.

La théorie de Sperber et Wilson introduit la notion
d’interprétation échoïque (interpréter la pensée de quelqu’un
d’autre afin de distinguer un énoncé ironique d’une citation non
ironique ).
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
16



État de l’art
 Définition de l’ironie et du sarcasme
 Analyses linguistiques
 Détection automatique
Première expérimentation
Perspectives
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
17

Basées sur les résultats théoriques des analyses linguistiques

Objectif :
 Classer un texte/une phrase/une expression en Ironique, Non-ironique

Principaux corpus utilisés :
 Tweets (en utilisant les #ironie, #sarcasme, #humour, etc.) en Anglais et





Italien
Commentaires utilisateurs (produits, films, news) en Anglais
Histoires en japonais
Ouvrages en anglais
Articles de presse en portugais, en anglais
Etc.
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
18

Ressources disponibles :

Senti-TUT formé de tweets Italiens (Gianti et al., 2012)
http://www.di.unito.it/~tutreeb/sentitut.html

Corpus formé d’articles de presse satirique anglais (Burfoot et al., 2009)
http://www.csse.unimelb.edu.au/research/lt/resources/satire/

Corpus formé à partir des commentaires sur les produits d’Amazon
(Filatova,2012)
http://storm.cis.fordham.edu/~filatova/SarcasmCorpus.html

Corpus formé à partir de commentaires sur les produits collecté à partir
d’Amazon.com et Slashdot.com (Reyes, 2011) .
http://users.dsic.upv.es/grupos/nle
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
19

Principales approches :
 Psycholinguistique : tester certaines hypothèses linguistiques sur
l’ironie en les confrontant aux jugements d’annotateurs humains
(via par exemple des plateformes de type Mechanical Turk).
 Symbolique : proposer des patrons lexico-syntaxiques afin de
détecter le langage figuratif sans l’utilisation d’outils
d’apprentissage.
 Apprentissage automatique : non-supervisé, semi-supervisé et
supervisé
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
20

Principaux indices de la littérature pour détecter l’ironie :
 Traits lexicaux
 Traits syntaxiques
 Traits sémantiques et pragmatiques
 Traits stylistiques
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
21
(Kreuz et al. 2007), (Sarmento et al., 2009), (Tsur et al., 2010),
(Gonzaloz-Ibanez et al., 2011), (Reyes et al., 2011 et 2012), (Burfoot
et al., 2009)
N-grams
 Interjections
 Titre
 Etc.

 @lexia_rip - @bdelgendre #hollande #peillon #ayrault #najatvb
#tousapoil oh non merci lol Qu'ils s'occupent du #chômage et
laissent nos enfants en paix
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
22
(Rayes et al., 2011 et 2012)



Patrons
Marqueurs de discours
POS
▪ Paul a économisé toute l'année afin de pouvoir partir en
vacances cet été. (connecteurs de discours)
▪ Steve is as dangerous as a lion (patron: as * as *)
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
23
(Gonzaloz-Ibanez et al., 2011) (Reyes et al., 2013)
 Mots d’opinion
▪ J’ai tellement apprécié ce film que je me suis endormi
▪ C'est fou comme j'adore les cours de droit...

Les émotions positives et négatives


Profanation


Le comportement de Michel m’a fait sourire.
@Cardi54 Merci à tous les élèves du groupe 54 pour avoir fait preuve d'une
très grande maturité lors de mon absence... #ironie
L’opposition

@Lepolitise - Marois dit que Legault ne s'intéresse pas assez aux gens en
détresse: pourtant, elle a réduit les services d'aide-social #ironie #debat2014
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
24
(Kreuz zt al., 2007), (Tsur et al., 2010), (Gianti et al., 2012), (Reyes
et al., 2013)
 Emoticônes
 Ponctuation
 Citations
 Mots en majuscules
 Etc.
Chaleur de merde aussi ! On peux même pas dormir en paix sa
mère! 😡 je sens que demain j’avait être de bonne humeur moi
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
25
Traits discriminants :
 L’opposition
 Questions rhétoriques
 La circonlocution
 Niveau de politesse
 Présence d’interjection
 La négation
 Présence de citations
 Présence de majuscule
 Traits non-discriminants :
 La présence des adjectifs, adverbes et noms.
 Utilisation de la ponctuation
 Traits non utiles :
 Le nombre de mots
 Le nombre de mots en caractère gras

Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
26



État de l’art
 Définition de l’ironie et du sarcasme
 Analyses linguistiques
 Détection automatique
Première expérimentation
Perspectives
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
27


Aucun travail n’a été fait pour le français
Première expérimentation sur un corpus de tweets en français avec
les #ironie et #sarcasme
 RT et tweets contenant des images supprimés
On n’arrive pas à détecter l’ironie qui se trouve dans les images ou dans
des RT qui représentent des réponses à des tweets.

Objectif : tester la pertinence des traits de la littérature
 Traits ‘surfaciques’ : la ponctuation, les émoticônes, les
majuscules, les citations, les interjections, les connecteurs de
discours et la négation
 Classification des tweets en deux classes : ironique/non-ironique
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
28

Corpus formé de 10 000 tweets
 5 000 tweets ironiques relatifs aux #tags: #ironie et #sarcasme
▪ @DenisGabJade - Les heures d'ouverture des banques sont tellement
harmoniser avec le mode de vie des travailleurs !!! #sarcasme
▪ Cette épaisse couche de pollution à l'horizon ... Que c'est beau <3 #ironie
#puanteur #metrogratuit #lHommeestinconscient
 5 000 tweets non-ironiques relatifs aux #tag: #politique,
#éducation, #économie, #chômage.
▪ @JETWITT14 - Sondage : Copé, Fillon et Sarkozy chutent gravement
http://t.co/Jg5WboiYGM #Politique via @LePoint-Tue Mar 11 21:53:32 CET
2014
▪ @mc_1220 - #Ayrault : "On avait appris que #Sarkozy était sur écoutes"
http://t.co/HItHhy2lhU #Politique via @LePoint #CoucouTaubira
#HollandeDégage-Tue Mar 11 21:27:08 CET 2014
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
29

L’ordre des traits discriminants pour la tâche de classification en
appliquant «Gain Ratio» :
1. Émoticônes
2. Interjections
3. Majuscules
4. Citations
5. Connecteurs de discours
6. Ponctuations
7. La négation
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
30

La fréquence des traits :
3479
3363
3500
3000
2500
2411
2324
2284
2000
1652
Ironique
1500
1127
Non-ironique
1230
1000
634
572
500
223
126
192213
0
émoticônes interjections
majuscules
citations
conecteurs
de discours
ponctuation
négation
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
31


Un corpus de train qui représente 80% du corpus (8000 tweets :
4000 tweets ironiques et 4000 non-ironiques)
Un corpus de test qui représente 20% du corpus (2000 tweets :
1000 tweets ironiques et 1000 non-ironiques)
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
32

@SimardRaymond - @Belangmt je comment cela est possible, PKP
n'a pas parlé a ses journalistes ?? #sarcasme

@RayanCadel_ - Chelsea doit avoir peur quand même ya Jeremy
Menez au PSG #Ironie #JoueurBidon #Football #LDC

@n_a_n_t_e_s - C'est marrant comme il a fallu attendre nos
nouveaux prétendant au trône pour construire NANTES et son
avenir.. #Ironie ! #Mun44000-Fri Mar 21 09:23:23 CET 2014

@JRInesN - Je stress comme pas humain et j'ai rien dormi de la nuit...
Ça commence si bien aujourd'hui #ironie-Fri Mar 21 09:13:49 CET
2014
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
33

@ACCOMS1 - Une litanie d'interrogations, le mandat de François
Hollande ressemble à un jour sans fin http://t.co/TOn3A2gcHr
#Politique via @LePoint

@neo_bordelaise - Dossier #municipales dans @Telerama. Bilan de
la #politique #culturelle de @alainjuppe contrasté, ambitieux mais
lisse et conventionnel.

@jonathanbalsamo - @Maxime_Medard en #Politique une émission
de ce genre , c'est une cour de récréation ^^

@akemoi - #economie La Jaunes et la Rouge – « ÉLIMINER
L’INSTABILITÉ ET LA FRAGILITÉ DE LA ZONE EURO »
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
34

L’absence de traits discriminants comme
les émoticônes, les
interjections a conduit le système à mal classer certains tweets.

La présence d'émoticônes, de majuscules et de citations dans
quelques tweets non-ironiques a conduit le système à mal classer
certains tweets.

Problème des #ironie et #sarcasme :
 Un tweet contenant ces hashtags n’est pas forcément ironique
 Un tweet ironique peut ne pas avoir un hastag #ironie ou #sarcasme
 nécessité d’une phase d’annotation manuelle

Nécessité de la prise en compte d’autres traits.
 Aller au-delà des traits surfaciques
 Nécessité de prise en compte du contexte (Sarmento et al., 2009) (Gonzalez-
Ibanez et al., 2011)
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
35

Comparaison des résultats obtenus par rapport
à ceux de l’état de l’art
Nos valeurs
Les valeurs de
l’état de l’art
Précision
F-mesure
0,640
0,688
0,630< P <0,91
0,660< F <0,93
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
36



État de l’art
 Définition de l’ironie et du sarcasme
 Analyses linguistiques
 Détection automatique
Première expérimentation
Perspectives
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
37
 Tester le reste des traits cités dans l’état de l’art
 Proposer de nouveaux traits
▪
▪
▪
▪
le temps des verbes
le changement du sujet dans une phrase
l’utilisation de l’argot
le contexte
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
38
Merci
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme
39

Documents pareils