slides - Université Lyon 2
Transcription
slides - Université Lyon 2
Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 2013-2014 L’analyse des sentiments est un domaine de recherche extrêmement actif en traitement automatique des langues (Liu, 2012). Les systèmes actuels ont obtenus de bons résultats sur la classification automatique du caractère subjectif ou objectif d’un document (Turney, 2002)(Pang et al., 2002)(Mullen and Nigel, 2004)(Blitzer et al., 2007). Les résultats de la tâche d’analyse de polarité restent encore peu concluants (Pang and Lee, 2005)(Lizhen et al., 2010) (Leung et al., 2011) Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 2 L’échec est dû à l’incapacité des algorithmes actuels à comprendre toutes les subtilités du langage humain : Les négations et les modalités ▪ @Malek404 - Du temps où il n'avait pas le pouvoir d'être efficacement fou, Marzouki a aussi écrit un livre intitulé ‘’Dictateurs en sursis’’ #ironie Le conditionnel ▪ Si vous êtes célibataire, allez voir ce film. L’opinion implicite ▪ Le film restera longtemps dans votre armoire à DVD. Les phrases comparatives ▪ Il est rapide comme une tortue etc. Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 3 L’échec est dû à l’incapacité des algorithmes actuels à comprendre toutes les subtilités du langage humain : Les négations et les modalités ▪ @Malek404 - Du temps où il n'avait pas le pouvoir d'être efficacement fou, Marzouki a aussi écrit un livre intitulé ‘’Dictateurs en sursis’’ #ironie Le conditionnel ▪ Si vous êtes célibataire, allez voir ce film. L’opinion implicite ▪ Le film restera longtemps dans votre armoire à DVD. Les phrases comparatives ▪ Il est rapide comme une tortue etc. Parmi les subtilités : Sarcasme IRONIE / SARCASME Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 4 État de l’art Définition de l’ironie et du sarcasme Analyses linguistiques Détection automatique Première expérimentation Perspectives Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 5 L'ironie recouvre un ensemble de phénomènes distincts dont les principaux sont l'ironie verbale et l'ironie situationnelle (Niogret, 2004). l’ironie verbale : exprime une contradiction entre la pensée du locuteur et son expression. L’ironie situationnelle : (ou ironie de fait) renvoie aux situations, aux états du monde, qui sont perçus comme étant ironiques . Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 6 Selon (Simedoh, 2008), le sarcasme est une ironie mordante. Le locuteur choisit de blesser et il le fait en présence de celui qu’il vise. Le sarcasme souligne donc l’agressivité. Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 7 « Il n’est pas complètement stupide » à quelqu’un qui vient de résoudre un problème compliqué. (ironie) « Quels courage ! », pour se moquer d’un lâche. (ironie) Putain de dictature Socialo-Pollueurs merde. (sarcasme) « comment peux-tu garder cette chambre si propre? » au lieu de « cette chambre est une porcherie ». (sarcasme) Votre frère dit « bien joué » lorsque vous renversez de l’eau sur la table, il veut exactement dire le contraire. (ironie situationnelle) Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 8 @YannBertrand Et pour bien faire comprendre qu'il n'y a pas de neige, un palmier dessiné sur la piste #ironie (ironie situationnelle) Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 9 On ne fera pas de distinction entre ironie et sarcasme : ▪ Au niveau linguistique : frontière floue entre ces deux notions ▪ Au niveau computationnel : difficulté de différencier automatiquement ces deux notions dans un texte. On ne se focalise que sur l’ironie verbale Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 10 État de l’art Définition de l’ironie et du sarcasme Analyses linguistiques Détection automatique Première expérimentation Perspectives Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 11 Objectif : analyse pragmatique et cognitive de ces phénomènes dans un contexte d’interaction. Grice (1975), Sperber et Wilson (1981), Clarck et Gerrig (1984), Kumon-Nakamura et al. (1995), Attardo (2000), etc. Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 12 Objectif : analyse pragmatique et cognitive de ces phénomènes dans un contexte d’interaction. Grice (1975), Sperber et Wilson (1981), Clarck et Gerrig (1984), Kumon-Nakamura et al. (1995), Attardo (2000), etc. Grice, 1975 : L’ironie consiste dans l’emploi d’un énoncé qui normalement signifierait « p » pour transmettre « non-p ». « Encore un très beau but ! » pour signifier que le footballeur a mal joué Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 13 Sperber et Wilson, 1981 : l’ironie est une forme spéciale de la mention du langage par laquelle un locuteur répète une proposition ou une pensée attribuée à quelqu’un d’autre (mention échoïque). « Olivier était vraiment en grande forme aujourd’hui ! » Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 14 Limites : La théorie de Grice : dire quelque chose c’est signifier cette chose (maxime de qualité). Mais l’ironie contredit cette maxime. La théorie de Sperber et Wilson : incapacité à distinguer les différents types d’énoncés échoïques (la différentiation entre l’ironie et les autres mentions échoïques comme les citations, le discours rapporté,…) Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 15 Ajustement théoriques : La théorie de Grice : il y a des cas particuliers – et l’ironie est l’un d’entre eux – où le locuteur ne pense pas ce qu’il dit, mais il fait semblant de le dire. La théorie de Sperber et Wilson introduit la notion d’interprétation échoïque (interpréter la pensée de quelqu’un d’autre afin de distinguer un énoncé ironique d’une citation non ironique ). Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 16 État de l’art Définition de l’ironie et du sarcasme Analyses linguistiques Détection automatique Première expérimentation Perspectives Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 17 Basées sur les résultats théoriques des analyses linguistiques Objectif : Classer un texte/une phrase/une expression en Ironique, Non-ironique Principaux corpus utilisés : Tweets (en utilisant les #ironie, #sarcasme, #humour, etc.) en Anglais et Italien Commentaires utilisateurs (produits, films, news) en Anglais Histoires en japonais Ouvrages en anglais Articles de presse en portugais, en anglais Etc. Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 18 Ressources disponibles : Senti-TUT formé de tweets Italiens (Gianti et al., 2012) http://www.di.unito.it/~tutreeb/sentitut.html Corpus formé d’articles de presse satirique anglais (Burfoot et al., 2009) http://www.csse.unimelb.edu.au/research/lt/resources/satire/ Corpus formé à partir des commentaires sur les produits d’Amazon (Filatova,2012) http://storm.cis.fordham.edu/~filatova/SarcasmCorpus.html Corpus formé à partir de commentaires sur les produits collecté à partir d’Amazon.com et Slashdot.com (Reyes, 2011) . http://users.dsic.upv.es/grupos/nle Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 19 Principales approches : Psycholinguistique : tester certaines hypothèses linguistiques sur l’ironie en les confrontant aux jugements d’annotateurs humains (via par exemple des plateformes de type Mechanical Turk). Symbolique : proposer des patrons lexico-syntaxiques afin de détecter le langage figuratif sans l’utilisation d’outils d’apprentissage. Apprentissage automatique : non-supervisé, semi-supervisé et supervisé Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 20 Principaux indices de la littérature pour détecter l’ironie : Traits lexicaux Traits syntaxiques Traits sémantiques et pragmatiques Traits stylistiques Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 21 (Kreuz et al. 2007), (Sarmento et al., 2009), (Tsur et al., 2010), (Gonzaloz-Ibanez et al., 2011), (Reyes et al., 2011 et 2012), (Burfoot et al., 2009) N-grams Interjections Titre Etc. @lexia_rip - @bdelgendre #hollande #peillon #ayrault #najatvb #tousapoil oh non merci lol Qu'ils s'occupent du #chômage et laissent nos enfants en paix Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 22 (Rayes et al., 2011 et 2012) Patrons Marqueurs de discours POS ▪ Paul a économisé toute l'année afin de pouvoir partir en vacances cet été. (connecteurs de discours) ▪ Steve is as dangerous as a lion (patron: as * as *) Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 23 (Gonzaloz-Ibanez et al., 2011) (Reyes et al., 2013) Mots d’opinion ▪ J’ai tellement apprécié ce film que je me suis endormi ▪ C'est fou comme j'adore les cours de droit... Les émotions positives et négatives Profanation Le comportement de Michel m’a fait sourire. @Cardi54 Merci à tous les élèves du groupe 54 pour avoir fait preuve d'une très grande maturité lors de mon absence... #ironie L’opposition @Lepolitise - Marois dit que Legault ne s'intéresse pas assez aux gens en détresse: pourtant, elle a réduit les services d'aide-social #ironie #debat2014 Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 24 (Kreuz zt al., 2007), (Tsur et al., 2010), (Gianti et al., 2012), (Reyes et al., 2013) Emoticônes Ponctuation Citations Mots en majuscules Etc. Chaleur de merde aussi ! On peux même pas dormir en paix sa mère! 😡 je sens que demain j’avait être de bonne humeur moi Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 25 Traits discriminants : L’opposition Questions rhétoriques La circonlocution Niveau de politesse Présence d’interjection La négation Présence de citations Présence de majuscule Traits non-discriminants : La présence des adjectifs, adverbes et noms. Utilisation de la ponctuation Traits non utiles : Le nombre de mots Le nombre de mots en caractère gras Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 26 État de l’art Définition de l’ironie et du sarcasme Analyses linguistiques Détection automatique Première expérimentation Perspectives Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 27 Aucun travail n’a été fait pour le français Première expérimentation sur un corpus de tweets en français avec les #ironie et #sarcasme RT et tweets contenant des images supprimés On n’arrive pas à détecter l’ironie qui se trouve dans les images ou dans des RT qui représentent des réponses à des tweets. Objectif : tester la pertinence des traits de la littérature Traits ‘surfaciques’ : la ponctuation, les émoticônes, les majuscules, les citations, les interjections, les connecteurs de discours et la négation Classification des tweets en deux classes : ironique/non-ironique Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 28 Corpus formé de 10 000 tweets 5 000 tweets ironiques relatifs aux #tags: #ironie et #sarcasme ▪ @DenisGabJade - Les heures d'ouverture des banques sont tellement harmoniser avec le mode de vie des travailleurs !!! #sarcasme ▪ Cette épaisse couche de pollution à l'horizon ... Que c'est beau <3 #ironie #puanteur #metrogratuit #lHommeestinconscient 5 000 tweets non-ironiques relatifs aux #tag: #politique, #éducation, #économie, #chômage. ▪ @JETWITT14 - Sondage : Copé, Fillon et Sarkozy chutent gravement http://t.co/Jg5WboiYGM #Politique via @LePoint-Tue Mar 11 21:53:32 CET 2014 ▪ @mc_1220 - #Ayrault : "On avait appris que #Sarkozy était sur écoutes" http://t.co/HItHhy2lhU #Politique via @LePoint #CoucouTaubira #HollandeDégage-Tue Mar 11 21:27:08 CET 2014 Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 29 L’ordre des traits discriminants pour la tâche de classification en appliquant «Gain Ratio» : 1. Émoticônes 2. Interjections 3. Majuscules 4. Citations 5. Connecteurs de discours 6. Ponctuations 7. La négation Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 30 La fréquence des traits : 3479 3363 3500 3000 2500 2411 2324 2284 2000 1652 Ironique 1500 1127 Non-ironique 1230 1000 634 572 500 223 126 192213 0 émoticônes interjections majuscules citations conecteurs de discours ponctuation négation Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 31 Un corpus de train qui représente 80% du corpus (8000 tweets : 4000 tweets ironiques et 4000 non-ironiques) Un corpus de test qui représente 20% du corpus (2000 tweets : 1000 tweets ironiques et 1000 non-ironiques) Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 32 @SimardRaymond - @Belangmt je comment cela est possible, PKP n'a pas parlé a ses journalistes ?? #sarcasme @RayanCadel_ - Chelsea doit avoir peur quand même ya Jeremy Menez au PSG #Ironie #JoueurBidon #Football #LDC @n_a_n_t_e_s - C'est marrant comme il a fallu attendre nos nouveaux prétendant au trône pour construire NANTES et son avenir.. #Ironie ! #Mun44000-Fri Mar 21 09:23:23 CET 2014 @JRInesN - Je stress comme pas humain et j'ai rien dormi de la nuit... Ça commence si bien aujourd'hui #ironie-Fri Mar 21 09:13:49 CET 2014 Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 33 @ACCOMS1 - Une litanie d'interrogations, le mandat de François Hollande ressemble à un jour sans fin http://t.co/TOn3A2gcHr #Politique via @LePoint @neo_bordelaise - Dossier #municipales dans @Telerama. Bilan de la #politique #culturelle de @alainjuppe contrasté, ambitieux mais lisse et conventionnel. @jonathanbalsamo - @Maxime_Medard en #Politique une émission de ce genre , c'est une cour de récréation ^^ @akemoi - #economie La Jaunes et la Rouge – « ÉLIMINER L’INSTABILITÉ ET LA FRAGILITÉ DE LA ZONE EURO » Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 34 L’absence de traits discriminants comme les émoticônes, les interjections a conduit le système à mal classer certains tweets. La présence d'émoticônes, de majuscules et de citations dans quelques tweets non-ironiques a conduit le système à mal classer certains tweets. Problème des #ironie et #sarcasme : Un tweet contenant ces hashtags n’est pas forcément ironique Un tweet ironique peut ne pas avoir un hastag #ironie ou #sarcasme nécessité d’une phase d’annotation manuelle Nécessité de la prise en compte d’autres traits. Aller au-delà des traits surfaciques Nécessité de prise en compte du contexte (Sarmento et al., 2009) (Gonzalez- Ibanez et al., 2011) Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 35 Comparaison des résultats obtenus par rapport à ceux de l’état de l’art Nos valeurs Les valeurs de l’état de l’art Précision F-mesure 0,640 0,688 0,630< P <0,91 0,660< F <0,93 Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 36 État de l’art Définition de l’ironie et du sarcasme Analyses linguistiques Détection automatique Première expérimentation Perspectives Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 37 Tester le reste des traits cités dans l’état de l’art Proposer de nouveaux traits ▪ ▪ ▪ ▪ le temps des verbes le changement du sujet dans une phrase l’utilisation de l’argot le contexte Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 38 Merci Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 39