Le langage figuratif dans le web social : cas de …mediamining.univ-lyon2.fr/velcin/fows/slides/karoui...Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 2

Le langage figuratif dans le web social :

cas de l'ironie et du sarcasme

2013-2014

L’analyse des sentiments est un domaine de recherche extrêmement actif en traitement automatique des langues (Liu, 2012).

Les systèmes actuels ont obtenus de bons résultats sur la

classification automatique du caractère subjectif ou objectif d’un document (Turney, 2002)(Pang et al., 2002)(Mullen and Nigel, 2004)(Blitzer et al., 2007).

Les résultats de la tâche d’analyse de polarité restent encore

peu concluants (Pang and Lee, 2005)(Lizhen et al., 2010) (Leung et al., 2011)

Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 2

L’échec est dû à l’incapacité des algorithmes actuels à comprendre toutes les subtilités du langage humain : Les négations et les modalités

▪ @Malek404 - Du temps où il n'avait pas le pouvoir d'être efficacement fou, Marzouki a aussi écrit un livre intitulé ‘’Dictateurs en sursis’’ #ironie

Le conditionnel ▪ Si vous êtes célibataire, allez voir ce film.

L’opinion implicite ▪ Le film restera longtemps dans votre armoire à DVD.

Les phrases comparatives ▪ Il est rapide comme une tortue

etc.


L’échec est dû à l’incapacité des algorithmes actuels à comprendre toutes les subtilités du langage humain : Les négations et les modalités

▪ @Malek404 - Du temps où il n'avait pas le pouvoir d'être efficacement fou, Marzouki a aussi écrit un livre intitulé ‘’Dictateurs en sursis’’ #ironie

Le conditionnel ▪ Si vous êtes célibataire, allez voir ce film.

L’opinion implicite ▪ Le film restera longtemps dans votre armoire à DVD.

Les phrases comparatives ▪ Il est rapide comme une tortue

etc. Parmi les subtilités :

Sarcasme


IRONIE / SARCASME

État de l’art

Définition de l’ironie et du sarcasme

Analyses linguistiques

Détection automatique Première expérimentation Perspectives

5 Le langage figuratif dans le web social : cas de l'ironie et du sarcasme


L'ironie recouvre un ensemble de phénomènes distincts dont les principaux sont l'ironie verbale et l'ironie situationnelle (Niogret, 2004). l’ironie verbale : exprime une contradiction entre la pensée du locuteur et son expression. L’ironie situationnelle : (ou ironie de fait) renvoie aux situations, aux états du monde, qui sont perçus comme étant ironiques .

Selon (Simedoh, 2008), le sarcasme est une ironie mordante. Le locuteur choisit de blesser et il le fait en présence de celui qu’il vise. Le sarcasme souligne donc l’agressivité.


« Il n’est pas complètement stupide » à quelqu’un qui vient de résoudre un problème compliqué. (ironie)

« Quels courage ! », pour se moquer d’un lâche. (ironie)

Putain de dictature Socialo-Pollueurs merde. (sarcasme)

« comment peux-tu garder cette chambre si propre? » au lieu de

« cette chambre est une porcherie ». (sarcasme)

Votre frère dit « bien joué » lorsque vous renversez de l’eau sur la table, il veut exactement dire le contraire. (ironie situationnelle)


YannBertrand Et pour bien faire comprendre qu'il n'y a pas de@neige, un palmier dessiné sur la piste #ironie (ironie situationnelle)


https://twitter.com/YannBertrand

On ne fera pas de distinction entre ironie et sarcasme :

▪ Au niveau linguistique : frontière floue entre ces deux notions

▪ Au niveau computationnel : difficulté de différencier automatiquement ces deux notions dans un texte.

On ne se focalise que sur l’ironie verbale


État de l’art





Objectif : analyse pragmatique et cognitive de ces phénomènes dans un contexte d’interaction. Grice (1975), Sperber et Wilson (1981), Clarck et Gerrig (1984),

Kumon-Nakamura et al. (1995), Attardo (2000), etc.


Objectif : analyse pragmatique et cognitive de ces phénomènes dans un contexte d’interaction. Grice (1975), Sperber et Wilson (1981), Clarck et Gerrig (1984),

Kumon-Nakamura et al. (1995), Attardo (2000), etc.

Grice, 1975 : L’ironie consiste dans l’emploi d’un énoncé qui

normalement signifierait « p » pour transmettre « non-p ».

« Encore un très beau but ! » pour signifier que le footballeur a mal joué


Sperber et Wilson, 1981 : l’ironie est une forme spéciale de la mention du langage par laquelle un locuteur répète une proposition ou une pensée attribuée à quelqu’un d’autre (mention échoïque).

« Olivier était vraiment en grande forme aujourd’hui ! »


Limites :

La théorie de Grice : dire quelque chose c’est signifier cette chose (maxime de qualité). Mais l’ironie contredit cette maxime.

La théorie de Sperber et Wilson : incapacité à distinguer les

différents types d’énoncés échoïques (la différentiation entre l’ironie et les autres mentions échoïques comme les citations, le discours rapporté,…)


Ajustement théoriques :

La théorie de Grice : il y a des cas particuliers – et l’ironie est l’un d’entre eux – où le locuteur ne pense pas ce qu’il dit, mais il fait semblant de le dire.

La théorie de Sperber et Wilson introduit la notion

d’interprétation échoïque (interpréter la pensée de quelqu’un d’autre afin de distinguer un énoncé ironique d’une citation non ironique ).


État de l’art





Basées sur les résultats théoriques des analyses linguistiques

Objectif :

Classer un texte/une phrase/une expression en Ironique, Non-ironique

Principaux corpus utilisés :

Tweets (en utilisant les #ironie, #sarcasme, #humour, etc.) en Anglais et Italien

Commentaires utilisateurs (produits, films, news) en Anglais

Histoires en japonais

Ouvrages en anglais

Articles de presse en portugais, en anglais

Etc.


Ressources disponibles : Senti-TUT formé de tweets Italiens (Gianti et al., 2012)

http://www.di.unito.it/~tutreeb/sentitut.html

Corpus formé d’articles de presse satirique anglais (Burfoot et al., 2009) http://www.csse.unimelb.edu.au/research/lt/resources/satire/

Corpus formé à partir des commentaires sur les produits d’Amazon (Filatova,2012)

http://storm.cis.fordham.edu/~filatova/SarcasmCorpus.html

Corpus formé à partir de commentaires sur les produits collecté à partir d’Amazon.com et Slashdot.com (Reyes, 2011) .

http://users.dsic.upv.es/grupos/nle


http://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://www.csse.unimelb.edu.au/research/lt/resources/satire/http://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://storm.cis.fordham.edu/~filatova/SarcasmCorpus.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.htmlhttp://www.di.unito.it/~tutreeb/sentitut.html

Principales approches :

Psycholinguistique : tester certaines hypothèses linguistiques sur l’ironie en les confrontant aux jugements d’annotateurs humains (via par exemple des plateformes de type Mechanical Turk).

Symbolique : proposer des patrons lexico-syntaxiques afin de détecter le langage figuratif sans l’utilisation d’outils d’apprentissage.

Apprentissage automatique : non-supervisé, semi-supervisé et supervisé


Principaux indices de la littérature pour détecter l’ironie :

Traits lexicaux

Traits syntaxiques

Traits sémantiques et pragmatiques

Traits stylistiques


(Kreuz et al. 2007), (Sarmento et al., 2009), (Tsur et al., 2010), (Gonzaloz-Ibanez et al., 2011), (Reyes et al., 2011 et 2012), (Burfoot et al., 2009)

N-grams Interjections Titre Etc.

@lexia_rip - @bdelgendre #hollande #peillon #ayrault #najatvb #tousapoil oh non merci lol Qu'ils s'occupent du #chômage et laissent nos enfants en paix


(Rayes et al., 2011 et 2012) Patrons Marqueurs de discours POS

▪ Paul a économisé toute l'année afin de pouvoir partir en vacances cet été. (connecteurs de discours)

▪ Steve is as dangerous as a lion (patron: as * as *)


(Gonzaloz-Ibanez et al., 2011) (Reyes et al., 2013) Mots d’opinion

▪ J’ai tellement apprécié ce film que je me suis endormi

▪ C'est fou comme j'adore les cours de droit...

Les émotions positives et négatives

Le comportement de Michel m’a fait sourire.

Profanation @Cardi54 Merci à tous les élèves du groupe 54 pour avoir fait preuve d'une

très grande maturité lors de mon absence... #ironie

L’opposition @Lepolitise - Marois dit que Legault ne s'intéresse pas assez aux gens en

détresse: pourtant, elle a réduit les services d'aide-social #ironie #debat2014


(Kreuz zt al., 2007), (Tsur et al., 2010), (Gianti et al., 2012), (Reyes et al., 2013)

Emoticônes Ponctuation Citations Mots en majuscules Etc.

Chaleur de merde aussi ! On peux même pas dormir en paix sa mère! 😡 je sens que demain j’avait être de bonne humeur moi


Traits discriminants :

L’opposition

Questions rhétoriques

La circonlocution

Niveau de politesse

Présence d’interjection

La négation

Présence de citations

Présence de majuscule Traits non-discriminants :

La présence des adjectifs, adverbes et noms.

Utilisation de la ponctuation Traits non utiles :

Le nombre de mots

Le nombre de mots en caractère gras


État de l’art





Aucun travail n’a été fait pour le français Première expérimentation sur un corpus de tweets en français avec

les #ironie et #sarcasme

RT et tweets contenant des images supprimés On n’arrive pas à détecter l’ironie qui se trouve dans les images ou dans

des RT qui représentent des réponses à des tweets.

Objectif : tester la pertinence des traits de la littérature

Traits ‘surfaciques’ : la ponctuation, les émoticônes, les majuscules, les citations, les interjections, les connecteurs de discours et la négation

Classification des tweets en deux classes : ironique/non-ironique


Corpus formé de 10 000 tweets 5 000 tweets ironiques relatifs aux #tags: #ironie et #sarcasme

▪ @DenisGabJade - Les heures d'ouverture des banques sont tellement harmoniser avec le mode de vie des travailleurs !!! #sarcasme

▪ Cette épaisse couche de pollution à l'horizon ... Que c'est beau

L’ordre des traits discriminants pour la tâche de classification en appliquant «Gain Ratio» :

1. Émoticônes

2. Interjections

3. Majuscules

4. Citations

5. Connecteurs de discours

6. Ponctuations

7. La négation


La fréquence des traits :


0

500

1000

1500

2000

2500

3000

3500

émoticônes interjections majuscules citations conecteurs de discours

ponctuation négation

572

1652

1230

223

2324

3479

192 126

1127

2284

634

2411

3363

213

Ironique

Non-ironique

Un corpus de train qui représente 80% du corpus (8000 tweets : 4000 tweets ironiques et 4000 non-ironiques)

Un corpus de test qui représente 20% du corpus (2000 tweets :

1000 tweets ironiques et 1000 non-ironiques)


@SimardRaymond - @Belangmt je comment cela est possible, PKP n'a pas parlé a ses journalistes ?? #sarcasme

@RayanCadel_ - Chelsea doit avoir peur quand même ya Jeremy

Menez au PSG #Ironie #JoueurBidon #Football #LDC @n_a_n_t_e_s - C'est marrant comme il a fallu attendre nos

nouveaux prétendant au trône pour construire NANTES et son avenir.. #Ironie ! #Mun44000-Fri Mar 21 09:23:23 CET 2014

@JRInesN - Je stress comme pas humain et j'ai rien dormi de la nuit...

Ça commence si bien aujourd'hui #ironie-Fri Mar 21 09:13:49 CET 2014


@ACCOMS1 - Une litanie d'interrogations, le mandat de François Hollande ressemble à un jour sans fin http://t.co/TOn3A2gcHr #Politique via @LePoint

@neo_bordelaise - Dossier #municipales dans @Telerama. Bilan de

la #politique #culturelle de @alainjuppe contrasté, ambitieux mais lisse et conventionnel.

@jonathanbalsamo - @Maxime_Medard en #Politique une émission

de ce genre , c'est une cour de récréation ^^ @akemoi - #economie La Jaunes et la Rouge – « ÉLIMINER

L’INSTABILITÉ ET LA FRAGILITÉ DE LA ZONE EURO »


L’absence de traits discriminants comme les émoticônes, les interjections a conduit le système à mal classer certains tweets.

La présence d'émoticônes, de majuscules et de citations dans

quelques tweets non-ironiques a conduit le système à mal classer certains tweets.

Problème des #ironie et #sarcasme : Un tweet contenant ces hashtags n’est pas forcément ironique Un tweet ironique peut ne pas avoir un hastag #ironie ou #sarcasme nécessité d’une phase d’annotation manuelle

Nécessité de la prise en compte d’autres traits. Aller au-delà des traits surfaciques Nécessité de prise en compte du contexte (Sarmento et al., 2009) (Gonzalez-

Ibanez et al., 2011)


Comparaison des résultats obtenus par rapport à ceux de l’état de l’art


Précision F-mesure

Nos valeurs 0,640 0,688

Les valeurs de l’état de l’art

0,630< P

État de l’art





Tester le reste des traits cités dans l’état de l’art

Proposer de nouveaux traits ▪ le temps des verbes

▪ le changement du sujet dans une phrase

▪ l’utilisation de l’argot

▪ le contexte


Merci


Documents

Le langage figuratif dans le web social : cas de …mediamining.univ-lyon2.fr/velcin/fows/slides/karoui...Le langage figuratif dans le web social : cas de l'ironie et du sarcasme 2