Multimodale tekster: slik analyserer du bilde, tekst og lyd sammen

De fleste tekstene du møter i løpet av en dag, er ikke rene skrivetekster. En reklameplakat kombinerer bilde og tekst. En musikkvideo kombinerer musikk, bilder og tekst. En nyhetssak på nett har overskrift, bilde, bildetekst og kanskje video. Fagordet for slike tekster er multimodal tekst, og de stiller andre krav til deg som analytiker enn en ren skriftlig tekst.

Guiden går fram steg for steg: først begrepene, deretter grunnleggende bildeanalyse, så samspillet – og til slutt et fullstendig eksempel.

Hva er en multimodal tekst?

En modalitet er en uttrykksform som skaper mening: skrift, tale, bilder, musikk, kroppsspråk eller dans. Ifølge Store norske leksikon er multimodalitet i sosialsemiotikken det at ulike semiotiske uttrykksformer brukes for å uttrykke mening. En multimodal – eller sammensatt – tekst inneholder minst to slike modaliteter.

Et fotografi alene består av én modalitet. Legger du til en bildetekst, brukes to modaliteter, og teksten er blitt multimodal. Det er hele forskjellen: kombinasjonen av uttrykksformer, ikke hvor avansert uttrykket er. Typiske eksempler er TV-programmer, filmer, nettsider, plakater, reklameplakater og musikkvideoer.

Hvorfor modalitetene ikke bare «illustrerer» hverandre

Den vanligste misforståelsen er at bildet bare er pynt ved siden av teksten. I virkeligheten bærer ulike modaliteter ulike deler av informasjonen. Det kalles funksjonell spesialisering: skriften kan ha én funksjon, mens bildet har en annen. Overskriften i en avis kan oppsummere saken, mens bildet gir deg et ansikt å forholde deg til.

Modalitetene har ulike egenskaper som gjør dem bedre egnet til å formidle visse typer innhold enn andre. Skrift er presis og egnet til fakta og argumentasjon. Bilder er sterke på stemning, følelser og assosiasjoner. Musikk kan understreke det verbale innholdet – eller være en kontrast til det – og skape stemning og assosiasjoner som ingen setning klarer alene.

Dette betyr at modalitetene i en multimodal tekst kan gjøre tre ting med hverandre:

• Forsterke hverandre – bildet og teksten peker i samme retning.
• Utfylle hverandre – de bærer ulik informasjon som til sammen gir helheten.
• Motsi hverandre – og dermed skape en ny betydning, ofte ironi.

Det tredje tilfellet er det mest interessante. En tekst der de muntlige ordene handler om glede, mens bildene viser et grått, forlatt industriområde, skaper en ironisk spenning som ingen av delene gir alene. Les mer om dette i virkemidler om ironi.

Hvordan analyserer du samspillet mellom bilde og tekst?

Det finnes en klassisk felle i analyse av sammensatte tekster: å skrive én bildeanalyse og én tekstanalyse, og lime dem sammen til slutt. Det blir to isolerte analyser, ikke én. Poenget med multimodal analyse er sammenhengen mellom verbaltekst og bilde. Det kan likevel være en god strategi å se på delene hver for seg først – så lenge du behandler dem sammen i selve analysen.

Start med helheten før du går inn på enkeltdelene. Hva er tekstens formodede budskap? Hvem er mottakeren? Hvilken sjanger og situasjon er det snakk om? Deretter kan du gå inn på delene – men alltid med spørsmålet om hva de gjør med hverandre.

Slik finner du ut hva bildet og teksten gjør med hverandre

Et bilde er i seg selv åpent for mange tolkninger. Tenk deg et bilde av en person som ser alvorlig ut av et vindu. Uten tekst kan bildet bety nesten hva som helst. Med en bildetekst som peker i én retning, låses tolkningen – og det er nettopp derfor bildeteksten er et virkemiddel i seg selv.

Spør deg derfor alltid om teksten styrer tolkningen av bildet, eller om de to bygger budskapet sammen. I tegneserier, reklamefilm og musikkvideoer bærer tekst og bilde ofte ulike deler av budskapet, slik at ingen av dem kan fjernes uten at noe går tapt – det som skjer i bildene, gjentas ikke i ord.

Bildeanalyse-basics: komposisjon, farge og blikk

Før du kan si noe om samspillet, må du kunne beskrive bildet presist. Disse spørsmålene dekker grunnlaget:

• Layout og plassering: Hva legger du merke til først? Hva står størst, øverst eller i midten? Plassering styrer hierarkiet i teksten.
• Komposisjon: Hvordan er bildet bygget opp? Er det rolig eller urolig? Er det en tydelig forgrunn og bakgrunn?
• Fargebruk: Hvilke farger dominerer, og hvilke assosiasjoner gir de? En rød farge kan lede blikket mot ett bestemt element – og samtidig gi assosiasjoner til fare, kjærlighet eller varme, avhengig av konteksten.
• Blikkledning: Hvor ledes blikket ditt? Ser en person i bildet på noe – et produkt, en tekst? Da følger du gjerne blikket dit.
• Kontraster og symboler: Finnes det motsetninger i bildet, eller elementer som står for noe mer enn seg selv? Se mer om dette i symbol som virkemiddel og kontrast som virkemiddel.

Hva gjør lyden?

I tekster med lyd – film, reklamefilm, musikkvideo – undersøker du musikk, lydeffekter og stemmebruk. Spør deg om lyden understreker det verbale innholdet, eller om den er en kontrast til det. En rolig, varm stemme over harde bilder skaper en spenning som er et virkemiddel i seg selv. I musikkvideoer kan kombinasjonen av tekst, musikk og bilder framheve betydninger i lydsporet – eller skape helt nye betydninger.

Retorisk analyse av samspillet: appellformer på tvers

Her kobler du bildeanalysen til retorikken. Tekstdelen analyserer du tradisjonelt retorisk med appellformer, argumentasjon og retoriske virkemidler – men appellformene går på tvers av modalitetene:

• Etos (troverdighet) ligger ofte i logo, avsendernavn og en «ren» layout – men også i dokumentarisk bildestil.
• Patos (følelsesappell) ligger ofte i bildet: ansikter, kroppsholdning, farger og musikk.
• Logos (fornuftsappell) ligger ofte i teksten: fakta, tall og argumentasjon.

Les mer om de tre formene i oversikten over etos, patos og logos, og om metoden i guiden til retorisk analyse. Poenget i en multimodal analyse er at du viser hvordan de tre appellerer sammen: bildet leverer patosen, teksten leverer logos, og avsenderens navn leverer etos.

Eksempel: analyse av en fiktiv reklameplakat

Her settes alt sammen i et gjennomgående eksempel. Plakaten er fiktiv, men bygd opp som en typisk reklame.

Helheten først: Plakaten skal overtale byfolk til å sykle til jobben. Mottakeren er pendlere, og sjangeren er reklame – en tekst der alle valg er gjort for å overbevise.

Bildet: Solnedgangen i varme toner gir assosiasjoner til frisk luft, frihet og en god start på dagen – patos. At syklisten sykler oppover, antyder innsats, men silhuetten mot en lys himmel gjør innsatsen vakker i stedet for slitsom. Blikket ledes fra syklisten, nedover mot venstre, der teksten står – komposisjonen leder deg rett til argumentet.

Teksten: «30 minutter, null utslipp» er logos: to konkrete, målbare påstander. «Meld deg på» er en direkte oppfordring – et handlingsrettet avsluttende grep.

Samspillet: Bildet alene kunne vært et innlegg om trening, ferie eller kjærlighet til naturen. Teksten låser tolkningen til pendlerliv og miljø, og de to modalitetene utfyller hverandre: bildet leverer følelsen, teksten leverer fakta. Logoen og den ryddige layouten gir etos – avsenderen fremstår som organisert og seriøs.

Retorisk konklusjon: Plakaten kombinerer patos (solnedgang, silhuett), logos (tid og utslipp) og etos (logo, profesjonell layout) – og bærer preg av aptum: uttrykket passer til situasjonen og mottakeren. Slik skal en multimodal analyse ende: ikke i to delkonklusjoner, men i én helhet.

Slik analyserer du en multimodal tekst – steg for steg

1. Beskriv helheten. Identifiser sjanger, avsender, mottaker og formodet budskap før du går inn på enkeltdelene.
2. Kartlegg modalitetene. Hvilke uttrykksformer inngår – skrift, bilde, lyd, tale? Hva bærer hver av dem (funksjonell spesialisering)?
3. Analyser bildet. Beskriv layout, komposisjon, fargebruk, blikkledning, kontraster og symboler.
4. Analyser teksten og lyden. Bruk appellformer, argumentasjon og virkemidler på den verbale delen; undersøk om lyd understreker eller motsier innholdet.
5. Bestem forholdet. Styrer teksten tolkningen av bildet, eller bygger de budskapet sammen? Forsterker, utfyller eller motsier modalitetene hverandre?
6. Konkluder om samspillet. Vis hvordan modalitetene sammen skaper budskapet – aldri to separate konklusjoner.

Vil du gå videre, kan du kombinere denne metoden med guiden til reklameanalyse eller se et fullstendig eksempel i retorisk analyse med kommentarer.

Formuleringsbank: setninger du kan bruke

Bytt ut «…» med eksempler fra teksten du analyserer.

• Avsenderen appellerer til patos ved å knytte budskapet til følelser som …
• I denne multimodale teksten samarbeider bilde og verbaltekst om å …
• Appellformen logos kommer til uttrykk når avsenderen …
• Etos-etableringen skjer allerede i innledningen, fordi avsenderen …
• Den visuelle modaliteten forsterker budskapet ved at …
• Kairos, det rette øyeblikket for å fremme budskapet, er viktig for forståelsen av teksten, siden den ble laget i en tid der …
• Samspillet mellom lyd, bilde og tekst skaper en stemning som …
• Virkemiddelet er aptum fordi det er godt tilpasset målgruppen, som …