Samspill mellom tekst, bilde, lyd og video i medietekster.
Tekster som snakker på mange måter samtidig
Neste gang du åpner en nyhetssak på mobilen, legg merke til alt som skjer på skjermen samtidig: det er tekst, et stort bilde, kanskje et videoklipp som starter av seg selv, lenker, farger og overskrifter i ulike størrelser. Saken «snakker» til deg på mange måter på én gang. Slike tekster kaller vi multimodale, og de fleste medietekster i dag er nettopp det.
Multimodalitet betyr at en tekst bruker flere uttrykksmåter – modaliteter – samtidig for å skape mening. Begrepet ble utviklet av lingvistene Gunther Kress og Theo van Leeuwen, som argumenterte for at vi ikke kan forstå moderne tekster bare ved å se på ordene. Vi må også analysere bilder, lyd, layout og farger. En modalitet er nettopp en slik uttrykksmåte. Vi kan dele dem i grupper. Verbalspråket er skrift og tale – tekst i artikler og undertekster, tale i podkaster og nyhetssendinger – og formidler presis informasjon og nyanser. De visuelle modalitetene omfatter bilder, video, farger, former, komposisjon, typografi og layout. De auditive modalitetene er musikk, lydeffekter, stemmekvalitet og til og med stillhet, som kan være like meningsbærende som lyd. Og de romlige og gestuelle modalitetene rommer kroppsspråk, mimikk, bevegelse og hvordan elementer plasseres på en side. Til sammen utgjør disse verktøykassen en medietekst bygger mening med.
Hvem bærer mest av meningen?
La oss ta en konkret tekst og se hvilke modaliteter som er i spill: forsiden på VG.no. Verbalspråket finner du i overskrifter, ingresser og bildetekster, der store og fete overskrifter signaliserer de viktigste sakene. Bildene tiltrekker oppmerksomhet og formidler følelser – et bilde av en gråtende person signaliserer tragedie, et smilende kjendisfoto signaliserer underholdning. Fargene styrer blikket: rødt brukes for breaking news, gult for betalingssaker. Typografien viser hierarki gjennom størrelse og tykkelse, hovedsaken har størst skrift. Layouten plasserer de viktigste sakene øverst og størst. Og autospillende videoklipp formidler nyheter raskt. Alle disse modalitetene samvirker slik at du på sekunder kan orientere deg, vurdere hva som er viktig, og velge hva du vil lese.
Dette leder oss til et nyttig begrep: funksjonell tyngde, som handler om hvilken modalitet som bærer mest mening i en bestemt tekst. I en avisartikkel har verbalspråket vanligvis størst funksjonell tyngde, mens bildet er illustrerende. I en musikkvideo er det omvendt – bilde og lyd dominerer, og teksten er underordnet. Å identifisere den funksjonelle tyngden er viktig, fordi det viser hvilken uttrykksmåte som faktisk bærer budskapet. Når du analyserer en medietekst, er et av de første spørsmålene du kan stille: hvilken modalitet er det egentlig som gjør jobben her – ordene, bildet eller lyden?
Når modalitetene møtes
Det virkelig interessante skjer i samspillet mellom modalitetene, for de kan forholde seg til hverandre på flere måter. Ved forsterkning, eller redundans, sier modalitetene det samme på ulike måter – et nyhetsbilde av en flom forsterker teksten som beskriver ødeleggelsene, og budskapet blir tydeligere. Ved utfylling, eller komplementaritet, bidrar de med ulik informasjon som til sammen skaper en helhet – teksten forteller hvem og hva, mens bildet viser hvordan det ser ut, og helheten blir mer enn summen av delene. Ved utdyping forklarer en modalitet en annen, slik en bildetekst gir kontekst til et foto. Og ved kontrast motsier modalitetene hverandre bevisst – en reklame kan vise glade mennesker mens teksten forteller om alvorlige bivirkninger, noe som kan skape ironi, humor eller ubehag.
Tenk på en typisk bilreklame. Bildet viser vakre naturlandskap, solnedgang og en åpen vei. Musikken er en rolig pianomelodi som gir følelse av frihet. En voiceover sier: «Frihet er ikke et sted. Frihet er en følelse.» Til slutt vises logo og modellnavn. Her forsterker bilde og musikk hverandre, begge skaper en stemning av frihet og ro. Voiceoveren utfyller bildet ved å gi ord til følelsen. Den funksjonelle tyngden ligger på bilde og musikk – det er følelsen som selger, ikke tekniske spesifikasjoner. Og det er nettopp dette som kalles koherens: når alle modalitetene jobber i samme retning og skaper en helhetlig opplevelse. God koherens finner du i en reiseblogg der teksten beskriver en strand, bildet viser stranden, og fargene er blå og gule. Dårlig koherens oppstår derimot hvis en artikkel om alvorlige miljøproblemer pakkes inn i et lekent design med emojier og morsom font – da sender modalitetene motstridende signaler, og leseren blir usikker på hvordan teksten skal tolkes.
Oppsummering
Vi har sett at multimodalitet betyr at en tekst bruker flere uttrykksmåter samtidig for å skape mening. Viktige modaliteter er verbalspråk, bilder, video, farger, typografi, layout, lyd og kroppsspråk. Funksjonell tyngde angir hvilken modalitet som bærer mest mening – verbalspråket i en avisartikkel, bilde og lyd i en musikkvideo.
Modalitetene kan samvirke gjennom forsterkning, utfylling, utdyping eller kontrast, og når de jobber i samme retning, oppstår koherens – en helhetlig og sammenhengende mening. Eksemplene med VG-forsiden og bilreklamen viser hvordan dette virker i praksis, og hvorfor det å se samspillet mellom modalitetene gjør deg til en skarpere analytiker av medietekster.
Dette kapitlet er skrevet av Anthropics toppmodeller (Claude Opus og Claude Fable) og er foreløpig ikke manuelt gjennomgått — kvalitetskontrollen gjøres av uavhengige KI-agenter, og innmeldte feil rettes fortløpende. Funnet en feil? Meld fra, så retter vi den. Les mer om hvordan innholdet lages.