Babbels samarbete med Cambridge English tar språkbedömning till den digitala tidsåldern
Ben, ursprungligen från Storbritannien, är projektledare för engelska i Babbels didaktiska team, språkexperterna som skapar och optimerar våra kurser. Han har tidigare utbildat sig till och jobbat som engelsklärare och bedömare i både Tyskland och Spanien, och intresserar sig särskilt för språk som ligger så långt ifrån engelskan som möjligt, däribland Swahili och Tonga. Här skriver han om hur Babbel och Cambridge English, experter på språkbedömning, gick ihop för att släppa Babbel English Test…
Babbel tillhandahåller redan en plattform för att lära sig språk online och snabbt bygga upp självförtroende för riktiga konversationer, och vi har länge velat ge våra användare ett sätt att bevisa sina språkkunskaper. För att skapa Babbel English Test startade vi nyligen ett samarbete med Cambridge English, som årligen bedömer 5 miljoner människors språkkunskaper.
Inom området engelskinlärning och -utlärning är Cambridge English välkänt över hela världen för sina kvalitetsbedömningar, medan Babbel gör det möjligt att lära sig prata ett nytt språk varsomhelst, närsomhelst. Babbels medgrundare Thomas Holl förklarar: ”Våra syften som företag komplementerar varandra – att erbjuda en förstklassig upplevelse för språkstuderande. Så för oss verkade det perfekt att kombinera Cambridges oöverträffade kunskap inom bedömning med Babbels expertis inom digital språkinlärning!”
Resultatet? Babbel English Test i samarbete med Cambridge English är nu live! (Än så länge kan testet tyvärr inte göras på svenska, men det går bra att göra testet med instruktioner på engelska.) Det går att göra hela testet online, och det ger våra användare chansen att exakt bedöma sin läs- och hörförståelse i engelska och certifierar nivåer från A1 till B1 och uppåt. Resultatet visas i ett personligt certifikat med ditt foto, som du kan lägga till i ditt CV eller dela på sociala och professionella nätverk.
Det senaste decenniet har språkutbildning och bedömning på nätet utvecklats parallellt. Det är nu möjligt att göra många av de mest välkända engelskproven på datorn – om än bara i särskilt utvalda testcenter. Traditionella pappersprov har i ökande omfattning fallit i glömska. Den enorma potentialen hos en prisvärd, högklassig och lätt åtkomlig digital bedömning var tydlig, men Babbel insåg även att vi behövde en partner med rätt expertis att hjälpa oss säkerställa att det här testet mötte vår extremt höga standard. Det självklara valet då: Cambridge English.
Första prototypen
I början av processen bestämde vi oss för att skapa ett kort och enkelt prototyptest för nivå A1 (nybörjare) för att få en uppfattning om hur Babbel och Cambridge skulle arbeta tillsammans, och vad var och en kunde tillföra. Ännu viktigare för oss var att ta reda på vad Babbel-användare tyckte om upplevelsen som helhet. Tillsammans med representanterna för Listening and Reading från Cambridge skapade vi ett A1-test på 37 frågor för att bedöma hör- och läsförståelse.
För oss som jobbar i Babbels didaktik-team är feedback från kunder redan grundläggande för att hela tiden förbättra vårt innehåll, därför bad vi de användare som gjorde A1-prototypen att fylla i en kort enkät på slutet. Viss feedback var förväntad, till exempel så tyckte en stor majoritet att testet var alltför lätt. Det är ganska vanligt på A1-nivån. Dock så såg vi att en stor del av användarna inte förstod vad A1 betydde. Det här är något vi ser bland våra kurser som är baserade på den gemensamma europeiska referensramen för språk (CEFR), och för att åtgärda det förklarar vi vad en nivå innebär i varje kursbeskrivning.
Om man är osäker på vilken språknivå man befinner sig på och vilken man bör sikta på, kan det vara svårt att ens försöka sig på ett språktest. Så vi använde feedbacken till att designa en modell som täcker flera nivåer, i stället för att erbjuda ett prov per nivå. Det betyder att de som gör vårt prov inte behöver oroa sig över att själva bedöma sin nivå i förväg, vilket de hade behövt vid enskilda prov för varje nivå.
Ett annat viktigt tema i feedbacken var – ganska överraskande – att många tyckte att det var roligt att göra provet. Jag kan såklart inte föra någon annans talan, men när jag tidigare har gjort traditionella språktest, har jag alltid upplevt dem som rätt stressiga, och med en känsla av “att det här är inte roligt”. Vad vi hursomhelst upptäckte, är att med möjligheten att göra det här testet online, hemma i lugn och ro och i sin egen takt, så gillar faktiskt många upplevelsen. Det var faktiskt flera som kommenterade att de till och med skulle uppskatta ett längre prov.
Att utforma testet
Nu var vi redo att skapa ett mer omfattande test, som täckte nivåerna A1 till B1 och uppåt, och som byggde på en ny provmodell som vi designade tillsammans med Nir Golan, Babbels Senior Product Owner for New Business Initiatives. Han hjälpte även till att utvärdera hur ansträngande de olika modellerna som vi hade designat faktiskt skulle vara att bygga för Babbels ingenjörer. Trots allt, när ett test är online, är det innehållsskapande teamet bara ett av flertalet team som är involverade.
För den här omgången samlade teamen för Listening and Reading på Cambridge innehåll till de olika nivåerna. För att avgöra vilka ämnen som skulle testas, samlade jag innehåll från hundratals progressiva Babbel-lektioner för engelska, så att våra partners vid Cambridge kunde se exakt vad för ordförråd och grammatik som våra engelskstudenter kunde förväntas att kunna på olika CEFR-nivåer. Efter det gav teamet på Cambridge testinnehållsspecialister i uppdrag att skriva frågor som överensstämmer med Babbels innehåll.
Det var dock annat innehåll som användes för testet, nämligen innehåll som redan fanns och har använts i andra bedömningar av Cambridge och som har kalibrerats ordentligt. Kalibrering betyder att svaren till dessa frågor kontrolleras för att försäkra att de verkligen bedömer den nivå som de är skapade för, och där det behövts, blivit justerade. Genom att inkludera dessa s.k. ankare kan vi jämföra svar till dessa med svaren till nya frågor, detta för att definitivt säkerställa att vårt prov ger en korrekt bedömning av alla som genomför provet.
Genom hela processen har jag lärt mig enormt mycket om språkbedömning och om hur mycket eftertanke och jobb som behövs för att utforma ett rättvist och exakt prov. Faktiskt har det fått mig att uppskatta alla de där ljuvliga tyskproven jag har gjort tidigare, som jag inte uppskattade lika mycket då…
Sedan provet släpptes har vi jobbat på att optimera det. För ökad säkerhet och giltighet har vi skapat ett identifieringssystem för att säkerställa en rättvisare testprocess, och vi följer den feedback vi får från testdeltagarna angående hur de känner inför resultaten och variationen på ämnen som bedöms. Vi hoppas på att utvidga provet under kommande månader så att det inkluderar högre nivåer, upp till nivå B2 (övre medelnivå). Vi kommer också att granska olika sätt att bedöma, till exempel bedömning av fri textinmatning och därmed utvidga testet för att titta på deltagarnas skrivfärdigheter i engelska. Så håll utkik för uppdateringar!
I framtiden är det helt tänkbart att alla traditionella språkprov gör sig av med sina pappersformat och omfamnar den digitala tidsåldern. Till och med talbedömningar kommer att äga rum via webbkamera. Det är också troligt att studenter kommer att ha ett mycket större utbud av bedömningsalternativ, när nya innovativa företag utvecklar sina egna bedömningssystem. Dock med denna förändring blir det viktigare än någonsin att säkerställa att online-test är korrekta, giltiga och precis lika rigorösa som sina traditionella motsvarigheter. Att kombinera ingående kunskap om bedömning med erfarenhet inom utlärning av språk på nätet, som Babbel och Cambridge English har gjort, är absolut nödvändigt. Det kommer också att vara nyckeln till fortsatt utformning av online-bedömningar att anpassa sig efter språkstudentens behov – vilka mycket troligt kan se helt annorlunda ut för ett digitalt test jämfört med traditionell bedömning.