Global Engagement Survey: Assessing Intercultural Competence, - PowerPoint PPT Presentation

Global ¡Engagement ¡Survey: ¡ Assessing ¡ Intercultural ¡Competence, ¡Civic ¡ Engagement, ¡and ¡Critical ¡Re8lection ¡ @buildingbeGerw ¡ Eric ¡Hartman , ¡Execu(ve ¡Director, ¡Center ¡for ¡Peace ¡and ¡Global ¡Ci(zenship―Haverford ¡College ¡ Maureen ¡Vandermaas-­‑Peeler , ¡Director ¡of ¡the ¡Center ¡for ¡Research ¡on ¡Global ¡Engagement ¡and ¡ Professor ¡of ¡Psychology—Elon ¡University ¡ ¡ Angie ¡Edwards , ¡Director, ¡Myrta ¡Pulliam ¡Center ¡for ¡Interna(onal ¡Educa(on—Queens ¡University ¡ of ¡CharloGe ¡ hGps://compact.org/global-­‑sl/ges/ ¡ ¡

Today’s ¡Plan ¡ GES ¡Origins, ¡Purposes, ¡and ¡Overview ¡ Specific ¡ins(tu(ons, ¡program ¡factors, ¡and ¡some ¡findings ¡ ¡ ¡ • Haverford ¡College ¡ ¡ • Queens ¡University ¡ ¡ • Elon ¡College ¡ Discussion ¡ ¡ Ongoing ¡use, ¡next ¡steps, ¡and ¡opportuni(es ¡for ¡involvement ¡ hGps://compact.org/global-­‑sl/ges/ ¡ ¡

AACU ¡Global ¡learning ¡ ¡ Civic learning Intercultural Critical thinking learning Global learning

Origins ¡and ¡Purposes ¡ ¡ • Integrates ¡measures ¡of ¡intercultural ¡competence, ¡civic ¡ development, ¡and ¡cri(cal ¡thinking ¡ ¡ • Lough ¡(IVIS), ¡Morais ¡& ¡Ogden, ¡IDI, ¡GPI, ¡BEVI, ¡AAC&U ¡ • Serves ¡ar(culated ¡concerns ¡of ¡first ¡genera(on ¡ins(tu(ons ¡ ¡ • & ¡helps ¡us ¡beGer ¡understand ¡popula(on ßà treatment ¡ • Adds ¡space ¡for ¡qualita(ve ¡response ¡in ¡a ¡large-­‑scale, ¡mul(-­‑ ins(tu(onal ¡design ¡ ¡ • Created ¡for ¡end-­‑users ¡and ¡program ¡design/improvement ¡

¡ Global ¡Engagement ¡ Mul7-­‑ins7tu7onal ¡assessment ¡tool ¡that ¡employs ¡ quan7ta7ve ¡ and ¡qualita7ve ¡methods ¡to ¡beGer ¡understand ¡rela(onships ¡ among ¡ program ¡variables ¡ and ¡student ¡learning, ¡specifically ¡in ¡ respect ¡to ¡ global ¡learning ¡ goals ¡iden(fied ¡by ¡the ¡Associa(on ¡ Survey ¡ ¡ of ¡American ¡Colleges ¡and ¡Universi(es ¡(AAC&U, ¡2014) ¡ Intercultural ¡Competence ¡– ¡Communica7on ¡ ICC ¡ Intercultural ¡Competence ¡– ¡Self-­‑awareness ¡ ICSA ¡ Civic ¡Engagement ¡– ¡Efficacy ¡ CEE ¡ Civic ¡Engagement ¡– ¡Poli(cal ¡Voice ¡ CEPV ¡ Civic ¡Engagement ¡– ¡Conscious ¡Consump(on ¡ CECC ¡ Civic ¡Engagement ¡– ¡Values ¡ CEV ¡ Cri(cal ¡Reflec(on ¡ CR ¡

Mixed ¡Methods ¡Survey ¡Structure ¡ Global ¡Learning ¡Outcome ¡ Closed ¡ Closed ¡ Open ¡items ¡ Open ¡items ¡ items ¡ ¡ items ¡ (post-­‑only) ¡ (post-­‑only) ¡ Intercultural ¡competence ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡Communication ¡(ICC) ¡ 8 ¡ ¡ 3 ¡ 1 ¡ ¡ ¡ ¡ ¡ ¡Self-­‑awareness ¡(ICSA) ¡ 7 ¡ ¡ 6 ¡ ¡ @buildingbeGerw ¡ Civic ¡Engagement ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡ Values ¡(CEV) ¡ 8 ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡ Efficacy ¡(CEE) ¡ 9 ¡ ¡ ¡ 1 ¡ ¡ ¡ ¡ ¡ ¡ Political ¡voice ¡(CEPV) ¡ 8 ¡ ¡ ¡ 2 ¡ ¡ ¡ ¡ ¡ ¡ Advocacy ¡& ¡activism ¡ ¡ 3 ¡ ¡ 2 ¡ ¡ ¡ ¡ ¡ ¡ Conscious ¡consumption ¡(CECC) ¡ 10 ¡ ¡ 1 ¡ ¡ Critical ¡reflection ¡ (CR) ¡ 8 ¡ ¡ 3 ¡ ¡ ¡

Clarifying ¡questions ¡in ¡survey ¡ intercultural ¡learning ¡ I ¡have ¡a ¡hard ¡(me ¡understanding ¡the ¡feelings ¡of ¡people ¡from ¡ other ¡cultures ¡well. ¡ ¡ • If ¡strongly ¡agree ¡or ¡agree, ¡ Could ¡you ¡describe ¡a ¡point ¡at ¡which ¡you ¡ have ¡had ¡a ¡hard ¡(me ¡understanding ¡different ¡cultures ¡well? ¡ ¡ • If ¡strongly ¡disagree ¡or ¡disagree , ¡Can ¡you ¡indicate ¡how ¡you ¡have ¡ become ¡aware ¡that ¡you ¡understand ¡the ¡feelings ¡of ¡people ¡from ¡ other ¡cultures ¡well? ¡ ¡ ¡

Clarifying ¡questions ¡in ¡survey ¡ global ¡civic ¡engagement ¡ ¡ • I ¡plan ¡to ¡engage ¡in ¡advocacy ¡about ¡the ¡same ¡as ¡I ¡did ¡ before ¡my ¡summer ¡experiences. ¡ • I ¡plan ¡to ¡engage ¡in ¡advocacy ¡more ¡than ¡I ¡did ¡before ¡my ¡ summer ¡experiences. ¡ ¡ • If ¡SA ¡or ¡A ¡to ¡either ¡above, ¡Around ¡what ¡primary ¡issue ¡do ¡you ¡plan ¡ to ¡engage ¡in ¡advocacy ¡in ¡the ¡future? ¡ ¡ • If ¡SA ¡or ¡A ¡to ¡either ¡above, ¡How ¡do ¡your ¡plans ¡to ¡engage ¡in ¡ advocacy ¡in ¡the ¡future ¡compare ¡to ¡your ¡advocacy ¡ac(vi(es ¡prior ¡ to ¡your ¡summer ¡experiences? ¡ ¡

Participants, ¡Program, ¡Data ¡Overview ¡ • Institutional ¡diversity ¡ à ¡small, ¡faith-­‑based, ¡liberal ¡arts, ¡large, ¡ state ¡8lagship, ¡Ivies, ¡and ¡predominantly ¡8irst ¡generation ¡serving ¡ institutions ¡ • Location ¡diversity ¡ à ¡US, ¡Nicaragua, ¡South ¡Africa, ¡etc. ¡ • Program ¡diversity ¡ à ¡high ¡impact ¡summer ¡programming, ¡ primarily ¡immersive ¡SL ¡(international ¡& ¡domestic) ¡and ¡other ¡ student ¡abroad ¡programming ¡ • Data ¡ à ¡Program ¡factors, ¡closed ¡questions, ¡open-­‑ended ¡questions, ¡ & ¡background ¡information ¡

Program ¡Factors ¡ Options ¡-­‑ ¡examples ¡ Students ¡ All ¡undergrad ¡| ¡undergrad ¡& ¡grad ¡| ¡3 rd ¡& ¡4 th ¡year ¡ ¡ ¡ Credits ¡ 1 ¡– ¡6 ¡credits ¡ Required ¡| ¡Not ¡req. ¡but ¡highly ¡encouraged ¡| ¡Several ¡req. ¡at ¡least ¡½ ¡| ¡Elective ¡| ¡To ¡complete ¡minor ¡ ¡ Required/ ¡elective ¡ Language ¡ On-­‑campus ¡program ¡| ¡English ¡| ¡Not ¡English, ¡req. ¡local ¡language/ ¡advanced/ ¡intermediate ¡/ ¡ rudimentary ¡language ¡skills ¡ SES ¡ Higher ¡SES ¡than ¡comm. ¡| ¡Some ¡overlap, ¡mostly ¡higher ¡than ¡comm. ¡| ¡same ¡SES ¡| ¡Some ¡overlap, ¡mostly ¡ lower ¡than ¡comm. ¡ From ¡host ¡comm. ¡& ¡ongoing ¡relationships ¡| ¡Same ¡as ¡comm. ¡| ¡Relationships ¡over ¡years ¡| ¡visited ¡at ¡ Leader ¡ least ¡2X ¡| ¡once ¡before ¡| ¡First ¡time ¡to ¡host ¡comm. ¡ Location ¡ US/ ¡home ¡comm. ¡| ¡US/ ¡extended ¡stay ¡away ¡from ¡campus ¡| ¡Pre ¡& ¡post ¡in ¡US/ ¡immersion ¡outside ¡US ¡| ¡ Int’l ¡students ¡come ¡to ¡US ¡| ¡entire ¡exp. ¡outside ¡US ¡ ¡ Selection ¡ Apply, ¡but ¡rarely ¡rejected ¡| ¡less ¡than ¡75% ¡| ¡less ¡than ¡50% ¡| ¡Admitted ¡if ¡good ¡academic ¡standing ¡ Duration ¡ 1 ¡-­‑10 ¡weeks ¡ Intervention ¡ Summer ¡| ¡Summer, ¡coursework ¡before ¡& ¡after ¡| ¡Summer, ¡coursework ¡before ¡| ¡one ¡course ¡during ¡ semester ¡

Participation ¡ Y1 ¡ Y2 ¡ Y3 ¡ Ins(tu(ons ¡ 10 ¡ 9 ¡ 8 ¡ Programs ¡ 30+ ¡ 45 ¡ Data ¡incoming ¡ Pre-­‑Survey ¡ 226 ¡ 379 ¡ 441 ¡ Post-­‑Survey ¡ 157 ¡ 287 ¡ Data ¡incoming ¡ ¡ Matched ¡Cases ¡ 109 ¡ 177 ¡ ≈140 ¡

GES ¡2017 ¡(Y3) ¡Preliminary ¡Data ¡ ¡

Y2 ¡Multi-­‑institutional ¡comparison: ¡ Ins7tu7on ¡A ¡ Ins7tu7on ¡B ¡ 2.61 ¡ 2.52 ¡ 2.56 ¡ 2.48 ¡ 2.51 ¡ 2.44 ¡ 2.31 ¡ 2.26 ¡ 2.28 ¡ 2.21 ¡ 2.22 ¡ 2.17 ¡ 2.17 ¡ 2.16 ¡ 2.07 ¡ 2.07 ¡ 2.05 ¡ 1.94 ¡ 1.87 ¡ 1.88 ¡ 1.83 ¡ 1.84 ¡ 1.75 ¡ 1.6 ¡ 1.52 ¡ 1.44 ¡ 1.25 ¡ 0.56 ¡ ICC-­‑C ¡ ICC-­‑SA ¡ CE-­‑E ¡ CE-­‑PV ¡ CE-­‑CC ¡ CE-­‑V ¡ CR ¡ ICC-­‑C ¡ ICC-­‑SA ¡ CE-­‑E ¡ CE-­‑PV ¡ CE-­‑CC ¡ CE-­‑V ¡ CR ¡ Pre ¡ Post ¡ Pre ¡ Post ¡

Qualitative ¡Insights ¡ • Program ¡or ¡ins(tu(onal ¡culture, ¡as ¡well ¡as ¡explicit ¡learning ¡ goals, ¡influenced ¡students’ ¡reflec(ons ¡and ¡insights ¡ ¡ • For ¡example, ¡one ¡cohort ¡of ¡students ¡focused ¡explicitly ¡on ¡ concepts ¡and ¡prac(ces ¡of ¡interna(onal ¡development ¡in ¡their ¡ coursework ¡ ¡