Implemen'ng and Assessing Effec've Professional Learning - PDF document

10/5/15 ¡ Implemen'ng ¡and ¡ Assessing ¡Effec've ¡ Professional ¡Learning ¡ Joellen ¡Killion ¡ Senior ¡Advisor ¡ ¡ Learning ¡Forward ¡ 303-­‑520-­‑6790 ¡ Joellen.killion@learningforward.org ¡ www.learningforward.org ¡ ¡ ¡ Outcomes ¡ ParHcipants ¡will ¡ ¡ Ø Examine ¡aLributes ¡of ¡and ¡designs ¡for ¡effecHve ¡ professional ¡learning. ¡ ¡ Ø Understand ¡the ¡necessity ¡of ¡a ¡theory ¡of ¡change ¡in ¡ planning ¡and ¡assessing ¡the ¡effecHveness ¡of ¡ professional ¡learning. ¡ Ø Acquire ¡tool ¡for ¡defining ¡outputs, ¡outcomes, ¡and ¡ goals ¡of ¡professional ¡learning ¡at ¡various ¡stages ¡of ¡ implementaHon ¡(early, ¡rouHne, ¡advanced, ¡ refocused). ¡ 1 ¡

10/5/15 ¡ www.learningforward.org/standards ¡ Standards ¡for ¡Professional ¡Learning ¡ Ø Define ¡the ¡research-­‑ ¡and ¡evidence-­‑based ¡ aLributes ¡of ¡effecHve ¡professional ¡learning ¡ Ø Guide ¡ the ¡ planning, ¡designing, ¡ implemenHng, ¡and ¡evaluaHng ¡professional ¡ learning ¡ Ø Serve ¡as ¡criteria ¡for ¡measuring ¡the ¡quality ¡ of ¡professional ¡learning ¡ 2 ¡

10/5/15 ¡ Professional ¡Learning ¡ ¡ Theory ¡of ¡Change ¡ 2. ¡Changes ¡in ¡ 1. ¡Standards-­‑ educator ¡ based ¡ knowledge, ¡ professional ¡ skills, ¡and ¡ learning ¡ disposiHons ¡ 4. ¡Changes ¡in ¡ 3. ¡Changes ¡in ¡ educator ¡ student ¡ pracHce ¡ results ¡ Adapted ¡from ¡Laura ¡Desimone, ¡ Standards ¡of ¡Professional ¡Learning , ¡p. ¡16. ¡ 5 ¡ Learning ¡Designs ¡Standard ¡ ¡ Professional ¡learning ¡that ¡increases ¡educator ¡ effecHveness ¡and ¡results ¡for ¡all ¡students ¡ integrates ¡theories, ¡research, ¡and ¡models ¡of ¡ human ¡learning ¡to ¡achieve ¡its ¡intended ¡ outcomes. ¡ Ø Apply ¡learning ¡theories, ¡ research, ¡and ¡models ¡ Ø Select ¡learning ¡designs ¡ Ø Promote ¡acHve ¡engagement ¡ 3 ¡

10/5/15 ¡ Backmapping ¡Model ¡for ¡PL ¡ Killion ¡& ¡Roy, ¡2009. ¡ Becoming ¡a ¡Learning ¡School ¡ A ¡Learning ¡Design ¡Anatomy ¡ (‘the Anatomy’) hLp://www.aitsl.edu.au/docs/default-­‑source/default-­‑document-­‑library/ designing_professional_learning_report.pdf?sfvrsn=4 ¡ 4 ¡

10/5/15 ¡ Challenge of Assessing PL Current problems and limitations of program evaluation lie more with lack of adequate conceptual framework of the program than with methodological weakness. — Chen, 1990 Change ¡= ¡Learning ¡ 10 ¡ 10 5 ¡

10/5/15 ¡ Types of Change • K nowledge • A ttitude • S kill • A spiration • B ehavior KASAB Knowledge Conceptual understanding of information, theories, principles, and research Attitude Beliefs about the value of particular information or strategies Skill Strategies and processes to apply knowledge Aspiration Desires, or internal motivation, to engage in a particular practice Behavior Consistent application of knowledge and skills 6 ¡

10/5/15 ¡ Theory of Change = Conceptual Framework • IdenHfies ¡the ¡components ¡of ¡a ¡program ¡ (what ¡the ¡program ¡does) ¡ • Specifies ¡the ¡relaHonship ¡among ¡the ¡ components ¡to ¡explain ¡how ¡the ¡change ¡ occurs ¡(sequence ¡of ¡acHons) ¡ • Delineates ¡the ¡underlying ¡assumpHons ¡ upon ¡which ¡the ¡program ¡is ¡based ¡ ¡ Implementa'on ¡Standard ¡ ¡ Professional ¡learning ¡that ¡ increases ¡educator ¡effecHveness ¡ and ¡results ¡for ¡all ¡students ¡applies ¡ research ¡on ¡change ¡and ¡sustains ¡ support ¡for ¡implementaHon ¡of ¡ professional ¡learning ¡for ¡long-­‑term ¡ change. ¡ Ø Apply ¡change ¡research. ¡ Ø Sustain ¡implementaHon. ¡ Ø Provide ¡construcHve ¡feedback. ¡ 7 ¡

10/5/15 ¡ Stages ¡of ¡Behavior ¡Rehearsal ¡ Novice ¡ • Model ¡with ¡implementaHon ¡ • Mechanical ¡implementaHon ¡ • Guided, ¡frequent ¡implementaHon ¡with ¡feedback ¡ • Scaffolded, ¡intermiLent ¡implementaHon ¡with ¡ feedback ¡ • Independent ¡implementaHon ¡with ¡feedback ¡ • Independent ¡implementaHon ¡with ¡self-­‑generated ¡ feedback ¡ • RouHne ¡implementaHon ¡ • Refocused ¡implementaHon ¡ Expert ¡ ¡ ¡ ¡ ¡ Sustained support is ESSENTIAL to ensure Implementation of learning. ¡ Sustained ¡support ¡is ¡ESSENTIAL ¡to ¡ensure ¡ implementaHon ¡of ¡learning. ¡ ¡ 8 ¡

10/5/15 ¡ Learning Designs & Impact Learning Concept Skill Application/ Designs Understanding Attainment Problem Solving 85% 15% 5-10% Presentation 85% 18% 5-10% Modeling Practice & 85% 80% 10-15% Feedback Coaching/ 90% 90% 80-90% Study Teams Bruce Joyce and Beverly Showers ¡ Black Box Evaluations Input Output ? Glass Box Evaluations Input Output 9 ¡

10/5/15 ¡ ¡ Assessing change requires making comparisons. 10 ¡

10/5/15 ¡ Types of Comparisons • Individual (pre to post) • Cohort Group (pre to post) • Panel Group (over time) • Selected/Constructed (group to group) • Random • Matched • Generic Attribution vs. Contribution What do these terms mean in relationship to assessing the effectiveness of professional learning? 11 ¡

10/5/15 ¡ Wrap-­‑up ¡ Think ¡about ¡your ¡learning ¡today. ¡What ¡ and ¡how ¡have ¡you ¡learned? ¡Complete ¡ the ¡following ¡sentence ¡frame ¡(you ¡may ¡ create ¡several ¡sentences ¡using ¡the ¡ frame). ¡Prepare ¡to ¡share ¡it ¡with ¡others. ¡ ¡ I ¡used ¡to ¡ ________________________________________ ¡ and/but ¡now ¡I ¡ ________________________________________. ¡ 12 ¡

• Build coherence. • Advocate for professional learning. • Address learning outcomes. • Meet performance standards. • Provide constructive feedback. • Sustain implementation. • Apply change research. • Promote active engagement. • Select learning designs. • Evaluate professional learning. • Assess progress. • Coordinate resources. • Monitor resources. • Develop collective responsibility. STANDARDS for PROFESSIONAL LEARNING Standards summary Standards for Professional Learning Core elements of each standard LEARNING COMMUNITIES: Professional learning that increases • Engage in continuous educator effectiveness and results for all students occurs within improvement. learning communities committed to continuous improvement, collective responsibility, and goal alignment. • Create alignment and accountability. LEADERSHIP: Professional learning that increases educator • Develop capacity for learning and effectiveness and results for all students requires skillful leaders leading. who develop capacity, advocate, and create support systems for professional learning. • Create support systems and structures. RESOURCES: Professional learning that increases educator • Prioritize human, fjscal, material, effectiveness and results for all students requires prioritizing, technology, and time resources. monitoring, and coordinating resources for educator learning. DATA: Professional learning that increases educator effectiveness • Analyze student, educator, and and results for all students uses a variety of sources and types of system data. student, educator, and system data to plan, assess, and evaluate professional learning. LEARNING DESIGNS: Professional learning that increases • Apply learning theories, research, educator effectiveness and results for all students integrates and models. theories, research, and models of human learning to achieve its intended outcomes. IMPLEMENTATION: Professional learning that increases educator effectiveness and results for all students applies research on change and sustains support for implementation of professional learning for long-term change. OUTCOMES: Professional learning that increases educator effectiveness and results for all students aligns its outcomes with educator performance and student curriculum standards. 800-727-7288 www.learningforward.org 61