80070 Sri Lanka      SABER Country Report STUDENT ASSESSMENT  2012           Key Policy Areas for Student Assessment Status 1. Classroom Assessment  Although school-based assessments are part of the education system, there is no   official system-level document that provides guidelines for classroom assessment activities in general. Several resources are available for teachers to use in carrying out classroom assessment activities, including descriptions of the performance levels that students are expected to reach in different subject areas at different grade and age levels. Some classroom assessment information is used as a required input to the external examination program, although it is unclear whether the results from these school-based assessments are moderated prior to combining them with scores from the external examination papers.   2. Examinations  The General Certificate of Education (GCE) Advanced Level Examination has been   administered since 1964. It measures the performance of Grade 13 students on the national school curriculum, and is used for determining school graduation and student selection to university. GCE results are also used to monitor education quality levels and for planning education policy reforms. Students have access to various resources to prepare for the examination, including examples of the types of questions that are on the examination, information on how to prepare for the examination, and the framework document which explains what is measured on the examination. While teachers are involved in some examination-related tasks, such as examination administration and scoring, there are no training or professional development courses to prepare teachers for these tasks.   3. National Large‐Scale Assessment (NLSA)  The Grade 4 National Assessment of Achievement was administered in 2003, 2007,   and 2009 to a representative sample of Grade 4 students. Students were assessed in first language (Sinhala or Tamil), Mathematics, and English. Funding for national assessment activities is made possible through donor support. While the National Education Research and Evaluation Centre (NEREC), which is in charge of the national assessment, is a permanent unit, it mainly employs temporary and part-time staff from institutions such as the Faculty of Education at the University of Colombo, the Department of Examinations, and the Department of Census and Statistics. 4. International Large‐Scale Assessment (ILSA)  Sri Lanka has not participated in an ILSA, and it does not have plans to do so in the   near future.        SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Introduction   student  assessment  systems.  The  framework  is  structured  around  two  main  dimensions  of  assessment    systems:  the  types/purposes  of  assessment  activities  Sri  Lanka  has  focused  on  increasing  student  learning  and the quality of those activities.   outcomes  by  improving  the  quality  of  education  in  the    country.  An  effective  student  assessment  system  is  an  Assessment types and purposes important  component  to  improving  education  quality    and  learning  outcomes  as  it  provides  the  necessary  Assessment  systems  tend  to  be  comprised  of  three  information  to  meet  stakeholders’  decision‐making  main  types  of  assessment  activities,  each  of  which  needs.  In  order  to  gain  a  better  understanding  of  the  serves  a  different  purpose  and  addresses  different  strengths  and  weaknesses  of  its  existing  assessment  information  needs.  These  three  main  types  are:  system,  Sri  Lanka  decided  to  benchmark  this  system  classroom  assessment,  examinations,  and  large‐scale,  using  standardized  tools  developed  under  The  World  system level assessments.  Bank’s  Systems  Approach  for  Better  Education  Results    (SABER)  program.  SABER  is  an  evidence‐based  program  Classroom  assessment  provides  real‐time  information  to  help  countries  systematically  examine  and  to  support  ongoing  teaching  and  learning  in  individual  strengthen the performance of different aspects of their  classrooms.  Classroom  assessments  use  a  variety  of  education systems.  formats,  including  observation,  questioning,  and  paper‐   and‐pencil  tests,  to  evaluate  student  learning,  generally  What is SABER‐Student Assessment?   on a daily basis.      SABER‐Student  Assessment  is  a  component  of  the  Examinations  provide  a  basis  for  selecting  or  certifying  SABER  program  that  focuses  specifically  on  students  as  they  move  from  one  level  of  the  education  benchmarking student assessment policies and systems.  system  to  the  next  (or  into  the  workforce).  All  eligible  The  goal  of  SABER‐Student  Assessment  is  to  promote  students  are  tested  on  an  annual  basis  (or  more  often  if  stronger  assessment  systems  that  contribute  to  the  system  allows  for  repeat  testing).  Examinations  improved education quality and learning for all.   cover  the  main  subject  areas  in  the  curriculum  and    usually involve essays and multiple‐choice questions.  National  governments  and  international  agencies  are    increasingly  recognizing  the  key  role  that  assessment  of  Large‐scale,  system‐level  assessments  provide  feedback  student  learning  plays  in  an  effective  education  system.  on  the  overall  performance  of  the  education  system  at  The importance of assessment is linked to its role in:   particular  grades  or  age  levels.  These  assessments  (i) providing  information  on  levels  of  student  typically  cover a few subjects on a regular basis (such as  learning and achievement in the system;   every  3  to  5  years),  are  often  sample  based,  and  use  (ii) monitoring  trends  in  education  quality  over  multiple‐choice  and  short‐answer  formats.  They  may  be  time;   national or international in scope.   (iii) supporting  educators  and  students  with  real‐   time  information  to  improve  teaching  and  Appendix  1  summarizes  the  key  features  of  these  main  learning; and   types of assessment activities.  (iv) holding stakeholders accountable for results.  SABER‐Student Assessment methodology   The  SABER‐Student  Assessment  framework  is  built  on  the  available  evidence  base  for  what  an  effective  assessment  system  looks  like.  The  framework  provides  guidance  on  how  countries  can  build  more  effective  SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    2  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012       Quality drivers of an assessment system    Table 1: Framework for building an effective   assessment system, with indicator areas The  key  considerations  when  evaluating  a  student    assessment  system  are  the  individual  and  combined  quality  of  assessment  activities  in  terms  of  the  adequacy  of  the  information  generated  to  support  decision  making.  There  are  three  main  drivers  of  information  quality  in  an  assessment  system:  enabling  context, system alignment, and assessment quality.      Enabling  context  refers  to  the  broader  context  in  which  the  assessment  activity  takes  place  and  the  extent  to  which that context is conducive to, or supportive of, the  assessment.  It  covers  such  issues  as  the  legislative  or  policy  framework  for  assessment  activities;  institutional  and  organizational  structures  for  designing,  carrying  The  indicators  are  identified  based  on  a  combination  of  out,  or  using  results  from  the  assessment;  the  criteria, including:   availability  of  sufficient  and  stable  sources  of  funding;    and the presence of trained assessment staff.   professional standards for assessment;      empirical research on the characteristics of effective  System  alignment  refers  to  the  extent  to  which  the  assessment  systems,  including    analysis    of    the   assessment  is  aligned  with  the  rest  of  the  education  characteristics    that    differentiate    between    the  system.  This  includes  the  degree  of  congruence  assessment  systems  of  low‐  versus  high‐performing  between  assessment  activities  and  system  learning  nations; and   goals,  standards,  curriculum,  and  pre‐  and  in‐service   theory  —  that    is,    general    consensus    among   teacher training.  experts    that    it    contributes    to  effective    assessment.    Assessment quality refers to the psychometric quality of    the  instruments,  processes,  and  procedures  for  the  Levels of development   assessment  activity.  It  covers  such  issues  as  design  and  The  World  Bank  has  developed  a  set  of  standardized  implementation  of  assessment  activities,  analysis  and  questionnaires and rubrics for collecting  and evaluating  interpretation  of  student  responses  to  those  activities,  data  on  the    three  assessment  types    and    related  and  the  appropriateness  of  how  assessment  results  are  quality drivers.  reported and used.  The  questionnaires  are  used  to  collect  data  on  the    characteristics  of  the  assessment  system  in  a  particular  Crossing  the  quality  drivers  with  the  different  country.  The  information  from  the  questionnaires  is  assessment  types/purposes  provides  the  framework  then  applied  to  the  rubrics  in  order  to  judge  the  and  broad  indicator  areas  shown  in  Table  1.  This  development  level  of  the  country’s  assessment  system  framework  is  a  starting  point  for  identifying  indicators  in different areas.   that  can  be  used  to  review  assessment  systems  and  The  basic  structure  of  the  rubrics  for  evaluating  data  plan for their improvement.  collected  using  the  standardized  questionnaires  is  summarized  in  Appendix  2.  The  goal  of  the  rubrics  is  to  provide  a  country  with  some  sense  of  the  development  level  of  its  assessment  activities  compared  to  best  or  recommended  practice  in  each  area.  For  each  indicator,  the  rubric displays four  development   levels—Latent, Emerging,  Established,  and  Advanced.     SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    3  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    These  levels  are  artificially  constructed  categories  gradually  decreased  as  Sri  Lanka  transitions  to  middle  chosen  to  represent  key  stages  on  the  underlying  income  country  status.  Since  the  attainment  of  peace,  continuum  for  each  indicator.    Each  level  is  the  Sri  Lankan  Government  can  now  focus  on  long‐term  accompanied  by  a  description  of  what  performance  on  strategic and structural development challenges.   the indicator looks like at that level.        The education system consists of primary school (grades   Latent  is  the  lowest  level  of  performance;  it  1  to  5),  junior  secondary  (grades  6  to  9),  and  senior  represents  absence  of,  or  deviation  from,  the  secondary  (grades  9  to  13).  Relative  to  countries  with  desired attribute.   similar  income  levels,  Sri  Lanka  performs  well  on   Emerging  is  the  next  level;  it  represents  partial  education  indicators,  especially  related  to  access  and  presence of the attribute.   completion.  In  2005,  universal  primary  education  was   Established  represents  the  acceptable  minimum  achieved  with  the  net  enrollment  rate  reaching  96  standard.  percent,  and  current  primary  completion  rates  are   Advanced  represents  the  ideal  or  current  best  above  97  percent;  in  2011,  the  net  secondary  practice.    enrollment  rate  was  85  percent.  Sri  Lanka  has  also    demonstrated  significant  improvement  in  quality  and  A  summary  of  the  development  levels  for  each  learning  outcomes.  The  National  Assessment  of  assessment type is presented in Appendix 3.   Learning  shows  that  achievement  scores  for  grade  4  in    language  improved  from  69  percent  (2005)  to  83  In    reality,    assessment    systems    are    likely    to    be    at   percent (2011.)    different   levels   of  development  in  different  areas.  For    example,  a  system  may  be  Established  in  the  area    of   Sri  Lanka  currently  faces  challenges  in  transitioning  to  a  examinations,    but    Emerging    in    the    area    of    large‐ knowledge‐based economy. In general, there is a lack of  scale,    system‐level  assessment,  and  vice  versa.  While  workers  with  skills  in  information  technology  and  the  intuition  suggests  that  it  is  probably  better  to  be   English  language,  as  well  as  soft  skills,  such  as  problem‐ further    along    in    as    many    areas    as    possible,    the   solving,  strong  communication,  and  the  ability  to  work  evidence   is   unclear   as   to  whether   it   is   necessary   to   in  teams.  To  address  this  skill  gap,  the  overall  objective  be    functioning    at    Advanced    levels    in    all    areas.  of  the  Sri  Lanka  Education  Sector  Development  Therefore,  one  might  view  the  Established  level  as  a  Framework  and  Programme  (ESDFP)  2012‐2016  is  to  desirable  minimum  outcome  to  achieve  in  all  areas,  but  improve  the  education  system  by  diversifying  the  only  aspire  beyond  that  in  those  areas  that  most  secondary  education  curriculum  to  enable  students  to  contribute  to  the  national  vision  or  priorities  for  acquire  the  cognitive,  affective,  and  psychomotor  skills  education.  In  line  with  these  considerations,  the  ratings  and values demanded by society.     generated  by  the  rubrics  are  not  meant  to  be  additive    across  assessment  types  (that  is,  they  are  not  meant  to  Detailed  information  was  collected  on  Sri  Lanka’s  be  added  to  create  an  overall  rating  for  an  assessment  student  assessment  system  using  the  SABER‐Student  system;  they  are  only  meant  to  produce  an  overall  Assessment  questionnaires  and  rubrics  in  2012.  It  is  rating  for  each  assessment  type).  The  methodology  for  important  to  remember  that  these  tools  primarily  focus  assigning  development  levels  is  summarized  in  on benchmarking a country’s policies and arrangements  Appendix 4.  for  assessment  activities  at  the  system  or  macro  level.    Additional  data  would  need  to  be  collected  to  Education in Sri Lanka   determine  actual,  on‐the‐ground  practices  in  Sri  Lanka,  particularly  by  teachers  and  students  in  schools.  The    following  sections  discuss  the  findings  by  each  Sri  Lanka  is  a  lower  middle  income  country  in  South  assessment  type,  accompanied  by  suggested  policy  Asia.  GDP  per  capita  (current  US$,  2012)  is  $2,923,  with  options.  The  suggested  policy  options  were  determined  annual  growth  of  approximately  6.4  percent.  After  in collaboration with key local stakeholders based on Sri  ending  a  26‐year  internal  military  conflict  in  May  2009,  Lanka’s  immediate  interests  and  needs.  Detailed,  Sri  Lanka  has  demonstrated  strong  economic  completed rubrics for each assessment type in Sri Lanka  performance. The country’s public debt and deficit have   are provided in Appendix 5.    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    4  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Classroom Assessment  Suggested policy options:    1. Develop  a  system‐level  document  that  provides  Level of Development guidelines  for  carrying  out  classroom  assessment  activities  in  all  grade  levels  and  subject  areas;  make    the  document  available  to  teachers,  other  key  In  Sri  Lanka,  classroom  assessment  is  used  to  diagnose  stakeholders, and the general public.  student  learning  issues,  provide  feedback  to  students    on  their  learning,  and  inform  parents  about  their  child’s  2. Introduce  system‐level  mechanisms  to  monitor  the  learning.  Classroom  assessment  information  is  required  quality  of  classroom  assessment  practices,  such  as  to  be  disseminated  to  students  and  parents.  Classroom  making  classroom  assessment  a  required  assessment  information  is  also  used  as  an  input  to  the  component  of  a  teacher’s  performance  evaluation  external  examination  program,  although  it  is  unclear  and/or school inspection exercises.  whether  the  results  from  the  school‐based  assessments    are  moderated  prior  to  combining  them  with  the  score  3. Ensure  suitable  mechanisms  are  in  place  to  from the external examination papers.   moderate  results  from  school‐based  assessments    prior  to  integrating  with  external  examination  Although  there  is  no  official  system‐level  document  in  scores; provide training on moderation practices.  place  that  provides  guidelines  for  classroom      assessment,  several  types  of  resources  are  available  to  teachers  to  carry  out  classroom  assessment  activities.  For  example,  teachers  are  provided  with  Teacher  Instruction  Manuals  (TIM)  and  Assessment  and  Evaluation  guidelines  that  outline  the  performance  levels  that  students  are  expected  to  reach  in  different  subject areas at different grade and age levels. Teachers  are  also  provided  with  books  that  include  sample  questions,  and  guidance  on  using  appropriate  scoring  criteria when grading students’ work.     In  order  to  ensure  that  teachers  develop  expertise  in  classroom  assessment,  they  are  provided  with  pre‐  and  in‐service  training  through  the  National  Colleges  of  Education and the National Institute of Education. There  are  currently  no  formal  mechanisms  for  monitoring  the  quality of classroom assessment activities.     SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    5  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Examinations  administration,  data  processing,  reporting,  as  well  as  research  and  development.  The  World  Bank  provides  technical  assistance  for  item  bank  and  examination  Level of Development guideline development.      There  have  been  independent  attempts  to  improve  the  The  General  Certificate  of  Education  (GCE)  Advanced  examination  by  different  stakeholders.  Policymakers  Level  Examination  has  been  administered  in  Sri  Lanka  and  universities  have  attempted  to  reform  the  since  1964.  It  measures  the  performance  of  Grade  13  examination  through  research,  and  NGOs  have  students  on  the  national  school  curriculum,  and  is  used  attempted  to  reform  the  examination  through  funding.  for  determining  school  graduation  and  student  In  general,  these  efforts  are  welcomed  by  the  selection  to  university.  Examination  results  are  also  Department  of  Examinations  and  the  Ministry  of  used  for  monitoring  education  quality  levels  and  Education.   planning  education  policy  reforms.  In  order  to  prepare    for  the  GCE,  students  have  access  to  various  resources,  Limited  systematic  mechanisms,  such  as  internal  review  including sample questions that are on the examination,  and  translation  verification,  are  in  place  to  ensure  the  information  on  how  to  prepare  for  the  examination,  quality  of  the  examination.  While  there  are  focus  and  a  framework  document  that  explains  what  is  groups and research studies on the  GCE, these activities  measured  on  the  examination.  Inappropriate  behavior  are  conducted  on  an  ad  hoc  basis.  There  are  no  surrounding the examination process is low.    systematic  mechanisms  in  place  to  monitor  the    consequences of the examination.  The  Public  Examination  Act  No.  25  of  1968  document    formally  authorizes  the  GCE.  This  document  addresses  Suggested policy options:  key  aspects  of  the  examination  such  as  the  distribution    of  power  and  responsibility  among  key  entities,  1. Better  ensure  the  quality  of  examination‐related  procedures  to  address  security  breaches,  procedures  to  tasks  for  which  teachers  are  responsible  by  include  all  students  in  the  examination,  rules  about  introducing  regular  and  mandatory  courses  for  examination  preparation,  the  methodology  for  grading  teachers involved in these activities.  and  marking  the  examination,  and  the  use  of    examination results.  2. Introduce  additional  systematic  mechanisms  to    ensure  the  quality  of  the  exam,  including  piloting  The  Department  of  Examinations  has  been  in  charge  of  and field testing of items and use of external review  the  GCE  since  1968.  While  there  is  permanent  staff  or observers.  within  the  Department  of  Examinations,  it  is  insufficient    to  meet  the  needs  of  the  examination.  Staff  must  be  3. Introduce  systematic  mechanisms  to  monitor  the  brought  in  from  universities  to  conduct  and  evaluate  consequences  of  the  exam  by,  for  example,  the examination, and staff from the National Institute of  providing  funding  for  research  on  its  impact,  and  Education  (NIE)  participates  in  setting  of  the  convening expert review groups on a regular basis.  examination papers.          While  teachers  are  involved  in  some  examination‐ related  tasks,  such  as  administering  and  scoring  the  GCE,  there  are  no  training  or  professional  development  courses that prepare teachers for these activities.    The  government  of  Sri  Lanka  allocates  regular  funding  for  the  examination  (funding  is  also  sometimes  provided  by  non‐government  sources).  Funding  covers  all core examination activities such as design,   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    6  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    National Large‐Scale Assessment (NLSA)  the  administration  of  the  Grade  4  National  Assessment    of  Achievement,  a  comprehensive  technical  report  is  prepared; however, its circulation is restricted.    Level of Development   Grade  4  National  Assessment  of  Achievement  results    are  disseminated  to  all  stakeholder  groups  within  12  The  Grade  4  National  Assessment  of  Achievement  was  months of the administration of the assessment. Results  administered  in  2003,  2007,  and  2009  to  a  are  also  featured  in  newspapers,  radio,  and  other  forms  representative sample of Grade 4 students. The plan for  of  media.  Workshops  on  the  results  are  held  for  key  future  assessment  rounds  is  in  the  process  of  being  stakeholders  and a dissemination seminar is held by the  prepared and will be available in April‐May 2012.  NEREC  and  the  Ministry  of  Education  in  the  provinces.    The  main  reports  on  the  results  contain  information  on  Funding  for  the  Grade  4  National  Assessment  of  achievement  levels  and  trends  over  time  overall  and  by  Achievement  is  made  possible  through  donor  support  subgroups.    (as  opposed  to  through  government  funding).  Funding    covers  all  core  assessment  activities,  as  well  as  research  Suggested policy options:  and development. Funding also covers staff training and    participation  in  international  programs  on  education  1. Introduce  regular  government  funding  for  national  measurement and evaluation.    assessment  activities,  including  for  core  activities    such  as  test  design,  administration,  analysis,  and  The  National  Education  Research  and  Evaluation  Centre  reporting, as well as for research and development.  (NEREC)  is  the  permanent  unit  in  charge  of  the  Grade  4    National  Assessment  of  Achievement.  However,  NEREC  2. Regularize  the  administration  schedule  of  the  mainly  employs  temporary  and  part‐time  staff  from  national  assessment  program  (for  example,  institutions  such  as  the  Faculty  of  Education  at  the  determine  whether  it  should  be  held  every  two  University  of  Colombo,  the  Department  of  years or every three years).  Examinations,  and  the  Department  of  Census  and    Statistics.  Various  issues  have  been  identified  with  the  3. Hire  key  permanent  staff  in  the  NEREC  to  manage  performance  of  staff  responsible  for  carrying  out  national  assessment  activities;  provide  targeted  assessment  activities,  including  poor  training  of  test  training  to  the  permanent  staff  on  key  aspects  of  administrators,  unclear  guidelines  for  administering  the  the  national  assessment,  including  test  assessment,  and  errors  in  scoring,  which  have  led  to  administration and scoring.  delays in reporting results.        4. Make  high‐quality  courses  or  workshops  on  the  In  general,  the  Grade  4  National  Assessment  of  national  assessment  available  to  teachers  on  a  Achievement  measures  performance  against  the  regular basis.  national  curriculum.  Internal  reviews  of  the  alignment      between  the  National  Assessment  of  Achievement  and  what  it  is  supposed  to  measure  are  conducted  on  a  regular basis.      Sri  Lanka  employs  a  variety  of  mechanisms  to  ensure  the  quality  of  the  Grade  4  National  Assessment  of  Achievement.  For  example,  all  administrators  are  trained  according  to  a  protocol  and  are  provided  with  a  standardized  manual  for  administration.  A  pilot  is  conducted  before  the  main  data  collection  takes  place,  all  scorers  are  trained  to  ensure  high  inter‐rater  reliability, and there is double processing of data. After   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    7  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    International  Large‐Scale  Assessment  (ILSA)    Level of Development      Sri Lanka has not participated in an ILSA, and it does not  have plans to do so in the near future.    Suggested policy options:    1. Create  an  opportunity  for  high‐level  discussion  among  key  stakeholders  on  key  education  policy  questions  or  problems  for  which  ILSA  data  could  be  useful.    2. Determine  the  need  for,  and  possible  next  steps  in  relation to, participation in an ILSA exercise.  SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    8  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Appendix 1: Assessment Types and Their Key DifferencesEL Classroom Large-scale assessment Examinations Surveys National International Exit Entrance Purpose To provide To provide To provide To certify To select immediate feedback on feedback on the students as they students for feedback to overall health of comparative move from one further inform the system at performance of level of the educational classroom particular the education education system opportunities instruction grade/age system at to the next (or level(s), and to particular into the monitor trends in grade/age workforce) learning level(s) Frequency Daily For individual For individual Annually and Annually and subjects offered subjects offered more often more often on a regular on a regular where the system where the system basis (such as basis (such as allows for allows for every 3-5 years) every 3-5 years) repeats repeats Who is All students Sample or A sample of All eligible All eligible tested? census of students at a students students students at a particular grade particular grade or age level(s) or age level(s) Format Varies from Usually multiple Usually multiple Usually essay Usually essay observation to choice and short choice and short and multiple and multiple questioning to answer answer choice choice paper-and-pencil tests to student performances Coverage of All subject areas Generally Generally Covers main Covers main curriculum confined to a few confined to one subject areas subject areas subjects or two subjects Additional Yes, as part of Frequently Yes Seldom Seldom information the teaching collected from process students? Scoring Usually informal Varies from Usually involves Varies from Varies from and simple simple to more statistically simple to more simple to more statistically sophisticated statistically statistically sophisticated techniques sophisticated sophisticated techniques techniques techniques   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    9  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Appendix 2: Basic Structure of Rubrics for Evaluating Data Collected on a Student Assessment System Development Level LATENT ESTABLISHED (Absence of, or EMERGING (Acceptable deviation from, (On way to meeting minimum ADVANCED Dimension attribute) minimum standard) standard) (Best practice) Justification EC—ENABLING CONTEXT EC1—Policies EC2—Leadership, public engagement EC3—Funding EC4—Institutional arrangements EC5—Human resources SA—SYSTEM ALIGNMENT SA1—Learning/quality goals SA2—Curriculum SA3—Pre-, in-service teacher training AQ—ASSESSMENT QUALITY AQ1—Ensuring quality (design, administration, analysis) AQ2—Ensuring effective uses                 SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    10  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Appendix 3: Summary of the Development Levels for Each Assessment Type Assessment Type LATENT EMERGING ESTABLISHED ADVANCED    Absence of, or deviation On way to meeting Acceptable minimum Best practice from, the attribute minimum standard standard There is no system-wide There is weak system- There is sufficient There is strong system- institutional capacity to wide institutional system-wide institutional wide institutional support and ensure the capacity to support and capacity to support and capacity to support and quality of classroom ensure the quality of ensure the quality of ensure the quality of assessment practices. classroom assessment classroom assessment classroom assessment practices. practices. practices. CLASSROOM ASSESSMENT  There is no standardized There is a partially There is a stable There is a stable examination in place for stable standardized standardized standardized key decisions. examination in place, examination in place. examination in place and and a need to develop There is institutional institutional capacity and institutional capacity to capacity and some strong mechanisms to run the examination. The limited mechanisms to monitor it. The EXAMINATIONS  examination typically is monitor it. The examination is of high of poor quality and is examination is of quality and is perceived perceived as unfair or acceptable quality and is as fair and free from corrupt. perceived as fair for corruption. most students and free from corruption. There is no NLSA in There is an unstable There is a stable NLSA There is a stable NLSA place. NLSA in place and a in place. There is in place and institutional need to develop institutional capacity and capacity and strong institutional capacity to some limited mechanisms to monitor run the NLSA. mechanisms to monitor it. The NLSA is of high NATIONAL (OR SYSTEM‐ Assessment quality and it. The NLSA is of quality and its LEVEL) LARGE‐SCALE  impact are weak. moderate quality and its information is ASSESSMENT  information is effectively used to disseminated, but not improve education. always used in effective ways. There is no history of Participation in an ILSA There is more or less There is stable participation in an ILSA, has been initiated, but stable participation in an participation in an ILSA nor plans to participate there still is need to ILSA. There is and institutional capacity in one. develop institutional institutional capacity to to run the ILSA. The capacity to carry out the carry out the ILSA. The information from the INTERNATIONAL LARGE‐ ILSA. information from the ILSA is effectively used SCALE ASSESSMENT  ILSA is disseminated, to improve education. but not always used in effective ways. SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    11  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Appendix 4: Methodology for Assigning 6.  Scores  for  certain  key  dimensions  under  ‘Enabling  Development Levels Context’  (in  the  case  of  EXAM,  NLSA,  and  ILSA)  and    under  ‘System  Alignment’  (in  the  case  of  CLASS)  were  set  as  ceiling  scores,  i.e.,  the  overall  mean  score  for  the  1.  The  country  team  or  consultant  collects  information  particular  assessment  type  cannot  be  greater  than  the  about the assessment system in the country.  score  for  these  key  dimensions.  These  key  variables    include  formal  policy,  regular  funding,  having  a  2.  Based  on  the  collected  information,  a  level  of  permanent  assessment  unit,  and  the  quality  of  development and score is assigned to each dimension in  assessment practices.   the rubrics:       Latent = 1 score point   Emerging = 2 score points   Established = 3 score points   Advanced = 4 score points    3.  The  score  for  each  quality  driver  is  computed  by  aggregating  the  scores  for  each  of  its  constituent  dimensions. For example:    The  quality  driver,  ‘Enabling  Context,’  in  the  case  of  ILSA,  has  3  dimensions  on  which  a  hypothetical  country  receives  the  following  scores:  Dimension  A  =  2  points;  Dimension  B  =  2  points;  Dimension  C  =  3  points.  The  hypothetical  country’s  overall  score  for  this  quality  driver would be: (2+2+3)/3 = 2.33    4.  A  preliminary  level  of  development  is  assigned  to  each quality driver.     5.  The  preliminary  development  level  is  validated  using  expert  judgment  in  cooperation  with  the  country  team  and The World Bank Task Team Leader.       For  scores  that  allow  a  margin  of  discretion  (i.e.,  to  choose  between  two  levels  of  development),  a  final  decision  has  to  be  made  based  on  expert  judgment.  For  example,  the  aforementioned  hypothetical  country  has  an  ‘Enabling  Context’  score  of  2.33,  corresponding  to  a  preliminary  level  of  development  of  ‘Emerging  or  Established.’  Based  on  qualitative  information  not  captured  in  the  rubric,  along  with  expert  judgment,  the  country  team  chooses  ‘Emerging’  as  the  most  appropriate level.    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    12  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    Appendix 5: SABER‐Student Assessment Rubrics Sri Lanka This appendix provides the completed SABER‐Student Assessment rubrics for each type of assessment activity in Sri Lanka. In each row of the rubric, the relevant  selection  is  indicated  by  a  thick  border  and  an  asterisk.  The  selection  may  include  a  superscript  number  that  refers  to  the  justification  or  explanation  for  the  selection  (as  indicated  by  a  thick  border  and  an  asterisk).  The  explanation  or  justification  text  can  be  located  in  the  “Development‐level  rating  justifications”  section at the end of each rubric. If a row includes a superscript, but not a thick border and an asterisk, this means that  insufficient information was available to  determine the relevant selection in the row.  Sri Lanka Classroom Assessment   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              13  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT AND SYSTEM ALIGNMENT Overall policy and resource framework within which classroom assessment activity takes place in a country or system, and the degree to which classroom  assessment activity is coherent with other components of the education system.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT AND SYSTEM ALIGNMENT 1: Setting clear guidelines for classroom assessment There  is  no  system‐level  document  that  There  is  an  informal  system‐level  There  is  a  formal  system‐level  document  This  option  does  not  apply  to  this  provides  guidelines  for  classroom  document  that  provides  guidelines  for  that  provides  guidelines  for  classroom  dimension.  assessment. 1  classroom assessment.  assessment.  * This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  The  availability  of  the  document  is  The document is widely available. dimension.   dimension.  restricted.   * ENABLING CONTEXT AND SYSTEM ALIGNMENT 2: Aligning classroom assessment with system learning goals There  are  no  system‐wide  resources  for  There  are  scarce  system‐wide  resources  There  are  some  system‐wide  resources  There  are  a  variety  of  system‐wide  teachers for classroom assessment.  for teachers for classroom assessment.   for teachers for classroom assessment.2  resources  available  for  teachers  for  classroom assessment.  * There  is  no  official  curriculum  or  There  is  an  official  curriculum  or  There  is  an  official  curriculum  or  There  is  an  official  curriculum  or  standards document.  standards  document,  but  it  is  not  clear  standards  document  that  specifies  what  standards  document  that  specifies  what  what  students  are  expected  to  learn  or  students  are  expected  to  learn,  but  the  students  are  expected  to  learn  and  to  to what level of performance.  level  of  performance  required  is  not  what level of performance.   clear.  * ENABLING CONTEXT AND SYSTEM ALIGNMENT 3: Having effective human resources to carry out classroom assessment activities There  are  no  system‐level  mechanisms  This  option  does  not  apply  to  this  There  are  some  system‐level  There  are  a  variety  of  system‐level  to  ensure  that  teachers  develop  skills  dimension.  mechanisms  to  ensure  that  teachers  mechanisms  to  ensure  that  teachers  and expertise in classroom assessment.  develop  skills  and  expertise  in  classroom  develop  skills  and  expertise  in  classroom  assessment.3  * assessment.                                              SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              14  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012      ASSESSMENT QUALITY Quality of classroom assessment design, administration, analysis, and use.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring the quality of classroom assessment Classroom  assessment  practices  suffer  Classroom  assessment  practices  are  Classroom  assessment  practices  are  Classroom  assessment  practices  are  from  widespread  weaknesses  or  there  is  known to be weak.  known to be of moderate quality.  known to be generally of high quality.  no  information  available  on  classroom  assessment practices.   There  are  no  mechanisms  to  monitor  the  There are ad hoc mechanisms to monitor  There are limited systematic mechanisms  There  are  varied  and  systematic  quality  of  classroom  assessment  the  quality  of  classroom  assessment  to  monitor  the  quality  of  classroom  mechanisms  in  place  to  monitor  the  practices.   practices.  assessment practices.  quality  of  classroom  assessment  * practices.   ASSESSMENT QUALITY 2: Ensuring effective uses of classroom assessment Classroom  assessment  information  is  not  This  option  does  not  apply  to  this  Classroom  assessment  information  is  Classroom  assessment  information  is  required  to  be  disseminated  to  key  dimension.  required  to  be  disseminated  to  some  key  required  to  be  disseminated  to  all  key  stakeholders.  stakeholders. 4  stakeholders. 8  * There  are  no  required  uses  of  classroom  There  are  limited  required  uses  of  There  are  adequate  required  uses  of  There  are  adequate  required  uses  of  assessment to support student learning.  classroom  assessment  to  support  classroom  assessment  to  support  classroom assessment to support student  student learning.  student  learning,  excluding  its  use  as  an  learning,  including  its  use  as  an  input  for  external examination results. 5  input for external examination results.  *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              15  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    Classroom Assessment: Development‐level rating justifications 1. While Sri Lanka does have School‐Based Assessment, there are no system‐level guidelines for classroom assessment in general.    2. Resources  include  the  curriculum  document  that  outlines  what  students  are  expected  to  learn  in  different  subject  areas  at  different  grade/age  levels,  Teacher Instruction Manuals (TIM) and Assessment and Evaluation guidelines that outline the level(s) of performance that students are expected to reach in  different  subject  areas  at  different  grade/age  levels,  textbooks  or  workbooks  that  provide  support  for  classroom  assessment,  mark  schemes  for  students’  work, and books with prototype questions.    3. Mechanisms include pre‐ and in‐service teacher training.    4. Classroom assessment information is required to be disseminated to students and parents.    5. Classroom  assessment  activities  are  required  to  be  used  for  diagnosing  student  learning  issues,  providing  feedback  to  students  on  their  learning,  informing  parents  about  their  child’s  learning,  and  providing  input  to  an  external  examination  program  (e.g.,  school‐based  assessment  with  moderation  and  quality  audit).      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              16  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SRI LANKA Examinations   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              17  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT Overall framework of policies, leadership, organizational structures, fiscal and human resources in which assessment activity takes place in a country or system  and the extent to which that framework is conducive to, or supportive of, the assessment activity.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 1: Setting clear policies No  standardized  examination  has  taken  The  standardized  examination  has  been  The  examination  is  a  stable program  that  This  option  does  not  apply  to  this  place.  operating on an irregular basis.   has been operating regularly. 1  dimension  * There  is  no  policy  document  that  There  is  an  informal  or  draft  policy  There  is  a  formal  policy  document  that  This  option  does  not  apply  to  this  authorizes the examination.  document  that  authorizes  the  authorizes the examination.2  dimension.  examination.  * This  option  does  not  apply  to  this  The  policy  document  is  not  available  to  The  policy  document  is  available  to  the  This  option  does  not  apply  to  this  dimension.  the public.  public.   dimension.  * This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  The  policy  document  addresses  some  The  policy  document  addresses  all  key  dimension.  dimension.  key aspects of the examination. 3  aspects of the examination.   * ENABLING CONTEXT 2: Having strong leadership All  stakeholder  groups  strongly  oppose  Most  stakeholder  groups  oppose  the  Most  stakeholders  groups  support  the  All  stakeholder  groups  support  the  the examination or are indifferent to it.  examination.  examination. 4  examination.   * There  are  no  attempts  to  improve  the  This  option  does  not  apply  to  this  There  are  independent  attempts  to  There  are  coordinated  attempts  to  examination by stakeholder groups.  dimension.  improve  the  examination  by  stakeholder  improve  the  examination  by  stakeholder  groups. 5  groups.   * Efforts  to  improve  the  examination  are  This  option  does  not  apply  to  this  Efforts  to  improve  the  examination  are  This  option  does  not  apply  to  this  not  welcomed  by  the  leadership  in  dimension.  generally  welcomed  by  the  leadership  in  dimension.  charge of the examination  charge of the examination.  *                                     (CONTINUED)    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              18  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 3: Having regular funding There  is  no  funding  allocated  for  the  There  is  irregular  funding  allocated  for  There  is  regular  funding  allocated  for  the  This  option  does  not  apply  to  this  examination.  the examination.  examination.6  dimension.  * This  option  does  not  apply  to  this  Funding  covers  some  core  examination  Funding  covers  all  core  examination  This  option  does  not  apply  to  this  dimension.  activities:  design,  administration,  data  activities:  design,  administration,  data  dimension.  processing or reporting.   processing and reporting.   * This  option  does  not  apply  to  this  Funding  does  not  cover  research  and  This  option  does  not  apply  to  this  Funding  covers  research  and    dimension.  development.  dimension.   development. 7  * ENABLING CONTEXT 4: Having strong organizational structures The  examination  office  does  not  exist  or  The  examination  office  is  newly  The  examination  office  is  a  stable  This  option  does  not  apply  to  this  is newly established.  established.   organization. 8  dimension.  * The  examination  office  is  not  This  option  does  not  apply  to  this  The  examination  office  is  accountable  to  This  option  does  not  apply  to  this  accountable  to  an  external  board  or  dimension.  an external board or agency. 9  dimension.  agency.  * Examination  results  are  not  recognized  Examination  results  are  recognized  by  Examination  results  are  recognized  by  Examination  results  are  recognized  by  by any certification or selection system.  certification  or  selection  system  in  the  one  certification  or  selection  system  in  two  or  more  certification  or  selection  country.  another country.  system in another country.   * The  examination  office  does  not  have  The  examination  office  has  some  of  the  The  examination  office  has  all  of  the  The  examination  office  has  state  of  the  the  required  facilities  to  carry  out  the  required  facilities  to  carry  out  the  required  facilities  to  carry  out  the  art facilities to carry out the examination.   examination.  examination.  examination.                                       (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              19  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 5: Having effective human resources There  is  no  staff  to  carry  out  the  The  examination  office  is  inadequately  The  examination  office  is  adequately  The  examination  office  is  adequately  examination.  staffed  to  effectively  carry  out  the  staffed  to  carry  out  the  examination  staffed  to  carry  out  the  assessment  examination, issues are pervasive.  effectively, with minimal issues. 10  effectively, with no issues.   * The  country  does  not  offer  opportunities  This  option  does  not  apply  to  this  The  country  offers  some  opportunities  The  country  offers  a  wide  range  of  that  prepare  for  work  on  the  dimension.  that  prepare  for  work  on  the  opportunities  that  prepare  for  work  on  examination.  examination. 11  the examination.   *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              20  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SYSTEM ALIGNMENT Degree to which the assessment is coherent with other components of the education system.  LATENT EMERGING ESTABLISHED ADVANCED SYSTEM ALIGNMENT 1: Aligning examinations with learning goals and opportunities to learn It  is  not  clear  what  the  examination  This  option  does  not  apply  to  this  There  is  a  clear  understanding  of  what  This  option  does  not  apply  to  this  measures.  dimension.  the examination measures.12  dimension.  * What  the  examination  measures  is  This  option  does  not  apply  to  this  What  is  measured  by  the  examination  is  This  option  does  not  apply  to  this  questioned by some stakeholder groups.  dimension.  largely accepted by stakeholder groups.13 dimension.  * Material  to  prepare  for  the  examination  There is some material to prepare for the  There  is  comprehensive  material  to  There  is  comprehensive  material  to  is  minimal  and  it  is  only  accessible  to  examination  that  is  accessible  to  some  prepare  for  the  examination  that  is  prepare  for  the  examination  that  is  very few students.  students.  accessible to most students. 14  accessible to all students.  * SYSTEM ALIGNMENT 2: Providing teachers with opportunities to learn about the examination There  are  no  courses  or  workshops  on  There  are  no  up‐to‐date  courses  or  There  are  up‐to‐date  voluntary  courses  There are up‐to‐date compulsory courses  examinations available to teachers.  workshops  on  examinations  available  to  or  workshops  on  examinations  available  or  workshops  on  examinations  for  teachers.   to teachers.   teachers.   Teachers  are  excluded  from  * all  Teachers  are  involved  in  very  few  Teachers  are  involved  in  some  Teachers  are  involved  in  most  examination‐related tasks.   examination‐related tasks.  examination‐related tasks. 15  examination‐related tasks.   *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              21  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ASSESSMENT QUALITY Degree to which the assessment meets quality standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring quality There  is  no  technical  report  or  other  There  is  some  documentation  on  the  There  is  a  comprehensive  technical  There  is  a  comprehensive,  high  quality  documentation.  examination,  but  it  is  not  in  a  formal  report but with restricted circulation. 16  technical  report  available  to  the  general  report format.   public.   * There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There are limited systematic mechanisms  There  are  varied  and  systematic  ensure the quality of the examination.  dimension.  in  place  to  ensure  the  quality  of  the  mechanisms  in  place  to  ensure  the  examination.17  quality of the examination.  * ASSESSMENT QUALITY 2: Ensuring fairness Inappropriate  behavior  surrounding  the  Inappropriate  behavior  surrounding  the  Inappropriate  behavior  surrounding  the  Inappropriate  behavior  surrounding  the  examination process is high.  examination process is moderate.   examination process is low. 18  examination process is marginal.   * The  examination  results  lack  credibility  The  examination  results  are  credible  for  The  examination  results  are  credible  for  This  option  does  not  apply  to  this  for all stakeholder groups.  some stakeholder groups.  all stakeholder groups.   dimension.  * The  majority  of  the  students  (over  50%)  A  significant  proportion  of  students  A  small  proportion  of  students  (less  than  All  students  can  take  the  examination;  may not take the examination because of  (10%‐50%) may not take the examination  10%)  may  not  take  the  examination  there  are  no  language,  gender  or  other  language,  gender,  or  other  equivalent  because  of  language,  gender,  or  other  because  of  language,  gender,  or  other  equivalent barriers.  barriers.  equivalent barriers.  equivalent barriers.  *                                     (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              22  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012      LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 3: Using examination information in a fair way Examination  results  are  not  used  in  a  Examination  results  are  used  by  some  Examination  results  are  used  by  most  Examination  results  are  used by  all  proper way by all stakeholder groups.  stakeholder groups in a proper way.  stakeholder groups in a proper way.   stakeholder groups in a proper way.   * Student names and results are public.   This  option  does  not  apply  to  this  Students’ results are confidential. 19 This  option  does  not  apply  to  this  dimension.  dimension.  * ASSESSMENT QUALITY 4: Ensuring positive consequences of the examination There  are  no  options  for  students  who  There  are  very  limited  options  for  There are some options for students who  There  is  a  variety  of  options  for  students  do  not  perform  well  on  the  examination,  students who do not perform well on the  do  not  perform  well  on  the  examination.  who  do  not  perform  well  on  the  20 or  students  must  leave  the  education  examination.     examination.  system.  * There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There  are  some  mechanisms  in  place  to  There  is  a  variety  of  mechanisms  in  place  monitor  the  consequences  of  the  dimension.  monitor  the  consequences  of  the  to  monitor  the  consequences  of  the  examination. 21  examination.   examination.     *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              23  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    Examinations: Development‐level rating justifications 1. The GCE Advanced Level Examination has been administered since 1964. It is administered to grade 13 students and is used as certification for school  completion and selection to higher education. The examination is also used to monitor education quality levels as well as for planning education policy  reforms.    2. The policy document is the "Public Examination Act No. 25 of 1968."    3. The  policy  document  outlines  governance,  distribution  of  power,  and  responsibilities  among  key  entities;  describes  the  purpose  of  the  examination  and  the  authorized  uses  of  results;  outlines  procedures  to  investigate  and  address  security  breaches,  cheating,  or  other  forms  of  inappropriate  behavior;  outlines  procedures  for  special/disadvantaged  students;  identifies  rules  about  preparation;  and  addresses  issues  of  confidentiality,  security,  the  setting  and  marking  of papers, as well as the powers of the Commissioner General.    4. While almost all stakeholder groups strongly support the examination, teacher unions sometimes oppose the examination of the results.    5. Policymakers  and  universities  have  attempted  to  reform  the  examination  through  research,  and  NGOs  have  attempted  to  reform  the  examination  through  funding.    6. There is regular funding allocated by the government and irregular funding allocated by non‐government sources. There is also technical assistance provided  by the World Bank for item bank and examination guideline development.    7. Activities also include long‐ or medium‐term planning of program milestones.    8. The Department of Examinations has been operating independently since 1968.     9. The examination office is accountable to the Ministry of Education.    10. There  is  permanent  or  full‐time  staff,  but  it  is  insufficient  to  meet  needs  of  the  examination.  Additional  staff  is  brought  from  universities  to  conduct  the  examination  and  for  evaluation,  and  staff  from  the  National  Institute  of  Education  (NIE)  is  brought  in  for  the  setting  of  the  examination  papers.  Issues  that  have sometimes been observed include poor training of test administrators or unclear instructions and guidelines in administering the examination, errors in  scoring  that  have  led  to  delays  in  results  being  reported,  weaknesses  in  test  design,  errors  in  the  application  and  efficiency  of  supervisors  in  entering  admission  numbers,  etc.  Additionally,  schools  do  not  always  pay  attention  to  all  of  the  details  in  the  information  that  they  are  required  to  provide,  and  sometimes submit incorrect information. Issues, however, are not pervasive.     11. One opportunity is available. Specifically, funding to attend international programs, courses, or workshops on educational measurement and evaluation. For  example, five officers have been sent to Melbourne for courses in measurement and evaluation.    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              24  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012      12. The examination measures the national school curriculum guidelines or standards.    13. However, some stakeholder groups question the examination in the sense that there are requests for further scrutiny of papers, etc.    14. Material  includes  examples  of  the  types  of  questions  that  are  on  the  examination,  information  on  how  to  prepare  for  the  examination,  the  framework  document explaining what is measured on the examination, and a report on the strengths and weaknesses in student performance to the zones.     15. Tasks include the administering of the examination, scoring of the examination, acting as a judge (i.e., in orals), and supervising the examination procedures.    16. This is a confidential document with restricted circulation. There is no link, only a hard copy.    17. Mechanisms include internal review or observers and translation verification.    18. Inappropriate  behaviors  include  impersonation,  when  an  individual  other  than  the  registered  candidate  takes  the  examination,  and  copying  from  other  candidates. Using unauthorized materials, such as prepared answers and notes, and issuing forged certificates or altering results has also been observed.    19. Only  the  student  and  persons  with  a  legitimate,  professional  interest  in  the  test‐taker  (e.g.,  his  or  her  educators,  parents,  and  authorized  potential  employers) can know the results.    20. Options include that students may retake the examination, attend remedial or preparatory courses in order to prepare to retake the examination, or opt for  less selective schools/universities/tracks.     21. There are some focus groups, but they are not regular, as well as ad hoc studies on the examination.      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              25  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SRI LANKA National (or System‐Level) Large‐Scale Assessment (NLSA)   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              26  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT Overall framework of policies, leadership, organizational structures, fiscal and human resources in which NLSA activity takes place in a country or system and the  extent to which that framework is conducive to, or supportive of, the NLSA activity.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 1: Setting clear policies for NLSA No NLSA exercise has taken place.  The  NLSA  has  been  operating  on  an  The  NLSA  is  a  stable  program  that  has  This  option  does  not  apply  to  this  irregular basis.  been operating regularly. 1  dimension.  * There  is  no  policy  document  pertaining  There  is  an  informal  or  draft  policy  There  is  a  formal  policy  document  that  This  option  does  not  apply  to  this  to NLSA.  document that authorizes the NLSA.  authorizes the NLSA.2  dimension.  * This  option  does  not  apply  to  this  The  policy  document  is  not  available  to  The  policy  document  is  available  to  the  This  option  does  not  apply  to  this  dimension.  the public.  public.  dimension.  * There is no plan for NLSA activity.  This  option  does  not  apply  to  this  There is a general understanding that the  There is  a  written  NLSA  plan  for  the  dimension.  NLSA will take place. 3  coming years.   * ENABLING CONTEXT 2: Having strong public engagement for NLSA All  stakeholder  groups  strongly  oppose  Some  stakeholder  groups  oppose  the  Most  stakeholders  groups  support  the  All stakeholder groups support the NLSA.  the NLSA or are indifferent to it.  NLSA.  NLSA. 4                                *       (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              27  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012      LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 3: Having regular funding for NLSA There  is  no  funding  allocated  to  the  There  is  irregular  funding  allocated  to  There  is  regular  funding  allocated  to  the  This  option  does  not  apply  to  this  NLSA.  the NLSA. 5  NLSA.   dimension.  * This  option  does  not  apply  to  this  Funding  covers  some  core  NLSA  Funding  covers  all  core  NLSA  activities:  This  option  does  not  apply  to  this  dimension.  activities: design, administration, analysis  design,  administration,  analysis  and  dimension.  and reporting.  reporting.  This  option  does  not  apply  to  this  Funding  does  not  cover  research  and  This  option  does  not  apply  to  this  Funding  *covers  research  and  dimension.  development activities.  dimension.  development activities. 6  * ENABLING CONTEXT 4: Having strong organizational structures for NLSA There  is  no  NLSA  office,  ad  hoc  unit  or  The  NLSA  office  is  a  temporary  agency  or  The  NLSA  office  is  a  permanent  agency,  This  option  does  not  apply  to  this  team.  group of people.  institution or unit.7  dimension.  * This  option  does  not  apply  to  this  Political  considerations  regularly  hamper  Political  considerations  sometimes  Political  considerations  never  hamper  dimension.  technical considerations.  hamper technical considerations.   technical considerations. 8  * This  option  does  not  apply  to  this  The  NLSA  office  is  not  accountable  to  a  The  NLSA  office  is  accountable  to  a  This  option  does  not  apply  to  this  dimension.  clearly recognized body.  clearly recognized body. 9  dimension.                                *       (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              28  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 5: Having effective human resources for NLSA There  is  no  staff  allocated  for  running  an  The  NLSA  office  is  inadequately  staffed  The  NLSA  office  is  adequately  staffed  to  The  NLSA  office  is  adequately  staffed  to  NLSA.  to effectively carry out the assessment. 10 carry  out  the  NLSA  effectively,  with  carry  out  the  NLSA  effectively,  with  no  minimal issues.  issues.   * The  country  does  not  offer  opportunities  This  option  does  not  apply  to  this  The country offers some opportunities to  The  country offers  a  wide  range  of  that  prepare  individuals  for  work  on  dimension.  prepare  individuals  for  work  on  the  opportunities  to  prepare  individuals  for  NLSA.  NLSA. 11  work on the NLSA.   *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              29  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SYSTEM ALIGNMENT Degree to which the NLSA is coherent with other components of the education system.  LATENT EMERGING ESTABLISHED ADVANCED SYSTEM ALIGNMENT 1: Aligning the NLSA with learning goals It  is  not  clear  if  the  NLSA  is  based  on  This  option  does  not  apply  to  this  The  NLSA  measures  performance  against  This  option  does  not  apply  to  this  curriculum or learning standards.   dimension.  curriculum or learning standards. 12  dimension.  * What  the  NLSA  measures  is  generally  This  option  does  not  apply  to  this  What  the  NLSA  measures  is  questioned  What  the  NLSA  measures  is  largely  questioned by stakeholder groups.  dimension.  by some stakeholder groups.   accepted by stakeholder groups.   * There  are  no  mechanisms  in  place  to  There  are  ad  hoc  reviews  of  the  NLSA  to  There  are  regular  internal  reviews  of  the  This  option  does  not  apply  to  this  ensure  that  the  NLSA  accurately  ensure  that  it  measures  what  it  is  NLSA  to  ensure  that  it  measures  what  it  dimension.  measures  what  it  is  supposed  to  intended to measure.  is intended to measure. 13  measure.  * SYSTEM ALIGNMENT 2: Providing teachers with opportunities to learn about the NLSA There  are  no  courses  or  workshops  on  There  are  occasional  courses  or  There are some courses or workshops on  There  are  widely  available  high  quality  the NLSA.  workshops on the NLSA. 14  the NLSA offered on a regular basis.  courses  or  workshops  on  the  NLSA  offered on a regular basis.   *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              30  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ASSESSMENT QUALITY Degree to which the NLSA meets technical standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring the quality of the NLSA No  options  are  offered  to  include  all  This  option  does  not  apply  to  this  At  least  one  option  is  offered  to  include  Different  options  are  offered  to  include  groups of students in the NLSA.   dimension.  all groups of students in the NLSA.  all groups of students in the NLSA. 15  There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There  are  some  mechanisms  in  place  to  There  are  a  variety  of  mechanisms  in  * ensure the quality of the NLSA.  dimension.  ensure the quality of the NLSA.   place to ensure the quality of the NLSA. 16  There  is  no  technical  report  or  other  There  is  some  documentation  about  the  There  is  a  comprehensive  technical  There  is  a  comprehensive,  high  quality  * documentation about the NLSA.  technical  aspects  of  the  NLSA,  but  it  is  report but with restricted circulation. 17  technical  report  available  to  the  general  not in a formal report format.  public.  * ASSESSMENT QUALITY 2: Ensuring effective uses of the NLSA NLSA results are not disseminated.   NLSA results are poorly disseminated. NLSA  results  are  disseminated  in  an  This  option  does  not  apply  to  this  effective way. 18  dimension.  * NLSA  information  is  not  used  or  is  used  This  option  does  not  apply  to  this  NLSA  results  are  used  by  some  NLSA  information  is  used  by  all  in  ways  inconsistent  with  the  purposes  dimension.   stakeholder  groups  in  a  way  that  is  stakeholder  groups  in  a  way  that  is  or  the  technical  characteristics  of  the  consistent  with  the  purposes  and  consistent  with  the  purposes  and  assessment.  technical  characteristics  of  the  technical  characteristics  of  the  assessment.   assessment.  * There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There  are  some  mechanisms  in  place  to  There  are  a  variety  of  mechanisms  in  monitor the consequences of the NLSA.  dimension.  monitor  the  consequences  of  the  NLSA.  place  to  monitor  the  consequences  of  19   the NLSA.  *                                             SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              31  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    National (of System‐Level) Large Scale Assessment (NLSA): Development‐level rating justifications 1. The Grade 4 National Assessment of Achievement was carried out in 2003, 2007, and 2009.    2. The document is the "Education Sector Development Framework and Programme" document, 2006.    3. The Plan for the coming years is in the process of being prepared and will become available in April/May 2012.    4. Department  of  Examinations,  the  National  Institute  of  Education,  universities,  think  tanks  and  NGOs  strongly  support  the  NLSA;  policymakers,  educators,  students, and parents support the NLSA; the media is neutral to the NLSA.    5. The funding is allocated only by non‐government sources.    6. Funding also covers long‐ or medium‐term planning of program milestones, and staff training.    7. The agency is called the National Education Research and Evaluation Centre (NEREC).    8. Results from large‐scale assessments have never been withheld from publication for political reasons.    9. The  Ministry  of Education (which instructs NEREC), the World Bank (which sponsors the assessment), and the  University of Colombo (in which NEREC is part  of the Faculty of Education).    10. There  is  mainly  temporary  or  part‐time  staff  involved.  Specifically,  NEREC  employs  members  of  the  Faculty  of  Education,  members  of  other  universities,  personnel  from  the  Department  of  Examinations  and  the  Department  of  Census  and  Statistics  for  running  the  assessments.  Issues  that  have  been  identified  with  the  performance  of  the  staff  include  poor  training  of  test  administrators  or  unclear  instructions  and  guidelines  for  administering  the  assessment,  and  there have been errors in scoring that have led to delays in results being reported.    11. Funding  for  attending  international  programs  or  courses  or  workshops  on  educational  measurement  and  evaluation  is  provided  to  university  staff  from  the  Faculty  of  Education  who  are  working  on  the  NEREC  projects.  Research  academics  have  been  sent  on  three  short‐term  visits  and  two  long‐term  visits  to  the  University  of  West  of  England  for  training  in  capacity  building.  Two  academics  have  also  been  sent  to  the  same  university  for  a  one‐year  master’s  degree.  NEREC researchers were also sent on short‐term visits in capacity building in areas such as preparation of questionnaires, data analysis, and sampling.    12. The NLSA measures performance against national/system or state‐level curriculum guidelines or learning standards.    13. There are regular internal reviews of the alignment between the assessment instrument and what it is supposed to measure.    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              32  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    14. Most teachers have access to the live courses or workshops, most of which provide relevant resources that teachers can use in their classrooms. The courses  are generally of high quality.    15. Special  plans  are  made  to  ensure  that  the  large‐scale  assessment  is  administered  to  students  in  hard‐to‐reach  areas  and  the  assessment  is  offered  in  the  language of instruction for almost all student groups.    16. The mechanisms that are in place to ensure the quality of the assessment include: All proctors or administrators are trained according to a protocol; there is  a  standardized  manual  for  large‐scale  assessment  administrators;  discrepancies  must  be  recorded  in  a  journal  by  administrators;  a pilot  is  conducted  before  the  main  data  collection  takes  place;  all  booklets  are  numbered;  scorers  are  trained  to  ensure  high  inter‐rater  reliability;  there  is  double  processing  of  data;  there  are  internal  and  external  reviewers  or  observers.  Specifically,  observers  are  appointed  for  test  administrators,  and  monitors  are  appointed  in  addition  to supervisors. Panel marking is also carried out to ensure fairness.    17. There are reports made of each assessment incorporating the technical details.    18. Specifically,  results  are  disseminated  within  12  months  after  the  large‐scale  assessment  is  administered,  and  reports  with  results  are  made  available  for  all  stakeholder  groups.  Results  are  also  featured  in  newspapers,  magazines,  radio,  or  television.  Additionally,  the  main  reports  on  the  results  contain  information  on  overall  achievement  levels  and  subgroups,  as  well  as  trends  over  time  overall  and  for  subgroups  and  standard  errors.  Workshops  or  presentations on the results are held for key stakeholders. One dissemination seminar is held by NEREC and the Ministry of Education in the provinces.    19. Where there  are plans to introduce a permanent oversight committee, currently expert review groups and regular focus groups/surveys of key stakeholders  are held.    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              33  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SRI LANKA International Large‐Scale Assessment (ILSA)   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              34  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT Overall framework of policies, leadership, organizational structures, fiscal and human resources in which ILSA takes place in a country or system and the extent to  which that framework is conducive to, or supportive of, ILSA activity.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 1: Setting clear policies for ILSA The  country/system  has  not  participated  This  option  does  not  apply  to  this  The  country/system  has  participated  in  The  country/system  has  participated  in  in an ILSA in the last 10 years.1  dimension.  at least one ILSA in the last 10 years.  two or more ILSA in the last 10 years.  * The  country/system  has  not  taken  This  option  does  not  apply  to  this  The  country/system  has  taken  concrete  This  option  does  not  apply  to  this  concrete steps to participate in an ILSA in  dimension.  steps to participate in at least one ILSA in  dimension.  the next 5 years.  the next 5 years.   * There  is  no  policy  document  that  There  is  an  informal  or  draft  policy  There  is  a  formal  policy  document  that  This  option  does  not  apply  to  this  addresses participation in ILSA.   document that addresses participation in  addresses participation in ILSA.   dimension.  ILSA.  This  option  does  not  apply  to  this  The  policy  document  is  not  available  to  The  policy  document  is  available  to  the  This  option  does  not  apply  to  this  dimension.   the public.   public.   dimension.  ENABLING CONTEXT 2: Having regular funding for ILSA There  is  no  funding  for  participation  in  There  is  funding  from  loans  or  external  There  is  regular  funding  allocated  at  There is regular funding approved by law,  ILSA.  donors.  discretion.   decree or norm.  This  option  does  not  apply  to  this  Funding  covers  some  core  activities  of  Funding  covers  all  core  activities  of  the  This  option  does  not  apply  to  this  dimension.  the ILSA.  ILSA.   dimension.  Funding  does  not  cover  research  and  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  Funding  covers  research  and  development activities.  dimension.  dimension.  development activities.                                      (CONTINUED)      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              35  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 3: Having effective human resources for ILSA There  is  no  team  or  national/system  There  is  a  team  or  national/system  There  is  a  team  and  national/system  This  option  does  not  apply  to  this  coordinator  to  carry  out  the  ILSA  coordinator  to  carry  out  the  ILSA  coordinator  to  carry  out  the  ILSA  dimension.  activities.  activities.  activities.   This  option  does  not  apply  to  this  The  national/system  coordinator  or  The national/system coordinator is fluent  This  option  does  not  apply  to  this  dimension.  other  designated  team  member  may  not  in the language of the assessment.   dimension.  be  fluent  in  the  language  of  the  assessment.   This  option  does  not  apply  to  this  The  ILSA  office  is  inadequately  staffed  or  The  ILSA  office  is  adequately  staffed  or  The  ILSA  office  is  adequately  staffed  and  dimension.  trained  to  carry  out  the  assessment  trained  to  carry  out  the  ILSA  effectively,  trained  to  carry  out  the  ILSA  effectively,  effectively.   with minimal issues.   with no issues.                                               SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              36  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SYSTEM ALIGNMENT Degree to which the ILSA meets technical quality standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED SYSTEM ALIGNMENT 1: Providing opportunities to learn about ILSA The  ILSA  team  has  not  attended  The  ILSA  team  attended  some  The  ILSA  team  attended  all  international  This  option  does  not  apply  to  this  international workshops or meetings.  international workshops or meetings.  workshops or meetings.   dimension.  The  country/system  offers  no  This  option  does  not  apply  to  this  The  country/system  offers  some  The  country/system  offers  a  wide  range  opportunities to learn about ILSA.  dimension.  opportunities to learn about ILSA.   of opportunities to learn about ILSA.  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  Opportunities  to  learn  about  ILSA  are  Opportunities  to  learn  about  ILSA  are  dimension.  dimension.  available  to  the  country's/system's  ILSA  available  to  a  wide  audience,  in  addition  team members only.   to  the  country's/system's  ILSA  team  members.           SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              37  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ASSESSMENT QUALITY Degree to which the ILSA meets technical quality standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring the quality of ILSA Data  from  the  ILSA  has  not  been  The  country/system  met  sufficient  The  country/system  met  all  technical  This  option  does  not  apply  to  this  published.  standards  to  have  its  data  presented  standards  required  to  have  its  data  dimension.  beneath  the  main  display  of  the  presented  in  the  main  displays  of  the  international report or in an annex.  international report.   The  country/system  has  not  contributed  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  The  country/system  has  contributed  new  new knowledge on ILSA.   dimension.  dimension.  knowledge on ILSA.   ASSESSMENT QUALITY 2: Ensuring effective uses of ILSA If  any,  country/system‐specific  results  Country/system‐specific  results  and  Country/system‐specific  results  and  Country/system‐specific  results  and  and  information  are  not  disseminated  in  information  are  disseminated  irregularly  information are regularly disseminated in  information  are  regularly  and  widely  the country/system.  in the country/system.   the country/system.   disseminated in the country/system.   Products  to  provide  feedback  to  schools  This  option  does  not  apply  to  this  Products  to  provide  feedback  to  schools  Products  to  provide  feedback  to  schools  and  educators  about  the  ILSA  results  are  dimension.  and  educators  about  the  ILSA  results  are  and  educators  about  ILSA  results  are  not made available.  sometimes made available.  systematically made available.   There  is  no  media  coverage  of  the  ILSA  There  is  limited  media  coverage  of the  There  is  some  media  coverage  of  the  There  is  wide  media  coverage  of  the  ILSA  results.  ILSA results.   ILSA results.   results.  If  any,  country/system‐specific  results  Results  from  the  ILSA  are  used  in  a  Results  from  the  ILSA  are  used  in  some  Results  from  the  ILSA  are  used  in  a  and  information  from  the  ILSA  are  not  limited  way  to  inform  decision  making  in  ways  to  inform  decision  making  in  the  variety  of  ways  to  inform  decision  used  to  inform  decision  making  in  the  the country/system.  country/system.   making in the country/system.   country/system.  It  is  not  clear  that  decisions  based  on  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  Decisions  based on  the  ILSA  results  have  ILSA  results  have  had  a  positive  impact  dimension.  dimension.  had  a  positive  impact  on  students'  on students' achievement levels.  achievement levels.     SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              38  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    International Large Scale Assessment (ILSA): Development‐level rating justifications 1. Sri Lanka has not participated in an ILSA, and it does not have plans to do so in the near future.    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              39  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Acknowledgements  References      This  report  was  prepared  by  The  World  Bank  SABER‐ Clarke,  M.  2012.  “What  Matters  Most  for  Student  Student  Assessment  team  in  collaboration  with  Harsha  Assessment  Systems:  A  Framework  Paper.”  Aturupane,  World  Bank  Lead  Education  Specialist  and  READ/SABER  Working  Paper  Series.  Washington,  DC:  Task Team Leader for education projects in Sri Lanka.   World Bank.    Ministry of Education. 2013. “2012 Annual Performance  Report.”  Battaramulla, Sri Lanka. Data retrieved from  http://www.moe.gov.lk/web/images/stories/publicatio n/Annual_performance_2012/English.pdf on February  20, 2014.     World Bank. 2012. Sri Lanka Country Indicator Data.  Washington, DC: World Bank. Data retrieved from  http://data.worldbank.org/ on February 20, 2014.    World Bank. 2012. Sri Lanka ‐ Country Partnership  Strategy for the Period FY2013 ‐ FY2016. Report No.  66286‐LA. Washington, DC: World Bank.     World Bank. 2012. Project Performance Assessment  Report Democratic Socialist Republic of Sri Lanka:  Improving Relevance and Quality of Undergraduate  Education and Education Sector Development Project.  Report No. 71893. Washington, DC: World Bank.         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    40  SRI LANKA ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012      www.worldbank.org/education/saber     The Systems Approach for Better Education Results (SABER) initiative produces comparative data and knowledge on education policies and institutions, with the aim of helping countries systematically strengthen their education systems. SABER evaluates the quality of education policies against evidence-based global standards, using new diagnostic tools and detailed policy data. The SABER country reports give all parties with a stake in educational results—from administrators, teachers, and parents to policymakers and business people—an accessible, objective snapshot showing how well the policies of their country's education system are oriented toward ensuring that all children and youth learn. This report focuses specifically on policies in the area of student assessment. This work is a product of the staff of The World Bank with external contributions.  The findings, interpretations, and conclusions expressed in  this work do not necessarily reflect the views of The World Bank, its Board of Executive Directors, or the governments they represent. The  World Bank does not guarantee the accuracy of the data included in this work. The boundaries, colors, denominations, and other information  shown on any map in this work do not imply any judgment on the part of The World Bank concerning the legal status of any territory or the  endorsement or acceptance of such boundaries.   THE WORLD BANK    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    40