American Bar Association (ABA)

Training Evaluation Advisor

American Bar Association (ABA)

Job Description

ABA ROLI is seeking an expert in training evaluation and/or government performance for a initial period of 4 months with a possible 2 months extension contract supporting the Colombian Judicial Training School (JTS). The expert will be responsible, in close collaboration with JTS staff, for developing and implementing a plan to mainstream a Kirkpatrick model training evaluation at the JTS. This may include but is not limited to the duties below. Duties
  • Develop a work plan for institutionalizing a training evaluation system, including tool development, data Analysis and staff training for the JTS.

  • Facilitate the integration of the Kirkpatrick training evaluation model into the JTS.

  • Assist with developing clear objectives and defining outcomes, per the Kirkpatrick model at the time of Curriculum Development.

  • Develop tools and methods of evaluation for JTS course content in updated curriculum aimed at judges and other judicial actors and elaborate guides or material that describes the application of such tools and methods.

  • Develop a data use strategy for the JTS to institutionalize the routine review of test results and adaptation.

  • Prepare materials, present and develop workshops for JTS staff on training evaluation model.

  • Support the development and application of knowledge assessment tools for the trainings under your responsibility in the levels two (2) and three (3) of the Kirkpatrick model.

  • Work closely with judicial experts to Design a minimum of 3 written courses to assess student competencies and knowledge before and after courses.

  • Adapt and update a guide for the use of the Kirkpatrick model for judicial training evaluations so this guide can consistently be used by the Judicial Training School in coming trainings.

  • Test the Kirkpatrick methodology using a quasi-Experimental Design through the application of a control and treatment group in at least four (4) courses of JTS. This will include drafting written test models and the construction of databases as needed.

  • Identify the most appropriate courses and design and implement a level 2 and 3 Kirkpatrick evaluation for at least five (5) and two (2) courses respectively.

Basic Qualifications
  • Bachelor’s degree in a relevant field required; higher level degree preferred.

  • 10 years of relevant work experience.

  • 3 years of experience in judicial education.

  • Working knowledge of best practices in adult learning and/or government performance management.

  • Experience working with government institutions.

  • Proven knowledge of and experience implementing training evaluations.

  • Experience developing and institutionalizing monitoring and evaluation processes.

  • Experienced in staff Capacity Building and training.

  • Professional or native fluency in Spanish and intermediate English knowledge.

  • Experience working in Latin America.

Preferred Qualifications
  • Prior experience using the Kirkpatrick model for training evaluation highly desirable.

  • Experience working with multi-disciplinary teams.

  • Publications in the area of training evaluations preferred.

  • Experience working in Colombia.

About the Organization ABA Rule of Law Initiative (ABA ROLI) is a non-profit program that implements legal reform programs in roughly 40 countries around the world. ABA ROLI has nearly 400 professional staff working internationally. ABA ROLI’s partners include judges, lawyers, bar associations, law schools, court administrators, legislatures, ministries of justice, and a wide array of Civil Society Organizations. Asesor en Evaluación Curricular Descripción del cargo American Bar Association Rule of Law Initiative (ABA ROLI Colombia) busca contratar a un Consultor experto en evaluación curricular o de capacitaciones por un período inicial de 4 meses con una posible extensión de 2 meses para apoyar el proyecto que ejecuta actualmente con la Escuela Judicial Rodrigo Lara Bonilla (EJRLB). El experto será responsable, en estrecha colaboración con el personal de la EJRLB, de desarrollar e implementar un plan para incorporar una evaluación de la capacitación ofrecida por la Escuela, basada en el modelo Kirkpatrick. Esta labor puede incluir, pero no se encuentra limitada, al cumplimiento de las siguientes tareas: Tareas
  • Desarrollar un plan de trabajo para institucionalizar un sistema de evaluación de la capacitación ofrecida por la EJRLB que incluya el desarrollo de herramientas, análisis de datos y capacitación del personal de la Escuela.

  • Facilitar la integración del modelo de evaluación de capacitación Kirkpatrick en la EJRLB.

  • Asistir en el desarrollo de objetivos claros y definir resultados, según el modelo de Kirkpatrick en el momento del desarrollo del plan de estudios de la Escuela Judicial.

  • Desarrollar herramientas y métodos de evaluación para el contenido de los cursos de la EJRLB dentro de un plan de estudios actualizado que será ofrecido dentro del programa, y que estará dirigido a jueces y otros actores judiciales, así como elaborar guías o materiales que describan la aplicación de dichas herramientas y métodos.

  • Desarrollar una estrategia de uso de datos para la EJRLB para institucionalizar la revisión de rutina de los resultados de las pruebas y la adaptación.

  • Preparar materiales, presentar y desarrollar talleres para el personal de la EJRLB sobre el modelo de evaluación de capacitación de Kirkpatrick así como otros modelos de evaluación de capacitación que sean aplicables.

  • Apoyar el desarrollo y la aplicación de herramientas de evaluación del conocimiento para las capacitaciones bajo su responsabilidad en los niveles dos (2) y tres (3) del modelo de Kirkpatrick.

  • Trabajar en estrecha colaboración con expertos judiciales para diseñar un mínimo de 3 cursos escritos para evaluar las competencias y conocimientos de los estudiantes antes y después de los cursos.

  • Adaptar y actualizar una guía sobre el modelo Kirkpatrick para las evaluaciones de capacitación judicial, para que la EJRLB pueda utilizarla de manera consistente en futuras capacitaciones.

  • Probar la metodología de Kirkpatrick utilizando un diseño cuasiexperimental mediante la aplicación de un grupo de control y tratamiento en al menos cuatro (4) cursos de la EJRLB. Esto incluirá la redacción de modelos de pruebas escritas y la construcción de bases de datos según sea necesario.

  • Identificar los cursos más apropiados y diseñar e implementar una evaluación Kirkpatrick de nivel 2 y 3 para al menos cinco (5) y dos (2) cursos respectivamente.

Calificaciones Básicas
  • Se requiere titulo profesional o licenciatura en un campo relevante para la posición. Estudios de nivel superior preferidos.

  • 10 años de experiencia laboral relevante para la posición.

  • Conocimiento práctico de mejores prácticas en el aprendizaje de adultos y / o la gestión del desempeño en entidades o instituciones educativas.

  • Experiencia trabajando con instituciones gubernamentales.

  • Conocimiento probado y experiencia en la implementación de evaluaciones de capacitación.

  • Experiencia desarrollando e institucionalizando procesos de monitoreo y evaluación.

  • Experiencia en capacitación y fortalecimiento de personal.

  • Fluidez profesional o nativa en español e inglés intermedio.

Calificaciones preferidas
  • Experiencia previa en el uso del modelo Kirkpatrick para la evaluación de la capacitación altamente deseable.

  • Experiencia dentro del sector de la justicia es altamente preferida o la experiencia de haber trabajado con equipos multidisciplinarios.

  • Experiencia trabajando con escuelas de formación o unidades educativas.

  • Publicaciones en el área de evaluaciones de capacitación preferidas.

Sobre la Organización ABA ROLI es una organización sin fines de lucro que implementa programas de reforma legal en aproximadamente 40 países alrededor del mundo. ABA ROLI tiene cerca de 700 profesionales trabajan en el extranjero y en sus oficinas de Washington, DC. Contrapartes de ABA ROLI en nuestros países anfitriones incluyen a jueces, abogados, colegios de abogados, facultades de derecho, administradores de tribunales, legislaturas, ministerios de justicia y una amplia gama de organizaciones de la sociedad civil, incluidos los grupos de derechos humanos.
Apply Now