Mérito/Valor / Significado Explicado en Lenguaje Sencillo

Recientemente recibí un correo electrónico de un estudiante de doctorado pidiéndome que explicara la noción de mérito/valor/significado de Scriven. Una parte de su tesis se centra en determinar el valor de la capacitación para la preparación de exámenes (por ejemplo, cursos de preparación MCAT/GMAT/LSAT) entre los estudiantes de idiomas. Uno de los miembros de su comité sugirió que utilizara los M/W/S como marco para abordar este aspecto de su trabajo. Entonces, le respondí, diciendo, ¿por qué no hablamos por Skype y hablamos de esto?

He estado pensando en este problema desde entonces. Como evaluador, se me recuerda que uno de los propósitos básicos de la evaluación es la determinación del mérito/valor/significado de algo. Y, por lo general, nos referimos a lo que estamos evaluando (el “algo”) como el evaluand. Esta definición clásica de evaluación constituye una parte de lo que Scriven (1991) se refiere como la lógica de la evaluación en un artículo con el mismo nombre en el Tesauro de Evaluación. La lógica de la evaluación es una contribución fundamental al campo, ya que se encuentra en el núcleo de lo que hace que la evaluación sea única en comparación con, por ejemplo, la investigación: la evaluación nos permite hacer afirmaciones evaluativas. La distinción entre M / W / S y su aplicación en la evaluación es importante, pero encontrar una escritura accesible sobre este tema es difícil. Tal vez, m/w / s es tan obvio para todos menos para mí :). Esperemos que no.

Entonces what ¿qué es mérito, valor e importancia?

El mérito, el valor y la importancia se pueden explicar fácilmente por referencia a la evaluación de un manzano. Digamos que estás en una tienda de comestibles. La decisión que tendrás que tomar es comprar una manzana.

Mérito

El mérito tiene que ver con las propiedades, características o atributos intrínsecos de un evaluador. Al comprar una manzana, la mayoría de la gente preferiría una manzana que no esté podrida, que sea dulce al gusto y que no esté dañada o deformada de otro modo. Por lo general, eso es lo que la gente buscaría si la manzana se comiera sola. Pero, ¿y si estuvieras comprando la manzana para hacer un pastel de manzana? Luego, es posible que desee comprar una manzana que no sea dulce, sino ácida. Por lo tanto, como podemos ver, lo que valoramos como atributos deseables de un objeto depende de otros factores contextuales.

Aquí hay otro ejemplo. Un automóvil tiene mérito si es confiable (es decir, no se descompone mientras conduce por la carretera; predecible), es seguro (es decir, tiene características de seguridad adecuadas y funciona según lo previsto) y es potente en relación con su aplicación prevista (por ejemplo, un automóvil de cercanías frente a una camioneta para transportar material de construcción). Ahora, se puede decir, un coche tiene mérito solo si tiene una unidad de aire acondicionado integrada o un sistema estéreo. Una persona consciente del diseño puede insistir en que un automóvil sea visualmente atractivo. Cada vez más, los conductores quieren un buen consumo de combustible. Diferentes personas pueden tener diferentes puntos de vista sobre lo que constituye mérito. En otras palabras, un evaluand pueden ser evaluados en relación con las diferentes dimensiones de la calidad, es decir, criterio. Parte de lo que hace que la evaluación sea divertida es exponer los criterios que uno podría usar para evaluar una evaluación. Lo “bueno” no es necesariamente “bueno” para mí. Es por eso que hay tantos tipos de autos por ahí.

En una evaluación de programa, normalmente pensamos que un programa tiene mérito si: 1) hace lo que se propone hacer, es decir, logra los resultados deseados, y 2) hace una diferencia significativa como consecuencia de su funcionamiento.

Worth

Ahora, worth es un concepto más complicado. En el lenguaje cotidiano, podríamos decir que una manzana (suponiendo que es “buena”) vale algo; ese “algo” se expresa típicamente en algún valor monetario (por ejemplo, esta manzana vale $2.00; ese automóvil vale 2 24,999. Por lo tanto, el valor es el valor de una evaluacióny que se expresa como una equivalencia con otra cosa. Podemos decir this que esta actividad vale ‘mi tiempo’. Mientras que el mérito puede ser difícil de medir, el valor se expresa generalmente en alguna unidad más fácilmente mensurable.

Otra forma de pensar sobre el valor es en una situación comparativa. Digamos que está evaluando dos instancias del mismo programa: El Programa Desayuno para todos en el Sitio A y el Sitio B. Si bien ambos pueden tener méritos, el valor del programa en el Sitio A puede ser diferente del Sitio B dependiendo de su impacto en los constituyentes. Vale entre dos programas comparables, pero diferentes también pueden diferir si uno es más barato de ejecutar (por lo que uno vale más que el otro).

Finalmente, significado.

El significado es el más borroso de los tres. La significación se refiere a los valores y significados que se atribuyen a un evaluador. Por lo general, uno puede aprender sobre el significado de algo haciendo preguntas sobre: ¿Qué hace que esta evaluación sea especial? ¿Qué significado tiene para individuos particulares?

Pregunte a cualquier novia joven sobre su anillo de diamantes. Si bien es posible que no tenga un diamante grande (por lo tanto, el anillo tiene un valor limitado), probablemente tenga un gran significado. Un joven graduado de la universidad puede conducir un automóvil de alto kilometraje que se acerca al final de su vida útil. Podríamos especular que el automóvil tiene un mérito limitado (i. e. la transmisión es torcida, el cuerpo se oxida, pero el automóvil aún está en condiciones de circular), y como resultado tiene un valor limitado para cualquier cuerpo, pero para el graduado universitario puede tener importancia para su sustento depende de ello para que pueda trabajar todos los días.

Observe que la importancia a menudo tiene poco que ver con el mérito. De hecho, se puede demostrar que un programa tiene un impacto limitado en una comunidad, pero puede tener una gran importancia por su valor simbólico. Podemos decir que ” ¡importa! Incluso si es para unos pocos.”Como otro ejemplo, se puede demostrar que un programa es ineficaz, pero si es el único programa de este tipo que sirve a una necesidad específica para una población vulnerable, es importante saberlo, ¿no?

¿Y qué?

Conocer bien m/w / s nos permite no solo desentrañar lo que otros entienden por “bueno”, sino que también ayuda a plantear preguntas sobre la comprensión de la calidad, por ejemplo, al diseñar una guía de entrevista o construir preguntas de encuesta.