Diapositiva 1

1
JORNADAS DE DEBATE Y REFLEXIÓN SOBRE LA SITUACIÓN
Y PERSPECTIVAS DE LA INVESTIGACIÓN CONTABLE EN
ESPAÑA
Análisis de Metodologías Cualitativas y
Cuantitativas utilizadas en la Investigación
Contable
Técnicas específicas en la Investigación
Cuantitativa El Meta-análisis
Emma García Meca Universidad Politécnica de
Cartagena
2
Problema de Investigación
Cuáles han sido las preguntas planteadas en
estudios previos? Qué metodologías se han
empleado? Qué resultados se han obtenido hasta
ahora? Cuáles son las conclusiones alcanzadas?
Fiabilidad y Validez de las revisiones?
Búsqueda de revisiones
Percepción problema Forma abordar problema
Rigor y control metodológico
3
Revisiones Tradicionales o narrativas

• El revisor recoge los trabajos que les parecen
  más relevantes, los interpreta, y extrae las
  conclusiones que considera pertinentes. No hay
  normas ni procedimientos preestablecidos.
• Inconvenientes
• Inclusión selectiva de estudios, de forma
  subjetiva y con criterios no explícitos.
• Ausencia de información sobre las variaciones.
• No se analizan las potenciales variables
  moderadoras.
• Inadecuada información sobre las muestras,
  medidas, y estadísticos empleados en los
  estudios.
• Innumerables oportunidades de introducir sesgos.

4
Meta-análisis
Definición Tarea de describir de forma
comprensiva, integrar y analizar, con
procedimientos cuantitativos, los resultados
obtenidos en las investigaciones científicas
realizadas sobre un problema concreto. Objetivo
conocer el estado de la cuestión relativa a un
problema de investigación determinado.
Características
1. Precisión concluye con afirmaciones más
claras y precisas que las revisiones narrativas
2. Objetividad. Se hacen explicitas todas las
reglas y criterios empleados a lo largo de su
desarrollo para evitar sesgos. 3.
Replicabilidad. Con los mismos criterios otro
autor debería llegar esencialmente a las mismas
conclusiones cuantitativas.
5
Algunos Meta-análisis en Ciencias Sociales

• The effect of board composition and size on firm
  performance (Dalton et. al, 1998, SMJ and 1999,
  AMJ).
• The effect of different firm characteristics on
  firm disclosure (Ahmed and Courtis, 1999, BAR).
• The association between CEO pay, firm size and
  performance (Tosi et al., 2000, JMa)
• The relationship between board leadership
  structure and performance (Rhoades et al., 2001,
  CGIR).
• Determinants of export performance (Leonidou et
  al., 2002, JBR)
• The association between ownership structure and
  firm performance (Dalton et al., 2003, AMJ
  Sánchez-Ballesta and García-Meca, 2007, CGIR)
• The relation between slack resources and firm
  performance (Daniel et al., 2004, JBR)
• Factors determining audit fees (Hay et al., 2006,
  CAR)
• The effect of audit committee independence on
  financial reporting quality (Pomeroy and
  Thornton, 2008, EAR).

6
Preguntas clave meta-análisis
Están estas dos variables relacionadas? Cuál
habría sido el resultado de un contraste de
hipótesis utilizando todos los estudios
conjuntamente?
De qué tamaño es el efecto o covariación entre
las variables?
Por qué se observa una variabilidad tan grande
en los resultados de este campo de investigación?
Son los resultados de estos estudios lo
suficientemente heterogéneos como para que esa
dispersión necesite una explicación?
Qué variables permitirían explicar esa excesiva
varianza?
7
El proceso de una revisión Meta-analítica

• Enunciar el problema y establecer hipótesis.
• Establecer un procedimiento de recogida de
  información
• Traducir los resultados a una métrica común.
• Elaboración base datos.
• Análisis de datos.

8
El proceso de una revisión Meta-analítica 1º.
Enunciar el problema e hipótesis
Objetivo estudiar la magnitud y sentido de la
relación entre dos (o más) variables. Definir
variables fundamentales de la investigación
aquellas cuya relación se pretende
estudiar. Variables potencialmente
moderadoras. Hipótesis
9
El proceso de una revisión Meta-analítica Enunci
ar el problema y establecer las hipótesis
The association between Corporate Governance and
Voluntary Disclosure a meta-analysis (García
Meca Sánchez, Conference EAR, 2009).
1) Analyze the effect of different dimensions of
corporate governance mechanisms on disclosure.

• 2) Analyse whether differences in studies are due
  to moderator effects
• the measurement of disclosure (weighted versus
  unweighted indexes)
• the approach used to define some corporate
  governance variables (board independence,
  ownership concentration, and insider ownership)
• the system of corporate governance (Anglo-Saxon,
  Communitarian or Asian system)
• the investor protection rigths.

10
El proceso de una revisión Meta-analítica 2º La
búsqueda y selección de estudios
Necesidad de rigor, claridad y transparencia
Especificar procedimientos de localización de
estudios Hacer explícitos criterios de inclusión
Qué buscar? Criterios de búsqueda de estudios

• Fuentes de información
• Bases de datos empleadas
• Palabras clave elegidas para la búsqueda
• Años de búsqueda
• Revistas científicas rastreadas

Muestra representativa y no sesgada
11
El proceso de una revisión Meta-analítica 2ºLa
búsqueda y selección de estudios

• Problema Incluimos estudios no publicados?
• Sesgo de publicación los investigadores y los
  consejos editoriales de las revistas son más
  propensos a publicar trabajos con resultados
  estadísticamente significativos.
• También existe autocensura por parte de los
  autores.
• Se sobreestima el tamaño del
  efecto.

Revisión exhaustiva Incluir estudios no
publicados Cálculo del nº de seguridad nº de
estudios con un promedio de efectos nulos que
sería necesario para que el resultado global
fuese no significativo
12
El proceso de una revisión Meta-analítica 2ºLa
búsqueda y selección de estudios
Table 1. Study selection
Se suele revisar una muestra lo más amplia de
estudios, y sobre todo, representativa y no
sesgada, de la investigación realizada en el
área en cuestión.
La muestra final debe listarse en una tabla o
incluirlos con asterisco en las referencias.
The association between Corporate Governance and
Voluntary Disclosure a meta-analysis (García
Meca Sánchez, 2009).
13
El proceso de una revisión Meta-analítica 3ºTran
sformación resultados a una métrica común
Síntesis resultados Métrica común Análisis
Tamaño del efecto
Tamaño del efecto (fuerza de asociación) grado
en que un fenómeno está presente en la población.
Indice cuantitativo que resume la magnitud de la
relación encontrada en cada estudio. Los índices
del tamaño del efecto más empleados diferencia
medias estandarizada y correlación de
Pearson. El coeficiente r es obtenido del
artículo o bien mediante las fórmulas de
transformación propuestas por Wolf 1986,
Rosenthal 1991 y Lipsey y Wilson 2001
14
El proceso de una revisión Meta-analítica 4ºElabo
ración base de datos
Resultados primarios contradictorios Búsqueda
variables explicativas
Qué características se deben incluir en una
revisión meta-analítica?

• No hay respuesta única. Las características
  elegidas están basadas en las hipótesis
  explícitas o implícitas sobre los factores que
  pueden ser relevantes en los resultados.

Características sujetos participantes Contexto
cultural Contexto geográfico
Aspectos sustantivos
Diseño investigación Tipo de muestras Medida
variables .
Aspectos metodológicos
Año publicación Tipo publicación Género
investigador .
Aspectos extrínsecos
15
El proceso de una revisión Meta-analítica 4ºElabo
ración base de datos
16
El proceso de una revisión Meta-analítica 4ºElab
oración base de datos
Fuente García Meca Sánchez (2009)
17
El proceso de una revisión Meta-analítica 5ºAnál
isis de datos

• Etapas del análisis de datos
• Calculamos la estimación combinada del tamaño del
  efecto. (Hunter and Schmidt, 1990). Utlizando
  todos los resultados se consigue un valor que
  represente la magnitud del efecto medio a la que
  se refiere la pregunta de partida. Correlación
  media interestudios.
• Contrastamos la homogeneidad de los valores.
  Contrastamos si la variabilidad de los efectos
  calculados es mayor de la esperada por el azar.
  Estimamos si la varianza observada se debe a la
  varianza del error o al influjo de variables
  moderadoras.

Weighted mean correlation coefficient (r
?Niri/ ?Ni)
Total observed variance Sr2 Sampling error
variance Se2
18
El proceso de una revisión Meta-analítica 5ºAnál
isis de datos

• To evaluate if empirical correlations are
  homogeneous
• The 75 rule, according to which if 75 of the
  observed variance across studies can be explained
  by sampling errors, we can conclude that there is
  no true variance in the studies and thus the
  association is unmoderated and homogeneous.
• The Q statistic. It has a chi-square
  distribution, and a significant Q would indicate
  rejection of the null hypothesis of homogeneity.

(c ) Contrastamos modelos explicativos de la
variabilidad. Si el contraste anterior lleva a
rechazar la hipótesis nula de homogeneidad se
procede a dar una explicación, buscando efectos
moderadores. Se agrupan los estudios en función
de alguna característica diferencial y se repiten
los análisis.
19
El proceso de una revisión Meta-analítica Presen
tación de resultados
The association between Corporate Governance and
Voluntary Disclosure a meta-analysis (García
Meca Sánchez, 2009).
Independencia consejo Divulgación voluntaria
Resultados no concluyentes
20
El proceso de una revisión Meta-analítica Presen
tación de resultados
21
Críticas al Meta-análisis

• Se mezclan cosas heterogéneas estudios muy
  heterogéneos entre sí no deberían ser integrados,
  ya que los resultados globales serían poco
  informativos.
• No es necesario hacer un meta-análisis sobre
  este tema Integrar investigaciones previas
  con procedimientos objetivos y transparentes es
  siempre algo deseable.
• Independencia. Medias ponderadas TE.
• Extrapolaciones incorrectas. Para probar
  relaciones causales se deben diseñar
  investigaciones primarias que las contrasten.
• El meta-analista aporta sus propios sesgos en la
  aplicación de criterios.

22
Aportaciones del Meta-análisis

• Las revisiones permiten detectar relaciones que
  no aparecen en estudios primarios y conocer cómo
  se ha desarrollado la investigación hasta el
  momento.
• Permite detectar lagunas o combinaciones de
  factores ausentes, sobre-representaciones de
  características, etc. en un campo de
  investigación.
• Las revisiones meta-analíticas permiten estudiar
  la generabilidad de los resultados de forma
  eficiente.
• No sólo informa acerca de si existe un efecto,
  sino que se cuantifica en un determinado tamaño y
  se construye un intervalo de confianza que
  establece el rango de oscilaciones tolerables en
  torno al valor estimado.
• Carácter científico.

23
Análisis de Metodologías Cualitativas y
Cuantitativas utilizadas en la Investigación
Contable
Técnicas específicas en la Investigación
Cuantitativa El Meta-análisis
Emma García Meca Universidad Politécnica de
Cartagena