Evaluating the impact of private land conservation with synthetic control design

Programs to protect biodiversity on private land are increasingly being used worldwide. To understand the efficacy of such programs, it is important to determine their impact: the difference between the program's outcome and what would have happened without the program. Typically, these programs are evaluated by estimating the average program-level impact, which readily allows comparisons between programs or regions, but masks important heterogeneity in impact across the individual conservation interventions. We used synthetic control design, statistical matching, and time-series data to estimate the impact of individual protected areas over time and combined individual-level impacts to estimate program-level impact with a meta-analytic approach. We applied the method to private protected areas governed by conservation covenants (legally binding on-title agreements to protect biodiversity) in the Goldfields region of Victoria, Australia using woody vegetation cover as our outcome variable. We compared our results with traditional approaches to estimating program-level impact based on a subset of covenants that were the same age. Our results showed an overall program-level impact of a 0.3-0.8% increase in woody vegetation cover per year. However, there was significant heterogeneity in the temporal pattern of impact for individual covenants, ranging from -4 to +7% change in woody vegetation cover per year. Results of our approach were consistent with results based on traditional approaches to estimating program-level impact. Our study provides a transparent and robust workflow to estimate individual and program-level impacts of private protected areas. Evaluacion del impacto del suelo privado de conservacion con diseno de control sinteticoLos programas de proteccion de la biodiversidad en suelo privado se utilizan cada vez mas en todo el mundo. Para entender la eficacia de estos programas, es importante determinar la diferencia entre el resultado del programa y lo que habria ocurrido sin el. Normalmente, estos programas se evaluan estimando el impacto medio a nivel de programa, lo que permite facilmente las comparaciones entre programas o regiones, pero oculta una importante heterogeneidad en el impacto entre las intervenciones individuales de conservacion. Utilizamos un diseno de control sintetico, un emparejamiento estadistico y datos de series temporales para estimar el impacto de las areas protegidas individuales a lo largo del tiempo y combinamos los impactos a nivel individual para estimar el impacto a nivel de programa con un enfoque meta-analitico. Aplicamos el metodo a areas protegidas privadas regidas por acuerdos de conservacion (acuerdos con vinculos juridicos sobre la titularidad para proteger la biodiversidad) destinados a mejorar la cubierta vegetal lenosa en la region de Goldfields de Victoria, Australia. Comparamos nuestros resultados con los metodos tradicionales de estimacion del impacto a nivel de programa basados en un subconjunto de pactos de la misma antiguedad. Nuestros resultados mostraron un impacto global a nivel de programa de un aumento del 0.3-0.8% de la cubierta vegetal lenosa al ano. Sin embargo, hubo una heterogeneidad significativa en el patron temporal del impacto para los pactos individuales, que oscilo entre -4 y +7% de cambio en la cubierta vegetal lenosa por ano. Los resultados de nuestra estrategia fueron consecuentes con los resultados basados en las estrategias tradicionales usadas para estimar el impacto a nivel de programa. Nuestro estudio proporciona un flujo de trabajo transparente y solido para estimar el impacto individual a nivel de programa de las areas protegidas privadas.ResumenEvaluacion del impacto del suelo privado de conservacion con diseno de control sinteticoLos programas de proteccion de la biodiversidad en suelo privado se utilizan cada vez mas en todo el mundo. Para entender la eficacia de estos programas, es importante determinar la diferencia entre el resultado del programa y lo que habria ocurrido sin el. Normalmente, estos programas se evaluan estimando el impacto medio a nivel de programa, lo que permite facilmente las comparaciones entre programas o regiones, pero oculta una importante heterogeneidad en el impacto entre las intervenciones individuales de conservacion. Utilizamos un diseno de control sintetico, un emparejamiento estadistico y datos de series temporales para estimar el impacto de las areas protegidas individuales a lo largo del tiempo y combinamos los impactos a nivel individual para estimar el impacto a nivel de programa con un enfoque meta-analitico. Aplicamos el metodo a areas protegidas privadas regidas por acuerdos de conservacion (acuerdos con vinculos juridicos sobre la titularidad para proteger la biodiversidad) destinados a mejorar la cubierta vegetal lenosa en la region de Goldfields de Victoria, Australia. Comparamos nuestros resultados con los metodos tradicionales de estimacion del impacto a nivel de programa basados en un subconjunto de pactos de la misma antiguedad. Nuestros resultados mostraron un impacto global a nivel de programa de un aumento del 0.3-0.8% de la cubierta vegetal lenosa al ano. Sin embargo, hubo una heterogeneidad significativa en el patron temporal del impacto para los pactos individuales, que oscilo entre -4 y +7% de cambio en la cubierta vegetal lenosa por ano. Los resultados de nuestra estrategia fueron consecuentes con los resultados basados en las estrategias tradicionales usadas para estimar el impacto a nivel de programa. Nuestro estudio proporciona un flujo de trabajo transparente y solido para estimar el impacto individual a nivel de programa de las areas protegidas privadas.Resumen