An impact evaluation of conservation investments targeting long-distance migratory species

Conserv Biol. 2023 Oct 9:e14194. doi: 10.1111/cobi.14194. Online ahead of print.

Abstract

We evaluated the impact of a philanthropic program investing in the conservation of sites along the Pacific Americas Flyway, which spans >16,000 km of coastline and is used by millions of shorebirds. Using a quasi-experimental, mixed methods approach, we estimated what would have happened to shorebird populations at 17 wintering sites without the sustained and additional investment they received. We modeled shorebird populations across the entire flyway and at sites with and without investment. Combining shorebird abundance estimates with a land-cover classification model, we used the synthetic control method to create counterfactuals for shorebird trends at the treatment sites. We found no evidence of an overall effect across three outcome variables. Species- and site-level treatment effects were heterogeneous, with a few cases showing evidence of a positive effect, including a site with a high level of overall investment. Results suggest six shorebirds declined across the entire flyway, including at many Latin American sites. However, the percentage of flyway populations present at the sites remained stable, and the percentage at the treatment sites was higher (i.e., investment sites) than at control sites. Multiple mechanisms behind our results are possible, including that investments have yet to mitigate impacts and negative impacts at other sites are driving declines at the treatment sites. A limitation of our evaluation is the sole focus on shorebird abundance and the lack of data that prohibits the inclusion of other outcome variables. Monitoring infrastructure is now in place to design a more robust and a priori shorebird evaluation framework across the entire flyway. With this framework, it will prove easier to prioritize limited dollars to result in the most positive conservation outcomes.

Evaluación del impacto de la inversión para la conservación enfocada en especies migratorias de largo recorrido Resumen Evaluamos el impacto de un programa filantrópico que invierte en la conservación de sitios a lo largo de la Ruta Migratoria Pacífico-Américas, la cual abarca >16,000 km de la línea costera y millones de aves playeras la usan. Estimamos con una estrategia cuasiexperimental y de métodos mixtos lo que habría pasado con las poblaciones de estas aves en 17 sitios invernales sin la inversión adicional y continua que recibieron. Modelamos estas poblaciones en toda la ruta y en sitios con y sin inversión. Combinamos las estimaciones de aves playeras con el modelo de clasificación de la cobertura del suelo y usamos el método de control sintético para crear contrafactuales para las tendencias de las aves playeras en sitios de tratamiento. No encontramos evidencia alguna de un efecto generalizado en las tres variables de los resultados. Los efectos del tratamiento de especies y de sitio fueron heterogéneos, con unos cuantos casos que mostraron evidencia de un efecto positivo, incluido un sitio con un nivel elevado de inversión general. Los resultados sugieren que seis especies de aves playeras declinaron a lo largo de toda la ruta, incluyendo en varios sitios de América Latina. Sin embargo, el porcentaje de poblaciones de la ruta presentes en los sitios permaneció estable y el porcentaje en los sitios de tratamiento (sitios de inversión) fue más elevado que en los sitios control. Muchos mecanismos son posibles detrás de nuestros resultados, incluidas las inversiones que todavía no han mitigado impactos y los impactos negativos en otros sitios que están causando las declinaciones en los sitios de tratamiento. Una limitación en nuestra evaluación es el enfoque único en la abundancia de aves playeras y la falta de datos que impiden la inclusión de otras variables de los resultados. El monitoreo de la infraestructura ahora está en una posición en la que puede diseñar un marco de evaluación más robusto y a priori de las aves playeras a lo largo de toda la ruta. Con este marco, será más fácil priorizar los dólares limitados para que los resultados de conservación sean lo más positivos posible.

Keywords: Pacific Americas Flyway; Ruta Migratoria del Pacífico-Américas; aves playeras; contrafactual; counterfactual; evaluación de impacto; impact evaluation; método de control sintético; shorebirds; synthetic control method.