Hechos y mitos sobre la Investigación en Políticas PúblicasImplementación: Fuera de la Moda, presuntamente muerto, peroTodavía muy vivo y relevanteHarald SaetrenA pesar de varias décadas de investigación sobre la aplicación de políticas públicas que sorprendentemente poco, no sabemossólo alrededor de los resultados de investigación acumuladas, sino también sobre otros aspectos clave de este campo de investigación.Este artículo trata de enmendar estas deficiencias mediante la presentación de los resultados de una amplia literaturaencuesta. Su principal objetivo es desafiar, revisar y complementar cierta sabiduría convencional acerca deinvestigación implementación. Una segunda motivación es sentar las bases para e iniciar una muy necesariasíntesis de los resultados de investigaciones empíricas. Los principales resultados son los siguientes: El volumen general de publicaciones sobrela aplicación de políticas no se ha estancado o ha disminuido drásticamente desde mediados de la década de 1980 como es comúnmenteaseverado. Por el contrario, ha seguido creciendo de manera exponencial a través de la década de 1990 y en elsiglo veintiuno. Aún más sorprendente es que un gran número de publicaciones se encuentran fueralos campos básicos. Por lo tanto, la literatura es sustancialmente más grande y más multidisciplinar que la mayoría com-comentaristas se dan cuenta. Tesis doctorales son los más ignorados, pero probablemente el más rico, el más grande, ymejor fuente de resultados de investigación empírica. Buscando el origen, así como la ubicación de la disciplinariasy la cuna geográfica de estudios de implementación también debe reajustarse de manera significativa. La etno-sesgo céntrica de este campo de investigación hacia el hemisferio occidental ha sido, y sigue siendo, fuerte y algunossectores políticos se les da mucha más atención que otros. Aunque positivo en muchos aspectos, la pre-carácter multidisciplinar dominante de la investigación puesta en práctica sigue planteando algunos problemas gravescon respecto al desarrollo de la teoría. Por lo tanto, discuto si un resurgimiento del interés en la política en prácticamentación entre los estudiosos de la política ya puede estar ocurriendo. Por último, sugiero que el tiempo es largoatrasados a los esfuerzos para sintetizar los resultados de investigación de una manera científica más rigurosa que tiene hith-erto ha hecho.PALABRAS CLAVE: aplicación de políticas públicas, el estudio bibliométrico, el origen, el tamaño, el desarrollo, la disci-nario estructura, la pertinencia, la agenda de investigaciónIntroducciónLa ciencia debe comenzar con los mitos y con la crítica de los mitos.KARL PopperComo un nuevo campo de investigación continúa creciendo y expandiéndose durante variosdécadas, es importante hacer un balance de lo que ha sucedido y lo que tieneha logrado. Si no es así, el conocimiento y los conocimientos adquiridos serán cada vez más

Página 2560Estudios de Política Journal, 33: 4fragmentada e inaccesible (Cooper & Hedges, 1994; Hunt, 1997). Bastantesrevisión del estado de la técnica en las políticas públicas de investigación implementación han sido publi-cido lo largo de los años (Alexander, 1985; Barrett, 2004; Goggin et al., 1990; Hill, 1997;Hill & Hupe, 2002; Ingram, 1990; deLeon, 1999a; deLeon y deLeon, 2002; Lester yGoggin, 1998; Lester et al., 1987; Linder y Peters, 1987; McLaughlin, 1987; Matland,1995; De mayo de 2003; O'Toole, 1986; 2000; 2004; Palumbo y Calista, 1990; Ryan, 1996;Sabatier, 1986; Schofield, 2001, Schofield y Sausman, 2004; Sinclair, 2001; Invierno,1990; Invierno, 2003; Yin, 1982). Todos ellos han, en su tiempo, señalado importantescontribuciones y deficiencias en la investigación de la aplicación y ofrecen valiosaasesoramiento con respecto a las mejoras.Sin embargo, muy poco se sabe acerca de varias características clave de este tipode la investigación que será explicado más adelante. Otro problema relacionado es quela mayoría de los colaboradores no pueden explicar cómo llegan a sus muchas declaraciones de hecho y deinterpretaciones. Esto no es raro entre los artículos de revisión en ciencias socialesde acuerdo con Jackson (1980, 444), pero se opone a juicios sobre la validez desus afirmaciones y conclusiones. Para las pocas excepciones, consulte O'Toole (1986), Hill yHupe (2002), y Sinclair (2001).Como resultado, una cierta historia sobre la aplicación en la investigación de su origen, disci-fundación nario y el patrón de desarrollo, etc.- se ha vuelto a contar con tanta frecuenciaque ahora se ha institucionalizado en la forma de la sabiduría convencional. Loshistoria ha adquirido esta talla, ya que nunca ha sido cuestionada. Algunos elemento clavementos de esta sabiduría convencional fueron creados por Pressman y Wildavsky (1973),el presunto padres fundadores de este tipo de investigación, en un momento en que era muchomás difícil hacer un seguimiento de las publicaciones de investigación y sus contenidos. Estos fundadorespadres ing hicieron sus reclamaciones de buena fe. Sin embargo, dada la investigación superioresHerramientas y recursos de datos a la mano hoy, ahora hay pocas excusas cuando uno uncrit-camente perpetúa esa cuenta dudosa. Es el momento de dejar las cosas claras!¿Qué partes de la historia institucionalizada sobre la investigación de la aplicación son

correctos y cuáles no? La historia también es incompleta en algunos aspectos. Eso es,hay algunos aspectos importantes de esta investigación a la que nadie ha reclamadoconocimiento. El objetivo principal de este artículo es proporcionar una visión más completa y objetivacuenta acerca de la investigación puesta en práctica al comienzo del nuevo milenio. Estaimplica relatar su origen, la evolución, el desarrollo reciente, tamaño, base disciplinaria,y la estructura interna. Las siguientes dos secciones elaboran aún más las preguntas de investigacióny relacionadas con las metodologías de investigación.Preguntas de investigaciónEl tema más debatido con frecuencia de la década de 1990 ha sido la cuestión del Estadode la investigación puesta en práctica. ¿Es este un campo de investigación en el que el volumen dela investigación ha disminuido en la medida en que necesita revitalización como muchos contemporáneacomentaristas han sugerido (Barrett, 2004; deLeon, 1999, 2002; Lester y Goggin,1998; Schofield, 2001; Schofield y Sausman, 2004; Invierno, 1999, 2003)? Tal vez lase encuentra frente al caso, como otros habían predicho desde el principio de la década anterior(Goggin et al., 1990)?

Page 3Saetren: Hechos y mitos sobre Investigación Implementación561No hay duda de que el volumen de la investigación sobre la aplicación de políticas públicasha crecido sustancialmente desde mediados de 1970, pero exactamente qué tan grande es que a princi-ción del nuevo milenio? ¿Puede esta pregunta se respondió en absoluto, ni siquiera aproximada-madamente? Si es así, ¿cuál es la respuesta?Estudiosos de ciencias políticas y sus colegas en los subcampos del nistración públicanistración y compartir las políticas públicas el concepto sagrado que la aplicación de políticasinvestigación es principalmente su dominio. ¿Tiene esta convicción soportar más cerca examención? Si no es así, ¿cuáles son las otras disciplinas académicas que hacen importante contribuciónciones a la investigación aplicada?El grado de concentración o fragmentación con respecto a la estructura de académicacomunicación es esencial para los esfuerzos de acumulación de conocimiento en cualquier campo deinvestigación (Borgman, 1990). Cuanto mayor es el número de artículos publicados en algunosprincipales revistas más favorable será la condición debe ser para sintetizar queliteratura de investigación, y viceversa. ¿Cómo tarifa de la investigación relativas a su aplicaciónaspecto vital?Se afirma habitualmente que prácticamente ninguna investigación bajo la etiqueta explícita deaplicación (o aplicación) se llevó a cabo antes de la publicación de Prensa-hombre y de Wildavsky libro seminal titulado Implementación en 1973. ¿Es esto realmente cierto?En el mismo sentido se podría suponer razonablemente que ginal investigación aplicacióninated en la costa oeste de la bahía de San Francisco de la Universidad deCalifornia campus de Berkeley, donde Wildavsky era un profesor influyente yinvestigador durante los años 1960 y 1970. ¿Los hechos corroboran esto?¿Qué cuestiones políticas hacen los estudiosos de implementación del estudio y cómo hacer que coincidanlos supuestamente más destacados en nuestras sociedades? Esta cuestión también tiene un geográficadimensión. No hay duda de que la investigación puesta en práctica desde el principio fuepredominantemente una empresa norteamericana. La pregunta aquí es en qué medida elatención se ha desplazado a otras regiones del mundo y sus retos políticos como elcampo de investigación madurado?Otra cuestión clave es la relevancia de la investigación puesta en práctica, y por quése convirtió en moda. Finalmente, uno se pregunta si las llamadas recientes algunos estudiosos de la política "parala reactivación de la investigación puesta en práctica están teniendo algún efecto. Si es así, ¿qué sentidodeben tomar los esfuerzos de investigación, reactivado? Estos, pues, son las principales preguntas de esteartículo pretende responder.Datos y MetodologíaComo la mayoría de los colaboradores de la investigación puesta en práctica han tenido poco que decir acerca de sufuentes de datos y metodologías, me parece que es necesario rectificar esta negligencia. Este estudioha confiado en muchas fuentes de datos y métodos de investigación. No obstante, digitalizada,bases de datos de literatura científica actualmente disponible en la mayoría de las universidades, así como uninstrumento de búsqueda relacionada llamada bibliometría,1demostrado ser el más importante porlejos. Tres bases de datos en particular, el Ampliado Social Science Citation Index, MundoCatálogo, y las Disertaciones Digitales (Disertación Abstracts), se utilizaron porqueque son interdisciplinarios y juntos cubren todos los principales tipos de publicaciones.Contienen grandes cantidades de información, pero de calidad variable.2Aún así, hay

Página 4562Estudios de Política Journal, 33: 4algunas piezas de información relativa a las publicaciones pertinentes que figuran en las bases de datosque no están registrados de forma coherente. Esto se aplica especialmente a: (i) los resúmenes; (Ii)fondo autores (profesional y nacional), si sus publicaciones sonempíricamente orientado o no; (Iii) la metodología de investigación empleada; (Iv) sector de la políticaestudió; y (v) el enfoque regional. Estas deficiencias constituyen la razón principal para lala creación de nuestro propio archivo de datos de la literatura electrónica indexado y recuperables basa enel programa de software Cardbox.Cuestiones conceptuales y prácticos relacionados con búsquedas en la literatura tres Data-bases se discuten en la sección que se ocupa de la cuestión de estimación del tamaño dondeque son de particular relevancia.Resultados de la InvestigaciónEl fallecimiento presunto de Investigación ImplementaciónEn la década de 1990 principios de los eruditos como Goggin et al. (1990, 9) eran bastante optimista acerca deel futuro de la investigación aplicada, la proclamación de interés "es probable que crezca durantela década de 1990 y continúan hasta bien entrado el siglo XXI. De hecho, el campo de públicopolítica en la próxima década es muy probable que se define por el enfoque en ejecuciónción. Los años noventa son probablemente la era de aplicación "(cursivas en el original).Esta visión optimista, sin embargo, perdió terreno durante la última parte de la década de 1990 comoamaneció en un número creciente de estudiosos que podría estar fuera de lugar. Saetren(1996) presentó algunos datos preliminares en el sentido de que un pronunciado y constantedisminución de publicaciones de investigación sobre la aplicación de políticas a partir de 1984 hasta 1995 tuvoocurrió. En aproximadamente el mismo tiempo Hill (1997) y Lester y Goggin (1998)llegado a la misma conclusión. Otros comentaristas en los últimos años también han Var-iamente suscrito a la tesis de la decadencia (Barrett, 2004; Hill & Hupe, 2002; O'Toole,2000, 2004; Schofield, 2001; Schofield y Sausman, 2004; Invierno, 2003). Los hechosla cuestión sería entonces parecen haber sido resuelta de manera justa y en ángulo recto a favor de larechazar la tesis. ¡No exactamente! Resulta que todo lo que podemos ser a la vez a la derecha ymal, dependiendo de cómo calificamos nuestras declaraciones.Si el cuadro total se examina, es decir, todas las publicaciones en forma conjunta (Figura 1), eldatos abrumadoramente refutan la tesis de la decadencia. Aunque las publicaciones alcanzaron su punto máximoy se redujo ligeramente a mediados de la década de 1980, su número había recuperadomucho antes del final de esa década. Por otra parte, la tendencia continuó sin cesar, inclusocreciendo más allá de los niveles anteriores a través de la década de 1990 y en el siglo XXI.Este crecimiento exponencial ha ascendido a la casi duplicación de publicaciones durante elperíodo posterior a 1984 en comparación con el período anterior (Cuadro 1). Aunque la salidade algunas publicaciones aumentado más rápidamente que otros, más de momento ninguno de ellostendencias prestan apoyo a una desaparición o disminución de tesis.Esto constituye una paradoja. ¿Cómo puede ser que tantos estudiosos nos vinimos acreen que el interés por la investigación puesta en práctica había disminuido a un alarmante¿nivel bajo? ¿Cómo fue el crecimiento exponencial de la literatura de investigación informó aquíescapar a nuestra atención? En la siguiente sección, que explora la estructura disciplinaria deinvestigación aplicada, ofrece algunas pistas sobre una respuesta.

Página 5Saetren: Hechos y mitos sobre Investigación Implementación563Exploración de la Fundación de Investigación Disciplinaria ImplementaciónMuchos autores han creído durante mucho tiempo que los estudios sobre la aplicación de políticas sonsobre todo llevado a cabo por aquellos que tienen un interés, ya sea en la ciencia política engeneral, o en la administración pública y la política pública en particular. Esta noción puedeparecen seguir lógicamente del hecho de que una comprensión más fundamental deaplicación como parte integrante del proceso de la política pública debe basarse en yideas puente de estos campos del conocimiento (Invierno, 2003). Esta es también nuestra justi-cación para la definición de las revistas en estos tres subcampos como el núcleo. La pregunta heréticala levantó aquí es: ¿Existe realmente tal núcleo?La implicación de este credo es que debemos esperar una clara mayoría de artí-culos sobre la aplicación de políticas que se publicarán en los diarios principales. La Tabla 2 muestra claramenteque tal no es el caso en absoluto. Los artículos publicados en revistas no esenciales lejos outnum-ber las que aparecen en las revistas principales. Una alternativa y la expectativa más modestose puede derivar de una de las llamadas leyes de la bibliometría, a saber, de Bradfordley. Afirma que las revistas en cualquier campo de la investigación se pueden dividir en tres principales

categorías, cada una con aproximadamente el mismo número de artículos: (i) un núcleo de rel-tivamente pocas revistas en la publicación sujetos aproximadamente un tercio de todos los artí-culos, definidos como el núcleo; (Ii) otro grupo que consta de muchos más revistas queproduce aproximadamente el mismo número de artículos, denominado casi núcleo; y(Iii) una categoría aún más distante de un aún mayor número de revistas de la verdadTabla 1. Publicaciones por tipo y dos períodos de tiempoTipo de publicación1933-19841985-2003TotalArtículos109424293523Libros y capítulos3236821005Tesis doctorales109116822773Total249848037301Nota: Los valores absolutos se utilizan para los datos presentados en esta tabla.05010015020025NúmeroAño0300350400193319381943194819531958196319681973197819831988199319

982003ArtículoLibrosCapítulosTesis doctoralesTotalFigura 1. Las publicaciones sobre la aplicación de políticas por tipo y año.

Page 6564Estudios de Política Journal, 33: 4noncore-que representa el último tercio de los artículos (Potter, 1988). Para probar esta tesisDividí todas las revistas registradas en una base de datos en estas mismas categorías.3Los datos (Tabla 2), incluso repudian esta expectativa moderada de la ley de Bradford.Sólo en 1980 (Tabla 3) hizo que se acercan a la consecución de la predicción de la ley, ya que el 30 por cientode todos los artículos publicados ese año se publicaron en revistas realmente fundamentales. Es,sin embargo, claramente una excepción a la regla general. Sólo el 13 por ciento de toda la implementaciónartículos tación entre 1942 y 2003 se publicaron en revistas centrales. Otro 14ciento apareció en la categoría cerca de núcleos. Tesis doctorales revelan un parecidopatrón (no se muestra en la Tabla 2) como aproximadamente 15 por ciento de todos están clasificados comopertenecientes a los campos básicos de la ciencia política o la administración pública. Esto significaque aproximadamente se encuentran las tres cuartas partes o más de estos dos tipos de publicaciónfuera del núcleo.¿Qué disciplinas académicas, a continuación, constituyen el grupo no esenciales? Resulta queeducación y salud diarios cada uno representan el 15 por ciento de todos los artí- aplicaciónCiclos (Tabla 2). Revistas dedicadas a la ley, la economía y el medio ambiente también son impor-tante, ya que representan en forma conjunta para otro 14 por ciento. Las cifras profesión educaciónmucho más prominente entre las tesis doctorales, como cerca de dos tercios tienenesta afiliación. Estos datos avalan el carácter multidisciplinar pronunciada deinvestigación sobre la aplicación de la política pública y una contribución sorprendentemente modestode los estudiosos de los campos principales. También ayudan a explicar por qué tantos de nosotros tenemossido ajeno al rápido y continuo crecimiento de la investigación durante la ejecuciónla década de 1990: se sucedieron de manera desproporcionada en otros ámbitos académicos y en una bewil-Dering gama de diferentes y en gran medida periféricos revistas (ver Tabla 4) a la queno podía prestar mucha atención, incluso si así lo desea. Hay, en otras palabras, la buenaexcusas por nuestra ignorancia anterior.Incluso mirando las principales revistas, la noción disminución no puede ser sostenida. Losvolumen de artículos en estas revistas hizo pico a mediados de la década de 1980 y, posteriormente,estabilizado en un nivel algo inferior (Figura 2). Sería, sin embargo, ser más bien FAR-exagerado afirmar, como hacen algunos, que todo el campo de la investigación ha desaparecido prácticamente.De hecho, el número de artículos en revistas centrales casi se duplicó durante el período comprendido entre1985 en comparación con el período anterior. ¿Por qué entonces es la noción de la desaparición deinvestigación tan frecuente a pesar de los hechos que sugieren claramente la contraria implementación?Tabla 2. Los artículos por tipo de periodos de revistas y horaTipo de revista1948-19841985-2003TotalNúcleo15% (159)12% (295)13% (454)Cerca del núcleo9% (97)16% (379)14% (476)No Subyacente76% (838)72% (1755)73% (2593)Total100% (1094)100% (2429)

100% (3523)No subyacente se especifica:Salud12% (126)16% (384)15% (510)Educación17% (178)14% (330)15% (508)Ley12% (131)5% (131)7% (262)Ambiente4% (41)6% (144)5% (185)Ciencias económicas3% (31)3% (74)3% (105)Otros no básicos29% (331)28% (692)29% (1023)Nota: Los valores absolutos están entre paréntesis.

Página 7Saetren: Hechos y mitos sobre Investigación Implementación565Tabla 3. Varios MEDIDAS La fragmentación de la Comunicación Científica en el Diario Literatura enAplicación de Políticas Públicas para los años seleccionados1970197519801985199019952000Número de artículos en revistas centrales163020121716Número de diferentes revistas centrales en151410101314que se publicaronRevistas a artículos proporción en el núcleo1: 183%47%50%83%77%88%categoría

Número de artículos en noncore2231706786117137revistasNúmero de diferente noncore2227646078110120revistas en las que se encontrabanpublicadoRevistas a artículos en relación noncore1: 187%91%90%91%94%88%categoríaPorcentaje de todos los artículos de núcleo4%16%30%23%12%13%11%revistas050100150NúmeroAño20025030019331939194419491954195919641969197419791984198919941999NúcleoNo esencialesFigura 2. Los artículos sobre Aplicación de Políticas Publicado en Core y no esenciales RevistasAño de publicación.Tabla 4. Artículos sobre Implementación de Políticas Públicas en Core Journals por tipo de Diarioy Período de tiempo

1953-19791980-19841985-19891990-19941995-19992000-03TotalCiencias Políticas22% (12)17% (18)17% (18)20% (12)21% (16)23% (13)20% (89)Política pública46% (25)65% (68)48% (50)44% (26)38% (29)32% (18)47% (216)Administración pública32% (17)18% (19)35% (37)36% (21)41% (31)45% (25)33% (150)(N) = 100%(54)(105)(105)(59)(76)(56)(454)Nota: Los valores absolutos están entre paréntesis.

Página 8566Estudios de Política Journal, 33: 4La paradoja también debe ser explicado por el hecho sorprendente de que la implementacióninvestigación, a pesar de su capacidad de recuperación en términos cuantitativos, pasó de moda entre la políticaeruditos después de un período de pico relativamente corto que duró sólo a través de la primera mitadla década de 1980. Es sintomático que el último simposio sobre la aplicación de políticasinvestigación fue publicada en Estudios de Política revisión a finales de 1980.4Incluso más fuerte yun apoyo más convincente de esta interpretación es proporcionada por los datos sobre el númerode reseñas de libros sobre la aplicación de políticas en revistas incluidas en el Science SocialCitation Index. Cincuenta y cinco por ciento de todas las reseñas de libros (Tabla 5) apareció durante elperíodo relativamente corto 1980-85 y sólo el 16 por ciento después de la fecha de 1990. Tenemosya se ha visto cómo el interés decreciente en los estudios de implementación de todo elmediados de 1980 coincidió con un estancamiento temporal y caída en la producción de publicaciones.Más interesante aún, el hecho de que el volumen de la publicación volvió a los niveles anterioreshacia el final de la década de 1980 y ha continuado desde entonces a ritmo desenfrenado incluso unnivel más alto no significa que la investigación puesta en práctica se había convertido una vez másmoda entre los estudiosos de la política.Por lo tanto, Goggin et al. (1990) fueron simultáneamente tanto bien y el mal. Cióninvestigación mentación continuó creciendo a medida que predijeron durante la década de 1990 y enel siglo XXI. El campo de la política pública en el mismo período, sin embargo,no ha sido definido por su enfoque en la aplicación. Por el contrario, incluso líderlos estudiosos de la política llegaron a considerar enfoque de implementación como un "callejón sin salida" intelectual

y ha dirigido su atención hacia otros temas, como el cambio de política, la política de redobras o la gobernanza. De hecho, los estudios de implementación se hizo tan fuera de moda queincluso aquellos que todavía consideraba importante erróneamente pensaron que tenían esen-cialmente desapareció. Esta noción errónea fue exacerbada por un disciplinaria miopeconcepción del campo de la investigación.Afortunadamente, como ya he señalado, el interés por los estudios de implementación de políticasha sido profundo y generalizado lo suficiente como para desafiar los límites disciplinarios estrechos.Por lo tanto, su destino ha sido aislado del impacto de las tendencias de la moda caprichosa entreacadémicos en cualquier campo académico en particular, como la ciencia política.La Estructura de la Comunicación de estudianteEl análisis anterior sugiere que la estructura de la comunicación académicaen la ejecución de la investigación es bastante fragmentada. Para corroborar esto tenemos que tomaruna mirada más cercana a la relación de los artículos para el número de diferentes revistas en las quese publicaron (relación de fragmentación). Nuestros resultados (Tabla 3) prestan un fuerte apoyo ala hipótesis de la fragmentación. En el supuesto infancia de estudios de implementación en1970, los 23 artículos fueron publicados en un número igualmente diferente de las revistas (es decir,Tabla 5. Comentarios de Libros con la aplicación de políticas como la Palabra Clave en Social Science CitationRevistas Índice por período de tiempoPeríodo de tiempo1972-19791980-19851986-19901991-19951996-19992000-03TotalReseñas de libros7% (6)55% (48)23% (20)8% (7)2% (2)sesenta y cinco)101% (88)Nota: Los valores absolutos están entre paréntesis.

Page 9Saetren: Hechos y mitos sobre Investigación Implementación567un patrón publicación perfectamente fragmentado). Sólo un artículo fue publicado en un núcleorevista. Lo más cerca que llegaron al patrón opuesto, y que implicaba por Bradford deley, fue en 1980 cuando uno (núcleo) revista (Policy Studies Journal) representó el 18por ciento de todos los artículos publicados ese año. Sin embargo, incluso en ese año, elcien artículos publicados aparecieron en 78 revistas diferentes; 14 de los cuales eran deel tipo de núcleo. Este patrón publicación fragmentada, obviamente, plantea grandes desafíospara cualquier esfuerzo en la acumulación de conocimiento sistemático.Una mirada más cercana en el CoreEl núcleo se compone de cerca de 60 revistas diferentes que publicaron colectivamente 454artículos de aplicación durante un período de tiempo de 60 años (véase el Apéndice 1). Aproximadamentemedio de estos artículos se publicaron en revistas de política pública, un tercio en públicorevistas administración, y una quinta en las revistas de ciencia política (Tabla 4). Es nota-digno de que la posición de la administración pública revistas relativa a las revistas de políticase ha invertido durante el 1990 en comparación con el anterior. Este patrón parece reflejarun creciente interés en la investigación de aplicación entre los editores y colaboradoresrevistas de la administración pública durante la década de 1990. La aparición de la Revista deInvestigación de la Administración Pública y la Teoría a finales de 1980 no es más que uno de varios indi-cadores de esta tendencia. La fracción relativamente modesto pero estable de artículos publicadosen revistas de ciencia política también es digno de notar.Dos política journals- -publicado Política Revista de Estudios y Políticas Estudios de la opiniónla mayor parte de los artículos básicos seguido de la Revisión de la Administración Pública. Estastres revistas solo publican el 30 por ciento del total. En el otro extremo de la SPEC-trum tenemos la prestigiosa American Political Science Review, con sólo tres artí-culos, ninguno de los cuales se citan con frecuencia.El crecimiento explosivo de la investigación documentada aplicación, incluso en los últimosaño, invita a la intrigante pregunta de cuál podría ser su tamaño actual. El próximosección intenta proporcionar una respuesta aproximada.

¿Cuál es el tamaño de la Literatura Implementación?Pocos, si alguno, han siempre han hecho esfuerzos serios para estimar el volumen total dela investigación sobre la aplicación de políticas públicas, y por una buena razón: es un muy la demandaING y difícil tarea. Algunos incluso han llegado a la conclusión de que es un esfuerzo inútil (Hill &Hupe, 2002). A esto habría que contrarrestar incluso tener sólo una estimación aproximadamate es mejor que no tener ninguna pista en absoluto. Además, como otros han señalado,saber algo acerca de la escala del universo total de publicaciones en cualquieraárea de investigación es un requisito previo, así como el punto de partida para toda sintetiza graveesfuerzos de tamaño (Cooper & Hedges, 1994).Parece que hay sólo tres intentos anteriores para evaluar el volumen de investigaciónsobre la aplicación de políticas públicas (Hill & Hupe, 2002; O'Toole, 1986; Sinclair, 2001).Ellos fueron, sin embargo, en lo que podemos determinar, limitado a un tipo particular depublicación y periodo de tiempo. No conozco ningún intento sistemático para documentar lavolumen de varios tipos de publicación en un período de tiempo prolongado.

Página 10568Estudios de Política Journal, 33: 4El universo de cualquier literatura de investigación se encuentra en un espacio tridimensional.En primer lugar, ¿qué conceptos son más apropiados para identificar la literatura relevante? En segundo lugar,qué tipos de publicaciones se han buscado con las palabras clave elegidas? En tercer lugar, lo que esel plazo para tales búsquedas? En este estudio, la implementación como título la palabra fue elopción preferida desde Pressman y Wildavsky eran tan decisivo en populariz-ing el uso de este término en relación con los estudios de la ejecución de políticas.5Aunque esteelección puede ser impugnada,6se justifica de la siguiente manera. , La ejecución del primer período,ayuda a establecer un cuerpo bien definido de la literatura que se puede recuperar por otrosy se somete a la replicación y el examen crítico. En segundo lugar, creo que es razonablecapaz de asumir, como lo han hecho otros antes que yo (Sinclair, 2001, 81), que los quequiere hacer una contribución a la comprensión de la aplicación de políticasson más propensos a la utilización de cualquiera de aplicación o la aplicación de como palabras del título queaquellos que no comparten este objetivo. El último grupo es obviamente más periférica anuestra empresa mapeo que el primero.Publicaciones varían de artículos de revistas, libros, capítulos de libros, tesis doctorales,informes, a los trabajos de investigación para nombrar los más comunes en la literatura de referencia.Elegimos a centrarse principalmente en los primeros cuatro mencionados anteriormente. El marco de tiempo eraextendido tan lejos como las bases de datos permitidos. Encontré aproximadamente 7.300 Inglés caciónpublica- utilizando implementación o ejecución como una palabra del título, después de eliminarlos más obviamente irrelevante para nuestro análisis.7La Tabla 1 muestra la distribuciónción por tipos de publicación: 548 libros, 432 capítulos de libros, artículos de revistas, 3.523 y2.773 tesis doctorales.8Lo más sorprendente en este sentido fue la grannúmero de tesis doctorales, tanto en términos absolutos como en relación con los dosotros tipos de publicaciones. Son, evidentemente, un inexplorado y sin explotar, ricofuente para futuros esfuerzos para sintetizar los resultados de investigación.Para concluir, es imposible determinar con mucha precisión el verdadero tamaño depublicaciones de investigación sobre la aplicación de políticas. Cualquier estimación del tamaño críticodepende de una serie de pasos y llamadas de juicio relacionados tomada por el investigadordurante los procedimientos de búsqueda.9En ese sentido, sigue siendo un ideal utópico difícil de alcanzar.No obstante, creo que nuestra base de datos es lo suficientemente grande como para asegurar razonablemente aproxi-representación imate de la literatura implementación de la política en su conjunto. Ahora estiempo para girar a la cuestión del origen de este universo difícil de alcanzar.Cuando se inició la Investigación Implementación?El tópico de que Pressman y Wildavsky (1973) fueron pioneros en el uso más explícitode aplicación como un término clave fue en gran parte creado por los autores símismos en un capítulo posdata, Apéndice 2, titulado "El uso de" Aplicación "en SocialCiencia Literatura ":No es (o debe ser) una amplia literatura sobre la implementación de la

ciencias o sociales por lo que se les ha dicho por numerosas personas. Ninguno de ellospuede llegar a citas específicas a esta literatura, pero están seguros de quedebe existir ". . . . "Tiene que estar ahí, debe estar allí, pero en realidad no lo es". . . "¿Cómo vamos a convencer a los demás de que es inútil buscar una literaturaque no existe? . . . (. P 166)

Página 11Saetren: Hechos y mitos sobre Investigación Implementación569Desde entonces se ha señalado que muchos estudiosos anteriores habían estudiado la ciónmentación de las políticas que utilizan otras etiquetas. Pocos, sin embargo, han desafiado la nociónPressman y Wildavsky que fueron los primeros estudiosos de utilizar la aplicación como unatérmino la investigación analítica explícita. Ellos hicieron su reclamo de buena fe sobre la base de limitadarecursos bibliotecarios disponibles en ese momento. Mis datos demuestran claramente que la reclamaciónpor Pressman y Wildavsky es muy exagerada. Un número considerable de libros,artículos de revistas y tesis doctorales que utilizan la implementación o ejecución comotítulo palabra se remonta a, por lo menos mediados de 1950 e incluso antes (ver Figura 1).Los estudiantes de doctorado son los pioneros de la investigación puesta en práctica! Los primeros dosdisertaciones que han registrado la fecha de nuevo a principios de 1930 (Charlesworth, 1933) y1940 (Laatsch, 1942). Eran los científicos políticos y sus disertaciones se centraronen la política internacional. Ni característica, sin embargo, eran típicos de la primera ola deestudios de implementación. Los siguientes disertaciones por Manwell (1947) y Little (1948)son más típico con sus antecedentes en la profesión de la educación y empíricocentrarse en las instituciones educativas. Antes de 1970 el número de tesis doctoralesen la implementación de políticas habían alcanzado más de un centenar.Los dos primeros libros (Loughery, 1952 y Turton, 1955) abordan implementaciónaspectos ción de la ley de educación de Estados Unidos y la Constitución de Estados Unidos, respectivamente.Cinco años más tarde, otro libro apareció y luego otro 19 otra antes de 1970. Elprimer artículo publicado en un diario de la ley a finales de 1940 (Briggs, 1948) aborda en prácticamentación de una cuestión política que es igualmente relevante hoy en día: los derechos humanos internacionaleslegislación. Antes de 1970 otros 134 artículos habían sido publicados.También es importante tener en cuenta que el "despegue" en términos de volumen de la publicaciónno comenzará con la publicación del libro Pressman y Wildavsky de, como escomúnmente asumido. Más bien, se comenzó por lo menos 10 años antes. Del mismo modo, los datos de midesafiar la noción común de que el enfoque en la implementación de la política eraprovocada por los estudios de evaluación primeros a mediados de los años 1960 de la reforma social de Américaprogramas. Esos acontecimientos probablemente ayudados impulso al nuevo género de investigación, perono eran el punto de partida. Para resumir esto, por el momento era Implementaciónpublicado en 1973, cerca de treinta libros y más de doscientos artículos de revistas ytesis doctorales respectivamente que emplean la aplicación o la ejecución comouna palabra del título había sido publicado o defendido!Una palabra de precaución puede estar en orden aquí. Todavía no he podido investigarde cerca el uso real del concepto de aplicación en estas primeras publicaciones.Sin embargo, supongo que no se utiliza casual o accidental en la mayor parte de ellos, par-No ticularmente con respecto a tesis doctorales.¿Dónde se originó Investigación Implementación?Después de haber establecido que los estudiantes de doctorado fueron pioneros en el estudio de la políticaimplementación, me parece lógico utilizar la ubicación del mayor grado-concesióninstituciones educativas como un indicador principal de que este tipo de investigación originalesnado. Cerca de la mitad de las tesis doctorales en este campo antes de 1970 puede atribuirsea las universidades estadounidenses en el noreste y poco menos del 40 por ciento pertenecíaa los de la región del Medio Oeste. Por último, las universidades de la costa oeste y en elSur representó menos del 10 por ciento, respectivamente. He encontrado sólo tres de doctorado

Página 12570Estudios de Política Journal, 33: 4tesis de la Universidad de Stanford y dos de la Universidad de California enBerkeley durante este período. Influencia indiscutible de Wildavsky en desarrollo más tardeción de este campo de investigación no es perceptible en esta primera etapa en mis datos mientras que el poderde esperar.En la costa este, la Universidad de Harvard ocupa un lugar destacado con 19 por ciento detodas las disertaciones producidas en este período, y si incluimos el resto de la Ivy Leagueuniversidades su parte constituyen el 27 por ciento. En la región del Medio Oeste hay un con-centración de tesis doctorales en las universidades ubicadas en Chicago, Illinois, en

Michigan y en Wisconsin.Sólo el 15 por ciento de las tesis doctorales antes de 1970 están clasificados como pertenecientesción a la ciencia política o la administración pública. Por lo tanto, puede concluirse queel enfoque de implementación de las políticas públicas no se originó en la ciencia políticadepartamentos. El enfoque predominante en un sector de la política en particular- la educación ,que representa el 65 por ciento del total, fuertemente sugiere que las "parteras"de la investigación pronta aplicación se encuentra en las escuelas de posgrado o departamentos dela educación . También lo hace también el hecho de que los relativamente pocos estudiantes de doctorado con un polit-formación en ciencias ical de este período, con pocas excepciones, estudió otra políticasectores, aparte de la educación.¿Qué cuestiones de política suelen ser estudiado?Hill y Hupe (2002, 201-204) investigaron qué aplicación cuestiones de políticaestudiosos estudio realizado por escrutar los artículos publicados en el núcleo más importante dismonales durante la década de 1990. Sus resultados coinciden estrechamente mía. Me encontré con que implementaciónestudiosos ción pagan consistentemente mayor atención a las siguientes cinco cuestiones de política:educación , salud , medio ambiente , sociales , y económicas temas (Tabla 6) .Hay, sin embargo, considerable variación entre tipos de publicación conrespecto a su enfoque en relación a cada uno de estos cinco sectores políticos. Disser- Doctoradotaciones destacan, como cerca de dos tercios de éstos traten de temas educativos. Ya estáno es mucha variación en esta fracción en el tiempo. El sesgo hacia un particularsector de la política es mucho menor en los libros, capítulos y artículos de revistas. Artículos en núcleorevistas se centran más en las cuestiones ambientales y sociales (como Hill y Hupe tambiénencontrado), mientras que los publicados en revistas no centrales están más preocupados con educacióncuestiones educati- y de salud. Estos patrones parecen indicar que los politólogostener una agenda de investigación más amplio que otras profesiones en términos de enfoque sectorial.Haciendo caso omiso de doctorado tesis, donde hay poca variación en el tiempo-atención a la salud y el medio ambiente cuestiones después de 1984 ha aumentado en comparación conel período anterior (Tablas 2a y 2h en el Apéndice 2). La tendencia al comienzo de estasiglo es que los problemas de salud están rivalizando o incluso superando ligeramente los de educaciónción . La inmensa mayoría de los sectores y temas estudiados son doméstica . Estudiossobre la política exterior son notoriamente poco frecuente (1-2 por ciento de todas las publicaciones), con laexcepción de las primeras obras. Otra tendencia hacia el final de la anteriorsiglo es que algunas cuestiones de política que inicialmente tenían un enfoque interno, por ejemplo,medio ambiente y los derechos civiles o humanos, se han desplazado hacia una más internacionaly mundial foco.

Página 13Saetren: Hechos y mitos sobre Investigación Implementación571Tabla 6. Publicaciones por tipo de publicación y Política del Sector FocusSector de PolíticaArtículosLibros y capítulosDisertaciones de doctoradoTotalEducación23%22%63%38%Salud24%9%7%15%Ambiente12%14%4%9%Social8%9%7%8%Económico

8%15%4%8%Derechos civiles / Humanos4%6%0%3%Justicia penal2%2%2%2%La reforma administrativa4%4%1%3%Agricultura / Silvicultura / Pesca3%4%2%3%Energía2%1%0%1%Mano de obra2%3%1%2%/ Militar / Defensa Extranjera1%2%1%1%(N) = porcentaje de embasarse(3523)(1005)(2773)(7301)Tabla 7. Publicaciones por tipo y región del Focus o OrigenRegiónArtículosLibros y capítulosDisertaciones de doctoradoTotalEstados Unidos / Canadá61%50%87%69%America latina2%2%3%2%Europa21%32%2%15%África

4%4%3%4%Asia / Oriente Medio9%10%5%7%Oceanía3%2%1%2%Tercer Mundo1%3%0%1%Internacional / Global4%8%0%3%Total:105%111%101%103%(N) = porcentaje de embasarse(3523)(1005)(2773)(7301)En resumen, hay un sesgo claro en temas de investigación entre los estudiosos aplicaciónArs hacia unos sectores políticos. Aún así, me resulta difícil llegar a la conclusión de que estas cuestiones ylos desafíos que se presentan no se encuentran entre los más sobresalientes en ciedad contemporáneaeties. ¿En qué medida esto refleja un sesgo regional en investigación aplicación seráaclarado siguiente.El sesgo etnocéntrico en Estudios de implementaciónEl sesgo regional general de la investigación puesta en práctica es bastante fuerte (Tabla 7).Cerca de tres de cada cuatro publicaciones tienen ya sea un estadounidense / canadienseautor o un enfoque empírico de América del Norte. Si Europa se incluye, entonces el occidentalcuentas del hemisferio para cerca del 90 por ciento de todas las publicaciones. El patrón es a unaen gran medida influenciado por el enfoque etnocéntrico abrumadoramente en doctoradodisertaciones (87 por ciento) de origen estadounidense predominantemente del Norte. Incluso entre losotros tipos de publicaciones, más de la mitad se originan o se centran en la América del Nortecontinente. El sesgo etnocéntrico es más pronunciada en los artículos que en los libros.La buena noticia es que el enfoque regional de estudios de implementación tieneampliado desde mediados de la década de 1980, aunque en su mayoría a favor de Europa. Entre el

Página 14572Estudios de Política Journal, 33: 4otras regiones, Asia se estudia aproximadamente dos veces más a menudo como África y América Latina yOceanía aparecen como los continentes más desatendidas.Algunos estudiosos de implementación temprana (Smith, 1973) pensaban aplicaciónproblemas eran principalmente un fenómeno del tercer mundo mientras que otros como Pressmany Wildavsky (1973) demostró su carácter endémico en más desarrolladopaíses también. Con pocas excepciones (por ejemplo, Brinkerhoff, 1996; Cheema y Rondinelli,1983; Grindle, 1980; Grindle y Thomas, 1990; Lazin, 1999), la comunidad deinvestigadores de implementación parece haber seguido el ejemplo proporcionado por Pressmany Wildavsky.¿Por qué los estudios de implementación pasado de moda?Hay por lo menos seis factores que pueden haber contribuido a la disminución del interésen la investigación de aplicación entre los estudiosos de la política. En primer lugar está la prolongada y estéril

debatir acerca de los paradigmas analíticos dos competidoras etiquetados de arriba hacia abajo frentede abajo hacia arriba , que dominó el campo de la investigación a través de la mayor parte de la década de 1980. Ha sido undebate confuso en cómo los aspectos normativos, metodológicos y teóricos erancasi a la perfección y indistinguible entrelazados. Sospecho que esta arraigaday el debate prolongado frustrado muchos eruditos en la medida en que salieron delempresa de investigación conjunto. En segundo lugar, las relaciones Estado-sociedad en muchos industrializadosnaciones han cambiado durante las últimas décadas de unilateral y jerárquicaa otros más recíprocas y menos jerárquicas. Esto se ha relacionado con un cambio enla filosofía política de los gobiernos de la década de 1980 más notablemente encarnabaen los nuevos programas de la política radical de Reagan en los Estados Unidos y Margaret Thatcher enel Reino Unido. La defensa de la retirada a gran escala de inter- gubernamentalintervención en la economía y una mayor dependencia de los instrumentos de política basados en el mercado erauna piedra angular en estos programas. Estos eventos, por supuesto, no escaparon de la notificaciónde los estudiosos de la política que cada vez más comenzó a sustituir el gobierno de términos yaplicación con los de las redes de gobernanza y de políticas con el fin de mejordescribir nuevas realidades., Muchos estudios de tercer implementación temprana tenían un sesgo fallo pronunciado. Influenciaautores ciales, como Pressman y Wildavsky (1973), aunque la teoría de probabilidad usadospara demostrar que las posibilidades de cualquier programa gubernamental para tener éxito eran de hechoDelgado. Su conclusión más tarde se disputó y demostró ser demasiado pesimistadebido a algunas suposiciones dudosas en los cálculos (Bowen, 1982). Sin embargo,la noción de falla asociada con la investigación puesta en práctica quedó. Se ganó el sobrenombrenombrar "la investigación miseria" (Rothstein, 1988). Este panorama sombrío de la suerte de públicola formulación de políticas en general impulsado la crítica más conservadora de pro reforma socialgramos en los Estados Unidos en la década de 1980. Ellos fueron percibidos cada vez más como inútily una pérdida de dinero, socavando así su respaldo político en general(Murray, 1984). Así, los estudios de aplicación, al ser secuestrados para determinada Lo idealfines meto-, sin saberlo, también contribuyeron a deslegitimar a sí mismos como unagénero de investigación.En cuarto lugar, los propios estudiosos de política comenzaron a expresar dudas sobre la medida enque el proceso político se podría perfectamente segmentado en etapas discretas que pro-secuencialmente progresado de establecimiento de la agenda, a través de la adopción, implementación y

Página 15Saetren: Hechos y mitos sobre Investigación Implementación573fases de política posterior (Jenkins-Smith & Sabatier, 1993; John, 1998; Nakamura,1987; Sabatier, 1988, 1999). La metáfora etapas fue acusado de simplificar ypor tanto, también tergiversar un proceso político más complejo y recursiva. Aunqueun tanto exagerado, a veces la crítica al menos nos ha recordado lo Prensa-hombre y Wildavsky destacaron en su libro seminal: que la aplicación no puedefructíferamente ser estudiado y entendido como una actividad política discreta. A pesar deintención que puede también, en general, han contribuido más a la deslegitimación deestudios de implementación.En quinto lugar, es más fácil de escribir algo que se publicó en la primera etapa de unnuevo género de investigación que muchos años más tarde al decir algo nuevo y originalmentenal se convierte en mucho más difícil. Para el ambicioso, autor prolífico que luego puede ser másconveniente para pasar a un nuevo tema de investigación emergentes. Por último, pero no menos importanteimportantes, los estudiosos de la política son probablemente susceptibles a las tendencias de moda en la ciencia yla sociedad con respecto a sus programas de investigación. La implicación de los dos últimos factoreses que pocos, si alguno, tema, incluyendo la investigación de políticas implementación podránmantener la atención de los estudiosos de la política 'durante un periodo prolongado de tiempo. Estos factores son,por supuesto, no se excluyen mutuamente. Trabajando juntos se puede proporcionar una plausiblesexplicación de la disminución del interés en el ámbito de la política con respecto a hacer en prácticainvestigación mentación.Son estudios de implementación Todavía relevante?La situación actual en este campo de la investigación sugiere que la relevanciapregunta no es retórica a la comunidad más amplia de investigadores de política. Por lo tanto, laargumentos de relevancia deben ser establecidos. En primer lugar, y como otros (por ejemplo, Hill & Hupe,2002, 111) han señalado recientemente, no hay nada en el cambio de estado-sociedadinterfaz hacia redes más cooperativos y negociados que se opone a unaperspectiva de implementación. Por el contrario, teniendo en cuenta estas nuevas características sistémicas,todavía existen gobiernos representativos cuya traducción de las políticas a la práctica,incluso en algún sentido más amplio, es un reto y una preocupación legítima. La multitudde informes sobre cuestiones de aplicación producidos por los gobiernos y diversas inter-agencias nacionales cada año dan fe de su carácter endémico. La evolución hacia

estructuras de gobierno supranacionales como la Unión Europea o internacionalacuerdos y convenciones sobre muchos temas de política destacada también suelen plantean lucrodesafíos de implementación midable. En segundo lugar, la crítica relativa sesgo haciacasos de fracaso es probablemente hoy menos relevante de lo que era (O'Toole, 2000). Tercera,aunque cierta cautela sobre el uso de la metáfora etapas se justifica, que, al igual quealgunos otros (por ejemplo, Deleon, 1999), encuentran su desestimación total Sabatier y otrosinjustificada y, por tanto, equivocada.10En cuarto lugar, no estamos ni siquiera cerca de un biendesarrollado la teoría de la implementación de la política, a pesar de que varios comentaristas tienenseñalado, se han logrado algunos avances (por ejemplo, O'Toole, 2000; Invierno, 2003). En estorespetar es lamentable que los estudiosos de la política han perdido el interés en la investigación de unfenómeno para el que están teóricamente mejor equipada que cualquier otro grupode los estudiosos. Este hecho confiere tanto la primacía analítica y responsabilidad especiala los estudiosos de la política con respecto a encabezar la teorización sobre la políticaimplementación.

Página 16574Estudios de Política Journal, 33: 4En resumen, no hay escasez de problemas de aplicación con independencia de la formay el nivel de las estructuras de gobierno. Por otra parte, la necesidad de entenderlos mástotalmente no menos de la demanda es hoy que durante la primera mitad de la década de 1980. El muyla capacidad de recuperación de este tipo de campo de la investigación, a pesar de las modas de moda en los estudios de políticacampo, da fe de la importancia perdurable de los fenómenos de aplicación en todos losesferas de la sociedad humana.Es la hora de Revival ya aquí?Cómo inminente es un renacimiento de la investigación aplicada en los estudios de política? Es estosólo una ilusión o es que tal vez ya se lleva a cabo? Hay algunos indicadorciones que un resurgimiento del interés en la aplicación de políticas como una analítica yconcepto teórico ya puede estar ocurriendo. Comenzó con de Hill (1997) retóricopregunta sobre si la teoría de la implementación fue la edición de ayer siguióLester y de Goggin (1998) motivo peculiar a sus colegas en Corrientes Política tituló"Volver al Futuro:. El redescubrimiento de Estudios de implementación" Estas iniciativasdiversas respuestas inmediatas disparadas de otros estudiosos de política (Kettunen, 2000;deLeon, 1999b; Lester, 2000; Meier, 1999; Potoski, 2001; Schneider, 1999) para ser guienteguido por reflexiones más amplias sobre el tema (deLeon, 1999b;deLeon y deLeon, 2002; Lester, 2000; O'Toole, 2000; Schofield, 2001; Sinclair, 2001).El hecho de que la Administración Pública dedicó su edición de primavera de 2004 de un simposioen la implementación de la política pública al presentar una serie de artículos por tanto "nuevo" y"Viejos" eruditos como Schofield (2004), Schofield y Sausman (2004), Barrett (2004)y O'Toole (2004) es otro caso digno de mención.Igualmente importante en este sentido es la publicación de dos libros recientes por Hilly Hupe (2002) y Peters y Pierre (2003). El primero es un libro de texto que trata deResumiendo la investigación aplicada y vincularlo a otros temas de investigación de políticasque han sustituido en los últimos 15 a 20 años. El segundo es un nuevo y sub-edición sustancialmente revisada del Manual de Administración Pública que contienevarios artículos sobre la investigación de la aplicación de políticas experimentado el estado de la técnicaestudiosos como de mayo (2003) y Winter (2003).Es demasiado pronto para decir si estos intercambios académicos recientes constituyen un nuevooleada de interés en la investigación puesta en práctica. Suponiendo que es el caso, hayes una gran cantidad de desafíos que enfrenta una agenda de investigación resucitado. Estos desafíosson de naturaleza conceptual, teórica y metodológica que otros han tratadocon otra parte (Goggin et al., 1990; Hill & Hupe, 2002; O'Toole, 2000; Invierno, 2003).Los resultados que he aquí presentados sugieren fuertemente que lo que se necesita no esmás, pero mejor investigación. De hecho, la literatura de investigación enorme y diversadocumentado aquí constituye un problema. Hace más de dos décadas, algunos críticosYa dijimos que "nos enfrentamos a una gran cantidad de información sobre la aplicación" yla conclusión de que "tenemos que saber cómo extraer conocimiento a partir de la informaciónque ya tenemos. "(Kirst y Jung, 1982, 141). Teniendo en cuenta el crecimiento fenomenalen la literatura de investigación, desde entonces, la necesidad de acumulación de conocimiento debeser mucho más apremiante. Procedimientos y técnicas para hacer esto han sidodesarrollado durante los últimos 25 a 30 años (Cooper & Hedges, 1994; Hunt, 1997; Hunter,

Página 17

Saetren: Hechos y mitos sobre Investigación Implementación575Schmidt, y Jackson, 1982) y se han aplicado en otros campos relacionados de lo socialciencias (Hendricks y Singhal, 1997; Robertson y Seneviratne, 1995; Robertson etal., 1993). El tiempo de demora con respecto al inicio de los esfuerzos hacia la síntesis dela literatura implementación de políticas. Lo que he hecho es elaborar lo más cercano a unmapa completo de la literatura de investigación como sea posible que pueda guiar los esfuerzos futuroshacia su integración.Harald Saetren es profesor de teoría de la administración y organización de la Uni-versidad de Bergen, Noruega.Notas1. De acuerdo con Hertzel (2003, 295-296), bibliometría es el análisis de la estructura de un cuerpo de literalmenteATURALEZA usando cualquier tipo de método cuantitativo.2. Me gustaría señalar que los problemas de validez y confiabilidad eran características endémicas de algunos deestas bases de datos. Por ejemplo, las búsquedas de libros dirigidos y tesis doctorales en concreto haríasin embargo recuperar muchos otros tipos de publicaciones también. Publicaciones registrado más deuna vez fue otro problema no infrecuente. Ambos defectos aspirantes a la acrítica investigadorconsternación-producir estimaciones infladas de la cantidad real de las publicaciones pertinentes. WorldCat era pormucho, el peor en este aspecto. Disertaciones Resumen tuvo mayormente el problema anterior y menos de laeste último, mientras que el Social Science Citation Index tenía ninguno de ellos por lo que pude ver.3. Las revistas dedicadas al desarrollo de la teoría de la ciencia política , administración pública o política pública / políticaanálisis , en general, constituyen el núcleo. Alist de estas revistas centrales se proporciona en el Apéndice 1. Se debecabe señalar que esta lista no cubre todas las revistas centrales existentes. Sólo cubre aquellos en los que tengoregistrado un artículo titulado aplicación. Revistas dedicadas a la aplicación de estos tres estudiocampos en un contexto particular, se clasifican como cerca de núcleos. Ejemplos típicos de aquí son de Política Energética , Diariode Salud Política y Políticas y Administración en Trabajo Social . Revista de Investigación Curricular , PrimariaRevista de la Escuela , y Revista de Salud Escolar ejemplifican la categoría noncore más distante.4. Los artículos del simposio apareció en un libro 3 años más tarde (Palumbo y Calista, 1990) junto conotro libro seminal (Goggin et al., 1990). Juntos parecen marcar el fin de una era con respectoal interés por los estudios de implementación por la mayoría de los estudiosos de la política.5. En realidad, la implementación de políticas públicas es el término clave compuesta más correcta y precisa en esterespeto, pero es, por desgracia, tan raramente empleado por ambos autores y bibliotecarios como para hacer queprácticamente inútil. Incluso el poco más sencillo plazo la implementación de políticas pierde demasiados relevantepublicaciones debido a su aplicación incoherente. Pero el solo término aplicación , así como un títulopalabra, crea el problema opuesto, ya que produce muchos miles de referencias, la mayoría de los cuales a su veza ser irrelevante. Sin embargo, y a pesar de un proceso de deshierbe tedioso y consume mucho tiempo, laEste último procedimiento fue elegido para asegurar la integridad. Implementación como palabra clave no se utilizópuesto que las palabras clave no están generalmente disponibles en nuestras bases de datos antes de 1990 cuando se convirtieron sin-onymous con títulos de palabras.6. No hay duda, como se ha señalado en varias ocasiones antes de que la etapa de ejecución de la políticase analizó y estudió la toma sin utilizar la aplicación a largo plazo, tanto antes como después dePressman y Wildavsky elevados a la fama entre los estudiosos de la política a principios del 1970. El problemaaquí es llegar a toda la gama de términos alternativos que se han utilizado en estos casos yque son necesarios para identificarlos. El cumplimiento, aplicación, ejecución, gestión y regulaciónson sólo algunos de los muchos otros términos que serían necesarias para producir una cobertura verdaderamente completade todo lo que es relevante.7. A modo de ejemplo, dos tercios de todos los artículos de revistas que utilizan la aplicación del título palabra no teníanrelevancia al orden público, a mi juicio bastante liberal.8. Tres decisiones fueron fundamentales para la estimación del tamaño llegué a. La primera fue la de basar mi búsqueda estrate-gías en la comprensión de los estudios de implementación como potencialmente multidisciplinario campo de la investigación,lo que significó ampliar el procedimiento de mapeo más allá de los límites disciplinarios estrechos (por ejemplo, Polit-ical Science Abstracts ). La segunda era incluir tesis doctorales, un hasta entonces ocultos y unrec-

Página 18576Estudios de Política Journal, 33: 4cida fuente importante de la investigación científica. La tercera decisión fue extender las búsquedas en todofuentes de datos durante el período de tiempo máximo posible, tanto hacia atrás y hacia adelante9. Independientemente de elecciones realizadas durante cualquier procedimiento de búsqueda, hay dos problemas clásicos lascaras investigador (Blanco, 1994). El primero es perder publicaciones que deberían haber sido incluidos ( falsosnegativos ), un problema que tengo ya elaborados sobre anteriormente. El segundo es incluir publicacionesque no debería haber estado allí ( falsos positivos ). La magnitud de la segunda problema sólo puede serdeterminadas mediante un examen más detallado de cada publicación, o una muestra aleatoria de los mismos, lo cual esmás allá del alcance de este artículo.10. Es cierto que el proceso de la política pública no sigue necesariamente la lógica secuencial de las etapasmetáfora en todos los casos, especialmente los no sus etapas posteriores (como la implementación, evaluación, retroalimentación y

aprendizaje de las políticas). Sin embargo, la metáfora etapas es importante porque refleja las reglas institucionalesy las normas sobre cómo las políticas públicas deben ser transformadas de las ideas a la práctica en la modernasistemas políticos. La conveniencia de esta construcción analítica no debe darse por sentado odisipado axiomáticamente. Lo que la metáfora etapas hace es describir un proceso hipotéticosecuencia, la validez de los cuales siempre debe seguir siendo una cuestión empírica.ReferenciasAlexander, ER 1985. "De la idea a la acción: Apuntes para una Teoría de Contingencia de la Implementación de PolíticaProceso ción ". Administración y Sociedad 16 (4): 403-26.Barrett, SM 2004. "Los estudios de implementación: Tiempo para un renacimiento? Reflexiones personales sobre los 20 años deEstudios de implementación ". Administración Pública 82 (2): 249-62.Borgman, CL 1990. académica Comunicación y Bibliometría. Newbury Park, Londres y Nueva Dehli:Sage.Bowen, ER 1982. "El Pressman-Wildavsky Paradoja: Cuatro Adendas o qué modelos basados en problemasTeoría capacidad puede predecir el éxito Implementación y Sugerir consejos tácticos Útil para Imple-mentadores ". Journal of Public Policy 2 (1): 1-22.Briggs, HW 1948. "Aplicación del Pacto Internacional Propuesta de Derechos Humanos." canosican Journal of International Law 42 (2): 389-97.Brinkerhoff, DW 1996. "Perspectivas del Proceso de Cambio de Política. Destacando Implementación. " MundialDesarrollo 24 (9): 1395-402.Charlesworth, JC 1933. La aplicación del Pacto de París . PhD diss., Universidad de Pittsburgh.Cheema, GS, y DA Rondinelli. 1983 . Dentralization y Desarrollo: Aplicación de Políticas de Desarro-Los países en vías de. Beverly Hills, CA: Sage.Cooper, HM, y LV Hedges. 1994. El Manual de Investigación de Síntesis. Nueva York: Russell SageFundación.Goggin, ML, AM O'Bowman, JP Lester, y LJ O'Toole Jr. 1990. Teoría Implementación y prácticaTice:. Hacia una Tercera Generación Glenwood, IL Scott Capataz / Little, Brown.Grindle, MS 1980. La política y la aplicación de políticas en el Tercer Mundo . NJ: Princeton University Press.Grindle, MS, y JW Thomas. 1990. Opciones públicas y cambio de políticas . Baltimore / London: The JohnsHopkins University Press.Hendricks, KB y VR Singhal. 1997. "¿Se implementación de un programa efectivo de la ACT realidadMejorar el rendimiento operativo? La evidencia empírica de las empresas que han ganado Premios a la Calidad ".Gestión de la Ciencia 43 (9): 1258-1274.Hertzel, DH 2003. "Historia Bibliometría." En Enciclopedia de Biblioteconomía y Documentación , segunda ed,ed. MA Drake. Nueva York: Marcel Dekker, 144-211.Hill, M. 1997. "Teoría Implementación: Emisión de ayer" Política y Política 25 (4): 375-85.Hill, M., y P. Hupe. 2002. Implementación de Políticas Públicas: Gobernanza en la teoría como en la práctica . Londres,Thousand Oaks, y Nueva Delhi: Sage.Hunt, M. 1997. Cómo la ciencia hace balance: La historia de Meta-Análisis. Nueva York: Fundación Russell Sage.Hunter, J., FL Schmidt, y GB Jackson. 1982. Meta-Análisis: acumulación de resultados de la investigación a través deEstudios. Beverly Hills, CA: Sage.

Página 19Saetren: Hechos y mitos sobre Investigación Implementación577Ingram, H. 1990. "Implementación:. Una revisión y sugerido Marco" (capítulo 18) En tración Públicatración: El Estado del Arte , ed. NM Lynn, y A. Wildavsky. Chatham, Nueva Jersey: Chatham House,462-480.Jackson, GB 1980. "Métodos para Comentarios Integrativa." Review of Educational Research 50 (3): 438-60.Jenkins-Smith, H., y PA Sabatier. 1993. "El Estudio del Proceso de Políticas Públicas". En el cambio de políticas yAprendizaje: Un Enfoque Advocacy Coalition , ed. PA Sabatier, y H. Jenkins-Smith. Boulder, CO: West-ver Press, 1-9.Juan, P. 1998. Análisis de Políticas Públicas . Londres y Nueva York: Pinter.Kettunen, P. 2000. "Enfoque de Implementación. Perspectiva "del politólogo. Corrientes Política 10(1-2): 3-5.Kirst, M. y R. Jung. 1982. "La utilidad de un enfoque longitudinal en Implementación Evaluación: ATrece años Vista del Título I, ESEA "En. Implementación Estudiar: metodológico y administrativoProblemas , ed. W. Williams, y RE Elmore. Chatham, Nueva Jersey: Chatham House, 119-148.Laatsch, MHA 1942. La implementación de la Doctrina Monroe . PhD diss., Universidad de Princeton.Lazin, FA 1999. La Política Proceso de Implementación de las Naciones en Desarrollo . Stamford, Conn .: JAI Press.deLeon, P. 1999a. "El eslabón perdido Revisited: Investigación Implementación Contemporáneo." Estudios de PolíticaComentario 16 (3/4): 311-38.---. 1999b. "Cold Comfort hecho." Corrientes Política de 8 (4): 6-8.deLeon, P. y L. deLeon. 2002. "¿Qué pasó con la aplicación de políticas? Una alternativaEnfoque ". Revista de Investigación de la Administración Pública y Teoría 12 (4): 467-88.Lester, JP 2000. "Volver al Futuro en Investigación Implementación:. Una respuesta" Corrientes Política 10 (1-2):2-5.

Lester, JP, AM O'Bowman, ML Goggin, y LJ O'Toole Jr. 1987. "Implementación de Políticas Públicas:Evolución del campo y de la Agenda para el Futuro de la Investigación ". Estudios de Política Revisión 7 (1): 200-16.Lester, JP, y ML Goggin. 1998. "Regreso al futuro: El redescubrimiento de Estudios de implementación."Corrientes Política de 8 (3): 1-9.Linder, SH, y BG Peters. 1987. "Un Diseño Perspectiva sobre la aplicación de políticas: las falacias dePrescripción fuera de lugar ". Estudios de Política revisión 6 (3): 459-75.Little, JR 1948. Un estudio de las prácticas actuales y las opiniones de las autoridades educativas con respecto a laLa implementación de la responsabilidad del Estado por la Educación Pública y su Aplicación en el Estado de Colorado .PhD diss., Universidad de Colorado en Boulder.Loughery, BFS 1952. Derechos de los Padres en la Ley para la Educación de Estados Unidos. Su Bases e Implementación. Washing-ington, DC: Universidad Católica de América Press.McLaughlin, MW 1987. "Aprender de la experiencia: Lecciones de la aplicación de políticas". EducaciónEvaluación y Análisis de Políticas 9 (2): 171-8.Manwell, EA 1947. Salud en Ciencias de la Escuela Secundaria. La implantación de una filosofía de la enseñanza en HighCiencia escuela con un Estudio de Acompañamiento Los cambios en los alumnos . PhD diss., Universidad de Columbia.Matland, RE 1995. "Sintetizando la Literatura Implementación: El Modelo de ambigüedad-conflicto deLa aplicación de políticas ". Revista de Investigación de la Administración Pública y Teoría 5 (2): 145-74.Mayo, P. 2003. "Diseño y aplicación de políticas." (Capítulo 17) En el Manual de Administración Pública , ed.BG Peters, y J. Pierre. Londres, Thousand Oaks, California y Nueva Delhi, India: Sage, 223-233.Meier, K. 1999. ¿Estamos seguros de Lasswell hicimos así? Lester Goggin e Investigación de Aplicación ".Corrientes Política de 9 (1): 5-8.Murray, C. 1984. Loosing Ground:. Política Social de América 1950-1980 Nueva York: Basic Books.Nakamura, RT 1987. "La Política de libros de texto de Procesos e Implementación de Investigación." Estudios de Política de la opinión7 (1): 142-54.O'Toole, LJ, Jr. 1986. "Recomendaciones de política para Multi-Actor Implementación: Una evaluación de laEl campo ". Journal of Public Policy 6 (2): 181-210.---. 2000. "La investigación sobre la aplicación de políticas:. Balance y perspectivas" Journal of Admin- Públicanistración de Investigación y Teoría 10 (2): 263-88.---. 2004. "El tema Teoría-Práctica en Investigación Aplicación de Políticas." Administración Pública 82(2): 309-29.

Página 20578Estudios de Política Journal, 33: 4Palumbo, DJ, y DJ Calista. 1990. La aplicación y el proceso de la política: la apertura de la caja Negro .Nueva York: Greenwood Press.Peters, BG, y Pierre, J. 2003. Manual de Administración Pública . Londres / Thousand Oaks / Nueva Delhi:Sage.Potter, WG 1988. "de hacer muchos libros no tiene fin: Bibliometría y Bibliotecas." El DiarioAcadémico de Bibliotecología 14 (9): 1.3.Potoski, M. 2001. "Implementación, incertidumbre y las Ciencias Políticas." Corrientes Política 11 (1): 2-5. (2):283-308.Pressman, JL, y AB Wildavsky. 1973. Implementación. Cómo Great Expectations en Washington sonLa en Oakland. Berkeley, California y Londres: University of California Press.Robertson, PJ, y SJ Seneviratne. 1995. "Los resultados de Cambio Organizacional Planeado en el públicoSector: una comparación meta-analítica para el sector privado ". Public Administration Review 55 (6):547-57.Rothstein, B. 1988. Sólo Instituciones Materia. La lógica Moral y Política de la Estado de Bienestar universal . CambridgePuente, Reino Unido: Cambridge University Press.Ryan, N. 1996. "Algunas ventajas de un enfoque integrado sobre Análisis de la implementación. Un estudio de laPolítica Industrial de Australia ". Administración Pública 74 (4): 737-53.Sabatier, PA 1986. "Top-Down y Bottom-Up Enfoques de Investigación Implementación: Un críticoAnálisis y Síntesis sugerido ". Revista de Política Pública 6 (1): 21-48.---. 1988. "Un Abogacía Coalición marco del cambio de políticas y el papel de la política orientada aAprender Ahí ". Ciencias Políticas 21 (2-3): 129-68.---. 1999. "La necesidad de mejores teorías." (Capítulo 1) En Teorías del Proceso de Políticas , ed. Sabatier PA.Boulder, CO: Westview Press, 3-17.Saetren, H. 1996. "¿Qué pasó con la Investigación de Aplicación?" Papel para presentación en el con-Conferencia de la Asociación Nórdica de Ciencias Políticas, Helsinki, Finlandia.Schneider, AL 1999. "Terminator? ¿Quien yo? Algunas reflexiones sobre el Estudio de la Política de Implementaciónción ". Corrientes Política de 9 (1): 1-5.Schofield, J. 2001. "Tiempo para un renacimiento? Aplicación de Políticas Públicas: Una revisión de la literatura yAgenda para el Futuro de la Investigación ". Revista Internacional de Gestión Revisión 3 (3): 245-63.". Un Modelo de Aplicación Aprendidas" Schofield, J. 2004. Administración Pública 82 (2): 283-308.Schofield, J., y C. Sausman. 2004. "Simposio sobre Políticas Públicas de Ejecución: Aprendiendo de la Teoríay Práctica:. Introducción " de la Administración Pública 82 (2): 235-48.

Sinclair, TAP 2001. "Teoría y Práctica de Aplicación: Descubrimiento Política y Administración Link-las edades en la década de 1990 ". Revista Internacional de Administración Pública 24 (1): 77-94.Smith, TB 1973. "El Proceso de Implementación de Políticas." Política Ciencias 4 (2): 197-209.Turton, J. 1955. La aplicación de la Constitución estadounidense. Un Tratado de Procedimientos Constitucionales con especialLa referencia a las "Enmiendas Supuestos . ' Nueva York: Exposición Press.Blanca, HD 1994. "Comunicación Científica y Literatura de recuperación." (Capítulo 4) En el Manual deInvestigación Síntesis , ed. H. Cooper, y LV Hedges. Nueva York: Fundación Russell Sage, 42-55.Invierno, S. 1990. "Integración de la Investigación de Aplicación." En la ejecución y el Proceso de Políticas: AperturaHasta la Caja Negro , ed. DJ Palumbo, y DJ Calista. Nueva York: Greenwood Press, 19-38.---. 1999. "Nuevas direcciones para la investigación de Implementación". Corrientes Política de 8 (4): 5.1.---. 2003. "Perspectivas para la implementación: Indicadores de estado y de Reconsideración." (Capítulo 16) En el Manual deAdministración Pública , ed. BG Peters, y J. Pierre. Londres, Thousand Oaks, CA, y Nueva Delhi:Sage, 212-222.Yin, R. 1982. "El estudio de la Implementación de Programas Públicos." En Estudiar Implementación: metodo-Cuestiones meto- y Administrativas , ed. W. Williams, y RE Elmore. Chatham, Nueva Jersey: Chatham House,36-72