array:24 [
  "pii" => "S021391111000169X"
  "issn" => "02139111"
  "doi" => "10.1016/j.gaceta.2010.06.001"
  "estado" => "S300"
  "fechaPublicacion" => "2010-12-01"
  "aid" => "311"
  "copyright" => "SESPAS"
  "copyrightAnyo" => "2010"
  "documento" => "article"
  "crossmark" => 0
  "licencia" => "http://creativecommons.org/licenses/by-nc-nd/4.0/"
  "subdocumento" => "fla"
  "cita" => "Gac Sanit. 2010;24 Supl 1:114-9"
  "abierto" => array:3 [
    "ES" => true
    "ES2" => true
    "LATM" => true
  ]
  "gratuito" => true
  "lecturas" => array:2 [
    "total" => 8311
    "formatos" => array:3 [
      "EPUB" => 245
      "HTML" => 7222
      "PDF" => 844
    ]
  ]
  "itemSiguiente" => array:19 [
    "pii" => "S0213911110002542"
    "issn" => "02139111"
    "doi" => "10.1016/j.gaceta.2010.09.011"
    "estado" => "S300"
    "fechaPublicacion" => "2010-12-01"
    "aid" => "351"
    "copyright" => "SESPAS"
    "documento" => "article"
    "crossmark" => 0
    "licencia" => "http://creativecommons.org/licenses/by-nc-nd/4.0/"
    "subdocumento" => "ssu"
    "cita" => "Gac Sanit. 2010;24 Supl 1:120-7"
    "abierto" => array:3 [
      "ES" => true
      "ES2" => true
      "LATM" => true
    ]
    "gratuito" => true
    "lecturas" => array:2 [
      "total" => 6040
      "formatos" => array:3 [
        "EPUB" => 215
        "HTML" => 5152
        "PDF" => 673
      ]
    ]
    "es" => array:11 [
      "idiomaDefecto" => true
      "titulo" => "La justificación de las políticas de salud pública desde la ética y la eficiencia económica. Informe SESPAS 2010"
      "tienePdf" => "es"
      "tieneTextoCompleto" => "es"
      "tieneResumen" => array:2 [
        0 => "es"
        1 => "en"
      ]
      "paginas" => array:1 [
        0 => array:2 [
          "paginaInicial" => "120"
          "paginaFinal" => "127"
        ]
      ]
      "titulosAlternativos" => array:1 [
        "en" => array:1 [
          "titulo" => "Grounding public health policies in ethics and economic efficiency. SESPAS report 2010"
        ]
      ]
      "contieneResumen" => array:2 [
        "es" => true
        "en" => true
      ]
      "contieneTextoCompleto" => array:1 [
        "es" => true
      ]
      "contienePdf" => array:1 [
        "es" => true
      ]
      "autores" => array:1 [
        0 => array:2 [
          "autoresLista" => "Miguel A. Ramiro Avilés, Félix Lobo"
          "autores" => array:2 [
            0 => array:2 [
              "nombre" => "Miguel A."
              "apellidos" => "Ramiro Avilés"
            ]
            1 => array:2 [
              "nombre" => "Félix"
              "apellidos" => "Lobo"
            ]
          ]
        ]
      ]
    ]
    "idiomaDefecto" => "es"
    "EPUB" => "https://multimedia.elsevier.es/PublicationsMultimediaV1/item/epub/S0213911110002542?idApp=WGSE"
    "url" => "/02139111/00000024000000S1/v1_201301221241/S0213911110002542/v1_201301221241/es/main.assets"
  ]
  "itemAnterior" => array:19 [
    "pii" => "S0213911110002268"
    "issn" => "02139111"
    "doi" => "10.1016/j.gaceta.2010.09.010"
    "estado" => "S300"
    "fechaPublicacion" => "2010-12-01"
    "aid" => "347"
    "copyright" => "SESPAS"
    "documento" => "article"
    "crossmark" => 0
    "licencia" => "http://creativecommons.org/licenses/by-nc-nd/4.0/"
    "subdocumento" => "ssu"
    "cita" => "Gac Sanit. 2010;24 Supl 1:109-13"
    "abierto" => array:3 [
      "ES" => true
      "ES2" => true
      "LATM" => true
    ]
    "gratuito" => true
    "lecturas" => array:2 [
      "total" => 6695
      "formatos" => array:3 [
        "EPUB" => 243
        "HTML" => 5752
        "PDF" => 700
      ]
    ]
    "es" => array:11 [
      "idiomaDefecto" => true
      "titulo" => "La evaluación del impacto en la salud: una vía para introducir la salud en todas las políticas. Informe SESPAS 2010"
      "tienePdf" => "es"
      "tieneTextoCompleto" => "es"
      "tieneResumen" => array:2 [
        0 => "es"
        1 => "en"
      ]
      "paginas" => array:1 [
        0 => array:2 [
          "paginaInicial" => "109"
          "paginaFinal" => "113"
        ]
      ]
      "titulosAlternativos" => array:1 [
        "en" => array:1 [
          "titulo" => "Health impact assessment: One way to introduce health in all policies. SESPAS Report 2010"
        ]
      ]
      "contieneResumen" => array:2 [
        "es" => true
        "en" => true
      ]
      "contieneTextoCompleto" => array:1 [
        "es" => true
      ]
      "contienePdf" => array:1 [
        "es" => true
      ]
      "autores" => array:1 [
        0 => array:2 [
          "autoresLista" => "Santiago Esnaola, Amaia Bacigalupe, Elvira Sanz, Elena Aldasoro, Carlos Calderón, Juan Zuazagoitia, Koldo Cambra"
          "autores" => array:7 [
            0 => array:2 [
              "nombre" => "Santiago"
              "apellidos" => "Esnaola"
            ]
            1 => array:2 [
              "nombre" => "Amaia"
              "apellidos" => "Bacigalupe"
            ]
            2 => array:2 [
              "nombre" => "Elvira"
              "apellidos" => "Sanz"
            ]
            3 => array:2 [
              "nombre" => "Elena"
              "apellidos" => "Aldasoro"
            ]
            4 => array:2 [
              "nombre" => "Carlos"
              "apellidos" => "Calderón"
            ]
            5 => array:2 [
              "nombre" => "Juan"
              "apellidos" => "Zuazagoitia"
            ]
            6 => array:2 [
              "nombre" => "Koldo"
              "apellidos" => "Cambra"
            ]
          ]
        ]
      ]
    ]
    "idiomaDefecto" => "es"
    "EPUB" => "https://multimedia.elsevier.es/PublicationsMultimediaV1/item/epub/S0213911110002268?idApp=WGSE"
    "url" => "/02139111/00000024000000S1/v1_201301221241/S0213911110002268/v1_201301221241/es/main.assets"
  ]
  "es" => array:18 [
    "idiomaDefecto" => true
    "titulo" => "La evaluación de políticas públicas. Informe SESPAS 2010"
    "tieneTextoCompleto" => true
    "paginas" => array:1 [
      0 => array:2 [
        "paginaInicial" => "114"
        "paginaFinal" => "119"
      ]
    ]
    "autores" => array:1 [
      0 => array:4 [
        "autoresLista" => "Jaime Pinilla, Anna García-Altés"
        "autores" => array:2 [
          0 => array:4 [
            "nombre" => "Jaime"
            "apellidos" => "Pinilla"
            "email" => array:1 [
              0 => "jpinilla@dmc.ulpgc.es"
            ]
            "referencia" => array:2 [
              0 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">a</span>"
                "identificador" => "aff1"
              ]
              1 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">¿</span>"
                "identificador" => "cor1"
              ]
            ]
          ]
          1 => array:3 [
            "nombre" => "Anna"
            "apellidos" => "Garc&#237;a-Alt&#233;s"
            "referencia" => array:3 [
              0 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">b</span>"
                "identificador" => "aff2"
              ]
              1 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">c</span>"
                "identificador" => "aff3"
              ]
              2 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">d</span>"
                "identificador" => "aff4"
              ]
            ]
          ]
        ]
        "afiliaciones" => array:4 [
          0 => array:3 [
            "entidad" => "Departamento de M&#233;todos Cuantitativos en Econom&#237;a y Gesti&#243;n&#44; Facultad de Ciencias Econ&#243;micas y Empresariales&#44; Universidad de Las Palmas de Gran Canaria&#44; Espa&#241;a"
            "etiqueta" => "<span class="elsevierStyleSup">a</span>"
            "identificador" => "aff1"
          ]
          1 => array:3 [
            "entidad" => "King&#8217;s College London y London School of Economics&#44; London&#44; UK"
            "etiqueta" => "<span class="elsevierStyleSup">b</span>"
            "identificador" => "aff2"
          ]
          2 => array:3 [
            "entidad" => "Fundaci&#243;n Instituto de Investigaci&#243;n en Servicios de Salud&#44; Valencia&#44; Espa&#241;a"
            "etiqueta" => "<span class="elsevierStyleSup">c</span>"
            "identificador" => "aff3"
          ]
          3 => array:3 [
            "entidad" => "CIBER de Epidemiolog&#237;a y Salud P&#250;blica &#40;CIBERESP&#41;&#44; Espa&#241;a"
            "etiqueta" => "<span class="elsevierStyleSup">d</span>"
            "identificador" => "aff4"
          ]
        ]
        "correspondencia" => array:1 [
          0 => array:3 [
            "identificador" => "cor1"
            "etiqueta" => "&#8270;"
            "correspondencia" => "Autor para correspondencia&#46;"
          ]
        ]
      ]
    ]
    "titulosAlternativos" => array:1 [
      "en" => array:1 [
        "titulo" => "Evaluation of public policies&#46; SESPAS Report 2010"
      ]
    ]
    "textoCompleto" => "<span class="elsevierStyleSections"><span id="s0005" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Introducci&#243;n&#58; &#191;Qu&#233; se entiende por evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#63;</span><p id="p0005" class="elsevierStylePara elsevierViewall">La evaluaci&#243;n de pol&#237;ticas p&#250;blicas se entiende como el proceso de observaci&#243;n&#44; medida&#44; an&#225;lisis e interpretaci&#243;n&#44; orientado al conocimiento del funcionamiento de una determinada intervenci&#243;n p&#250;blica&#44; con el objeto de alcanzar un juicio valorativo sobre su utilidad social<a class="elsevierStyleCrossRef" href="#bib1"><span class="elsevierStyleSup">1</span></a>&#46;</p><p id="p0010" class="elsevierStylePara elsevierViewall">Las pol&#237;ticas p&#250;blicas intentan resolver problemas sociales buscando la satisfacci&#243;n de los destinatarios de dichas pol&#237;ticas&#46; Para ello&#44; los decisores p&#250;blicos impulsan actuaciones que suelen tomar la forma de planes &#40;suma de programas con objetivos comunes&#41;&#44; programas &#40;orden de las actividades&#41; o proyectos &#40;actividades para lograr unos objetivos&#41;&#46; A la hora de llevar a la pr&#225;ctica estos planes&#44; programas y proyectos&#44; se cuenta con instrumentos pol&#237;ticos &#40;programa presentado por una determinada administraci&#243;n&#41;&#44; jur&#237;dicos &#40;normativa que regula una pol&#237;tica p&#250;blica concreta&#41;&#44; econ&#243;micos &#40;cuando las pol&#237;ticas p&#250;blicas se articulan mediante un presupuesto&#41;&#44; y sociales y culturales &#40;medidas que afectan a los h&#225;bitos sociales de la poblaci&#243;n&#41;&#46; Toda pol&#237;tica pretende incidir en la sociedad actuando sobre las necesidades y los problemas detectados&#44; con el fin de provocar un efecto o cambio en esa realidad&#46;</p><p id="p0015" class="elsevierStylePara elsevierViewall">El prop&#243;sito de la evaluaci&#243;n es analizar las distintas etapas&#44; desde que se decide intervenir hasta que se manifiestan los impactos&#44; comprobando la validez&#44; tanto interna como externa&#44; de las hip&#243;tesis que justifican la intervenci&#243;n&#46; La evaluaci&#243;n de pol&#237;ticas p&#250;blicas requiere evidencias respecto a su dise&#241;o&#44; puesta en pr&#225;ctica&#44; efectos&#44; resultados e impactos<a class="elsevierStyleCrossRef" href="#bib2"><span class="elsevierStyleSup">2</span></a>&#46; La evaluaci&#243;n es una actividad espec&#237;fica y con identidad propia&#44; claramente diferenciada de otras como el control interno&#44; la auditor&#237;a financiera&#44; la auditor&#237;a de gesti&#243;n o el control presupuestario&#44; pero con las cuales mantiene una estrecha relaci&#243;n de complementariedad&#46; El objetivo &#250;ltimo de la evaluaci&#243;n de pol&#237;ticas es obtener informaci&#243;n para tomar decisiones&#46; En general&#44; la evaluaci&#243;n puede servir para determinar el grado de consecuci&#243;n de los objetivos propuestos&#44; mejorar la implementaci&#243;n de las pol&#237;ticas&#44; rendir cuentas ante la ciudadan&#237;a&#44; aumentar el apoyo comunitario y contribuir a la base cient&#237;fica de las pol&#237;ticas<a class="elsevierStyleCrossRef" href="#bib3"><span class="elsevierStyleSup">3</span></a>&#46;</p><p id="p0020" class="elsevierStylePara elsevierViewall">Dentro de lo que se consideran pol&#237;ticas p&#250;blicas&#44; las pol&#237;ticas de salud ocupan un lugar muy destacado<a class="elsevierStyleCrossRef" href="#bib4"><span class="elsevierStyleSup">4</span></a>&#44; bien sea por su relaci&#243;n directa con el bienestar de la sociedad&#44; por sus caracter&#237;sticas pol&#237;ticas y sociales&#44; o por el importante peso que impone el sector sanitario a la actividad econ&#243;mica de los pa&#237;ses&#46; En Espa&#241;a&#44; el gasto sanitario p&#250;blico alcanzaba el 6&#44;1&#37; del producto interior bruto &#40;PIB&#41; en el a&#241;o 2007 &#40;&#250;ltimo a&#241;o disponible en <span class="elsevierStyleItalic">OECD Health Data 2009</span>&#41;&#46;</p></span><span id="s0010" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Perspectiva econ&#243;mica de las pol&#237;ticas de salud</span><p id="p0025" class="elsevierStylePara elsevierViewall">La evoluci&#243;n del gasto sanitario y su financiaci&#243;n se han convertido en los &#250;ltimos a&#241;os en uno de los ejes principales del debate pol&#237;tico&#46; En momentos en que los cambios demogr&#225;ficos y socioecon&#243;micos est&#225;n afectando a las bases de la sostenibilidad financiera del estado del bienestar&#44; el control del gasto y&#44; por tanto&#44; la perspectiva econ&#243;mica de cualquier pol&#237;tica de salud&#44; resultan imprescindibles<a class="elsevierStyleCrossRef" href="#bib5"><span class="elsevierStyleSup">5</span></a>&#46;</p><p id="p0175" class="elsevierStylePara elsevierViewall"><elsevierMultimedia ident="b0005"></elsevierMultimedia></p><p id="p0030" class="elsevierStylePara elsevierViewall">Desde una perspectiva econ&#243;mica&#44; las pol&#237;ticas de salud han de pretender que la producci&#243;n de salud no sea m&#225;s costosa de lo necesario&#44; que la salud que se produzca no se valore menos de lo que cuesta&#44; y finalmente&#44; conseguir la perfecta traducci&#243;n de los planes de salud en pol&#237;ticas gubernamentales y planes de servicios<a class="elsevierStyleCrossRef" href="#bib6"><span class="elsevierStyleSup">6</span></a>&#46; Traducir objetivos de salud en servicios sanitarios constituye una tarea dif&#237;cil&#44; pero importante si no quiere perderse de vista la principal raz&#243;n de ser de los servicios sanitarios&#46; Sin embargo&#44; tal como veremos en algunos de los ejemplos utilizados en este art&#237;culo&#44; resultan muy frecuentes la vulneraci&#243;n o el olvido de alguna o incluso de todas estas cuestiones&#46;</p><p id="p0035" class="elsevierStylePara elsevierViewall">Analicemos el caso de la inclusi&#243;n de la vacuna del virus del papiloma humano &#40;VPH&#41; en el calendario del sistema nacional de salud&#46; En relaci&#243;n a su coste&#44; la disponibilidad de una nueva vacuna siempre plantea una situaci&#243;n comprometida a los que deciden las pol&#237;ticas de vacunaci&#243;n&#44; debido principalmente a la falta de datos para conseguir que las incertidumbres sean pocas y poco importantes&#46; A partir del &#250;ltimo trimestre de 2008&#44; la vacuna del VPH se incluy&#243; en el calendario espa&#241;ol&#44; y por tanto con cargo al sistema sanitario p&#250;blico&#46; Esta decisi&#243;n se ha tomado a pesar del alto precio de las dosis y de las dudas sobre su posible efectividad para prevenir la mortalidad por c&#225;ncer de c&#233;rvix&#44; en comparaci&#243;n con las actuales pr&#225;cticas preventivas<a class="elsevierStyleCrossRef" href="#bib7"><span class="elsevierStyleSup">7</span></a>&#46; Si desconocemos el impacto sobre la reducci&#243;n de la carga de enfermedad&#44; resulta imposible cuantificar la eficiencia relativa de dicha actuaci&#243;n sanitaria&#44; y no podemos evitar que la producci&#243;n de salud pueda ser m&#225;s costosa de lo necesario&#46;</p><p id="p0040" class="elsevierStylePara elsevierViewall">Otra cuesti&#243;n clave es la valoraci&#243;n de los resultados de la pol&#237;tica&#46; Una valoraci&#243;n de los beneficios en t&#233;rminos de salud por debajo del coste de las pol&#237;ticas para conseguirlos conlleva un despilfarro de recursos<a class="elsevierStyleCrossRef" href="#bib8"><span class="elsevierStyleSup">8</span></a>&#46; Hablamos&#44; por ejemplo&#44; del encarnizamiento u obstinaci&#243;n terap&#233;utica en enfermos terminales&#46; El consumo de servicios sanitarios resulta excesivo si los servicios sanitarios no son efectivos &#40;sin efectividad no hay eficiencia&#41;&#44; si son efectivos pero cuestan m&#225;s de lo necesario&#44; o si se valoran&#44; en t&#233;rminos de utilidad&#44; menos de lo que cuestan&#46;</p><p id="p0045" class="elsevierStylePara elsevierViewall">La respuesta respecto a qu&#233; acci&#243;n acometer&#44; adem&#225;s de valorar el consumo de recursos&#44; debe contemplar los conflictos entre equidad y eficiencia que el establecimiento de cualquier pol&#237;tica comporta&#46; La Ley General de Sanidad espa&#241;ola &#40;Ley 14&#47;1986&#41; tiene como uno de sus m&#225;s importantes principios la equidad&#58; &#171;el acceso y las prestaciones sanitarias se realizar&#225;n en condiciones de igualdad efectiva&#187;&#46; Desde este punto de vista&#44; la equidad se conseguir&#237;a igualando el acceso entre aquellos con igual necesidad sanitaria o facilitando un mayor acceso a aquellos con mayor necesidad sanitaria&#46; El nuevo programa de salud bucodental infantil de 2008 se inscribe dentro del conjunto de actuaciones del Ministerio de Sanidad para impulsar la igualdad y garantizar la equidad en el acceso de todos los ciudadanos a las prestaciones sanitarias&#46; Sin embargo&#44; la evidencia de eficacia y efectividad actual de este programa est&#225; muy por debajo de lo que ser&#237;a deseable&#44; y esto tiene muchas implicaciones &#40;en la investigaci&#243;n&#44; en los mercados&#44; en la regulaci&#243;n&#44; en el coste de los conciertos con dentistas privados&#44; etc&#46;&#41;&#46; Teniendo en cuenta que el gasto creciente en los servicios de atenci&#243;n bucodental tradicionales tiene apenas un efecto marginal en el estado de salud de la poblaci&#243;n infantil<a class="elsevierStyleCrossRef" href="#bib9"><span class="elsevierStyleSup">9</span></a>&#44; tenemos un ejemplo claro de c&#243;mo el conflicto entre equidad y eficiencia no debe olvidarse en la evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#46;</p></span><span id="s0015" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Tipos de evaluaci&#243;n de pol&#237;ticas p&#250;blicas y de dise&#241;os evaluativos</span><p id="p0050" class="elsevierStylePara elsevierViewall">En la literatura hay numerosas definiciones y clasificaciones de la evaluaci&#243;n de pol&#237;ticas p&#250;blicas en general&#44; y de pol&#237;ticas de salud en particular&#46; Hay diferentes clasificaciones&#58; seg&#250;n la perspectiva&#44; la finalidad y el nivel de evaluaci&#243;n<a class="elsevierStyleCrossRefs" href="#bib10"><span class="elsevierStyleSup">10&#8211;12</span></a>&#46; La <a class="elsevierStyleCrossRef" href="#t0005">tabla 1</a>&#44; adaptada de Nebot et al<a class="elsevierStyleCrossRef" href="#bib13"><span class="elsevierStyleSup">13</span></a>&#44; resume los distintos tipos de evaluaci&#243;n&#44; as&#237; como los objetivos que se persiguen&#46;</p><elsevierMultimedia ident="t0005"></elsevierMultimedia><p id="p0055" class="elsevierStylePara elsevierViewall">Los dise&#241;os evaluativos se suelen clasificar en tres grupos principales<a class="elsevierStyleCrossRef" href="#bib11"><span class="elsevierStyleSup">11</span></a>&#58; 1&#41; los dise&#241;os experimentales&#44; con asignaci&#243;n aleatoria de los individuos al grupo de intervenci&#243;n o al grupo control &#40;grupos equivalentes&#41;&#59; 2&#41; los dise&#241;os cuasiexperimentales&#44; que incluyen los ensayos comunitarios&#44; los dise&#241;os pretest-postest con grupo control no equivalente y las series temporales m&#250;ltiples&#44; y 3&#41; los dise&#241;os no experimentales&#44; que incluyen las series temporales y los dise&#241;os pretest-postest sin grupo control&#46;</p><p id="p0060" class="elsevierStylePara elsevierViewall">Sin embargo&#44; el gran handicap de la evaluaci&#243;n de pol&#237;ticas p&#250;blicas es que en muchos casos no es posible utilizar dise&#241;os experimentales&#44; con lo cual la validez interna de los estudios se ve amenazada<a class="elsevierStyleCrossRef" href="#bib14"><span class="elsevierStyleSup">14</span></a>&#46; Las principales limitaciones en los dise&#241;os evaluativos pueden deberse a la falta de un grupo control equivalente&#44; a la complejidad de la pol&#237;tica y a las limitaciones de los indicadores de medida de los efectos&#46; A pesar de sus limitaciones&#44; el dise&#241;o cuasiexperimental es muy com&#250;n en la evaluaci&#243;n de intervenciones en salud p&#250;blica&#44; ya que en muchas ocasiones es el &#250;nico posible&#46; Un ejemplo interesante en este caso ser&#237;a la evaluaci&#243;n de las leyes y normativas de regulaci&#243;n del tabaquismo<a class="elsevierStyleCrossRefs" href="#bib15"><span class="elsevierStyleSup">15&#44;16</span></a>&#46;</p><p id="p0065" class="elsevierStylePara elsevierViewall">En particular&#44; las limitaciones en los indicadores finales est&#225;n relacionadas con la dificultad de observar o de definir de forma operativa los resultados&#44; ya que &#233;stos son m&#250;ltiples o s&#243;lo visibles a largo plazo&#46; En ocasiones es habitual que se utilicen los resultados a corto plazo por razones de inmediatez y visibilidad social&#44; quedando la evaluaci&#243;n definitiva&#44; basada en resultados a largo plazo&#44; postergada u olvidada&#46; Un ejemplo reciente lo tenemos en la pol&#237;tica de actuaci&#243;n frente a la pandemia de la gripe A &#40;H1N1&#41; por parte de los gobiernos de muchos pa&#237;ses&#46; Como medida preventiva se opt&#243; por una pol&#237;tica sanitaria defensiva&#44; cortoplacista&#44; favorecida por la fuerte presi&#243;n que impusieron las campa&#241;as de opini&#243;n p&#250;blica&#46; Espa&#241;a adquiri&#243; 37 millones de dosis de vacunas&#44; si bien&#44; gracias a una cl&#225;usula firmada con los laboratorios fabricantes&#44; posteriormente el Ministerio ha podido deshacerse de 24 millones de dosis que resultaron innecesarias&#46; La evaluaci&#243;n de pol&#237;ticas p&#250;blicas a corto plazo puede dejar de lado m&#225;ximas como la seguridad&#44; la evidencia cient&#237;fica o el coste-oportunidad&#46;</p><p id="p0070" class="elsevierStylePara elsevierViewall">Merece una menci&#243;n especial la utilizaci&#243;n de indicadores cuando se realizan evaluaciones de proceso y de impacto&#46; En estos casos&#44; las evaluaciones se realizan mediante la definici&#243;n de indicadores que hacen referencia a las caracter&#237;sticas operacionales de la pol&#237;tica y a la consecuci&#243;n de los objetivos establecidos&#46; Sin embargo&#44; hay varias limitaciones&#46; La primera ser&#237;a la importancia de la definici&#243;n de los indicadores&#44; ya que seg&#250;n como se definan pueden reflejar valores o puntos de vista particulares&#46; En segundo lugar&#44; se puede pasar por alto el valor de los objetivos en s&#237; mismos&#44; y el hecho de no tener en cuenta el contexto en que se hace la evaluaci&#243;n&#46; Otra limitaci&#243;n podr&#237;a ser la falta de un componente realmente evaluativo&#44; y el hecho de promover una aproximaci&#243;n burocr&#225;tica&#44; miope e inflexible a la evaluaci&#243;n&#46; Un caso parecido son las pol&#237;ticas de pago por calidad&#44; con limitaciones muy parecidas en el uso de indicadores<a class="elsevierStyleCrossRef" href="#bib17"><span class="elsevierStyleSup">17</span></a>&#46; Lamentablemente&#44; la evaluaci&#243;n de proceso se hace mucho menos de lo que se pretende creer&#46; En la realidad&#44; muchas evaluaciones quedan en valoraciones de productos finales o <span class="elsevierStyleItalic">outputs</span>&#44; sin llegar a evaluar los mecanismos de funcionamiento de las pol&#237;ticas desarrolladas&#46;</p><span id="s0020" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">La evaluaci&#243;n econ&#243;mica de las pol&#237;ticas p&#250;blicas</span><p id="p0075" class="elsevierStylePara elsevierViewall">El objetivo de la evaluaci&#243;n econ&#243;mica es comparar diversas alternativas de actuaci&#243;n en t&#233;rminos de sus costes y efectos sobre la salud<a class="elsevierStyleCrossRef" href="#bib18"><span class="elsevierStyleSup">18</span></a>&#46; De este modo&#44; las t&#233;cnicas de evaluaci&#243;n econ&#243;mica permiten medir la eficiencia relativa de las alternativas comparadas&#46; Una pol&#237;tica p&#250;blica&#44; un servicio sanitario o&#44; en general&#44; una asignaci&#243;n de recursos&#44; es m&#225;s eficiente que otro si con los mismos recursos se obtienen mejores resultados en salud&#46;</p><p id="p0080" class="elsevierStylePara elsevierViewall">Con el fin de medir costes y efectos sobre la salud&#44; la evaluaci&#243;n econ&#243;mica utiliza diversas t&#233;cnicas&#58; el an&#225;lisis de minimizaci&#243;n de costes&#44; el an&#225;lisis de coste-efectividad&#44; el an&#225;lisis de coste-utilidad y el an&#225;lisis de coste-beneficio&#46; La selecci&#243;n de una t&#233;cnica de evaluaci&#243;n econ&#243;mica depender&#225; del objetivo del estudio&#46; Remitimos al lector a una lectura detenida de los manuales sobre el tema<a class="elsevierStyleCrossRefs" href="#bib18"><span class="elsevierStyleSup">18&#44;19</span></a>&#46;</p></span><span id="s0025" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Algunas t&#233;cnicas anal&#237;ticas</span><p id="p0085" class="elsevierStylePara elsevierViewall">Una vez llevada a cabo la pol&#237;tica&#44; empieza la etapa de an&#225;lisis de los resultados<a class="elsevierStyleCrossRef" href="#bib20"><span class="elsevierStyleSup">20</span></a>&#46; Lo m&#225;s com&#250;n en evaluaci&#243;n de pol&#237;ticas p&#250;blicas es que los datos no provengan de un dise&#241;o experimental&#44; sino que se hayan obtenido en un estudio observacional&#46; En el caso de los experimentos antes-despu&#233;s&#44; se obtienen las diferencias entre las medias muestrales de las variables resultado antes y despu&#233;s de la intervenci&#243;n en el grupo correspondiente&#46; El supuesto b&#225;sico es que no haya otro factor distinto de la intervenci&#243;n que afecte al resultado&#46; Otra posibilidad es el m&#233;todo de doble diferencia&#44; para el cual se necesitan datos del grupo intervenci&#243;n y del grupo control antes y despu&#233;s de la intervenci&#243;n&#46; Se trata de establecer las diferencias entre las medias del grupo intervenci&#243;n&#44; antes y despu&#233;s&#44; y las medias del grupo control&#44; tambi&#233;n antes y despu&#233;s de la intervenci&#243;n&#46; Se debe intentar que el grupo control sea lo m&#225;s parecido al grupo intervenci&#243;n&#44; por ejemplo reaccionado de la misma forma ante acontecimientos comunes&#46;</p><p id="p0090" class="elsevierStylePara elsevierViewall">En el m&#233;todo de <span class="elsevierStyleItalic">matching</span>&#44; en cambio&#44; se usan los datos despu&#233;s de la intervenci&#243;n tanto del grupo participante en el programa como del grupo control&#46; Anal&#237;ticamente se ponderan las estimaciones utilizando la distribuci&#243;n de variables condicionantes en el grupo participante&#46; Es decir&#44; mediante un modelo de elecci&#243;n discreta se estima la probabilidad de que un individuo con determinadas variables condicionantes forme parte del grupo participante&#59; y el mismo procedimiento se sigue en el grupo control&#44; de modo que puedan emparejarse las observaciones que tengan probabilidades semejantes&#46; De este modo se equilibran las muestras de acuerdo con las variables observables&#46; Finalmente se calcula la media aritm&#233;tica de las diferencias en las parejas para las cuales se han encontrado individuos del grupo control suficientemente parecidos&#46; Las t&#233;cnicas de <span class="elsevierStyleItalic">matching</span> presentan dos limitaciones principales&#58; una es que puede ser costoso y muy dif&#237;cil encontrar individuos comparables cuando se controla por m&#250;ltiples caracter&#237;sticas&#44; y la otra&#44; bastante com&#250;n&#44; es la influencia de variables no observables&#44; caracter&#237;sticas o atributos&#44; que pueden ser una importante fuente de sesgos&#46; En estas t&#233;cnicas&#44; el supuesto fundamental del an&#225;lisis es que no hay variables no observables que influyan a la vez en la probabilidad de participaci&#243;n&#44; en la intervenci&#243;n y en el resultado&#46;</p><p id="p0095" class="elsevierStylePara elsevierViewall">Hay muchas situaciones en que no es posible solventar las limitaciones anteriores&#44; lo cual ha inspirado el desarrollo de herramientas alternativas&#46; Una de ellas es la denominada regresi&#243;n discontinua&#46; El objetivo de esta t&#233;cnica es establecer la diferencia en la variable de impacto justo en aquel valor para el cual se dividen ambos grupos&#46; Un buen ejemplo de aplicaci&#243;n de esta t&#233;cnica en econom&#237;a de la salud lo podemos encontrar en el trabajo de Card et al<a class="elsevierStyleCrossRef" href="#bib21"><span class="elsevierStyleSup">21</span></a>&#46;</p></span></span><span id="s0030" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">La evaluaci&#243;n de las pol&#237;ticas de p&#250;blicas de salud&#46; &#191;Qu&#233; podemos aprender de otros pa&#237;ses&#63;</span><span id="s0035" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Un ejemplo destacable&#58; el National Institute for Health and Clinical Excellence &#40;NICE&#41;</span><p id="p0100" class="elsevierStylePara elsevierViewall">El National Institute for Health and Clinical Excellence &#40;NICE&#41; es una autoridad sanitaria especial dentro del National Health Service &#40;NHS&#41; en Inglaterra y Gales&#46; Empez&#243; su actividad en 1999 con el nombre de National Institute for Clinical Excellence&#44; y en 2005 se fusion&#243; con la Health Development Agency para convertirse en la instituci&#243;n actual&#46; Actualmente es la organizaci&#243;n independiente responsable de establecer recomendaciones de &#225;mbito nacional sobre promoci&#243;n de la salud&#44; prevenci&#243;n y tratamiento de la mala salud&#46; Para ello&#44; el NICE revisa la eficacia y la eficiencia de intervenciones de salud p&#250;blica&#44; tecnolog&#237;as sanitarias y pr&#225;cticas cl&#237;nicas que podr&#237;an incorporarse a la cartera de prestaciones del NHS&#46; Inicialmente se estableci&#243; para evitar lo que en Inglaterra y Gales llamaban <span class="elsevierStyleItalic">postcode lottery</span>&#44; es decir&#44; que los tratamientos estaban disponibles dependiendo de la zona de salud de atenci&#243;n primaria en que residiera el paciente&#46; En su funcionamiento actual&#44; el NHS en Inglaterra y Gales est&#225; obligado legalmente a pagar con dinero p&#250;blico aquellas intervenciones con evaluaciones favorables del NICE&#46;</p><p id="p0105" class="elsevierStylePara elsevierViewall">Las recomendaciones del NICE se desarrollan conjuntamente con t&#233;cnicos del NHS&#44; profesionales sanitarios&#44; pacientes&#44; cuidadores&#44; la industria y el mundo acad&#233;mico&#44; en un proceso completamente independiente del gobierno y de grupos de presi&#243;n&#46; Vale la pena volver a destacar que el NICE incorpora el criterio de coste-efectividad en sus evaluaciones&#44; de manera que pueda saberse si las intervenciones suponen <span class="elsevierStyleItalic">value for money</span> para el NHS&#44; en comparaci&#243;n con la mejor alternativa que se est&#233; utilizando en la actualidad&#46; La raz&#243;n coste-efectividad se mide en t&#233;rminos de coste por a&#241;o de vida ajustado por calidad &#40;AVAC&#41; incremental&#44; con un umbral de eficiencia en el intervalo de las 20&#46;000 a 30&#46;000 libras esterlinas por AVAC&#46;</p><p id="p0110" class="elsevierStylePara elsevierViewall">A pesar de las cr&#237;ticas recibidas &#40;divergencia entre recomendaciones nacionales y pr&#225;ctica cl&#237;nica&#44; lentitud&#44; falta de claridad en el proceso y dificultad econ&#243;mica para dar cobertura a las tecnolog&#237;as recomendadas&#41;&#44; el NICE ha adquirido una reputaci&#243;n internacional por su rigurosidad y por su papel en la recomendaci&#243;n de prioridades en los servicios sanitarios&#46;</p></span><span id="s0040" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Otros ejemplos</span><p id="p0115" class="elsevierStylePara elsevierViewall">De manera no sistem&#225;tica ni exhaustiva&#44; comentaremos otras iniciativas destacables en el campo de la evaluaci&#243;n de pol&#237;ticas de salud&#46; Una de las instituciones de investigaci&#243;n de mayor prestigio es la RAND &#40;Research and Development&#41; Corporation<a class="elsevierStyleCrossRef" href="#bib22"><span class="elsevierStyleSup">22</span></a>&#46; La RAND es una instituci&#243;n sin &#225;nimo de lucro&#44; con m&#225;s de 60 a&#241;os de historia&#44; que tiene por misi&#243;n ayudar a la mejora de la pol&#237;tica y la toma de decisiones mediante la investigaci&#243;n y el an&#225;lisis&#46; Algunas de sus &#225;reas de investigaci&#243;n son la infancia&#44; la educaci&#243;n&#44; la salud y los servicios sanitarios&#44; la pobreza&#44; la poblaci&#243;n y el envejecimiento&#44; el crimen&#44; la energ&#237;a y el medio ambiente&#44; la ciencia y la tecnolog&#237;a&#44; y la seguridad nacional&#46; En temas de salud en particular&#44; sus investigaciones abarcan desde proyectos innovadores en gen&#233;tica y tecnolog&#237;as de la informaci&#243;n hasta otros m&#225;s cl&#225;sicos de salud internacional y promoci&#243;n de la salud&#44; pasando por medicina complementaria&#44; salud mental y violencia&#46;</p><p id="p0120" class="elsevierStylePara elsevierViewall">Otra iniciativa es la del Departamento de Planificaci&#243;n del Gobierno de Colombia<a class="elsevierStyleCrossRef" href="#bib23"><span class="elsevierStyleSup">23</span></a>&#44; con una envidiable lista de pol&#237;ticas evaluadas &#40;tanto su efectividad como su coste-efectividad&#41;&#44; entre las que encontramos programas de empleo&#44; vivienda&#44; ayudas a las familias en entornos rurales&#44; seguridad alimentaria y fomento de la peque&#241;a y mediana empresa&#46; El Instituto Nacional de Salud P&#250;blica de M&#233;xico es otro caso interesante&#44; con pol&#237;ticas evaluadas en torno a los desayunos escolares&#44; la atenci&#243;n al parto&#44; el control del tabaquismo y la detecci&#243;n del c&#225;ncer de mama<a class="elsevierStyleCrossRef" href="#bib24"><span class="elsevierStyleSup">24</span></a>&#46;</p><p id="p0125" class="elsevierStylePara elsevierViewall">Finalmente quisi&#233;ramos destacar&#44; debido a su importante volumen de financiaci&#243;n&#44; el <span class="elsevierStyleItalic">Spanish Trust Fund for Impact Evaluation</span> &#40;SIEF&#41;<a class="elsevierStyleCrossRef" href="#bib25"><span class="elsevierStyleSup">25</span></a>&#46; &#201;ste es el mayor fondo fiducidario establecido en el Banco Mundial dedicado a la evaluaci&#243;n de un impacto&#46; El programa fue fundado con 10&#44;4 millones de euros&#44; y complementado con 1&#44;5 millones de d&#243;lares procedentes de Reino Unido&#44; para la evaluaci&#243;n del impacto de programa innovadores&#46; El SIEF apoya evaluaciones prospectivas rigurosas en los pa&#237;ses en desarrollo&#44; talleres regionales de formaci&#243;n sobre evaluaci&#243;n de impacto&#44; y publicaciones y difusi&#243;n de resultados&#46; Los 39 temas en que se ha trabajado hasta la actualidad hacen referencia a la prevenci&#243;n de la infecci&#243;n por el VIH y del sida&#44; al control de la malaria&#44; a pol&#237;ticas de mercado laboral y a transferencias de renta condicionadas&#46; La &#250;nica condici&#243;n para llevar a cabo la evaluaci&#243;n es que se trate de programas que haya desarrollado el Banco Mundial en algunas de las &#225;reas y pa&#237;ses que Espa&#241;a ha seleccionado como prioritarias&#46; Las evaluaciones las realizan equipos de investigadores del Banco Mundial &#40;o consultores externos&#41; y equipos locales responsables de los programas evaluados&#46;</p></span></span><span id="s0045" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Conclusiones y retos para el futuro</span><p id="p0130" class="elsevierStylePara elsevierViewall">Antes de que una administraci&#243;n decida aumentar el gasto en una nueva pol&#237;tica deber&#237;a evaluar c&#243;mo se est&#225; gastando el dinero en la actualidad&#46; Si pensamos en igualar el porcentaje de PIB que&#44; por ejemplo&#44; el Reino Unido dedica a su sistema nacional de salud&#44; ser&#237;a mejor preguntarnos antes por qu&#233; no logramos mayores grados de eficiencia con el gasto actual&#46; En presencia de una productividad marginal decreciente&#44; variable seg&#250;n el tipo de servicios sanitarios y en muchas ocasiones desconocida&#44; evaluar previamente qu&#233; pol&#237;ticas sanitarias acometer resulta una cuesti&#243;n primordial&#46; En algunas pol&#237;ticas habr&#225; que gastar m&#225;s dinero p&#250;blico y en otras tambi&#233;n privado&#44; pero en muchas se podr&#237;a ahorrar dinero&#44; p&#250;blico y privado&#44; si se revisaran los objetivos que se persiguen&#44; el dise&#241;o de las instituciones que van a administrar el gasto y las normas reguladoras&#46;</p><p id="p0135" class="elsevierStylePara elsevierViewall">En Espa&#241;a&#44; la mayor&#237;a de los planes de salud no encuentran su traducci&#243;n en planes de servicios&#46; Si no traducimos los objetivos sobre indicadores de salud y factores de riesgo al lenguaje de los proveedores sanitarios&#44; los planes de salud se quedan en buenas intenciones&#46; &#201;sta es su dificultad mayor y la que explica que el crecimiento de la organizaci&#243;n sanitaria&#44; con financiaci&#243;n fundamentalmente p&#250;blica&#44; haya comportado el desarrollo de una compleja oferta de servicios que&#44; a pesar de poderlos considerar como instrumentos para alcanzar objetivos de salud&#44; parecen gozar de notable autonom&#237;a respecto a sus consecuencias sanitarias<a class="elsevierStyleCrossRef" href="#bib6"><span class="elsevierStyleSup">6</span></a>&#46;</p><p id="p0140" class="elsevierStylePara elsevierViewall">La orientaci&#243;n futura de las pol&#237;ticas de salud deber&#225; cambiar porque el cambio demogr&#225;fico y socioecon&#243;mico har&#225; variar igualmente las bases de la sostenibilidad financiera del estado del bienestar<a class="elsevierStyleCrossRef" href="#bib5"><span class="elsevierStyleSup">5</span></a>&#46; Adem&#225;s de la correcta definici&#243;n del marco de actuaci&#243;n y la pol&#237;tica a realizar&#44; es imprescindible llevar a cabo una evaluaci&#243;n posterior a su puesta en marcha&#44; porque la evaluaci&#243;n <span class="elsevierStyleItalic">ex post</span> rigurosa constituye un elemento fundamental de disciplina del gasto y de transparencia&#44; y una gu&#237;a de gran valor para mejorar el dise&#241;o de las pol&#237;ticas p&#250;blicas&#46; En la actualidad&#44; la noci&#243;n m&#225;s extendida de la evaluaci&#243;n de impacto precisa de la obtenci&#243;n de evidencia contraf&#225;ctica acerca de qu&#233; habr&#237;a ocurrido si el programa no se hubiera implantado&#46; A su vez&#44; para que esta evidencia contrafactual sea v&#225;lida&#44; se requiere aislar los efectos del medio social para poder identificar con precisi&#243;n los efectos de las intervenciones<a class="elsevierStyleCrossRef" href="#bib26"><span class="elsevierStyleSup">26</span></a>&#46;</p><p id="p0145" class="elsevierStylePara elsevierViewall">En Espa&#241;a&#44; nuevas agencias e instituciones incluyen la evaluaci&#243;n de pol&#237;ticas p&#250;blicas entre sus actividades&#46; Recientemente se ha creado la Agencia de Evaluaci&#243;n y Calidad &#40;AEVAL&#41;&#44; dependiente del Ministerio de la Presidencia&#59; en el &#225;mbito auton&#243;mico&#44; en Catalu&#241;a se ha creado el Instituto Catal&#225;n de Evaluaci&#243;n de Pol&#237;ticas p&#250;blicas &#40;IVALUA&#41;&#46; La aparici&#243;n de organismos de evaluaci&#243;n territoriales resulta muy interesante porque el estado de las autonom&#237;as posibilita la puesta en marcha de distintas pol&#237;ticas p&#250;blicas en diferentes territorios&#44; lo cual facilita la realizaci&#243;n de ensayos naturales&#46; No obstante&#44; a&#250;n es pronto para valorar el impacto y el protagonismo de estas nuevas agencias&#46;</p><p id="p0150" class="elsevierStylePara elsevierViewall">Aunque la autoevaluaci&#243;n gubernamental resulta crucial para que las instituciones se impliquen en el proceso&#44; en ocasiones puede ser conveniente contar con la colaboraci&#243;n de evaluadores externos en algunas de las fases del proyecto o pol&#237;tica a desarrollar&#44; como pueden ser el dise&#241;o y la validaci&#243;n&#46; La independencia y la cualificaci&#243;n de los evaluadores externos resulta vital para asegurar la credibilidad de los resultados&#46; Hay que evitar&#44; por tanto&#44; contratar a participantes en el propio programa o a beneficiarios de &#233;l&#46; En ocasiones esta colaboraci&#243;n&#44; bien de equipos universitarios&#44; bien de consultores privados&#44; se realiza por parte de &#8220;amigos&#8221; del programa&#44; con lo cual los resultados resultan sesgados y carentes de validez&#46;</p><p id="p0155" class="elsevierStylePara elsevierViewall">Las administraciones p&#250;blicas pueden hacer sus evaluaciones ellas mismas&#44; contratarlas a agentes externos o limitarse a proporcionar la informaci&#243;n para que los investigadores las lleven a cabo&#46; Har&#237;a falta que se recogiera&#44; en las encuestas que peri&#243;dicamente se llevan a cabo &#40;Encuesta de Poblaci&#243;n Activa&#44; Encuesta Nacional de Salud&#44; etc&#46;&#41;&#44; informaci&#243;n sobre la participaci&#243;n de los ciudadanos en los programas p&#250;blicos&#44; as&#237; como otorgar el derecho de acceso a estas bases de datos&#46; Espa&#241;a ha avanzado mucho en los &#250;ltimos a&#241;os y actualmente es posible acceder a los microdatos de muchas encuestas en los portales web de las administraciones p&#250;blicas&#46;</p><p id="p0160" class="elsevierStylePara elsevierViewall">Es necesario tener en cuenta los resultados de los estudios de evaluaci&#243;n econ&#243;mica&#46; La insistencia sobre que en Espa&#241;a hacen falta m&#225;s estudios de evaluaci&#243;n econ&#243;mica para empezar a tomar decisiones teniendo en cuenta criterios de eficiencia&#44; parece una excusa para evitar abordar decididamente cu&#225;l es el problema&#46; La producci&#243;n de la comunidad cient&#237;fica espa&#241;ola no es nada desde&#241;able&#44; y cada vez tiene mayor calidad y reflejo en las revistas internacionales<a class="elsevierStyleCrossRefs" href="#bib27"><span class="elsevierStyleSup">27&#44;28</span></a>&#44; aunque con algunas lagunas&#44; principalmente en lo que respecta a las intervenciones de salud p&#250;blica<a class="elsevierStyleCrossRef" href="#bib29"><span class="elsevierStyleSup">29</span></a>&#46; Esta producci&#243;n viene reforzada con una gu&#237;a para la evaluaci&#243;n econ&#243;mica aplicada a las tecnolog&#237;as sanitarias realizada recientemente por encargo del Ministerio de Sanidad<a class="elsevierStyleCrossRef" href="#bib30"><span class="elsevierStyleSup">30</span></a>&#46; Tambi&#233;n la Asociaci&#243;n de Econom&#237;a de la Salud se ha posicionado sobre el uso de los resultados de los estudios de evaluaci&#243;n econ&#243;mica&#44; proponiendo una agenda de trabajo espec&#237;fica<a class="elsevierStyleCrossRef" href="#bib31"><span class="elsevierStyleSup">31</span></a>&#46; La experiencia de Reino Unido con el NICE puede servir como ejemplo de su factibilidad y compromiso pol&#237;tico&#46;</p><p id="p0165" class="elsevierStylePara elsevierViewall">Para mejorar la investigaci&#243;n sobre pol&#237;ticas de salud se debe buscar una formaci&#243;n m&#225;s s&#243;lida y rigurosa de profesionales&#44; decisores y estudiantes en la l&#243;gica de los dise&#241;os&#46; Las futuras pol&#237;ticas p&#250;blicas tendr&#225;n dise&#241;os m&#225;s complejos&#44; buscando controlar la influencia de m&#250;ltiples variables externas&#44; lo cual har&#225; m&#225;s dif&#237;cil recopilar la informaci&#243;n necesaria para su an&#225;lisis&#46; La evaluaci&#243;n debe considerar los efectos del tiempo y&#44; en la medida de lo posible&#44; basarse en estudios longitudinales&#46; Las buenas intervenciones sociales son las que pueden demostrar efectos duraderos en el tiempo&#44; no aquellas en que los sujetos&#44; una vez abandonan el programa&#44; pierden lo que ganaron con su permanencia<a class="elsevierStyleCrossRef" href="#bib32"><span class="elsevierStyleSup">32</span></a>&#46;</p><p id="p0170" class="elsevierStylePara elsevierViewall">Al igual que en otros muchos pa&#237;ses&#44; en Espa&#241;a hay una necesidad imperiosa de resultados de evaluaciones de pol&#237;ticas p&#250;blicas&#46; Una mejor pol&#237;tica de salud precisa una mejor pol&#237;tica a secas&#58; rendici&#243;n de cuentas y libre expresi&#243;n&#44; estabilidad pol&#237;tica y ausencia de violencia &#40;muchas leyes se utilizan para enfrentar a partidos pol&#237;ticos&#41;&#44; y efectividad gubernamental&#46; Una sociedad moderna y democr&#225;tica debe exigir a los pol&#237;ticos y a las administraciones que rindan cuentas&#44; lo que impone un proceso transparente de toma de decisiones en relaci&#243;n a la asignaci&#243;n de recursos p&#250;blicos&#46;</p></span><span id="s0055" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Declaraciones de autor&#237;a</span><p id="p0205" class="elsevierStylePara elsevierViewall">Ambos autores han contribuido por igual al dise&#241;o y la redacci&#243;n del manuscrito&#46;</p></span><span id="s0060" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Financiaci&#243;n</span><p id="p0210" class="elsevierStylePara elsevierViewall">Ninguna&#46;</p></span><span id="s0065" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Conflictos de intereses</span><p id="p0215" class="elsevierStylePara elsevierViewall">Los autores declaran no tener ning&#250;n conflicto de inter&#233;s&#46;</p></span></span>"
    "textoCompletoSecciones" => array:1 [
      "secciones" => array:14 [
        0 => array:2 [
          "identificador" => "xres11676"
          "titulo" => "Resumen"
        ]
        1 => array:2 [
          "identificador" => "xpalclavsec13133"
          "titulo" => "Palabras clave"
        ]
        2 => array:2 [
          "identificador" => "xres11675"
          "titulo" => "Abstract"
        ]
        3 => array:2 [
          "identificador" => "xpalclavsec13134"
          "titulo" => "Keywords"
        ]
        4 => array:2 [
          "identificador" => "s0005"
          "titulo" => "Introducci&#243;n&#58; &#191;Qu&#233; se entiende por evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#63;"
        ]
        5 => array:2 [
          "identificador" => "s0010"
          "titulo" => "Perspectiva econ&#243;mica de las pol&#237;ticas de salud"
        ]
        6 => array:3 [
          "identificador" => "s0015"
          "titulo" => "Tipos de evaluaci&#243;n de pol&#237;ticas p&#250;blicas y de dise&#241;os evaluativos"
          "secciones" => array:2 [
            0 => array:2 [
              "identificador" => "s0020"
              "titulo" => "La evaluaci&#243;n econ&#243;mica de las pol&#237;ticas p&#250;blicas"
            ]
            1 => array:2 [
              "identificador" => "s0025"
              "titulo" => "Algunas t&#233;cnicas anal&#237;ticas"
            ]
          ]
        ]
        7 => array:3 [
          "identificador" => "s0030"
          "titulo" => "La evaluaci&#243;n de las pol&#237;ticas de p&#250;blicas de salud&#46; &#191;Qu&#233; podemos aprender de otros pa&#237;ses&#63;"
          "secciones" => array:2 [
            0 => array:2 [
              "identificador" => "s0035"
              "titulo" => "Un ejemplo destacable&#58; el National Institute for Health and Clinical Excellence &#40;NICE&#41;"
            ]
            1 => array:2 [
              "identificador" => "s0040"
              "titulo" => "Otros ejemplos"
            ]
          ]
        ]
        8 => array:2 [
          "identificador" => "s0045"
          "titulo" => "Conclusiones y retos para el futuro"
        ]
        9 => array:2 [
          "identificador" => "s0055"
          "titulo" => "Declaraciones de autor&#237;a"
        ]
        10 => array:2 [
          "identificador" => "s0060"
          "titulo" => "Financiaci&#243;n"
        ]
        11 => array:2 [
          "identificador" => "s0065"
          "titulo" => "Conflictos de intereses"
        ]
        12 => array:2 [
          "identificador" => "xack1044"
          "titulo" => "Agradecimientos"
        ]
        13 => array:1 [
          "titulo" => "Bibliograf&#237;a"
        ]
      ]
    ]
    "pdfFichero" => "main.pdf"
    "tienePdf" => true
    "fechaRecibido" => "2010-02-05"
    "fechaAceptado" => "2010-06-03"
    "PalabrasClave" => array:2 [
      "es" => array:1 [
        0 => array:4 [
          "clase" => "keyword"
          "titulo" => "Palabras clave"
          "identificador" => "xpalclavsec13133"
          "palabras" => array:3 [
            0 => "Evaluaci&#243;n de pol&#237;ticas p&#250;blicas"
            1 => "Bienestar social"
            2 => "Perspectiva econ&#243;mica"
          ]
        ]
      ]
      "en" => array:1 [
        0 => array:4 [
          "clase" => "keyword"
          "titulo" => "Keywords"
          "identificador" => "xpalclavsec13134"
          "palabras" => array:3 [
            0 => "Public policy evaluation"
            1 => "Social welfare"
            2 => "Economic perspective"
          ]
        ]
      ]
    ]
    "tieneResumen" => true
    "resumen" => array:2 [
      "es" => array:2 [
        "titulo" => "Resumen"
        "resumen" => "<p id="sp0010" class="elsevierStyleSimplePara elsevierViewall">La evaluaci&#243;n de pol&#237;ticas p&#250;blicas no siempre resulta una tarea obligatoria para las administraciones&#46; A priori&#44; los instrumentos de intervenci&#243;n por parte del estado se eligen y calculan para maximizar la funci&#243;n de bienestar social&#44; la cual debe estar impl&#237;cita en las pol&#237;ticas llevadas a cabo o en el programa electoral del gobierno&#46; Sin embargo&#44; sorprende que en ocasiones el estado act&#250;a sin cuestionarse si el funcionamiento de las instituciones y las pol&#237;ticas p&#250;blicas correspondientes pueden lograr de manera efectiva y eficiente ese objetivo&#46; La ausencia de evaluaci&#243;n lleva a que programas inefectivos e ineficientes provoquen el drenaje de los escasos recursos disponibles&#44; que podr&#237;an utilizarse en otras iniciativas de mayor efecto sobre el bienestar de la poblaci&#243;n&#46;</p>"
      ]
      "en" => array:2 [
        "titulo" => "Abstract"
        "resumen" => "<p id="sp0015" class="elsevierStyleSimplePara elsevierViewall">Public policy evaluation is not always a mandatory task for administrations&#46; A priori&#44; the instruments for government intervention are chosen and calculated to maximize the social welfare function that should be implicit in the policies undertaken&#44; or in the government&#8217;s electoral program&#46; However&#44; it is surprising how the government sometimes acts without questioning whether institutional functioning and the corresponding public policies can effectively and efficiently achieve this objective&#46; The absence of evaluation drains the scarce available resources towards ineffective and inefficient programs&#44; which could be otherwise used in other initiatives with a greater impact on the population&#8217;s welfare&#46;</p>"
      ]
    ]
    "multimedia" => array:2 [
      0 => array:7 [
        "identificador" => "t0005"
        "etiqueta" => "Tabla 1"
        "tipo" => "MULTIMEDIATABLA"
        "mostrarFloat" => true
        "mostrarDisplay" => false
        "tabla" => array:1 [
          "tablatextoimagen" => array:1 [
            0 => array:2 [
              "tabla" => array:1 [
                0 => """
                  <table border="0" frame="\n
                  \t\t\t\t\tvoid\n
                  \t\t\t\t" class=""><tbody title="tbody"><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " colspan="2" align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluaci&#243;n seg&#250;n la perspectiva</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Impacto&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Conocer si una pol&#237;tica ha tenido efecto y las causas de ese efecto&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De gesti&#243;n&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Monitorizar y mejorar la ejecuci&#243;n de los programas y servicios&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De desarrollo&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Desarrollar y mejorar los tratamientos&#44; servicios y pol&#237;ticas&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Econ&#243;mica&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Establecer la relaci&#243;n entre los costes y las consecuencias de la intervenci&#243;n&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " colspan="2" align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluaci&#243;n seg&#250;n la finalidad</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Formativa&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Realizada durante el desarrollo de la pol&#237;tica para obtener informaci&#243;n para mejorarla&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Sumativa &#40;de impacto&#41;&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Realizada una vez finalizada la pol&#237;tica para analizar su efectividad&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " colspan="2" align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluaci&#243;n seg&#250;n el nivel</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De estructura&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluar los recursos materiales y humanos&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De proceso&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Valorar los servicios y actividades producidos por el programa&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De resultados&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Verificar si se han alcanzado los objetivos establecidos&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Estrat&#233;gica&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Conocer si la pol&#237;tica se corresponde con las necesidades de la poblaci&#243;n y con las prioridades establecidas&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr></tbody></table>
                  """
              ]
              "imagenFichero" => array:1 [
                0 => "xTab11171.png"
              ]
            ]
          ]
        ]
        "descripcion" => array:1 [
          "es" => "<p id="sp0005" class="elsevierStyleSimplePara elsevierViewall">Tipos de evaluaci&#243;n de pol&#237;ticas p&#250;blicas<a class="elsevierStyleCrossRef" href="#bib13"><span class="elsevierStyleSup">13</span></a></p>"
        ]
      ]
      1 => array:5 [
        "identificador" => "b0005"
        "tipo" => "MULTIMEDIATEXTO"
        "mostrarFloat" => false
        "mostrarDisplay" => true
        "texto" => array:1 [
          "textoCompleto" => "<span class="elsevierStyleSections"><span id="s0050" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Puntos clave</span><p id="p0180" class="elsevierStylePara elsevierViewall"><ul class="elsevierStyleList" id="li0005"><li class="elsevierStyleListItem" id="u0005"><span class="elsevierStyleLabel">&#8226;</span><p id="p0185" class="elsevierStylePara elsevierViewall">Antes de aumentar el gasto en pol&#237;ticas p&#250;blicas deben revisarse los objetivos que se persiguen&#44; el dise&#241;o de las instituciones que van a administrarlos y las normas reguladoras&#46;</p></li><li class="elsevierStyleListItem" id="u0010"><span class="elsevierStyleLabel">&#8226;</span><p id="p0190" class="elsevierStylePara elsevierViewall">Una buena evaluaci&#243;n debe ser capaz de detectar las discrepancias entre el desempe&#241;o real y el esperado de la pol&#237;tica propuesta&#46;</p></li><li class="elsevierStyleListItem" id="u0015"><span class="elsevierStyleLabel">&#8226;</span><p id="p0195" class="elsevierStylePara elsevierViewall">Desde una perspectiva econ&#243;mica&#44; las pol&#237;ticas de salud han de intentar traducir las indicaciones de los planes de salud&#44; que la producci&#243;n de salud no sea m&#225;s costosa de lo necesario y que la salud obtenida no se valore menos de lo que cuesta&#46;</p></li><li class="elsevierStyleListItem" id="u0020"><span class="elsevierStyleLabel">&#8226;</span><p id="p0200" class="elsevierStylePara elsevierViewall">Los m&#250;ltiples m&#233;todos disponibles&#44; as&#237; como las experiencias de otros pa&#237;ses&#44; animan a llevar a cabo la tarea evaluadora&#46;</p></li></ul></p></span></span>"
        ]
      ]
    ]
    "bibliografia" => array:2 [
      "titulo" => "Bibliograf&#237;a"
      "seccion" => array:1 [
        0 => array:2 [
          "identificador" => "bb0005"
          "bibliografiaReferencia" => array:32 [
            0 => array:3 [
              "identificador" => "bib1"
              "etiqueta" => "1"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Public policy analysis&#46; An introduction"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "WN&#46; Dunn"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:3 [
                        "titulo" => "Englewood Cliff"
                        "fecha" => "1994"
                        "editorial" => "Prentice-Hall"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            1 => array:3 [
              "identificador" => "bib2"
              "etiqueta" => "2"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Los siete pecados capitales de la evaluaci&#243;n del impacto&#46; Informe SESPAS 2008"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "C Victora"
                            1 => "I&#46; Santos"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:7 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2008"
                        "volumen" => "22"
                        "numero" => "Supl 1"
                        "paginaInicial" => "1"
                        "paginaFinal" => "7"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/18405546"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            2 => array:3 [
              "identificador" => "bib3"
              "etiqueta" => "3"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:3 [
                            0 => "JF McKenzie"
                            1 => "BL Neiger"
                            2 => "JL&#46; Smeltzer"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Planning&#44; implementing and evaluating health population programs"
                        "fecha" => "2005"
                        "editorial" => "Benjamin Cummings"
                        "editorialLocalizacion" => "San Francisco"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            3 => array:3 [
              "identificador" => "bib4"
              "etiqueta" => "4"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Derechos humanos&#44; una oportunidad para las pol&#237;ticas p&#250;blicas en salud"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "A Franco-Giraldo"
                            1 => "C&#46; &#193;lvarez-Dardet"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2008"
                        "volumen" => "22"
                        "paginaInicial" => "280"
                        "paginaFinal" => "286"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/18579055"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            4 => array:3 [
              "identificador" => "bib5"
              "etiqueta" => "5"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Una visi&#243;n de futuro de las pol&#237;ticas de salud"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "G&#46; L&#243;pez Casasnovas"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1016/j.gaceta.2009.02.003"
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2009"
                        "volumen" => "23"
                        "paginaInicial" => "458"
                        "paginaFinal" => "461"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19540627"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            5 => array:3 [
              "identificador" => "bib6"
              "etiqueta" => "6"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "G L&#243;pez Casasnovas"
                            1 => "V&#46; Ort&#250;n Rubio"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Econom&#237;a y salud&#58; fundamentos y pol&#237;ticas"
                        "fecha" => "1998"
                        "editorial" => "Ediciones Encuentro"
                        "editorialLocalizacion" => "Barcelona"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            6 => array:3 [
              "identificador" => "bib7"
              "etiqueta" => "7"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "The improbable plunge&#46; What facts refute reasons to expect that the effectiveness of HPV vaccination programs to prevent cervical cancer could be low&#63;"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "M&#46; Porta"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1016/j.ypmed.2009.04.004"
                      "Revista" => array:6 [
                        "tituloSerie" => "Prev Med"
                        "fecha" => "2009"
                        "volumen" => "48"
                        "paginaInicial" => "407"
                        "paginaFinal" => "410"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19450725"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            7 => array:3 [
              "identificador" => "bib8"
              "etiqueta" => "8"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Una reconsideraci&#243;n del valor del gasto sanitario agregado&#46; Nuevos enfoques econ&#243;micos e implicaciones para la adopci&#243;n de pol&#237;ticas p&#250;blicas en Espa&#241;a"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "A Garc&#237;a-Alt&#233;s"
                            1 => "J Puig Junoy"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "LibroEditado" => array:2 [
                        "titulo" => "&#191;M&#225;s recursos para la salud&#63;"
                        "serieFecha" => "2004"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            8 => array:3 [
              "identificador" => "bib9"
              "etiqueta" => "9"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Exploring changes in dental workforce&#44; dental care utilization and dental caries levels in Europe&#44; 1990&#8211;2004"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "J Pinilla"
                            1 => "B&#46; Gonz&#225;lez"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Int Dent J"
                        "fecha" => "2009"
                        "volumen" => "59"
                        "paginaInicial" => "87"
                        "paginaFinal" => "95"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19489288"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            9 => array:3 [
              "identificador" => "bib10"
              "etiqueta" => "10"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "J&#46; &#216;vretveit"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Integrated quality development for public healthcare"
                        "fecha" => "1999"
                        "editorial" => "Norwegian Medical Association"
                        "editorialLocalizacion" => "Oslo"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            10 => array:3 [
              "identificador" => "bib11"
              "etiqueta" => "11"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => true
                          "autores" => array:3 [
                            0 => "R Windsor"
                            1 => "T Branowski"
                            2 => "N Clark"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Evaluation of health promotion&#44; health education and disease prevention programs"
                        "fecha" => "1994"
                        "editorial" => "Mayfield Co"
                        "editorialLocalizacion" => "Mountain View &#40;CA&#41;"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            11 => array:3 [
              "identificador" => "bib12"
              "etiqueta" => "12"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "R&#46; Pineault"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "La planificaci&#243;n sanitaria"
                        "fecha" => "1981"
                        "editorial" => "Masson"
                        "editorialLocalizacion" => "Barcelona"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            12 => array:3 [
              "identificador" => "bib13"
              "etiqueta" => "13"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Nebot M&#44; L&#243;pez MJ&#44; Ariza C&#44; et al&#46; Evaluaci&#243;n de efectividad en salud p&#250;blica&#46; Terminolog&#237;a&#44; fundamentos y bases metodol&#243;gicas&#46; Gac Sanit&#46; 2010&#59; Supl&#46; En prensa&#46;"
                ]
              ]
            ]
            13 => array:3 [
              "identificador" => "bib14"
              "etiqueta" => "14"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Victora CG&#44; Habicht JP&#44; Bryce J&#46; Evidence-based public health&#58; moving beyond randomized trials&#46; Am J Public Health&#46; 2004&#59;94&#58;400&#8211;5&#46;"
                ]
              ]
            ]
            14 => array:3 [
              "identificador" => "bib15"
              "etiqueta" => "15"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Impact of the Spanish smoking law on exposure to secondhand smoke in offices and hospitality venues&#58; before and after study"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => true
                          "autores" => array:3 [
                            0 => "M Nebot"
                            1 => "MJ L&#243;pez"
                            2 => "C Ariza"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1289/ehp.11845"
                      "Revista" => array:6 [
                        "tituloSerie" => "Environ Health Perspect"
                        "fecha" => "2009"
                        "volumen" => "117"
                        "paginaInicial" => "344"
                        "paginaFinal" => "347"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19337506"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            15 => array:3 [
              "identificador" => "bib16"
              "etiqueta" => "16"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "L&#243;pez-Nicol&#225;s A&#44; Pinilla J&#44; Negr&#237;n MA&#46; Impacto econ&#243;mico de la regulaci&#243;n del consumo de tabaco en el &#225;mbito de la hosteler&#237;a&#58; efectos previsibles de la ampliaci&#243;n de la Ley 28&#47;2005&#46; Informe encargado por el Comit&#233; Nacional de Prevenci&#243;n del Tabaquismo &#40;CNP&#41; a la Asociaci&#243;n de Econom&#237;a de la Salud &#40;AES&#41;&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.cnpt.es/docu_pdf/Informe_AES.pdf">http&#58;&#47;&#47;www&#46;cnpt&#46;es&#47;docu&#95;pdf&#47;Informe&#95;AES&#46;pdf</a>"
                ]
              ]
            ]
            16 => array:3 [
              "identificador" => "bib17"
              "etiqueta" => "17"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Posibilidades y limitaciones de la gesti&#243;n por resultados de salud&#44; el pago por objetivos y el redireccionamiento de los incentivos&#46; Informe SESPAS 2008"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "S Peir&#243;"
                            1 => "A&#46; Garc&#237;a-Alt&#233;s"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:7 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2008"
                        "volumen" => "22"
                        "numero" => "Supl 1"
                        "paginaInicial" => "143"
                        "paginaFinal" => "155"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/18405564"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            17 => array:3 [
              "identificador" => "bib18"
              "etiqueta" => "18"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "M&#46; Gold"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Cost-effectiveness in health and medicine"
                        "fecha" => "1996"
                        "editorial" => "Oxford University Press"
                        "editorialLocalizacion" => "New York"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            18 => array:3 [
              "identificador" => "bib19"
              "etiqueta" => "19"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "An introduction to economic health evaluation in health care"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "A&#46; McGuire"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "LibroEditado" => array:2 [
                        "titulo" => "Economic evaluation in health care&#58; emerging theory with practice"
                        "serieFecha" => "2001"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            19 => array:3 [
              "identificador" => "bib20"
              "etiqueta" => "20"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Evaluar intervenciones sanitarias sin experimentos"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "M&#46; Vera-Hern&#225;ndez"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2003"
                        "volumen" => "17"
                        "paginaInicial" => "238"
                        "paginaFinal" => "248"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/12841987"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            20 => array:3 [
              "identificador" => "bib21"
              "etiqueta" => "21"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "The impact of nearly universal insurance coverage on health care utilization&#58; evidence from Medicare"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:3 [
                            0 => "D Card"
                            1 => "C Dobkin"
                            2 => "N&#46; Maestas"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1257/aer.98.5.2242"
                      "Revista" => array:6 [
                        "tituloSerie" => "Am Econ Rev"
                        "fecha" => "2008"
                        "volumen" => "98"
                        "paginaInicial" => "2242"
                        "paginaFinal" => "2258"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19079738"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            21 => array:3 [
              "identificador" => "bib22"
              "etiqueta" => "22"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "RAND Corporation&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.rand.org/health/">http&#58;&#47;&#47;www&#46;rand&#46;org&#47;health&#47;</a>"
                ]
              ]
            ]
            22 => array:3 [
              "identificador" => "bib23"
              "etiqueta" => "23"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Departamento de Planeaci&#243;n del Gobierno de Colombia&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.dnp.gov.co/PortalWeb/Programas/Sinergia/EvaluacionesEstrat%C3%A9gicas/EvaluacionesdeImpacto/ProgramaEmpleoenAcci%C3%B3n/tabid/838/Default.aspx">http&#58;&#47;&#47;www&#46;dnp&#46;gov&#46;co&#47;PortalWeb&#47;Programas&#47;Sinergia&#47;EvaluacionesEstrat&#37;C3&#37;A9gicas&#47;EvaluacionesdeImpacto&#47;ProgramaEmpleoenAcci&#37;C3&#37;B3n&#47;tabid&#47;838&#47;Default&#46;aspx</a>"
                ]
              ]
            ]
            23 => array:3 [
              "identificador" => "bib24"
              "etiqueta" => "24"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Instituto Nacional de Salud P&#250;blica de M&#233;xico&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.insp.mx/Portal/Inf/lineas.php">http&#58;&#47;&#47;www&#46;insp&#46;mx&#47;Portal&#47;Inf&#47;lineas&#46;php</a>"
                ]
              ]
            ]
            24 => array:3 [
              "identificador" => "bib25"
              "etiqueta" => "25"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Spanish Trust Fund for Impact Evaluation &#40;SIEF&#41;&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://web.worldbank.org">http&#58;&#47;&#47;web&#46;worldbank&#46;org&#47;WBSITE&#47;EXTERNAL&#47;EXTABOUTUS&#47;ORGANIZATION&#47;EXTHDNETWORK&#47;EXTHDOFFICE&#47;0&#44;&#44;contentMDK&#58;22383030&#8764;menuPK&#58;6508083&#8764;pagePK&#58;64168445&#8764;piPK&#58;64168309&#8764;theSitePK&#58;5485727&#44;00&#46;html</a>"
                ]
              ]
            ]
            25 => array:3 [
              "identificador" => "bib26"
              "etiqueta" => "26"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "L&#46; Baker"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Evaluaci&#243;n de impacto de los proyectos de desarrollo en la pobreza&#46; Manual para profesionales"
                        "fecha" => "2000"
                        "editorial" => "Banco Mundial"
                        "editorialLocalizacion" => "Washington"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            26 => array:3 [
              "identificador" => "bib27"
              "etiqueta" => "27"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Twenty years of health care economic analysis in Spain&#58; are we doing well&#63;"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "A&#46; Garc&#237;a-Alt&#233;s"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Health Econ"
                        "fecha" => "2001"
                        "volumen" => "10"
                        "paginaInicial" => "715"
                        "paginaFinal" => "729"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/11747053"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            27 => array:3 [
              "identificador" => "bib28"
              "etiqueta" => "28"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "La evaluaci&#243;n econ&#243;mica de tecnolog&#237;as sanitarias en Espa&#241;a&#46; Situaci&#243;n actual y utilidad como gu&#237;a en la asignaci&#243;n de recursos sanitarios"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:3 [
                            0 => "J Oliva"
                            1 => "JA Sacrist&#225;n"
                            2 => "J&#46; del Llano"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:5 [
                        "tituloSerie" => "Informaci&#243;n Comercial Espa&#241;ola &#40;ICE&#41;"
                        "fecha" => "2003"
                        "volumen" => "804"
                        "paginaInicial" => "155"
                        "paginaFinal" => "167"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            28 => array:3 [
              "identificador" => "bib29"
              "etiqueta" => "29"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Prevenci&#243;n en salud&#58; &#191;inversi&#243;n rentable&#63; Eficiencia econ&#243;mica de las intervenciones preventivas"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "A Esperato"
                            1 => "A&#46; Garc&#237;a-Alt&#233;s"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2007"
                        "volumen" => "21"
                        "paginaInicial" => "150"
                        "paginaFinal" => "161"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/17419933"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            29 => array:3 [
              "identificador" => "bib30"
              "etiqueta" => "30"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Propuesta de gu&#237;a para la evaluaci&#243;n econ&#243;mica aplicada a las tecnolog&#237;as sanitarias"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => true
                          "autores" => array:3 [
                            0 => "J L&#243;pez"
                            1 => "J Oliva"
                            2 => "F Anto&#241;anzas"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1016/j.gaceta.2009.07.011"
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2010"
                        "volumen" => "24"
                        "paginaInicial" => "154"
                        "paginaFinal" => "170"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19959258"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            30 => array:3 [
              "identificador" => "bib31"
              "etiqueta" => "31"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Asociaci&#243;n Econom&#237;a de la Salud &#40;AES&#41;&#46; Posici&#243;n de la Asociaci&#243;n de Econom&#237;a de la Salud en relaci&#243;n a la necesidad de un mayor uso de la evaluaci&#243;n econ&#243;mica en las decisiones que afectan a la financiaci&#243;n p&#250;blica de las prestaciones y tecnolog&#237;as en el Sistema Nacional de Salud&#46; &#40;Acceso el 26 de noviembre de 2008&#46;&#41; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.aes.es/Publicaciones/AESEE.pdf">http&#58;&#47;&#47;www&#46;aes&#46;es&#47;Publicaciones&#47;AESEE&#46;pdf</a>"
                ]
              ]
            ]
            31 => array:3 [
              "identificador" => "bib32"
              "etiqueta" => "32"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "The inhealthy state of health policy research"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "S Majumdar"
                            1 => "S&#46; Soumerai"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:5 [
                        "tituloSerie" => "Health Affaire"
                        "fecha" => "2009"
                        "volumen" => "28"
                        "paginaInicial" => "900"
                        "paginaFinal" => "908"
                      ]
                    ]
                  ]
                ]
              ]
            ]
          ]
        ]
      ]
    ]
    "agradecimientos" => array:1 [
      0 => array:3 [
        "identificador" => "xack1044"
        "titulo" => "Agradecimientos"
        "texto" => "<p id="p0220" class="elsevierStylePara elsevierViewall">Queremos agradecer la ayuda de Manel Nebot en los apartados de evaluaci&#243;n de pol&#237;ticas y dise&#241;os evaluativos&#44; y la de Marcos Vera por compartir sus conocimientos sobre las instituciones internacionales que se dedican a la evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#46;</p>"
      ]
    ]
  ]
  "idiomaDefecto" => "es"
  "url" => "/02139111/00000024000000S1/v1_201301221241/S021391111000169X/v1_201301221241/es/main.assets"
  "Apartado" => array:4 [
    "identificador" => "682"
    "tipo" => "SECCION"
    "es" => array:2 [
      "titulo" => "Elementos estrat&#233;gicos"
      "idiomaDefecto" => true
    ]
    "idiomaDefecto" => "es"
  ]
  "PDF" => "https://static.elsevier.es/multimedia/02139111/00000024000000S1/v1_201301221241/S021391111000169X/v1_201301221241/es/main.pdf?idApp=WGSE&text.app=https://gacetasanitaria.org/"
  "EPUB" => "https://multimedia.elsevier.es/PublicationsMultimediaV1/item/epub/S021391111000169X?idApp=WGSE"
]
Compartir
Publique en esta revista
Información de la revista

Estadísticas

Siga este enlace para acceder al texto completo del artículo

La evaluación de políticas públicas. Informe SESPAS 2010
Evaluation of public policies. SESPAS Report 2010
Jaime Pinillaa,
Autor para correspondencia
jpinilla@dmc.ulpgc.es

Autor para correspondencia.
, Anna García-Altésb,c,d
a Departamento de Métodos Cuantitativos en Economía y Gestión, Facultad de Ciencias Económicas y Empresariales, Universidad de Las Palmas de Gran Canaria, España
b King’s College London y London School of Economics, London, UK
c Fundación Instituto de Investigación en Servicios de Salud, Valencia, España
d CIBER de Epidemiología y Salud Pública (CIBERESP), España
Leído
2578
Veces
se ha leído el artículo
642
Total PDF
1936
Total HTML
Compartir estadísticas
 array:24 [
  "pii" => "S021391111000169X"
  "issn" => "02139111"
  "doi" => "10.1016/j.gaceta.2010.06.001"
  "estado" => "S300"
  "fechaPublicacion" => "2010-12-01"
  "aid" => "311"
  "copyright" => "SESPAS"
  "copyrightAnyo" => "2010"
  "documento" => "article"
  "crossmark" => 0
  "licencia" => "http://creativecommons.org/licenses/by-nc-nd/4.0/"
  "subdocumento" => "fla"
  "cita" => "Gac Sanit. 2010;24 Supl 1:114-9"
  "abierto" => array:3 [
    "ES" => true
    "ES2" => true
    "LATM" => true
  ]
  "gratuito" => true
  "lecturas" => array:2 [
    "total" => 8311
    "formatos" => array:3 [
      "EPUB" => 245
      "HTML" => 7222
      "PDF" => 844
    ]
  ]
  "itemSiguiente" => array:19 [
    "pii" => "S0213911110002542"
    "issn" => "02139111"
    "doi" => "10.1016/j.gaceta.2010.09.011"
    "estado" => "S300"
    "fechaPublicacion" => "2010-12-01"
    "aid" => "351"
    "copyright" => "SESPAS"
    "documento" => "article"
    "crossmark" => 0
    "licencia" => "http://creativecommons.org/licenses/by-nc-nd/4.0/"
    "subdocumento" => "ssu"
    "cita" => "Gac Sanit. 2010;24 Supl 1:120-7"
    "abierto" => array:3 [
      "ES" => true
      "ES2" => true
      "LATM" => true
    ]
    "gratuito" => true
    "lecturas" => array:2 [
      "total" => 6040
      "formatos" => array:3 [
        "EPUB" => 215
        "HTML" => 5152
        "PDF" => 673
      ]
    ]
    "es" => array:11 [
      "idiomaDefecto" => true
      "titulo" => "La justificaci&#243;n de las pol&#237;ticas de salud p&#250;blica desde la &#233;tica y la eficiencia econ&#243;mica&#46; Informe SESPAS 2010"
      "tienePdf" => "es"
      "tieneTextoCompleto" => "es"
      "tieneResumen" => array:2 [
        0 => "es"
        1 => "en"
      ]
      "paginas" => array:1 [
        0 => array:2 [
          "paginaInicial" => "120"
          "paginaFinal" => "127"
        ]
      ]
      "titulosAlternativos" => array:1 [
        "en" => array:1 [
          "titulo" => "Grounding public health policies in ethics and economic efficiency&#46; SESPAS report 2010"
        ]
      ]
      "contieneResumen" => array:2 [
        "es" => true
        "en" => true
      ]
      "contieneTextoCompleto" => array:1 [
        "es" => true
      ]
      "contienePdf" => array:1 [
        "es" => true
      ]
      "autores" => array:1 [
        0 => array:2 [
          "autoresLista" => "Miguel A&#46; Ramiro Avil&#233;s, F&#233;lix Lobo"
          "autores" => array:2 [
            0 => array:2 [
              "nombre" => "Miguel A&#46;"
              "apellidos" => "Ramiro Avil&#233;s"
            ]
            1 => array:2 [
              "nombre" => "F&#233;lix"
              "apellidos" => "Lobo"
            ]
          ]
        ]
      ]
    ]
    "idiomaDefecto" => "es"
    "EPUB" => "https://multimedia.elsevier.es/PublicationsMultimediaV1/item/epub/S0213911110002542?idApp=WGSE"
    "url" => "/02139111/00000024000000S1/v1_201301221241/S0213911110002542/v1_201301221241/es/main.assets"
  ]
  "itemAnterior" => array:19 [
    "pii" => "S0213911110002268"
    "issn" => "02139111"
    "doi" => "10.1016/j.gaceta.2010.09.010"
    "estado" => "S300"
    "fechaPublicacion" => "2010-12-01"
    "aid" => "347"
    "copyright" => "SESPAS"
    "documento" => "article"
    "crossmark" => 0
    "licencia" => "http://creativecommons.org/licenses/by-nc-nd/4.0/"
    "subdocumento" => "ssu"
    "cita" => "Gac Sanit. 2010;24 Supl 1:109-13"
    "abierto" => array:3 [
      "ES" => true
      "ES2" => true
      "LATM" => true
    ]
    "gratuito" => true
    "lecturas" => array:2 [
      "total" => 6695
      "formatos" => array:3 [
        "EPUB" => 243
        "HTML" => 5752
        "PDF" => 700
      ]
    ]
    "es" => array:11 [
      "idiomaDefecto" => true
      "titulo" => "La evaluaci&#243;n del impacto en la salud&#58; una v&#237;a para introducir la salud en todas las pol&#237;ticas&#46; Informe SESPAS 2010"
      "tienePdf" => "es"
      "tieneTextoCompleto" => "es"
      "tieneResumen" => array:2 [
        0 => "es"
        1 => "en"
      ]
      "paginas" => array:1 [
        0 => array:2 [
          "paginaInicial" => "109"
          "paginaFinal" => "113"
        ]
      ]
      "titulosAlternativos" => array:1 [
        "en" => array:1 [
          "titulo" => "Health impact assessment&#58; One way to introduce health in all policies&#46; SESPAS Report 2010"
        ]
      ]
      "contieneResumen" => array:2 [
        "es" => true
        "en" => true
      ]
      "contieneTextoCompleto" => array:1 [
        "es" => true
      ]
      "contienePdf" => array:1 [
        "es" => true
      ]
      "autores" => array:1 [
        0 => array:2 [
          "autoresLista" => "Santiago Esnaola, Amaia Bacigalupe, Elvira Sanz, Elena Aldasoro, Carlos Calder&#243;n, Juan Zuazagoitia, Koldo Cambra"
          "autores" => array:7 [
            0 => array:2 [
              "nombre" => "Santiago"
              "apellidos" => "Esnaola"
            ]
            1 => array:2 [
              "nombre" => "Amaia"
              "apellidos" => "Bacigalupe"
            ]
            2 => array:2 [
              "nombre" => "Elvira"
              "apellidos" => "Sanz"
            ]
            3 => array:2 [
              "nombre" => "Elena"
              "apellidos" => "Aldasoro"
            ]
            4 => array:2 [
              "nombre" => "Carlos"
              "apellidos" => "Calder&#243;n"
            ]
            5 => array:2 [
              "nombre" => "Juan"
              "apellidos" => "Zuazagoitia"
            ]
            6 => array:2 [
              "nombre" => "Koldo"
              "apellidos" => "Cambra"
            ]
          ]
        ]
      ]
    ]
    "idiomaDefecto" => "es"
    "EPUB" => "https://multimedia.elsevier.es/PublicationsMultimediaV1/item/epub/S0213911110002268?idApp=WGSE"
    "url" => "/02139111/00000024000000S1/v1_201301221241/S0213911110002268/v1_201301221241/es/main.assets"
  ]
  "es" => array:18 [
    "idiomaDefecto" => true
    "titulo" => "La evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#46; Informe SESPAS 2010"
    "tieneTextoCompleto" => true
    "paginas" => array:1 [
      0 => array:2 [
        "paginaInicial" => "114"
        "paginaFinal" => "119"
      ]
    ]
    "autores" => array:1 [
      0 => array:4 [
        "autoresLista" => "Jaime Pinilla, Anna Garc&#237;a-Alt&#233;s"
        "autores" => array:2 [
          0 => array:4 [
            "nombre" => "Jaime"
            "apellidos" => "Pinilla"
            "email" => array:1 [
              0 => "jpinilla&#64;dmc&#46;ulpgc&#46;es"
            ]
            "referencia" => array:2 [
              0 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">a</span>"
                "identificador" => "aff1"
              ]
              1 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">¿</span>"
                "identificador" => "cor1"
              ]
            ]
          ]
          1 => array:3 [
            "nombre" => "Anna"
            "apellidos" => "Garc&#237;a-Alt&#233;s"
            "referencia" => array:3 [
              0 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">b</span>"
                "identificador" => "aff2"
              ]
              1 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">c</span>"
                "identificador" => "aff3"
              ]
              2 => array:2 [
                "etiqueta" => "<span class="elsevierStyleSup">d</span>"
                "identificador" => "aff4"
              ]
            ]
          ]
        ]
        "afiliaciones" => array:4 [
          0 => array:3 [
            "entidad" => "Departamento de M&#233;todos Cuantitativos en Econom&#237;a y Gesti&#243;n&#44; Facultad de Ciencias Econ&#243;micas y Empresariales&#44; Universidad de Las Palmas de Gran Canaria&#44; Espa&#241;a"
            "etiqueta" => "<span class="elsevierStyleSup">a</span>"
            "identificador" => "aff1"
          ]
          1 => array:3 [
            "entidad" => "King&#8217;s College London y London School of Economics&#44; London&#44; UK"
            "etiqueta" => "<span class="elsevierStyleSup">b</span>"
            "identificador" => "aff2"
          ]
          2 => array:3 [
            "entidad" => "Fundaci&#243;n Instituto de Investigaci&#243;n en Servicios de Salud&#44; Valencia&#44; Espa&#241;a"
            "etiqueta" => "<span class="elsevierStyleSup">c</span>"
            "identificador" => "aff3"
          ]
          3 => array:3 [
            "entidad" => "CIBER de Epidemiolog&#237;a y Salud P&#250;blica &#40;CIBERESP&#41;&#44; Espa&#241;a"
            "etiqueta" => "<span class="elsevierStyleSup">d</span>"
            "identificador" => "aff4"
          ]
        ]
        "correspondencia" => array:1 [
          0 => array:3 [
            "identificador" => "cor1"
            "etiqueta" => "&#8270;"
            "correspondencia" => "Autor para correspondencia&#46;"
          ]
        ]
      ]
    ]
    "titulosAlternativos" => array:1 [
      "en" => array:1 [
        "titulo" => "Evaluation of public policies&#46; SESPAS Report 2010"
      ]
    ]
    "textoCompleto" => "<span class="elsevierStyleSections"><span id="s0005" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Introducci&#243;n&#58; &#191;Qu&#233; se entiende por evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#63;</span><p id="p0005" class="elsevierStylePara elsevierViewall">La evaluaci&#243;n de pol&#237;ticas p&#250;blicas se entiende como el proceso de observaci&#243;n&#44; medida&#44; an&#225;lisis e interpretaci&#243;n&#44; orientado al conocimiento del funcionamiento de una determinada intervenci&#243;n p&#250;blica&#44; con el objeto de alcanzar un juicio valorativo sobre su utilidad social<a class="elsevierStyleCrossRef" href="#bib1"><span class="elsevierStyleSup">1</span></a>&#46;</p><p id="p0010" class="elsevierStylePara elsevierViewall">Las pol&#237;ticas p&#250;blicas intentan resolver problemas sociales buscando la satisfacci&#243;n de los destinatarios de dichas pol&#237;ticas&#46; Para ello&#44; los decisores p&#250;blicos impulsan actuaciones que suelen tomar la forma de planes &#40;suma de programas con objetivos comunes&#41;&#44; programas &#40;orden de las actividades&#41; o proyectos &#40;actividades para lograr unos objetivos&#41;&#46; A la hora de llevar a la pr&#225;ctica estos planes&#44; programas y proyectos&#44; se cuenta con instrumentos pol&#237;ticos &#40;programa presentado por una determinada administraci&#243;n&#41;&#44; jur&#237;dicos &#40;normativa que regula una pol&#237;tica p&#250;blica concreta&#41;&#44; econ&#243;micos &#40;cuando las pol&#237;ticas p&#250;blicas se articulan mediante un presupuesto&#41;&#44; y sociales y culturales &#40;medidas que afectan a los h&#225;bitos sociales de la poblaci&#243;n&#41;&#46; Toda pol&#237;tica pretende incidir en la sociedad actuando sobre las necesidades y los problemas detectados&#44; con el fin de provocar un efecto o cambio en esa realidad&#46;</p><p id="p0015" class="elsevierStylePara elsevierViewall">El prop&#243;sito de la evaluaci&#243;n es analizar las distintas etapas&#44; desde que se decide intervenir hasta que se manifiestan los impactos&#44; comprobando la validez&#44; tanto interna como externa&#44; de las hip&#243;tesis que justifican la intervenci&#243;n&#46; La evaluaci&#243;n de pol&#237;ticas p&#250;blicas requiere evidencias respecto a su dise&#241;o&#44; puesta en pr&#225;ctica&#44; efectos&#44; resultados e impactos<a class="elsevierStyleCrossRef" href="#bib2"><span class="elsevierStyleSup">2</span></a>&#46; La evaluaci&#243;n es una actividad espec&#237;fica y con identidad propia&#44; claramente diferenciada de otras como el control interno&#44; la auditor&#237;a financiera&#44; la auditor&#237;a de gesti&#243;n o el control presupuestario&#44; pero con las cuales mantiene una estrecha relaci&#243;n de complementariedad&#46; El objetivo &#250;ltimo de la evaluaci&#243;n de pol&#237;ticas es obtener informaci&#243;n para tomar decisiones&#46; En general&#44; la evaluaci&#243;n puede servir para determinar el grado de consecuci&#243;n de los objetivos propuestos&#44; mejorar la implementaci&#243;n de las pol&#237;ticas&#44; rendir cuentas ante la ciudadan&#237;a&#44; aumentar el apoyo comunitario y contribuir a la base cient&#237;fica de las pol&#237;ticas<a class="elsevierStyleCrossRef" href="#bib3"><span class="elsevierStyleSup">3</span></a>&#46;</p><p id="p0020" class="elsevierStylePara elsevierViewall">Dentro de lo que se consideran pol&#237;ticas p&#250;blicas&#44; las pol&#237;ticas de salud ocupan un lugar muy destacado<a class="elsevierStyleCrossRef" href="#bib4"><span class="elsevierStyleSup">4</span></a>&#44; bien sea por su relaci&#243;n directa con el bienestar de la sociedad&#44; por sus caracter&#237;sticas pol&#237;ticas y sociales&#44; o por el importante peso que impone el sector sanitario a la actividad econ&#243;mica de los pa&#237;ses&#46; En Espa&#241;a&#44; el gasto sanitario p&#250;blico alcanzaba el 6&#44;1&#37; del producto interior bruto &#40;PIB&#41; en el a&#241;o 2007 &#40;&#250;ltimo a&#241;o disponible en <span class="elsevierStyleItalic">OECD Health Data 2009</span>&#41;&#46;</p></span><span id="s0010" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Perspectiva econ&#243;mica de las pol&#237;ticas de salud</span><p id="p0025" class="elsevierStylePara elsevierViewall">La evoluci&#243;n del gasto sanitario y su financiaci&#243;n se han convertido en los &#250;ltimos a&#241;os en uno de los ejes principales del debate pol&#237;tico&#46; En momentos en que los cambios demogr&#225;ficos y socioecon&#243;micos est&#225;n afectando a las bases de la sostenibilidad financiera del estado del bienestar&#44; el control del gasto y&#44; por tanto&#44; la perspectiva econ&#243;mica de cualquier pol&#237;tica de salud&#44; resultan imprescindibles<a class="elsevierStyleCrossRef" href="#bib5"><span class="elsevierStyleSup">5</span></a>&#46;</p><p id="p0175" class="elsevierStylePara elsevierViewall"><elsevierMultimedia ident="b0005"></elsevierMultimedia></p><p id="p0030" class="elsevierStylePara elsevierViewall">Desde una perspectiva econ&#243;mica&#44; las pol&#237;ticas de salud han de pretender que la producci&#243;n de salud no sea m&#225;s costosa de lo necesario&#44; que la salud que se produzca no se valore menos de lo que cuesta&#44; y finalmente&#44; conseguir la perfecta traducci&#243;n de los planes de salud en pol&#237;ticas gubernamentales y planes de servicios<a class="elsevierStyleCrossRef" href="#bib6"><span class="elsevierStyleSup">6</span></a>&#46; Traducir objetivos de salud en servicios sanitarios constituye una tarea dif&#237;cil&#44; pero importante si no quiere perderse de vista la principal raz&#243;n de ser de los servicios sanitarios&#46; Sin embargo&#44; tal como veremos en algunos de los ejemplos utilizados en este art&#237;culo&#44; resultan muy frecuentes la vulneraci&#243;n o el olvido de alguna o incluso de todas estas cuestiones&#46;</p><p id="p0035" class="elsevierStylePara elsevierViewall">Analicemos el caso de la inclusi&#243;n de la vacuna del virus del papiloma humano &#40;VPH&#41; en el calendario del sistema nacional de salud&#46; En relaci&#243;n a su coste&#44; la disponibilidad de una nueva vacuna siempre plantea una situaci&#243;n comprometida a los que deciden las pol&#237;ticas de vacunaci&#243;n&#44; debido principalmente a la falta de datos para conseguir que las incertidumbres sean pocas y poco importantes&#46; A partir del &#250;ltimo trimestre de 2008&#44; la vacuna del VPH se incluy&#243; en el calendario espa&#241;ol&#44; y por tanto con cargo al sistema sanitario p&#250;blico&#46; Esta decisi&#243;n se ha tomado a pesar del alto precio de las dosis y de las dudas sobre su posible efectividad para prevenir la mortalidad por c&#225;ncer de c&#233;rvix&#44; en comparaci&#243;n con las actuales pr&#225;cticas preventivas<a class="elsevierStyleCrossRef" href="#bib7"><span class="elsevierStyleSup">7</span></a>&#46; Si desconocemos el impacto sobre la reducci&#243;n de la carga de enfermedad&#44; resulta imposible cuantificar la eficiencia relativa de dicha actuaci&#243;n sanitaria&#44; y no podemos evitar que la producci&#243;n de salud pueda ser m&#225;s costosa de lo necesario&#46;</p><p id="p0040" class="elsevierStylePara elsevierViewall">Otra cuesti&#243;n clave es la valoraci&#243;n de los resultados de la pol&#237;tica&#46; Una valoraci&#243;n de los beneficios en t&#233;rminos de salud por debajo del coste de las pol&#237;ticas para conseguirlos conlleva un despilfarro de recursos<a class="elsevierStyleCrossRef" href="#bib8"><span class="elsevierStyleSup">8</span></a>&#46; Hablamos&#44; por ejemplo&#44; del encarnizamiento u obstinaci&#243;n terap&#233;utica en enfermos terminales&#46; El consumo de servicios sanitarios resulta excesivo si los servicios sanitarios no son efectivos &#40;sin efectividad no hay eficiencia&#41;&#44; si son efectivos pero cuestan m&#225;s de lo necesario&#44; o si se valoran&#44; en t&#233;rminos de utilidad&#44; menos de lo que cuestan&#46;</p><p id="p0045" class="elsevierStylePara elsevierViewall">La respuesta respecto a qu&#233; acci&#243;n acometer&#44; adem&#225;s de valorar el consumo de recursos&#44; debe contemplar los conflictos entre equidad y eficiencia que el establecimiento de cualquier pol&#237;tica comporta&#46; La Ley General de Sanidad espa&#241;ola &#40;Ley 14&#47;1986&#41; tiene como uno de sus m&#225;s importantes principios la equidad&#58; &#171;el acceso y las prestaciones sanitarias se realizar&#225;n en condiciones de igualdad efectiva&#187;&#46; Desde este punto de vista&#44; la equidad se conseguir&#237;a igualando el acceso entre aquellos con igual necesidad sanitaria o facilitando un mayor acceso a aquellos con mayor necesidad sanitaria&#46; El nuevo programa de salud bucodental infantil de 2008 se inscribe dentro del conjunto de actuaciones del Ministerio de Sanidad para impulsar la igualdad y garantizar la equidad en el acceso de todos los ciudadanos a las prestaciones sanitarias&#46; Sin embargo&#44; la evidencia de eficacia y efectividad actual de este programa est&#225; muy por debajo de lo que ser&#237;a deseable&#44; y esto tiene muchas implicaciones &#40;en la investigaci&#243;n&#44; en los mercados&#44; en la regulaci&#243;n&#44; en el coste de los conciertos con dentistas privados&#44; etc&#46;&#41;&#46; Teniendo en cuenta que el gasto creciente en los servicios de atenci&#243;n bucodental tradicionales tiene apenas un efecto marginal en el estado de salud de la poblaci&#243;n infantil<a class="elsevierStyleCrossRef" href="#bib9"><span class="elsevierStyleSup">9</span></a>&#44; tenemos un ejemplo claro de c&#243;mo el conflicto entre equidad y eficiencia no debe olvidarse en la evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#46;</p></span><span id="s0015" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Tipos de evaluaci&#243;n de pol&#237;ticas p&#250;blicas y de dise&#241;os evaluativos</span><p id="p0050" class="elsevierStylePara elsevierViewall">En la literatura hay numerosas definiciones y clasificaciones de la evaluaci&#243;n de pol&#237;ticas p&#250;blicas en general&#44; y de pol&#237;ticas de salud en particular&#46; Hay diferentes clasificaciones&#58; seg&#250;n la perspectiva&#44; la finalidad y el nivel de evaluaci&#243;n<a class="elsevierStyleCrossRefs" href="#bib10"><span class="elsevierStyleSup">10&#8211;12</span></a>&#46; La <a class="elsevierStyleCrossRef" href="#t0005">tabla 1</a>&#44; adaptada de Nebot et al<a class="elsevierStyleCrossRef" href="#bib13"><span class="elsevierStyleSup">13</span></a>&#44; resume los distintos tipos de evaluaci&#243;n&#44; as&#237; como los objetivos que se persiguen&#46;</p><elsevierMultimedia ident="t0005"></elsevierMultimedia><p id="p0055" class="elsevierStylePara elsevierViewall">Los dise&#241;os evaluativos se suelen clasificar en tres grupos principales<a class="elsevierStyleCrossRef" href="#bib11"><span class="elsevierStyleSup">11</span></a>&#58; 1&#41; los dise&#241;os experimentales&#44; con asignaci&#243;n aleatoria de los individuos al grupo de intervenci&#243;n o al grupo control &#40;grupos equivalentes&#41;&#59; 2&#41; los dise&#241;os cuasiexperimentales&#44; que incluyen los ensayos comunitarios&#44; los dise&#241;os pretest-postest con grupo control no equivalente y las series temporales m&#250;ltiples&#44; y 3&#41; los dise&#241;os no experimentales&#44; que incluyen las series temporales y los dise&#241;os pretest-postest sin grupo control&#46;</p><p id="p0060" class="elsevierStylePara elsevierViewall">Sin embargo&#44; el gran handicap de la evaluaci&#243;n de pol&#237;ticas p&#250;blicas es que en muchos casos no es posible utilizar dise&#241;os experimentales&#44; con lo cual la validez interna de los estudios se ve amenazada<a class="elsevierStyleCrossRef" href="#bib14"><span class="elsevierStyleSup">14</span></a>&#46; Las principales limitaciones en los dise&#241;os evaluativos pueden deberse a la falta de un grupo control equivalente&#44; a la complejidad de la pol&#237;tica y a las limitaciones de los indicadores de medida de los efectos&#46; A pesar de sus limitaciones&#44; el dise&#241;o cuasiexperimental es muy com&#250;n en la evaluaci&#243;n de intervenciones en salud p&#250;blica&#44; ya que en muchas ocasiones es el &#250;nico posible&#46; Un ejemplo interesante en este caso ser&#237;a la evaluaci&#243;n de las leyes y normativas de regulaci&#243;n del tabaquismo<a class="elsevierStyleCrossRefs" href="#bib15"><span class="elsevierStyleSup">15&#44;16</span></a>&#46;</p><p id="p0065" class="elsevierStylePara elsevierViewall">En particular&#44; las limitaciones en los indicadores finales est&#225;n relacionadas con la dificultad de observar o de definir de forma operativa los resultados&#44; ya que &#233;stos son m&#250;ltiples o s&#243;lo visibles a largo plazo&#46; En ocasiones es habitual que se utilicen los resultados a corto plazo por razones de inmediatez y visibilidad social&#44; quedando la evaluaci&#243;n definitiva&#44; basada en resultados a largo plazo&#44; postergada u olvidada&#46; Un ejemplo reciente lo tenemos en la pol&#237;tica de actuaci&#243;n frente a la pandemia de la gripe A &#40;H1N1&#41; por parte de los gobiernos de muchos pa&#237;ses&#46; Como medida preventiva se opt&#243; por una pol&#237;tica sanitaria defensiva&#44; cortoplacista&#44; favorecida por la fuerte presi&#243;n que impusieron las campa&#241;as de opini&#243;n p&#250;blica&#46; Espa&#241;a adquiri&#243; 37 millones de dosis de vacunas&#44; si bien&#44; gracias a una cl&#225;usula firmada con los laboratorios fabricantes&#44; posteriormente el Ministerio ha podido deshacerse de 24 millones de dosis que resultaron innecesarias&#46; La evaluaci&#243;n de pol&#237;ticas p&#250;blicas a corto plazo puede dejar de lado m&#225;ximas como la seguridad&#44; la evidencia cient&#237;fica o el coste-oportunidad&#46;</p><p id="p0070" class="elsevierStylePara elsevierViewall">Merece una menci&#243;n especial la utilizaci&#243;n de indicadores cuando se realizan evaluaciones de proceso y de impacto&#46; En estos casos&#44; las evaluaciones se realizan mediante la definici&#243;n de indicadores que hacen referencia a las caracter&#237;sticas operacionales de la pol&#237;tica y a la consecuci&#243;n de los objetivos establecidos&#46; Sin embargo&#44; hay varias limitaciones&#46; La primera ser&#237;a la importancia de la definici&#243;n de los indicadores&#44; ya que seg&#250;n como se definan pueden reflejar valores o puntos de vista particulares&#46; En segundo lugar&#44; se puede pasar por alto el valor de los objetivos en s&#237; mismos&#44; y el hecho de no tener en cuenta el contexto en que se hace la evaluaci&#243;n&#46; Otra limitaci&#243;n podr&#237;a ser la falta de un componente realmente evaluativo&#44; y el hecho de promover una aproximaci&#243;n burocr&#225;tica&#44; miope e inflexible a la evaluaci&#243;n&#46; Un caso parecido son las pol&#237;ticas de pago por calidad&#44; con limitaciones muy parecidas en el uso de indicadores<a class="elsevierStyleCrossRef" href="#bib17"><span class="elsevierStyleSup">17</span></a>&#46; Lamentablemente&#44; la evaluaci&#243;n de proceso se hace mucho menos de lo que se pretende creer&#46; En la realidad&#44; muchas evaluaciones quedan en valoraciones de productos finales o <span class="elsevierStyleItalic">outputs</span>&#44; sin llegar a evaluar los mecanismos de funcionamiento de las pol&#237;ticas desarrolladas&#46;</p><span id="s0020" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">La evaluaci&#243;n econ&#243;mica de las pol&#237;ticas p&#250;blicas</span><p id="p0075" class="elsevierStylePara elsevierViewall">El objetivo de la evaluaci&#243;n econ&#243;mica es comparar diversas alternativas de actuaci&#243;n en t&#233;rminos de sus costes y efectos sobre la salud<a class="elsevierStyleCrossRef" href="#bib18"><span class="elsevierStyleSup">18</span></a>&#46; De este modo&#44; las t&#233;cnicas de evaluaci&#243;n econ&#243;mica permiten medir la eficiencia relativa de las alternativas comparadas&#46; Una pol&#237;tica p&#250;blica&#44; un servicio sanitario o&#44; en general&#44; una asignaci&#243;n de recursos&#44; es m&#225;s eficiente que otro si con los mismos recursos se obtienen mejores resultados en salud&#46;</p><p id="p0080" class="elsevierStylePara elsevierViewall">Con el fin de medir costes y efectos sobre la salud&#44; la evaluaci&#243;n econ&#243;mica utiliza diversas t&#233;cnicas&#58; el an&#225;lisis de minimizaci&#243;n de costes&#44; el an&#225;lisis de coste-efectividad&#44; el an&#225;lisis de coste-utilidad y el an&#225;lisis de coste-beneficio&#46; La selecci&#243;n de una t&#233;cnica de evaluaci&#243;n econ&#243;mica depender&#225; del objetivo del estudio&#46; Remitimos al lector a una lectura detenida de los manuales sobre el tema<a class="elsevierStyleCrossRefs" href="#bib18"><span class="elsevierStyleSup">18&#44;19</span></a>&#46;</p></span><span id="s0025" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Algunas t&#233;cnicas anal&#237;ticas</span><p id="p0085" class="elsevierStylePara elsevierViewall">Una vez llevada a cabo la pol&#237;tica&#44; empieza la etapa de an&#225;lisis de los resultados<a class="elsevierStyleCrossRef" href="#bib20"><span class="elsevierStyleSup">20</span></a>&#46; Lo m&#225;s com&#250;n en evaluaci&#243;n de pol&#237;ticas p&#250;blicas es que los datos no provengan de un dise&#241;o experimental&#44; sino que se hayan obtenido en un estudio observacional&#46; En el caso de los experimentos antes-despu&#233;s&#44; se obtienen las diferencias entre las medias muestrales de las variables resultado antes y despu&#233;s de la intervenci&#243;n en el grupo correspondiente&#46; El supuesto b&#225;sico es que no haya otro factor distinto de la intervenci&#243;n que afecte al resultado&#46; Otra posibilidad es el m&#233;todo de doble diferencia&#44; para el cual se necesitan datos del grupo intervenci&#243;n y del grupo control antes y despu&#233;s de la intervenci&#243;n&#46; Se trata de establecer las diferencias entre las medias del grupo intervenci&#243;n&#44; antes y despu&#233;s&#44; y las medias del grupo control&#44; tambi&#233;n antes y despu&#233;s de la intervenci&#243;n&#46; Se debe intentar que el grupo control sea lo m&#225;s parecido al grupo intervenci&#243;n&#44; por ejemplo reaccionado de la misma forma ante acontecimientos comunes&#46;</p><p id="p0090" class="elsevierStylePara elsevierViewall">En el m&#233;todo de <span class="elsevierStyleItalic">matching</span>&#44; en cambio&#44; se usan los datos despu&#233;s de la intervenci&#243;n tanto del grupo participante en el programa como del grupo control&#46; Anal&#237;ticamente se ponderan las estimaciones utilizando la distribuci&#243;n de variables condicionantes en el grupo participante&#46; Es decir&#44; mediante un modelo de elecci&#243;n discreta se estima la probabilidad de que un individuo con determinadas variables condicionantes forme parte del grupo participante&#59; y el mismo procedimiento se sigue en el grupo control&#44; de modo que puedan emparejarse las observaciones que tengan probabilidades semejantes&#46; De este modo se equilibran las muestras de acuerdo con las variables observables&#46; Finalmente se calcula la media aritm&#233;tica de las diferencias en las parejas para las cuales se han encontrado individuos del grupo control suficientemente parecidos&#46; Las t&#233;cnicas de <span class="elsevierStyleItalic">matching</span> presentan dos limitaciones principales&#58; una es que puede ser costoso y muy dif&#237;cil encontrar individuos comparables cuando se controla por m&#250;ltiples caracter&#237;sticas&#44; y la otra&#44; bastante com&#250;n&#44; es la influencia de variables no observables&#44; caracter&#237;sticas o atributos&#44; que pueden ser una importante fuente de sesgos&#46; En estas t&#233;cnicas&#44; el supuesto fundamental del an&#225;lisis es que no hay variables no observables que influyan a la vez en la probabilidad de participaci&#243;n&#44; en la intervenci&#243;n y en el resultado&#46;</p><p id="p0095" class="elsevierStylePara elsevierViewall">Hay muchas situaciones en que no es posible solventar las limitaciones anteriores&#44; lo cual ha inspirado el desarrollo de herramientas alternativas&#46; Una de ellas es la denominada regresi&#243;n discontinua&#46; El objetivo de esta t&#233;cnica es establecer la diferencia en la variable de impacto justo en aquel valor para el cual se dividen ambos grupos&#46; Un buen ejemplo de aplicaci&#243;n de esta t&#233;cnica en econom&#237;a de la salud lo podemos encontrar en el trabajo de Card et al<a class="elsevierStyleCrossRef" href="#bib21"><span class="elsevierStyleSup">21</span></a>&#46;</p></span></span><span id="s0030" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">La evaluaci&#243;n de las pol&#237;ticas de p&#250;blicas de salud&#46; &#191;Qu&#233; podemos aprender de otros pa&#237;ses&#63;</span><span id="s0035" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Un ejemplo destacable&#58; el National Institute for Health and Clinical Excellence &#40;NICE&#41;</span><p id="p0100" class="elsevierStylePara elsevierViewall">El National Institute for Health and Clinical Excellence &#40;NICE&#41; es una autoridad sanitaria especial dentro del National Health Service &#40;NHS&#41; en Inglaterra y Gales&#46; Empez&#243; su actividad en 1999 con el nombre de National Institute for Clinical Excellence&#44; y en 2005 se fusion&#243; con la Health Development Agency para convertirse en la instituci&#243;n actual&#46; Actualmente es la organizaci&#243;n independiente responsable de establecer recomendaciones de &#225;mbito nacional sobre promoci&#243;n de la salud&#44; prevenci&#243;n y tratamiento de la mala salud&#46; Para ello&#44; el NICE revisa la eficacia y la eficiencia de intervenciones de salud p&#250;blica&#44; tecnolog&#237;as sanitarias y pr&#225;cticas cl&#237;nicas que podr&#237;an incorporarse a la cartera de prestaciones del NHS&#46; Inicialmente se estableci&#243; para evitar lo que en Inglaterra y Gales llamaban <span class="elsevierStyleItalic">postcode lottery</span>&#44; es decir&#44; que los tratamientos estaban disponibles dependiendo de la zona de salud de atenci&#243;n primaria en que residiera el paciente&#46; En su funcionamiento actual&#44; el NHS en Inglaterra y Gales est&#225; obligado legalmente a pagar con dinero p&#250;blico aquellas intervenciones con evaluaciones favorables del NICE&#46;</p><p id="p0105" class="elsevierStylePara elsevierViewall">Las recomendaciones del NICE se desarrollan conjuntamente con t&#233;cnicos del NHS&#44; profesionales sanitarios&#44; pacientes&#44; cuidadores&#44; la industria y el mundo acad&#233;mico&#44; en un proceso completamente independiente del gobierno y de grupos de presi&#243;n&#46; Vale la pena volver a destacar que el NICE incorpora el criterio de coste-efectividad en sus evaluaciones&#44; de manera que pueda saberse si las intervenciones suponen <span class="elsevierStyleItalic">value for money</span> para el NHS&#44; en comparaci&#243;n con la mejor alternativa que se est&#233; utilizando en la actualidad&#46; La raz&#243;n coste-efectividad se mide en t&#233;rminos de coste por a&#241;o de vida ajustado por calidad &#40;AVAC&#41; incremental&#44; con un umbral de eficiencia en el intervalo de las 20&#46;000 a 30&#46;000 libras esterlinas por AVAC&#46;</p><p id="p0110" class="elsevierStylePara elsevierViewall">A pesar de las cr&#237;ticas recibidas &#40;divergencia entre recomendaciones nacionales y pr&#225;ctica cl&#237;nica&#44; lentitud&#44; falta de claridad en el proceso y dificultad econ&#243;mica para dar cobertura a las tecnolog&#237;as recomendadas&#41;&#44; el NICE ha adquirido una reputaci&#243;n internacional por su rigurosidad y por su papel en la recomendaci&#243;n de prioridades en los servicios sanitarios&#46;</p></span><span id="s0040" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Otros ejemplos</span><p id="p0115" class="elsevierStylePara elsevierViewall">De manera no sistem&#225;tica ni exhaustiva&#44; comentaremos otras iniciativas destacables en el campo de la evaluaci&#243;n de pol&#237;ticas de salud&#46; Una de las instituciones de investigaci&#243;n de mayor prestigio es la RAND &#40;Research and Development&#41; Corporation<a class="elsevierStyleCrossRef" href="#bib22"><span class="elsevierStyleSup">22</span></a>&#46; La RAND es una instituci&#243;n sin &#225;nimo de lucro&#44; con m&#225;s de 60 a&#241;os de historia&#44; que tiene por misi&#243;n ayudar a la mejora de la pol&#237;tica y la toma de decisiones mediante la investigaci&#243;n y el an&#225;lisis&#46; Algunas de sus &#225;reas de investigaci&#243;n son la infancia&#44; la educaci&#243;n&#44; la salud y los servicios sanitarios&#44; la pobreza&#44; la poblaci&#243;n y el envejecimiento&#44; el crimen&#44; la energ&#237;a y el medio ambiente&#44; la ciencia y la tecnolog&#237;a&#44; y la seguridad nacional&#46; En temas de salud en particular&#44; sus investigaciones abarcan desde proyectos innovadores en gen&#233;tica y tecnolog&#237;as de la informaci&#243;n hasta otros m&#225;s cl&#225;sicos de salud internacional y promoci&#243;n de la salud&#44; pasando por medicina complementaria&#44; salud mental y violencia&#46;</p><p id="p0120" class="elsevierStylePara elsevierViewall">Otra iniciativa es la del Departamento de Planificaci&#243;n del Gobierno de Colombia<a class="elsevierStyleCrossRef" href="#bib23"><span class="elsevierStyleSup">23</span></a>&#44; con una envidiable lista de pol&#237;ticas evaluadas &#40;tanto su efectividad como su coste-efectividad&#41;&#44; entre las que encontramos programas de empleo&#44; vivienda&#44; ayudas a las familias en entornos rurales&#44; seguridad alimentaria y fomento de la peque&#241;a y mediana empresa&#46; El Instituto Nacional de Salud P&#250;blica de M&#233;xico es otro caso interesante&#44; con pol&#237;ticas evaluadas en torno a los desayunos escolares&#44; la atenci&#243;n al parto&#44; el control del tabaquismo y la detecci&#243;n del c&#225;ncer de mama<a class="elsevierStyleCrossRef" href="#bib24"><span class="elsevierStyleSup">24</span></a>&#46;</p><p id="p0125" class="elsevierStylePara elsevierViewall">Finalmente quisi&#233;ramos destacar&#44; debido a su importante volumen de financiaci&#243;n&#44; el <span class="elsevierStyleItalic">Spanish Trust Fund for Impact Evaluation</span> &#40;SIEF&#41;<a class="elsevierStyleCrossRef" href="#bib25"><span class="elsevierStyleSup">25</span></a>&#46; &#201;ste es el mayor fondo fiducidario establecido en el Banco Mundial dedicado a la evaluaci&#243;n de un impacto&#46; El programa fue fundado con 10&#44;4 millones de euros&#44; y complementado con 1&#44;5 millones de d&#243;lares procedentes de Reino Unido&#44; para la evaluaci&#243;n del impacto de programa innovadores&#46; El SIEF apoya evaluaciones prospectivas rigurosas en los pa&#237;ses en desarrollo&#44; talleres regionales de formaci&#243;n sobre evaluaci&#243;n de impacto&#44; y publicaciones y difusi&#243;n de resultados&#46; Los 39 temas en que se ha trabajado hasta la actualidad hacen referencia a la prevenci&#243;n de la infecci&#243;n por el VIH y del sida&#44; al control de la malaria&#44; a pol&#237;ticas de mercado laboral y a transferencias de renta condicionadas&#46; La &#250;nica condici&#243;n para llevar a cabo la evaluaci&#243;n es que se trate de programas que haya desarrollado el Banco Mundial en algunas de las &#225;reas y pa&#237;ses que Espa&#241;a ha seleccionado como prioritarias&#46; Las evaluaciones las realizan equipos de investigadores del Banco Mundial &#40;o consultores externos&#41; y equipos locales responsables de los programas evaluados&#46;</p></span></span><span id="s0045" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Conclusiones y retos para el futuro</span><p id="p0130" class="elsevierStylePara elsevierViewall">Antes de que una administraci&#243;n decida aumentar el gasto en una nueva pol&#237;tica deber&#237;a evaluar c&#243;mo se est&#225; gastando el dinero en la actualidad&#46; Si pensamos en igualar el porcentaje de PIB que&#44; por ejemplo&#44; el Reino Unido dedica a su sistema nacional de salud&#44; ser&#237;a mejor preguntarnos antes por qu&#233; no logramos mayores grados de eficiencia con el gasto actual&#46; En presencia de una productividad marginal decreciente&#44; variable seg&#250;n el tipo de servicios sanitarios y en muchas ocasiones desconocida&#44; evaluar previamente qu&#233; pol&#237;ticas sanitarias acometer resulta una cuesti&#243;n primordial&#46; En algunas pol&#237;ticas habr&#225; que gastar m&#225;s dinero p&#250;blico y en otras tambi&#233;n privado&#44; pero en muchas se podr&#237;a ahorrar dinero&#44; p&#250;blico y privado&#44; si se revisaran los objetivos que se persiguen&#44; el dise&#241;o de las instituciones que van a administrar el gasto y las normas reguladoras&#46;</p><p id="p0135" class="elsevierStylePara elsevierViewall">En Espa&#241;a&#44; la mayor&#237;a de los planes de salud no encuentran su traducci&#243;n en planes de servicios&#46; Si no traducimos los objetivos sobre indicadores de salud y factores de riesgo al lenguaje de los proveedores sanitarios&#44; los planes de salud se quedan en buenas intenciones&#46; &#201;sta es su dificultad mayor y la que explica que el crecimiento de la organizaci&#243;n sanitaria&#44; con financiaci&#243;n fundamentalmente p&#250;blica&#44; haya comportado el desarrollo de una compleja oferta de servicios que&#44; a pesar de poderlos considerar como instrumentos para alcanzar objetivos de salud&#44; parecen gozar de notable autonom&#237;a respecto a sus consecuencias sanitarias<a class="elsevierStyleCrossRef" href="#bib6"><span class="elsevierStyleSup">6</span></a>&#46;</p><p id="p0140" class="elsevierStylePara elsevierViewall">La orientaci&#243;n futura de las pol&#237;ticas de salud deber&#225; cambiar porque el cambio demogr&#225;fico y socioecon&#243;mico har&#225; variar igualmente las bases de la sostenibilidad financiera del estado del bienestar<a class="elsevierStyleCrossRef" href="#bib5"><span class="elsevierStyleSup">5</span></a>&#46; Adem&#225;s de la correcta definici&#243;n del marco de actuaci&#243;n y la pol&#237;tica a realizar&#44; es imprescindible llevar a cabo una evaluaci&#243;n posterior a su puesta en marcha&#44; porque la evaluaci&#243;n <span class="elsevierStyleItalic">ex post</span> rigurosa constituye un elemento fundamental de disciplina del gasto y de transparencia&#44; y una gu&#237;a de gran valor para mejorar el dise&#241;o de las pol&#237;ticas p&#250;blicas&#46; En la actualidad&#44; la noci&#243;n m&#225;s extendida de la evaluaci&#243;n de impacto precisa de la obtenci&#243;n de evidencia contraf&#225;ctica acerca de qu&#233; habr&#237;a ocurrido si el programa no se hubiera implantado&#46; A su vez&#44; para que esta evidencia contrafactual sea v&#225;lida&#44; se requiere aislar los efectos del medio social para poder identificar con precisi&#243;n los efectos de las intervenciones<a class="elsevierStyleCrossRef" href="#bib26"><span class="elsevierStyleSup">26</span></a>&#46;</p><p id="p0145" class="elsevierStylePara elsevierViewall">En Espa&#241;a&#44; nuevas agencias e instituciones incluyen la evaluaci&#243;n de pol&#237;ticas p&#250;blicas entre sus actividades&#46; Recientemente se ha creado la Agencia de Evaluaci&#243;n y Calidad &#40;AEVAL&#41;&#44; dependiente del Ministerio de la Presidencia&#59; en el &#225;mbito auton&#243;mico&#44; en Catalu&#241;a se ha creado el Instituto Catal&#225;n de Evaluaci&#243;n de Pol&#237;ticas p&#250;blicas &#40;IVALUA&#41;&#46; La aparici&#243;n de organismos de evaluaci&#243;n territoriales resulta muy interesante porque el estado de las autonom&#237;as posibilita la puesta en marcha de distintas pol&#237;ticas p&#250;blicas en diferentes territorios&#44; lo cual facilita la realizaci&#243;n de ensayos naturales&#46; No obstante&#44; a&#250;n es pronto para valorar el impacto y el protagonismo de estas nuevas agencias&#46;</p><p id="p0150" class="elsevierStylePara elsevierViewall">Aunque la autoevaluaci&#243;n gubernamental resulta crucial para que las instituciones se impliquen en el proceso&#44; en ocasiones puede ser conveniente contar con la colaboraci&#243;n de evaluadores externos en algunas de las fases del proyecto o pol&#237;tica a desarrollar&#44; como pueden ser el dise&#241;o y la validaci&#243;n&#46; La independencia y la cualificaci&#243;n de los evaluadores externos resulta vital para asegurar la credibilidad de los resultados&#46; Hay que evitar&#44; por tanto&#44; contratar a participantes en el propio programa o a beneficiarios de &#233;l&#46; En ocasiones esta colaboraci&#243;n&#44; bien de equipos universitarios&#44; bien de consultores privados&#44; se realiza por parte de &#8220;amigos&#8221; del programa&#44; con lo cual los resultados resultan sesgados y carentes de validez&#46;</p><p id="p0155" class="elsevierStylePara elsevierViewall">Las administraciones p&#250;blicas pueden hacer sus evaluaciones ellas mismas&#44; contratarlas a agentes externos o limitarse a proporcionar la informaci&#243;n para que los investigadores las lleven a cabo&#46; Har&#237;a falta que se recogiera&#44; en las encuestas que peri&#243;dicamente se llevan a cabo &#40;Encuesta de Poblaci&#243;n Activa&#44; Encuesta Nacional de Salud&#44; etc&#46;&#41;&#44; informaci&#243;n sobre la participaci&#243;n de los ciudadanos en los programas p&#250;blicos&#44; as&#237; como otorgar el derecho de acceso a estas bases de datos&#46; Espa&#241;a ha avanzado mucho en los &#250;ltimos a&#241;os y actualmente es posible acceder a los microdatos de muchas encuestas en los portales web de las administraciones p&#250;blicas&#46;</p><p id="p0160" class="elsevierStylePara elsevierViewall">Es necesario tener en cuenta los resultados de los estudios de evaluaci&#243;n econ&#243;mica&#46; La insistencia sobre que en Espa&#241;a hacen falta m&#225;s estudios de evaluaci&#243;n econ&#243;mica para empezar a tomar decisiones teniendo en cuenta criterios de eficiencia&#44; parece una excusa para evitar abordar decididamente cu&#225;l es el problema&#46; La producci&#243;n de la comunidad cient&#237;fica espa&#241;ola no es nada desde&#241;able&#44; y cada vez tiene mayor calidad y reflejo en las revistas internacionales<a class="elsevierStyleCrossRefs" href="#bib27"><span class="elsevierStyleSup">27&#44;28</span></a>&#44; aunque con algunas lagunas&#44; principalmente en lo que respecta a las intervenciones de salud p&#250;blica<a class="elsevierStyleCrossRef" href="#bib29"><span class="elsevierStyleSup">29</span></a>&#46; Esta producci&#243;n viene reforzada con una gu&#237;a para la evaluaci&#243;n econ&#243;mica aplicada a las tecnolog&#237;as sanitarias realizada recientemente por encargo del Ministerio de Sanidad<a class="elsevierStyleCrossRef" href="#bib30"><span class="elsevierStyleSup">30</span></a>&#46; Tambi&#233;n la Asociaci&#243;n de Econom&#237;a de la Salud se ha posicionado sobre el uso de los resultados de los estudios de evaluaci&#243;n econ&#243;mica&#44; proponiendo una agenda de trabajo espec&#237;fica<a class="elsevierStyleCrossRef" href="#bib31"><span class="elsevierStyleSup">31</span></a>&#46; La experiencia de Reino Unido con el NICE puede servir como ejemplo de su factibilidad y compromiso pol&#237;tico&#46;</p><p id="p0165" class="elsevierStylePara elsevierViewall">Para mejorar la investigaci&#243;n sobre pol&#237;ticas de salud se debe buscar una formaci&#243;n m&#225;s s&#243;lida y rigurosa de profesionales&#44; decisores y estudiantes en la l&#243;gica de los dise&#241;os&#46; Las futuras pol&#237;ticas p&#250;blicas tendr&#225;n dise&#241;os m&#225;s complejos&#44; buscando controlar la influencia de m&#250;ltiples variables externas&#44; lo cual har&#225; m&#225;s dif&#237;cil recopilar la informaci&#243;n necesaria para su an&#225;lisis&#46; La evaluaci&#243;n debe considerar los efectos del tiempo y&#44; en la medida de lo posible&#44; basarse en estudios longitudinales&#46; Las buenas intervenciones sociales son las que pueden demostrar efectos duraderos en el tiempo&#44; no aquellas en que los sujetos&#44; una vez abandonan el programa&#44; pierden lo que ganaron con su permanencia<a class="elsevierStyleCrossRef" href="#bib32"><span class="elsevierStyleSup">32</span></a>&#46;</p><p id="p0170" class="elsevierStylePara elsevierViewall">Al igual que en otros muchos pa&#237;ses&#44; en Espa&#241;a hay una necesidad imperiosa de resultados de evaluaciones de pol&#237;ticas p&#250;blicas&#46; Una mejor pol&#237;tica de salud precisa una mejor pol&#237;tica a secas&#58; rendici&#243;n de cuentas y libre expresi&#243;n&#44; estabilidad pol&#237;tica y ausencia de violencia &#40;muchas leyes se utilizan para enfrentar a partidos pol&#237;ticos&#41;&#44; y efectividad gubernamental&#46; Una sociedad moderna y democr&#225;tica debe exigir a los pol&#237;ticos y a las administraciones que rindan cuentas&#44; lo que impone un proceso transparente de toma de decisiones en relaci&#243;n a la asignaci&#243;n de recursos p&#250;blicos&#46;</p></span><span id="s0055" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Declaraciones de autor&#237;a</span><p id="p0205" class="elsevierStylePara elsevierViewall">Ambos autores han contribuido por igual al dise&#241;o y la redacci&#243;n del manuscrito&#46;</p></span><span id="s0060" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Financiaci&#243;n</span><p id="p0210" class="elsevierStylePara elsevierViewall">Ninguna&#46;</p></span><span id="s0065" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Conflictos de intereses</span><p id="p0215" class="elsevierStylePara elsevierViewall">Los autores declaran no tener ning&#250;n conflicto de inter&#233;s&#46;</p></span></span>"
    "textoCompletoSecciones" => array:1 [
      "secciones" => array:14 [
        0 => array:2 [
          "identificador" => "xres11676"
          "titulo" => "Resumen"
        ]
        1 => array:2 [
          "identificador" => "xpalclavsec13133"
          "titulo" => "Palabras clave"
        ]
        2 => array:2 [
          "identificador" => "xres11675"
          "titulo" => "Abstract"
        ]
        3 => array:2 [
          "identificador" => "xpalclavsec13134"
          "titulo" => "Keywords"
        ]
        4 => array:2 [
          "identificador" => "s0005"
          "titulo" => "Introducci&#243;n&#58; &#191;Qu&#233; se entiende por evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#63;"
        ]
        5 => array:2 [
          "identificador" => "s0010"
          "titulo" => "Perspectiva econ&#243;mica de las pol&#237;ticas de salud"
        ]
        6 => array:3 [
          "identificador" => "s0015"
          "titulo" => "Tipos de evaluaci&#243;n de pol&#237;ticas p&#250;blicas y de dise&#241;os evaluativos"
          "secciones" => array:2 [
            0 => array:2 [
              "identificador" => "s0020"
              "titulo" => "La evaluaci&#243;n econ&#243;mica de las pol&#237;ticas p&#250;blicas"
            ]
            1 => array:2 [
              "identificador" => "s0025"
              "titulo" => "Algunas t&#233;cnicas anal&#237;ticas"
            ]
          ]
        ]
        7 => array:3 [
          "identificador" => "s0030"
          "titulo" => "La evaluaci&#243;n de las pol&#237;ticas de p&#250;blicas de salud&#46; &#191;Qu&#233; podemos aprender de otros pa&#237;ses&#63;"
          "secciones" => array:2 [
            0 => array:2 [
              "identificador" => "s0035"
              "titulo" => "Un ejemplo destacable&#58; el National Institute for Health and Clinical Excellence &#40;NICE&#41;"
            ]
            1 => array:2 [
              "identificador" => "s0040"
              "titulo" => "Otros ejemplos"
            ]
          ]
        ]
        8 => array:2 [
          "identificador" => "s0045"
          "titulo" => "Conclusiones y retos para el futuro"
        ]
        9 => array:2 [
          "identificador" => "s0055"
          "titulo" => "Declaraciones de autor&#237;a"
        ]
        10 => array:2 [
          "identificador" => "s0060"
          "titulo" => "Financiaci&#243;n"
        ]
        11 => array:2 [
          "identificador" => "s0065"
          "titulo" => "Conflictos de intereses"
        ]
        12 => array:2 [
          "identificador" => "xack1044"
          "titulo" => "Agradecimientos"
        ]
        13 => array:1 [
          "titulo" => "Bibliograf&#237;a"
        ]
      ]
    ]
    "pdfFichero" => "main.pdf"
    "tienePdf" => true
    "fechaRecibido" => "2010-02-05"
    "fechaAceptado" => "2010-06-03"
    "PalabrasClave" => array:2 [
      "es" => array:1 [
        0 => array:4 [
          "clase" => "keyword"
          "titulo" => "Palabras clave"
          "identificador" => "xpalclavsec13133"
          "palabras" => array:3 [
            0 => "Evaluaci&#243;n de pol&#237;ticas p&#250;blicas"
            1 => "Bienestar social"
            2 => "Perspectiva econ&#243;mica"
          ]
        ]
      ]
      "en" => array:1 [
        0 => array:4 [
          "clase" => "keyword"
          "titulo" => "Keywords"
          "identificador" => "xpalclavsec13134"
          "palabras" => array:3 [
            0 => "Public policy evaluation"
            1 => "Social welfare"
            2 => "Economic perspective"
          ]
        ]
      ]
    ]
    "tieneResumen" => true
    "resumen" => array:2 [
      "es" => array:2 [
        "titulo" => "Resumen"
        "resumen" => "<p id="sp0010" class="elsevierStyleSimplePara elsevierViewall">La evaluaci&#243;n de pol&#237;ticas p&#250;blicas no siempre resulta una tarea obligatoria para las administraciones&#46; A priori&#44; los instrumentos de intervenci&#243;n por parte del estado se eligen y calculan para maximizar la funci&#243;n de bienestar social&#44; la cual debe estar impl&#237;cita en las pol&#237;ticas llevadas a cabo o en el programa electoral del gobierno&#46; Sin embargo&#44; sorprende que en ocasiones el estado act&#250;a sin cuestionarse si el funcionamiento de las instituciones y las pol&#237;ticas p&#250;blicas correspondientes pueden lograr de manera efectiva y eficiente ese objetivo&#46; La ausencia de evaluaci&#243;n lleva a que programas inefectivos e ineficientes provoquen el drenaje de los escasos recursos disponibles&#44; que podr&#237;an utilizarse en otras iniciativas de mayor efecto sobre el bienestar de la poblaci&#243;n&#46;</p>"
      ]
      "en" => array:2 [
        "titulo" => "Abstract"
        "resumen" => "<p id="sp0015" class="elsevierStyleSimplePara elsevierViewall">Public policy evaluation is not always a mandatory task for administrations&#46; A priori&#44; the instruments for government intervention are chosen and calculated to maximize the social welfare function that should be implicit in the policies undertaken&#44; or in the government&#8217;s electoral program&#46; However&#44; it is surprising how the government sometimes acts without questioning whether institutional functioning and the corresponding public policies can effectively and efficiently achieve this objective&#46; The absence of evaluation drains the scarce available resources towards ineffective and inefficient programs&#44; which could be otherwise used in other initiatives with a greater impact on the population&#8217;s welfare&#46;</p>"
      ]
    ]
    "multimedia" => array:2 [
      0 => array:7 [
        "identificador" => "t0005"
        "etiqueta" => "Tabla 1"
        "tipo" => "MULTIMEDIATABLA"
        "mostrarFloat" => true
        "mostrarDisplay" => false
        "tabla" => array:1 [
          "tablatextoimagen" => array:1 [
            0 => array:2 [
              "tabla" => array:1 [
                0 => """
                  <table border="0" frame="\n
                  \t\t\t\t\tvoid\n
                  \t\t\t\t" class=""><tbody title="tbody"><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " colspan="2" align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluaci&#243;n seg&#250;n la perspectiva</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Impacto&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Conocer si una pol&#237;tica ha tenido efecto y las causas de ese efecto&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De gesti&#243;n&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Monitorizar y mejorar la ejecuci&#243;n de los programas y servicios&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De desarrollo&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Desarrollar y mejorar los tratamientos&#44; servicios y pol&#237;ticas&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Econ&#243;mica&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Establecer la relaci&#243;n entre los costes y las consecuencias de la intervenci&#243;n&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " colspan="2" align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluaci&#243;n seg&#250;n la finalidad</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Formativa&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Realizada durante el desarrollo de la pol&#237;tica para obtener informaci&#243;n para mejorarla&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Sumativa &#40;de impacto&#41;&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Realizada una vez finalizada la pol&#237;tica para analizar su efectividad&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " colspan="2" align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluaci&#243;n seg&#250;n el nivel</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De estructura&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Evaluar los recursos materiales y humanos&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De proceso&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Valorar los servicios y actividades producidos por el programa&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">De resultados&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Verificar si se han alcanzado los objetivos establecidos&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr><tr title="table-row"><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Estrat&#233;gica&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td><td class="td" title="\n
                  \t\t\t\t\ttable-entry\n
                  \t\t\t\t  " align="" valign="\n
                  \t\t\t\t\ttop\n
                  \t\t\t\t">Conocer si la pol&#237;tica se corresponde con las necesidades de la poblaci&#243;n y con las prioridades establecidas&nbsp;\t\t\t\t\t\t\n
                  \t\t\t\t</td></tr></tbody></table>
                  """
              ]
              "imagenFichero" => array:1 [
                0 => "xTab11171.png"
              ]
            ]
          ]
        ]
        "descripcion" => array:1 [
          "es" => "<p id="sp0005" class="elsevierStyleSimplePara elsevierViewall">Tipos de evaluaci&#243;n de pol&#237;ticas p&#250;blicas<a class="elsevierStyleCrossRef" href="#bib13"><span class="elsevierStyleSup">13</span></a></p>"
        ]
      ]
      1 => array:5 [
        "identificador" => "b0005"
        "tipo" => "MULTIMEDIATEXTO"
        "mostrarFloat" => false
        "mostrarDisplay" => true
        "texto" => array:1 [
          "textoCompleto" => "<span class="elsevierStyleSections"><span id="s0050" class="elsevierStyleSection elsevierViewall"><span class="elsevierStyleSectionTitle">Puntos clave</span><p id="p0180" class="elsevierStylePara elsevierViewall"><ul class="elsevierStyleList" id="li0005"><li class="elsevierStyleListItem" id="u0005"><span class="elsevierStyleLabel">&#8226;</span><p id="p0185" class="elsevierStylePara elsevierViewall">Antes de aumentar el gasto en pol&#237;ticas p&#250;blicas deben revisarse los objetivos que se persiguen&#44; el dise&#241;o de las instituciones que van a administrarlos y las normas reguladoras&#46;</p></li><li class="elsevierStyleListItem" id="u0010"><span class="elsevierStyleLabel">&#8226;</span><p id="p0190" class="elsevierStylePara elsevierViewall">Una buena evaluaci&#243;n debe ser capaz de detectar las discrepancias entre el desempe&#241;o real y el esperado de la pol&#237;tica propuesta&#46;</p></li><li class="elsevierStyleListItem" id="u0015"><span class="elsevierStyleLabel">&#8226;</span><p id="p0195" class="elsevierStylePara elsevierViewall">Desde una perspectiva econ&#243;mica&#44; las pol&#237;ticas de salud han de intentar traducir las indicaciones de los planes de salud&#44; que la producci&#243;n de salud no sea m&#225;s costosa de lo necesario y que la salud obtenida no se valore menos de lo que cuesta&#46;</p></li><li class="elsevierStyleListItem" id="u0020"><span class="elsevierStyleLabel">&#8226;</span><p id="p0200" class="elsevierStylePara elsevierViewall">Los m&#250;ltiples m&#233;todos disponibles&#44; as&#237; como las experiencias de otros pa&#237;ses&#44; animan a llevar a cabo la tarea evaluadora&#46;</p></li></ul></p></span></span>"
        ]
      ]
    ]
    "bibliografia" => array:2 [
      "titulo" => "Bibliograf&#237;a"
      "seccion" => array:1 [
        0 => array:2 [
          "identificador" => "bb0005"
          "bibliografiaReferencia" => array:32 [
            0 => array:3 [
              "identificador" => "bib1"
              "etiqueta" => "1"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Public policy analysis&#46; An introduction"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "WN&#46; Dunn"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:3 [
                        "titulo" => "Englewood Cliff"
                        "fecha" => "1994"
                        "editorial" => "Prentice-Hall"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            1 => array:3 [
              "identificador" => "bib2"
              "etiqueta" => "2"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Los siete pecados capitales de la evaluaci&#243;n del impacto&#46; Informe SESPAS 2008"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "C Victora"
                            1 => "I&#46; Santos"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:7 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2008"
                        "volumen" => "22"
                        "numero" => "Supl 1"
                        "paginaInicial" => "1"
                        "paginaFinal" => "7"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/18405546"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            2 => array:3 [
              "identificador" => "bib3"
              "etiqueta" => "3"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:3 [
                            0 => "JF McKenzie"
                            1 => "BL Neiger"
                            2 => "JL&#46; Smeltzer"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Planning&#44; implementing and evaluating health population programs"
                        "fecha" => "2005"
                        "editorial" => "Benjamin Cummings"
                        "editorialLocalizacion" => "San Francisco"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            3 => array:3 [
              "identificador" => "bib4"
              "etiqueta" => "4"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Derechos humanos&#44; una oportunidad para las pol&#237;ticas p&#250;blicas en salud"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "A Franco-Giraldo"
                            1 => "C&#46; &#193;lvarez-Dardet"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2008"
                        "volumen" => "22"
                        "paginaInicial" => "280"
                        "paginaFinal" => "286"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/18579055"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            4 => array:3 [
              "identificador" => "bib5"
              "etiqueta" => "5"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Una visi&#243;n de futuro de las pol&#237;ticas de salud"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "G&#46; L&#243;pez Casasnovas"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1016/j.gaceta.2009.02.003"
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2009"
                        "volumen" => "23"
                        "paginaInicial" => "458"
                        "paginaFinal" => "461"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19540627"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            5 => array:3 [
              "identificador" => "bib6"
              "etiqueta" => "6"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "G L&#243;pez Casasnovas"
                            1 => "V&#46; Ort&#250;n Rubio"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Econom&#237;a y salud&#58; fundamentos y pol&#237;ticas"
                        "fecha" => "1998"
                        "editorial" => "Ediciones Encuentro"
                        "editorialLocalizacion" => "Barcelona"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            6 => array:3 [
              "identificador" => "bib7"
              "etiqueta" => "7"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "The improbable plunge&#46; What facts refute reasons to expect that the effectiveness of HPV vaccination programs to prevent cervical cancer could be low&#63;"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "M&#46; Porta"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1016/j.ypmed.2009.04.004"
                      "Revista" => array:6 [
                        "tituloSerie" => "Prev Med"
                        "fecha" => "2009"
                        "volumen" => "48"
                        "paginaInicial" => "407"
                        "paginaFinal" => "410"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19450725"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            7 => array:3 [
              "identificador" => "bib8"
              "etiqueta" => "8"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Una reconsideraci&#243;n del valor del gasto sanitario agregado&#46; Nuevos enfoques econ&#243;micos e implicaciones para la adopci&#243;n de pol&#237;ticas p&#250;blicas en Espa&#241;a"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "A Garc&#237;a-Alt&#233;s"
                            1 => "J Puig Junoy"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "LibroEditado" => array:2 [
                        "titulo" => "&#191;M&#225;s recursos para la salud&#63;"
                        "serieFecha" => "2004"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            8 => array:3 [
              "identificador" => "bib9"
              "etiqueta" => "9"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Exploring changes in dental workforce&#44; dental care utilization and dental caries levels in Europe&#44; 1990&#8211;2004"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "J Pinilla"
                            1 => "B&#46; Gonz&#225;lez"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Int Dent J"
                        "fecha" => "2009"
                        "volumen" => "59"
                        "paginaInicial" => "87"
                        "paginaFinal" => "95"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19489288"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            9 => array:3 [
              "identificador" => "bib10"
              "etiqueta" => "10"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "J&#46; &#216;vretveit"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Integrated quality development for public healthcare"
                        "fecha" => "1999"
                        "editorial" => "Norwegian Medical Association"
                        "editorialLocalizacion" => "Oslo"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            10 => array:3 [
              "identificador" => "bib11"
              "etiqueta" => "11"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => true
                          "autores" => array:3 [
                            0 => "R Windsor"
                            1 => "T Branowski"
                            2 => "N Clark"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Evaluation of health promotion&#44; health education and disease prevention programs"
                        "fecha" => "1994"
                        "editorial" => "Mayfield Co"
                        "editorialLocalizacion" => "Mountain View &#40;CA&#41;"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            11 => array:3 [
              "identificador" => "bib12"
              "etiqueta" => "12"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "R&#46; Pineault"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "La planificaci&#243;n sanitaria"
                        "fecha" => "1981"
                        "editorial" => "Masson"
                        "editorialLocalizacion" => "Barcelona"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            12 => array:3 [
              "identificador" => "bib13"
              "etiqueta" => "13"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Nebot M&#44; L&#243;pez MJ&#44; Ariza C&#44; et al&#46; Evaluaci&#243;n de efectividad en salud p&#250;blica&#46; Terminolog&#237;a&#44; fundamentos y bases metodol&#243;gicas&#46; Gac Sanit&#46; 2010&#59; Supl&#46; En prensa&#46;"
                ]
              ]
            ]
            13 => array:3 [
              "identificador" => "bib14"
              "etiqueta" => "14"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Victora CG&#44; Habicht JP&#44; Bryce J&#46; Evidence-based public health&#58; moving beyond randomized trials&#46; Am J Public Health&#46; 2004&#59;94&#58;400&#8211;5&#46;"
                ]
              ]
            ]
            14 => array:3 [
              "identificador" => "bib15"
              "etiqueta" => "15"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Impact of the Spanish smoking law on exposure to secondhand smoke in offices and hospitality venues&#58; before and after study"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => true
                          "autores" => array:3 [
                            0 => "M Nebot"
                            1 => "MJ L&#243;pez"
                            2 => "C Ariza"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1289/ehp.11845"
                      "Revista" => array:6 [
                        "tituloSerie" => "Environ Health Perspect"
                        "fecha" => "2009"
                        "volumen" => "117"
                        "paginaInicial" => "344"
                        "paginaFinal" => "347"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19337506"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            15 => array:3 [
              "identificador" => "bib16"
              "etiqueta" => "16"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "L&#243;pez-Nicol&#225;s A&#44; Pinilla J&#44; Negr&#237;n MA&#46; Impacto econ&#243;mico de la regulaci&#243;n del consumo de tabaco en el &#225;mbito de la hosteler&#237;a&#58; efectos previsibles de la ampliaci&#243;n de la Ley 28&#47;2005&#46; Informe encargado por el Comit&#233; Nacional de Prevenci&#243;n del Tabaquismo &#40;CNP&#41; a la Asociaci&#243;n de Econom&#237;a de la Salud &#40;AES&#41;&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.cnpt.es/docu_pdf/Informe_AES.pdf">http&#58;&#47;&#47;www&#46;cnpt&#46;es&#47;docu&#95;pdf&#47;Informe&#95;AES&#46;pdf</a>"
                ]
              ]
            ]
            16 => array:3 [
              "identificador" => "bib17"
              "etiqueta" => "17"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Posibilidades y limitaciones de la gesti&#243;n por resultados de salud&#44; el pago por objetivos y el redireccionamiento de los incentivos&#46; Informe SESPAS 2008"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "S Peir&#243;"
                            1 => "A&#46; Garc&#237;a-Alt&#233;s"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:7 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2008"
                        "volumen" => "22"
                        "numero" => "Supl 1"
                        "paginaInicial" => "143"
                        "paginaFinal" => "155"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/18405564"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            17 => array:3 [
              "identificador" => "bib18"
              "etiqueta" => "18"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "M&#46; Gold"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Cost-effectiveness in health and medicine"
                        "fecha" => "1996"
                        "editorial" => "Oxford University Press"
                        "editorialLocalizacion" => "New York"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            18 => array:3 [
              "identificador" => "bib19"
              "etiqueta" => "19"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "An introduction to economic health evaluation in health care"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "A&#46; McGuire"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "LibroEditado" => array:2 [
                        "titulo" => "Economic evaluation in health care&#58; emerging theory with practice"
                        "serieFecha" => "2001"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            19 => array:3 [
              "identificador" => "bib20"
              "etiqueta" => "20"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Evaluar intervenciones sanitarias sin experimentos"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "M&#46; Vera-Hern&#225;ndez"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2003"
                        "volumen" => "17"
                        "paginaInicial" => "238"
                        "paginaFinal" => "248"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/12841987"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            20 => array:3 [
              "identificador" => "bib21"
              "etiqueta" => "21"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "The impact of nearly universal insurance coverage on health care utilization&#58; evidence from Medicare"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:3 [
                            0 => "D Card"
                            1 => "C Dobkin"
                            2 => "N&#46; Maestas"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1257/aer.98.5.2242"
                      "Revista" => array:6 [
                        "tituloSerie" => "Am Econ Rev"
                        "fecha" => "2008"
                        "volumen" => "98"
                        "paginaInicial" => "2242"
                        "paginaFinal" => "2258"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19079738"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            21 => array:3 [
              "identificador" => "bib22"
              "etiqueta" => "22"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "RAND Corporation&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.rand.org/health/">http&#58;&#47;&#47;www&#46;rand&#46;org&#47;health&#47;</a>"
                ]
              ]
            ]
            22 => array:3 [
              "identificador" => "bib23"
              "etiqueta" => "23"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Departamento de Planeaci&#243;n del Gobierno de Colombia&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.dnp.gov.co/PortalWeb/Programas/Sinergia/EvaluacionesEstrat%C3%A9gicas/EvaluacionesdeImpacto/ProgramaEmpleoenAcci%C3%B3n/tabid/838/Default.aspx">http&#58;&#47;&#47;www&#46;dnp&#46;gov&#46;co&#47;PortalWeb&#47;Programas&#47;Sinergia&#47;EvaluacionesEstrat&#37;C3&#37;A9gicas&#47;EvaluacionesdeImpacto&#47;ProgramaEmpleoenAcci&#37;C3&#37;B3n&#47;tabid&#47;838&#47;Default&#46;aspx</a>"
                ]
              ]
            ]
            23 => array:3 [
              "identificador" => "bib24"
              "etiqueta" => "24"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Instituto Nacional de Salud P&#250;blica de M&#233;xico&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.insp.mx/Portal/Inf/lineas.php">http&#58;&#47;&#47;www&#46;insp&#46;mx&#47;Portal&#47;Inf&#47;lineas&#46;php</a>"
                ]
              ]
            ]
            24 => array:3 [
              "identificador" => "bib25"
              "etiqueta" => "25"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Spanish Trust Fund for Impact Evaluation &#40;SIEF&#41;&#46; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://web.worldbank.org">http&#58;&#47;&#47;web&#46;worldbank&#46;org&#47;WBSITE&#47;EXTERNAL&#47;EXTABOUTUS&#47;ORGANIZATION&#47;EXTHDNETWORK&#47;EXTHDOFFICE&#47;0&#44;&#44;contentMDK&#58;22383030&#8764;menuPK&#58;6508083&#8764;pagePK&#58;64168445&#8764;piPK&#58;64168309&#8764;theSitePK&#58;5485727&#44;00&#46;html</a>"
                ]
              ]
            ]
            25 => array:3 [
              "identificador" => "bib26"
              "etiqueta" => "26"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:1 [
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "L&#46; Baker"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Libro" => array:4 [
                        "titulo" => "Evaluaci&#243;n de impacto de los proyectos de desarrollo en la pobreza&#46; Manual para profesionales"
                        "fecha" => "2000"
                        "editorial" => "Banco Mundial"
                        "editorialLocalizacion" => "Washington"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            26 => array:3 [
              "identificador" => "bib27"
              "etiqueta" => "27"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Twenty years of health care economic analysis in Spain&#58; are we doing well&#63;"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:1 [
                            0 => "A&#46; Garc&#237;a-Alt&#233;s"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Health Econ"
                        "fecha" => "2001"
                        "volumen" => "10"
                        "paginaInicial" => "715"
                        "paginaFinal" => "729"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/11747053"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            27 => array:3 [
              "identificador" => "bib28"
              "etiqueta" => "28"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "La evaluaci&#243;n econ&#243;mica de tecnolog&#237;as sanitarias en Espa&#241;a&#46; Situaci&#243;n actual y utilidad como gu&#237;a en la asignaci&#243;n de recursos sanitarios"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:3 [
                            0 => "J Oliva"
                            1 => "JA Sacrist&#225;n"
                            2 => "J&#46; del Llano"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:5 [
                        "tituloSerie" => "Informaci&#243;n Comercial Espa&#241;ola &#40;ICE&#41;"
                        "fecha" => "2003"
                        "volumen" => "804"
                        "paginaInicial" => "155"
                        "paginaFinal" => "167"
                      ]
                    ]
                  ]
                ]
              ]
            ]
            28 => array:3 [
              "identificador" => "bib29"
              "etiqueta" => "29"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Prevenci&#243;n en salud&#58; &#191;inversi&#243;n rentable&#63; Eficiencia econ&#243;mica de las intervenciones preventivas"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "A Esperato"
                            1 => "A&#46; Garc&#237;a-Alt&#233;s"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2007"
                        "volumen" => "21"
                        "paginaInicial" => "150"
                        "paginaFinal" => "161"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/17419933"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            29 => array:3 [
              "identificador" => "bib30"
              "etiqueta" => "30"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "Propuesta de gu&#237;a para la evaluaci&#243;n econ&#243;mica aplicada a las tecnolog&#237;as sanitarias"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => true
                          "autores" => array:3 [
                            0 => "J L&#243;pez"
                            1 => "J Oliva"
                            2 => "F Anto&#241;anzas"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:2 [
                      "doi" => "10.1016/j.gaceta.2009.07.011"
                      "Revista" => array:6 [
                        "tituloSerie" => "Gac Sanit"
                        "fecha" => "2010"
                        "volumen" => "24"
                        "paginaInicial" => "154"
                        "paginaFinal" => "170"
                        "link" => array:1 [
                          0 => array:2 [
                            "url" => "https://www.ncbi.nlm.nih.gov/pubmed/19959258"
                            "web" => "Medline"
                          ]
                        ]
                      ]
                    ]
                  ]
                ]
              ]
            ]
            30 => array:3 [
              "identificador" => "bib31"
              "etiqueta" => "31"
              "referencia" => array:1 [
                0 => array:1 [
                  "referenciaCompleta" => "Asociaci&#243;n Econom&#237;a de la Salud &#40;AES&#41;&#46; Posici&#243;n de la Asociaci&#243;n de Econom&#237;a de la Salud en relaci&#243;n a la necesidad de un mayor uso de la evaluaci&#243;n econ&#243;mica en las decisiones que afectan a la financiaci&#243;n p&#250;blica de las prestaciones y tecnolog&#237;as en el Sistema Nacional de Salud&#46; &#40;Acceso el 26 de noviembre de 2008&#46;&#41; Disponible en&#58; <a class="elsevierStyleInterRef" href="http://www.aes.es/Publicaciones/AESEE.pdf">http&#58;&#47;&#47;www&#46;aes&#46;es&#47;Publicaciones&#47;AESEE&#46;pdf</a>"
                ]
              ]
            ]
            31 => array:3 [
              "identificador" => "bib32"
              "etiqueta" => "32"
              "referencia" => array:1 [
                0 => array:2 [
                  "contribucion" => array:1 [
                    0 => array:2 [
                      "titulo" => "The inhealthy state of health policy research"
                      "autores" => array:1 [
                        0 => array:2 [
                          "etal" => false
                          "autores" => array:2 [
                            0 => "S Majumdar"
                            1 => "S&#46; Soumerai"
                          ]
                        ]
                      ]
                    ]
                  ]
                  "host" => array:1 [
                    0 => array:1 [
                      "Revista" => array:5 [
                        "tituloSerie" => "Health Affaire"
                        "fecha" => "2009"
                        "volumen" => "28"
                        "paginaInicial" => "900"
                        "paginaFinal" => "908"
                      ]
                    ]
                  ]
                ]
              ]
            ]
          ]
        ]
      ]
    ]
    "agradecimientos" => array:1 [
      0 => array:3 [
        "identificador" => "xack1044"
        "titulo" => "Agradecimientos"
        "texto" => "<p id="p0220" class="elsevierStylePara elsevierViewall">Queremos agradecer la ayuda de Manel Nebot en los apartados de evaluaci&#243;n de pol&#237;ticas y dise&#241;os evaluativos&#44; y la de Marcos Vera por compartir sus conocimientos sobre las instituciones internacionales que se dedican a la evaluaci&#243;n de pol&#237;ticas p&#250;blicas&#46;</p>"
      ]
    ]
  ]
  "idiomaDefecto" => "es"
  "url" => "/02139111/00000024000000S1/v1_201301221241/S021391111000169X/v1_201301221241/es/main.assets"
  "Apartado" => array:4 [
    "identificador" => "682"
    "tipo" => "SECCION"
    "es" => array:2 [
      "titulo" => "Elementos estrat&#233;gicos"
      "idiomaDefecto" => true
    ]
    "idiomaDefecto" => "es"
  ]
  "PDF" => "https://static.elsevier.es/multimedia/02139111/00000024000000S1/v1_201301221241/S021391111000169X/v1_201301221241/es/main.pdf?idApp=WGSE&text.app=https://gacetasanitaria.org/"
  "EPUB" => "https://multimedia.elsevier.es/PublicationsMultimediaV1/item/epub/S021391111000169X?idApp=WGSE"
]
Información del artículo
ISSN: 02139111
Idioma original: Español
Datos actualizados diariamente
año/Mes Html Pdf Total
2024 Noviembre 25 6 31
2024 Octubre 146 52 198
2024 Septiembre 124 33 157
2024 Agosto 123 38 161
2024 Julio 130 36 166
2024 Junio 123 42 165
2024 Mayo 158 37 195
2024 Abril 113 28 141
2024 Marzo 107 25 132
2024 Febrero 65 36 101
2024 Enero 62 27 89
2023 Diciembre 112 85 197
2023 Noviembre 124 36 160
2023 Octubre 88 38 126
2023 Septiembre 109 27 136
2023 Agosto 67 16 83
2023 Julio 113 40 153
2023 Junio 93 17 110
2023 Mayo 54 23 77
Mostrar todo

Siga este enlace para acceder al texto completo del artículo

Idiomas
Gaceta Sanitaria
es en

¿Es usted profesional sanitario apto para prescribir o dispensar medicamentos?

Are you a health professional able to prescribe or dispense drugs?