<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD with OASIS Tables with MathML3 v1.1 20151215//EN" "JATS-journalpublishing-oasis-article1-mathml3.dtd">
<article article-type="research-article" dtd-version="1.1" xml:lang="es" xmlns:ali="http://www.niso.org/schemas/ali/1.0/" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
	<front>
		<journal-meta>
			<journal-id journal-id-type="publisher-id">REDC</journal-id>
			<journal-title-group>
				<journal-title>Revista Espa&#xf1;ola de Documentaci&#xf3;n Cient&#xed;fica</journal-title>
				<abbrev-journal-title abbrev-type="publisher">Rev. esp. doc. cient.</abbrev-journal-title>
			</journal-title-group>
			<issn publication-format="print">0210-0614</issn>
			<issn publication-format="electronic">1988-4621</issn>
			<issn-l>0210-0614</issn-l>
			<publisher>
				<publisher-name>Consejo Superior de Investigaciones Cient&#xed;ficas</publisher-name>
			</publisher>
		</journal-meta>
		<article-meta>
			<article-id pub-id-type="publisher-id">redc.2021.3.1792</article-id>
			<article-id pub-id-type="doi">10.3989/redc.2021.3.1792</article-id>
			<article-categories>
				<subj-group subj-group-type="heading">
					<subject>ESTUDIOS / RESEARCH STUDIES</subject>
				</subj-group>
			</article-categories>
			<title-group>
				<article-title>Herramientas de visualizaci&#xf3;n gr&#xe1;fica online para datos abiertos presupuestarios de administraciones p&#xfa;blicas</article-title>
				<trans-title-group xml:lang="en">
					<trans-title>Online graphical visualisation tools for government open budget data</trans-title>
				</trans-title-group>
			</title-group>
			<contrib-group>
				<contrib contrib-type="author" corresp="yes">
					<contrib-id contrib-id-type="orcid">https://orcid.org/0000-0002-5120-8851</contrib-id>
					<name>
						<surname>Garc&#xed;a-Garc&#xed;a</surname>
						<given-names>Jes&#xfa;s</given-names>
					</name>
					<email xlink:href="jesgar@uniovi.es">jesgar@uniovi.es</email>
					<aff id="aff1"><institution>Departamento de Contabilidad. Universidad de Oviedo. Facultad de Econom&#xed;a y Empresa</institution>.</aff>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">https://orcid.org/0000-0002-4865-1561</contrib-id>
					<name>
						<surname>Alonso-Magdaleno</surname>
						<given-names>Mar&#xed;a Isabel</given-names>
					</name>
					<email xlink:href="ialonso@uniovi.es">ialonso@uniovi.es</email>
					<aff id="aff2"><institution>Departamento de Administraci&#xf3;n de Empresas. Universidad de Oviedo. Facultad de Econom&#xed;a y Empresa</institution>.</aff>
				</contrib>
			</contrib-group>
			<pub-date pub-type="epub">
				<day>11</day>
				<month>05</month>
				<year>2021</year>
			</pub-date>
			<pub-date pub-type="collection">
				<month>09</month>
				<year>2021</year>
			</pub-date>
			<volume>44</volume>
			<issue>3</issue>
			<elocation-id>e305</elocation-id>
			<history>
				<date date-type="received">
					<day>23</day>
					<month>05</month>
					<year>2020</year>
				</date>
				<date date-type="rev-recd">
					<day>17</day>
					<month>06</month>
					<year>2020</year>
				</date>
				<date date-type="accepted">
					<day>19</day>
					<month>06</month>
					<year>2020</year>
				</date>
				<date date-type="pub">
					<day>04</day>
					<month>06</month>
					<year>2021</year>
				</date>
			</history>
			<permissions>
				<copyright-statement>&#xa9; 2021 CSIC</copyright-statement>
				<copyright-year>2021</copyright-year>
				<license license-type="open-access" xlink:href="https://creativecommons.org/licenses/by/4.0/">
					<license-p>Este es un art&#xed;culo de acceso abierto distribuido bajo los t&#xe9;rminos de la licencia de uso y distribuci&#xf3;n Creative Commons Reconocimiento 4.0 Internacional (CC BY 4.0).</license-p>
				</license>
			</permissions>
			<self-uri xlink:href="http://redc.revistas.csic.es/index.php/redc/article/view/XXXX/XXXX"/>
			<abstract>
				<title>Resumen</title>
				<p>La divulgaci&#xf3;n de informaci&#xf3;n p&#xfa;blica por parte de los gobiernos y administraciones resulta de manera general excesivamente t&#xe9;cnica quedando fuera del alcance y comprensi&#xf3;n de la mayor parte de la ciudadan&#xed;a ante la que deben rendir cuentas e integrar en sus procesos participativos. Los avances en las pol&#xed;ticas de datos abiertos han tratado de reducir esta asimetr&#xed;a, y si bien lo han conseguido en cantidad de datos divulgados no ha sido as&#xed; en alcance ciudadano. Estudiamos el caso de los datos presupuestarios y las dos principales herramientas de visualizaci&#xf3;n gr&#xe1;fica cuya intenci&#xf3;n es cerrar esta brecha. Mediante cuestionario respondido por sus responsables en 34 administraciones espa&#xf1;olas, tratamos de encontrar respuesta a las principales cuestiones relacionadas con su adopci&#xf3;n y uso. Impulso pol&#xed;tico o consensuado con t&#xe9;cnicos, proactividad antes que cumplimiento de normativas de transparencia, desenfoque a la hora de fijar un p&#xfa;blico objetivo, usos adicionales a los te&#xf3;ricamente esperados y problemas de gobernanza en su operativa son los principales resultados obtenidos.</p>
			</abstract>
			<trans-abstract xml:lang="en">
				<title>Abstract</title>
				<p>The dissemination of public information by governments and administrations is generally too technical and beyond the reach and understanding of most of the citizens to whom they must be accountable and involve in their participatory processes. Progress in open data policies has sought to reduce this asymmetry, and while this has been achieved in terms of the amount of data disclosed, it has not been so in terms of citizen coverage. We studied the case of budget data and the two main graphic visualization tools intended to close this gap. By means of a questionnaire answered by their managers in 34 Spanish public administrations, we try to find answers to the main questions related to their adoption and use. Political impetus or consensus with technicians, proactivity rather than compliance with transparency regulations, lack of focus when setting a target audience, additional uses to those theoretically expected and governance problems in its operation are the main results obtained.</p>
			</trans-abstract>
			<kwd-group>
				<kwd>datos abiertos</kwd>
				<kwd>visualizaci&#xf3;n</kwd>
				<kwd>presupuesto p&#xfa;blico</kwd>
				<kwd>Espa&#xf1;a</kwd>
				<kwd>transparencia</kwd>
				<kwd>reutilizaci&#xf3;n</kwd>
				<kwd>ISP - Informaci&#xf3;n del Sector P&#xfa;blico</kwd>
			</kwd-group>
			<kwd-group xml:lang="en">
				<kwd>open data</kwd>
				<kwd>visualisation</kwd>
				<kwd>Spain</kwd>
				<kwd>transparency</kwd>
				<kwd>public budget</kwd>
				<kwd>data reuse</kwd>
				<kwd>PSI-Public Sector Information</kwd>
			</kwd-group>
			<counts>
				<fig-count count="7"/>
				<table-count count="1"/>
				<equation-count count="0"/>
				<ref-count count="40"/>
				<page-count count="15"/>
			</counts>
		</article-meta>
	</front>
	<body>
		<sec id="sec1" sec-type="intro">
			<label>1.</label>
			<title>Introducci&#xf3;n</title>
			<p>Multitud de datos de las administraciones p&#xfa;blicas se han puesto en los &#xfa;ltimos a&#xf1;os a disposici&#xf3;n de los ciudadanos. Primero a trav&#xe9;s de la web institucional, y luego a trav&#xe9;s de portales de datos abiertos o de portales de transparencia. Su raz&#xf3;n se ha encontrado en las crecientes demandas de transparencia de los ciudadanos y en el impulso que ha recibido el concepto de gobierno abierto con su &#xe9;nfasis en los datos p&#xfa;blicos abiertos u open data como fuente de transparencia, participaci&#xf3;n y colaboraci&#xf3;n. Multitud de datos han pasado a estar a disposici&#xf3;n de la ciudadan&#xed;a en formatos digitales reutilizables y con licencia abierta, y con base en ellos terceros ajenos a la administraci&#xf3;n p&#xfa;blica han podido construir aplicaciones, visualizaciones o, simplemente, informaciones.</p>
			<p>Los escenarios en los que a las administraciones y gobiernos se les demanda transparencia y rendici&#xf3;n de cuentas son tantos como los &#xe1;mbitos en que desarrollan sus actuaciones y c&#xf3;mo estas intervienen en las vidas e intereses de individuos y organizaciones. Pero de todos ellos, el &#xe1;mbito presupuestario resulta el m&#xe1;s b&#xe1;sico y sirve como cimiento de todos los dem&#xe1;s. El presupuesto es una herramienta b&#xe1;sica de gesti&#xf3;n p&#xfa;blica que supone la expresi&#xf3;n detallada econ&#xf3;mica, financiera y contable de las pol&#xed;ticas desarrolladas por una administraci&#xf3;n durante un a&#xf1;o natural, tanto a nivel de previsi&#xf3;n como de ejecuci&#xf3;n realizada. Es por ello que se encuentra en el coraz&#xf3;n del proceso democr&#xe1;tico de legitimidad y rendici&#xf3;n de cuentas, ya que es la imagen y registro de los recursos que los gobiernos obtienen de los ciudadanos y el uso que hacen de ellos tratando de ser eficientes, eficaces y equitativos y evitando cualquier abuso de poder tanto en las decisiones gubernamentales como en las operaciones de las administraciones p&#xfa;blicas como herramientas de pol&#xed;tica y gesti&#xf3;n.</p>
			<p>De manera general la rendici&#xf3;n de cuentas de los gobiernos se modeliza en dos ramas (<xref ref-type="bibr" rid="B29">O’Donell, 1994</xref>): horizontal o vertical. El modelo horizontal son las condiciones que los gobiernos y sus administraciones se imponen jur&#xed;dicamente a s&#xed; mismos, y suponen el control de unos &#xf3;rganos de la administraci&#xf3;n p&#xfa;blica sobre otros; es un control de expertos para t&#xe9;cnicos, por tanto, para p&#xfa;blico reducido, aunque en una democracia representativa supone control y rendici&#xf3;n de cuentas indirectos a la ciudadan&#xed;a. No obstante, su documentaci&#xf3;n y resultados suelen ser lejanos al ciudadano com&#xfa;n y de dif&#xed;cil comprensi&#xf3;n dado su tecnicismo. Por el contrario, el modelo vertical es m&#xe1;s directo y supone una rendici&#xf3;n de cuentas enfocada a la ciudadan&#xed;a que aprobar&#xed;a o desaprobar&#xed;a las acciones gubernamentales mediante el uso de v&#xed;as participativas y de debate p&#xfa;blicos, acciones de protesta u apoyo y, finalmente, el proceso electoral. No obstante, como la pr&#xe1;ctica demuestra, el proceso vertical necesita tambi&#xe9;n de intermediarios que interpreten y faciliten el acceso a los datos e informaciones. Y aqu&#xed; es donde la sociedad se est&#xe1; enfrentando de manera exponencialmente creciente a problemas de noticias falsas, manipulaciones y desinformaci&#xf3;n, que amenazan con pervertir seriamente su normal funcionamiento democr&#xe1;tico.</p>
			<p>Esta investigaci&#xf3;n profundiza en el uso de tecnolog&#xed;a digital de car&#xe1;cter c&#xed;vico para facilitar el acceso y comprensi&#xf3;n a los ciudadanos de una documentaci&#xf3;n de car&#xe1;cter t&#xe9;cnico como es el presupuesto de las administraciones p&#xfa;blicas, que deber&#xed;a ser un elemento de uso frecuente en el debate ciudadano, manejable por los sectores de la poblaci&#xf3;n interesados en lo p&#xfa;blico, comprensible en sus contenidos y totalmente accesible a trav&#xe9;s de la tecnolog&#xed;a digital. Nuestro objetivo es doble: (1) facilitar futuros procesos de implantaci&#xf3;n de esta tecnolog&#xed;a en las administraciones p&#xfa;blicas; (2) reenfocar el debate acad&#xe9;mico sobre divulgaci&#xf3;n de datos abiertos, en nuestra opini&#xf3;n excesivamente centrado en la simple oferta informativa, incorporando aspectos relativos a los medios t&#xe9;cnicos, usos y usuarios. A tal fin, en los siguientes apartados presentaremos una breve exposici&#xf3;n te&#xf3;rica respecto a la necesidad y uso de la tecnolog&#xed;a c&#xed;vica de visualizaci&#xf3;n presupuestaria para comunicar informaci&#xf3;n t&#xe9;cnica compleja a los ciudadanos m&#xe1;s all&#xe1; del paradigma de los datos p&#xfa;blicos abiertos. Posteriormente, formularemos unas preguntas de investigaci&#xf3;n que consideramos pertinentes para la evaluaci&#xf3;n de esta tecnolog&#xed;a. Finalmente, bas&#xe1;ndonos en los datos emp&#xed;ricos obtenidos mediante cuestionario entre los responsables de la implementaci&#xf3;n de esta tecnolog&#xed;a, responderemos a las preguntas y estableceremos unas conclusiones que resulten &#xfa;tiles tanto para investigadores como para potenciales responsables de futuras implementaciones de esta tecnolog&#xed;a.</p>
		</sec>
		<sec id="sec2">
			<label>2.</label>
			<title>Marco te&#xf3;rico</title>
			<p>La relaci&#xf3;n gobiernos-ciudadanos se ha visto marcada en los &#xfa;ltimos a&#xf1;os por el auge del paradigma denominado gobierno abierto, un nuevo escenario de relaci&#xf3;n entre gobiernos y ciudadanos basado en la transparencia para fomentar la participaci&#xf3;n y la colaboraci&#xf3;n entre administraciones y ciudadanos. Como herramienta b&#xe1;sica de comunicaci&#xf3;n emplea los denominados datos abiertos u <italic>open data</italic>, persiguiendo alterar el equilibrio de informaci&#xf3;n en favor del ciudadano en la problem&#xe1;tica de agencia en que se enmarcan transparencia y control (<xref ref-type="bibr" rid="B12">Garc&#xed;a-Garc&#xed;a, 2014</xref>). Son numerosas las definiciones de lo que supone el gobierno abierto, que ha evolucionado desde el planteamiento inicial de <xref ref-type="bibr" rid="B30">Parks (1957)</xref>, como una simple apertura p&#xfa;blica de informaci&#xf3;n antes custodiada por los gobiernos, a un planteamiento m&#xe1;s ambicioso que a&#xfa;na la tecnolog&#xed;a digital con la filosof&#xed;a del software libre y el poder de Internet para mejorar la innovaci&#xf3;n, eficiencia y flexibilidad de los gobiernos (<xref ref-type="bibr" rid="B40">Yu y Robinson, 2012</xref>).</p>
			<p>
				<xref ref-type="bibr" rid="B8">Clarke y Francoli (2014)</xref> afirman que en esta transformaci&#xf3;n el t&#xe9;rmino gobierno abierto ha devenido en un mutante sem&#xe1;ntico, siempre relacionado de una manera u otra con transparencia, responsabilidad, rendici&#xf3;n de cuentas, participaci&#xf3;n, mejor gobierno o crecimiento econ&#xf3;mico, dependiendo del gobierno que invoque el t&#xe9;rmino. Por ello, en la pr&#xe1;ctica nos enfrentamos a m&#xfa;ltiples definiciones de gobierno abierto, y como consecuencia tambi&#xe9;n de datos abiertos para el &#xe1;mbito presupuestario. Los compendios de ambas definiciones de <xref ref-type="bibr" rid="B8">Clarke y Francoli (2014)</xref> y <xref ref-type="bibr" rid="B16">Gray (2015)</xref> se centran en sus aspectos legales y t&#xe9;cnicos. Muestran coincidencia en las definiciones, pero no as&#xed; en su aplicaci&#xf3;n pr&#xe1;ctica, que se mover&#xed;a entre el alto valor moral de la transparencia financiera y presupuestaria por s&#xed; misma, con independencia del m&#xe9;todo concreto que se aplique para alcanzar este fin, y el valor intr&#xed;nseco de los datos abiertos como materia prima para potenciales reutilizadores independientemente del uso que se les pueda llegar a dar. De acuerdo con <xref ref-type="bibr" rid="B16">Gray (2015)</xref>, oscilar hacia un extremo u otro ser&#xed;a una consecuencia de las agendas pol&#xed;ticas y su visi&#xf3;n de la pol&#xed;tica fiscal.</p>
			<p>En todo caso, la informaci&#xf3;n presupuestaria fue de la primera en ser divulgada por los gobiernos como parte de su estrategia de apertura basada en la Red (<xref ref-type="bibr" rid="B26">Moon, 2002</xref>; <xref ref-type="bibr" rid="B5">C&#xe1;rcaba Garc&#xed;a y Garc&#xed;a Garc&#xed;a, 2003</xref>; <xref ref-type="bibr" rid="B34">Torres y otros, 2005</xref>; <xref ref-type="bibr" rid="B7">Chen y otros., 2006</xref>). Inicialmente, en la d&#xe9;cada de los 2000 estos datos eran simplemente publicados en las webs institucionales de los gobiernos y administraciones, bien en HTML o en documentos PDF. A medida que avanzaba la siguiente d&#xe9;cada pasaron a ser divulgados en portales de transparencia o en portales de datos abiertos, en funci&#xf3;n de que se ofrecieran documentos PDF con el presupuesto &#xed;ntegro o formatos estructurados bajo licencias libres que permitieran su reutilizaci&#xf3;n, si bien en ocasiones ha primado m&#xe1;s el continente tecnol&#xf3;gico que el contenido informativo para aparentar avances en transparencia y rendici&#xf3;n de cuentas que no se han correspondido con deseos sinceros (<xref ref-type="bibr" rid="B13">Garc&#xed;a-Garc&#xed;a y Curto-Rodr&#xed;guez, 2018</xref>). En este sentido, una de las problem&#xe1;ticas asociadas a la divulgaci&#xf3;n ser&#xed;a el nulo an&#xe1;lisis de la demanda de informaci&#xf3;n presupuestaria suministrada como datos abiertos y el amplio desconocimiento existente sobre c&#xf3;mo, para qu&#xe9; y con qu&#xe9; fin se usa (<xref ref-type="bibr" rid="B16">Gray, 2015</xref>). Este hecho probablemente entronque con el problema de la relaci&#xf3;n entre transparencia y rendici&#xf3;n de cuentas como un problema de caja negra (<xref ref-type="bibr" rid="B25">Meijer, 2013</xref>), pues pareciendo evidente una relaci&#xf3;n entre ambas la literatura acad&#xe9;mica no ofrece conclusiones generales sobre sus efectos.</p>
			<p>No obstante, la verticalidad a la que se enfocan las pol&#xed;ticas de gobierno y datos abiertos no es absoluta ni directa hacia el conjunto de los ciudadanos. Tal vez ello sea una causa m&#xe1;s del problema definido por <xref ref-type="bibr" rid="B19">Heald (2012)</xref> como los <italic>missing users</italic> (usuarios perdidos), describiendo la diferencia entre las expectativas y el uso real en la divulgaci&#xf3;n de informaci&#xf3;n p&#xfa;blica. El papel del experto como intermediario entre los datos y documentaci&#xf3;n originales y el p&#xfa;blico objetivo sigue vigente, tanto mediante los tradicionales medios de comunicaci&#xf3;n de masas como a trav&#xe9;s del activismo de datos (<xref ref-type="bibr" rid="B11">Fuchs, 2010</xref>; <xref ref-type="bibr" rid="B17">Guti&#xe9;rrez, 2018</xref>) e incluso de formas h&#xed;bridas entre ellos. Tal y como explica <xref ref-type="bibr" rid="B2">Baack (2015)</xref>, los activistas de datos han contribuido a reformular las relaciones de agencia entre gobiernos y ciudadan&#xed;a, mediante la aplicaci&#xf3;n de los valores del software y cultura libre a la creaci&#xf3;n y uso de los datos; en este proceso habr&#xed;an revalorado a los mediadores como necesarios para hacer los datos m&#xe1;s accesibles, y contribuido a transformar el periodismo para recuperar su lugar natural de intermediario y contrapoder. Resulta evidente que por mucho que se facilite el acceso a los datos y documentos originales, su plena comprensi&#xf3;n y contextualizaci&#xf3;n puede seguir requiriendo de unos conocimientos y disponibilidad de tiempo de los que el ciudadano no dispone. En este sentido, en las dos &#xfa;ltimas d&#xe9;cadas, con base en la libertad que la Red otorga para las actuaciones coordinadas de ciudadanos, pero tambi&#xe9;n de grupos de inter&#xe9;s, han surgido nuevos modelos comunicativos con una capacidad mejorada para la defensa y promoci&#xf3;n de puntos de vista particulares y para impulsar el debate pol&#xed;tico, y que evitan los marcos sociales y organizativos de los medios de comunicaci&#xf3;n tradicionales. As&#xed; es como un proceso inicialmente considerado como positivo por su poder para reducir asimetr&#xed;as informativas (<xref ref-type="bibr" rid="B3">Benkler, 2011</xref>), o al menos no necesariamente negativo, ha empezado a condicionar el modelo vertical de rendici&#xf3;n de cuentas y el debate pol&#xed;tico en general. No obstante, la emergencia de los fen&#xf3;menos de <italic>fake news</italic> y desinformaci&#xf3;n ha puesto en jaque a este proceso.</p>
			<p>Por <italic>fake news</italic> se entienden aquellas informaciones inventadas que replican las formas de divulgaci&#xf3;n cl&#xe1;sica de los medios de comunicaci&#xf3;n, pero no sus procesos internos editoriales para asegurar la correcci&#xf3;n y credibilidad que en el pasado han tenido gran relevancia en equilibrar libertad y responsabilidad de prensa (<xref ref-type="bibr" rid="B24">Lazer y otros, 2018</xref>). Si bien el t&#xe9;rmino ha adquirido una cierta notoriedad, no captura toda la complejidad de las formas de manipulaci&#xf3;n informativa (<xref ref-type="bibr" rid="B28">Nielsen y Graves, 2017</xref>). Por ello, es m&#xe1;s riguroso hablar de desinformaci&#xf3;n, refiri&#xe9;ndose al proceso de generaci&#xf3;n y divulgaci&#xf3;n de informaciones err&#xf3;neas, tendenciosas, falsas o imprecisas y, en particular, cuando &#xe9;stas se difunden por medios digitales tales como algoritmos propietarios o bots que act&#xfa;an de agentes de actores pol&#xed;ticos tratando de manejar sutilmente a la opini&#xf3;n p&#xfa;blica (<xref ref-type="bibr" rid="B37">Woolley y Howard, 2016</xref>). De manera general, los algoritmos de las grandes plataformas sociales premian a los usuarios que basan sus contenidos en ruido y emociones fuertes, permitiendo a grupos reducidos posicionarse de manera central en el debate e interrelacionarse mucho m&#xe1;s con los grupos de indecisos (<xref ref-type="bibr" rid="B21">Johnson y otros, 2020</xref>). La creciente transformaci&#xf3;n de la Red en un campo de batalla pol&#xed;tico acent&#xfa;a el problema de la desinformaci&#xf3;n y sus negativas consecuencias, especialmente cuando se combina con publicidad personalizada en redes sociales y plataformas de b&#xfa;squeda seg&#xfa;n datos personales recogidos de los ciudadanos sin su consentimiento. Por ello, en un mundo interconectado y con una creciente polarizaci&#xf3;n pol&#xed;tica, la desinformaci&#xf3;n ha adquirido niveles de complejidad y escala sin precedentes (<xref ref-type="bibr" rid="B36">Wardle y Derakhshan, 2017</xref>). Especialmente impulsadas por las casi nulas barreras a la difusi&#xf3;n que ha generado la tecnolog&#xed;a digital de mensajer&#xed;a y redes sociales, y por el respaldo impl&#xed;cito de los usuarios hacia sus contactos y entorno que suponen los actos de compartici&#xf3;n o calificaci&#xf3;n positiva como <italic>me gusta</italic> y <italic>likes</italic>. Por estas v&#xed;as, la desinformaci&#xf3;n se difunde m&#xe1;s r&#xe1;pidamente y a trav&#xe9;s de m&#xe1;s individuos que las informaciones veraces, particularmente cuando su tem&#xe1;tica es de car&#xe1;cter pol&#xed;tico (<xref ref-type="bibr" rid="B35">Vosoughi y otros, 2018</xref>) y logra elevarse a la categor&#xed;a de meme, entendida como una idea de f&#xe1;cil contagio que logra captar la atenci&#xf3;n y guiar el comportamiento y opini&#xf3;n bas&#xe1;ndose en las emociones humanas (<xref ref-type="bibr" rid="B31">Rodr&#xed;guez, 2013</xref>).</p>
			<p>Adem&#xe1;s, cuando en este proceso se encuentran cifras, como es el caso de los gastos e ingresos de los gobiernos en sus acciones pol&#xed;ticas, juega un importante papel el sesgo cognitivo definido como efecto ancla por <xref ref-type="bibr" rid="B22">Kahneman (2012)</xref>. Este fen&#xf3;meno consiste en que la primera cifra recibida ancla el pensamiento y condiciona a ella el futuro juicio y acci&#xf3;n del receptor, con independencia de su veracidad. Por ello, en un entorno de sobrecarga informativa, que los gobiernos y administraciones ofrezcan datos e informaciones de una forma sencilla, accesible y contextualizada es pr&#xe1;cticamente un requisito para lograr los objetivos de transparencia y rendici&#xf3;n de cuentas, tal y como describi&#xf3; el estudio de <xref ref-type="bibr" rid="B38">Worthy (2015)</xref> al respecto del impacto de los datos abiertos en Reino Unido. As&#xed;, uno de los muchos usos que se les ha dado a los datos abiertos ha sido crear visualizaciones que faciliten su comprensi&#xf3;n y contextualicen sus contenidos. En esta misi&#xf3;n, los gobiernos fueron manifiestamente superados por el activismo de datos que se fue desarrollando paralelamente a la divulgaci&#xf3;n de datos por los gobiernos. Estos activistas, individuos u organizaciones, no s&#xf3;lo desarrollaron contenidos en base a los datos, sino tambi&#xe9;n herramientas digitales que distribuyeron como software libre y que permitieron revelar el valor c&#xed;vico de los datos superando formas de exclusi&#xf3;n y permitiendo a la ciudadan&#xed;a tomar sus propias decisiones y actuar en consecuencia, pues el acceso a la informaci&#xf3;n no permite s&#xf3;lo tener conocimiento sino usarlo en el propio inter&#xe9;s (<xref ref-type="bibr" rid="B17">Guti&#xe9;rrez, 2018</xref>). Sin embargo, a pesar de estas experiencias debemos evitar caer en la trampa del solucionismo tecnol&#xf3;gico (<xref ref-type="bibr" rid="B27">Morozov, 2013</xref>) y tener presente que la mera aplicaci&#xf3;n de la tecnolog&#xed;a digital a un problema no es necesariamente la soluci&#xf3;n de este, sino que deberemos conocer todo el marco de referencia y acci&#xf3;n en el que se circunscribe. Asimismo, tampoco debemos caer en la trampa de que para ejercer un derecho ciudadano no baste con tenerlo reconocido, sino que se haya de utilizar un elemento tecnol&#xf3;gico sin el cual su ejercicio deviene imposible (<xref ref-type="bibr" rid="B10">de la Cueva Gonz&#xe1;lez-Cotera, 2019</xref>), por lo que las soluciones de visualizaci&#xf3;n han de entenderse como un a&#xf1;adido a todos los derechos hist&#xf3;ricamente reconocidos respecto a la transparencia y rendici&#xf3;n de cuentas.</p>
			<p>Las herramientas de visualizaci&#xf3;n presupuestaria permiten explorar f&#xe1;cilmente los presupuestos p&#xfa;blicos y comprender y contextualizar los gastos e ingresos que definen las pol&#xed;ticas y actuaciones de las distintas administraciones p&#xfa;blicas. Todas estas visualizaciones generan una vista global de los gastos y los ingresos a partir de la cual se puede ir descendiendo jer&#xe1;rquicamente de mayores a menores niveles de detalle y examinar la participaci&#xf3;n sobre el total, as&#xed; como su evoluci&#xf3;n temporal. Es especialmente destacable que, aunque sea facilitado en la descarga de los datos, se abstrae parcialmente la complejidad de la informaci&#xf3;n t&#xe9;cnica presupuestaria centrando la visualizaci&#xf3;n en pol&#xed;ticas (estructura econ&#xf3;mica y funcional del presupuesto: c&#xf3;mo se gasta y en qu&#xe9; se gasta) en vez de en &#xf3;rganos de ejecuci&#xf3;n presupuestaria (estructura org&#xe1;nica). Resulta evidente que este tipo de herramientas gr&#xe1;ficas facilitan el examen, la comparaci&#xf3;n y la contextualizaci&#xf3;n de la informaci&#xf3;n a personas con menores conocimientos en materia presupuestaria. A modo de ejemplo, pueden consultarse los Presupuestos Abiertos del Ayuntamiento de Madrid [<xref ref-type="fn" rid="fn1">1</xref>] o los Datos Econ&#xf3;micos de la Diputaci&#xf3;n de Castell&#xf3;n [<xref ref-type="fn" rid="fn2">2</xref>].</p>
			<p>En el caso de los conjuntos de datos abiertos, el grado de reutilizaci&#xf3;n que permiten de la informaci&#xf3;n es mayor, pero requieren de un cierto conocimiento de herramientas inform&#xe1;ticas de tratamientos de datos. Los datos abiertos tienen como objetivo facilitar su reutilizaci&#xf3;n para elaborar informaciones o visualizaciones m&#xe1;s complejas, y presuponen que el usuario que accede a ellos tiene conocimientos presupuestarios, pero tambi&#xe9;n sobre herramientas de software para poder operar con ellos. Por el contrario, la visualizaci&#xf3;n de informaci&#xf3;n permite que datos complejos puedan cobrar sentido, y como complemento a las representaciones textuales o verbales ofrecen un amplio potencial para servir de apoyo al conocimiento y a la comunicaci&#xf3;n en tem&#xe1;ticas complejas como son los presupuestos de las administraciones publicas. Su objetivo principal est&#xe1; en facilitar la comprensi&#xf3;n a personas no versadas en la materia de las cantidades consignadas para determinadas pol&#xed;ticas y partidas mediante una comparativa con otras pol&#xed;ticas y partidas del mismo periodo o anteriores a trav&#xe9;s de su evoluci&#xf3;n. No obstante, ambas formas de divulgar son preferibles al cl&#xe1;sico documento PDF que exige de conocimientos presupuestarios para su comprensi&#xf3;n, no permite un sencillo examen, comparaci&#xf3;n o contextualizaci&#xf3;n, ni adem&#xe1;s permite su tratamiento con herramientas digitales para extraer datos y construir informaciones.</p>
			<p>Por todo ello, con base en la literatura expuesta, nos planteamos cinco preguntas de investigaci&#xf3;n (ver <xref ref-type="table" rid="t1">tabla 1</xref>) que consideramos b&#xe1;sicas para orientar cualquier investigaci&#xf3;n posterior sobre el uso de herramientas de visualizaci&#xf3;n de la informaci&#xf3;n presupuestaria en procesos de gobierno abierto, as&#xed; como su implantaci&#xf3;n pr&#xe1;ctica en administraciones p&#xfa;blicas. Su respuesta nos permitir&#xe1; conocer para la fase de planteamiento del proyecto implantaci&#xf3;n de qui&#xe9;n parte la iniciativa, con qu&#xe9; objetivos y si han existido barreras relevantes t&#xe9;cnicas o econ&#xf3;micas; y para la fase de uso qui&#xe9;nes han sido los usuarios reales respecto a los inicialmente planteados y si existen riesgos que amenacen la continuidad del proyecto.</p>
			<table-wrap id="t1">
				<label>Tabla 1</label>
				<caption>
					<title>Preguntas de investigaci&#xf3;n</title>
				</caption>
				<table>
					<colgroup>
						<col/>
						<col span="2"/>
					</colgroup>
					<thead>
						<tr>
							<th align="center">FASE</th>
							<th align="center" colspan="2">PREGUNTA DE INVESTIGACI&#xd3;N </th>
						</tr>
					</thead>
					<tbody>
						<tr>
							<td align="justify" rowspan="3">Planteamiento</td>
							<td align="center">I</td>
							<td align="justify">¿De qui&#xe9;n parte la iniciativa para la implantaci&#xf3;n?</td>
						</tr>
						<tr>
							<td align="center">II</td>
							<td align="justify">¿Cu&#xe1;les son los objetivos perseguidos con la herramienta?</td>
						</tr>
						<tr>
							<td align="center">III</td>
							<td align="justify">¿Existen barreras tecnol&#xf3;gicas, financieras u organizativas?</td>
						</tr>
						<tr>
							<td align="justify" rowspan="2">Uso</td>
							<td align="center">IV</td>
							<td align="justify">¿Coinciden los usuarios definidos a priori con los reales?</td>
						</tr>
						<tr>
							<td align="center">V</td>
							<td align="justify">¿Existen riesgos que puedan llevar al abandono del proyecto?</td>
						</tr>
					</tbody>
				</table>
			</table-wrap>
		</sec>
		<sec id="sec3" sec-type="methods">
			<label>3.</label>
			<title>Metodolog&#xed;a</title>
			<p>La investigaci&#xf3;n se ha centrado las dos principales herramientas de visualizaci&#xf3;n en uso en las administraciones espa&#xf1;olas. La primera es “Presupuesto Abierto de Arag&#xf3;n - Arag&#xf3;n Open Budget”, la m&#xe1;s extendida entre las administraciones p&#xfa;blicas espa&#xf1;olas. La aplicaci&#xf3;n fue producida en el marco del proyecto Aragon Open Data [<xref ref-type="fn" rid="fn3">3</xref>] con licencia de software libre European Union Public Licence 1.1 que otorga libertad de uso, reutilizaci&#xf3;n, adaptaci&#xf3;n y modificaci&#xf3;n con la &#xfa;nica condici&#xf3;n de mantener el c&#xf3;digo fuente resultante tambi&#xe9;n como software libre. Con frecuencia, esta aplicaci&#xf3;n se encuentra tambi&#xe9;n denominada como “D&#xf3;nde Van Mis Impuestos” (DVMI), nombre empleado para la herramienta por la Fundaci&#xf3;n Ciudadana Civio, que fue su desarrollador para el proyecto Aragon Open Data y que realiza la mayor parte de las adaptaciones para las administraciones espa&#xf1;olas [<xref ref-type="fn" rid="fn4">4</xref>]. Esta &#xfa;ltima denominaci&#xf3;n es la que generalmente se encuentra en las webs institucionales para la herramienta, combinada con otras como por ejemplo “Cuentas Claras” o “Presupuestos Visuales”. La determinaci&#xf3;n de la poblaci&#xf3;n objeto de estudio se centr&#xf3; en la herramienta con independencia del nombre que recibiera por parte de la administraci&#xf3;n, quedando integrada por las 32 administraciones p&#xfa;blicas espa&#xf1;olas que en mayo de 2019 la ten&#xed;an en uso en su web institucional y la manten&#xed;an actualizada (6 comunidades aut&#xf3;nomas, 24 ayuntamientos y 2 consejos insulares). La cobertura de la herramienta ser&#xed;a de cerca de 17 millones de habitantes, algo m&#xe1;s de un tercio de la poblaci&#xf3;n espa&#xf1;ola, que pod&#xed;an emplear la aplicaci&#xf3;n para visualizar los presupuestos de sus administraciones locales y/o auton&#xf3;micas.</p>
			<p>La segunda herramienta en estudio es el visor “Con Mis Impuestos” (CMI) desarrollado por la empresa espa&#xf1;ola Idi Eikon para su plataforma de servicios de gobierno abierto “Governalia”. En este caso nos encontramos ante un software no libre sino privativo, pero con funcionalidad muy similar a DVMI. Pero a diferencia de este, el uso de CMI se encuentra mayoritariamente concentrado en el entorno geogr&#xe1;fico de la costa mediterr&#xe1;nea espa&#xf1;ola en administraciones generalmente de menor tama&#xf1;o. La poblaci&#xf3;n en estudio comprendi&#xf3; a las 24 administraciones p&#xfa;blicas espa&#xf1;olas que en mayo de 2019 ten&#xed;an la herramienta CMI en uso en su web institucional y la manten&#xed;an actualizada (2 diputaciones provinciales, 1 consejo insular y 21 municipios). La cobertura de CMI es de cerca de 2,7 millones de habitantes, aproximadamente el 6&#x25; de la poblaci&#xf3;n del pa&#xed;s.</p>
			<p>Como herramienta de investigaci&#xf3;n se emple&#xf3; un cuestionario con preguntas estructuradas, principalmente escalas Likert o respuesta m&#xfa;ltiple o respuesta abierta cuando procediera. Estas preguntas fueron construidas sobre la base de las preguntas de investigaci&#xf3;n expuestas en el apartado anterior y de las principales teor&#xed;as de adopci&#xf3;n de tecnolog&#xed;as de la informaci&#xf3;n. La discusi&#xf3;n de estas teor&#xed;as excede el &#xe1;mbito de este art&#xed;culo, pero para el lector interesado en sus caracter&#xed;sticas y evoluci&#xf3;n recomendamos la revisi&#xf3;n cr&#xed;tica de <xref ref-type="bibr" rid="B33">Tarhini y otros. (2015)</xref>. El cuestionario se dirigi&#xf3; a los responsables de la aplicaci&#xf3;n de visualizaci&#xf3;n, definidos como aquellas personas con capacidad de decisi&#xf3;n y responsabilidad sobre la herramienta, su implantaci&#xf3;n, mantenimiento, actualizaci&#xf3;n o retirada. A lo largo del mes de mayo de 2019 el cuestionario se hizo llegar al responsable de cada administraci&#xf3;n por correo electr&#xf3;nico facilitando una URL para la recogida de datos y, posteriormente, por correo postal a aquellas entidades de las que no se hubiera obtenido respuesta tras un recordatorio. La recogida de respuestas finaliz&#xf3; d&#xed;as antes de la formaci&#xf3;n de los nuevos gobiernos surgidos de las elecciones del 26 de mayo de 2019, evitando un posible sesgo de respuesta por la llegada de nuevos responsables.</p>
			<p>La tasa de respuesta fue en total de 38 entidades, compuesta de la totalidad de las comunidades aut&#xf3;nomas y m&#xe1;s de la mitad de los municipios en estudio. Desglosada por herramientas, la respuesta fue del 75&#x25; para DVMI (24 de 32 administraciones: 6 comunidades aut&#xf3;nomas y 18 municipios) y del 58,33&#x25; para CMI (14 de 24 administraciones: 2 diputaciones provinciales, 1 consejo insular y 11 municipios). Creemos que la diferencia en las tasas de respuesta es debida principalmente a la diferencia de tama&#xf1;o de las distintas administraciones, debido a que los adoptantes de CMI son mayoritariamente administraciones de menor tama&#xf1;o comparadas con las adoptantes de DVMI. Esta idea se ve reforzada por el pleno en la tasa de respuesta de comunidades aut&#xf3;nomas, diputaciones provinciales y municipios de mayor tama&#xf1;o, tanto para DVMI como para CMI.</p>
			<p>Para las respuestas basadas en escalas Likert, se ha empleado la mediana interpolada como medida de tendencia central (<xref ref-type="bibr" rid="B39">Young y Veldman, 1972</xref>; <xref ref-type="bibr" rid="B23">Kiess y Green, 2009</xref>). En todos los casos se ha tenido en cuenta la dispersi&#xf3;n de los resultados a trav&#xe9;s de la desviaci&#xf3;n t&#xed;pica y rango intercuart&#xed;lico.</p>
		</sec>
		<sec id="sec4" sec-type="results">
			<label>4.</label>
			<title>Resultados</title>
			<p>En este apartado ofrecemos los resultados obtenidos para las preguntas de investigaci&#xf3;n planteadas.</p>
			<sec id="sec4.1">
				<label>4.1</label>
				<title>¿De qui&#xe9;n parte la iniciativa para la implantaci&#xf3;n?</title>
				<p>Una de las principales cuestiones de la investigaci&#xf3;n era qui&#xe9;n hab&#xed;a ostentado el liderazgo de la iniciativa de implantaci&#xf3;n de la herramienta. A priori, pareciera situarse tanto en el &#xe1;rea tecnol&#xf3;gica como en el &#xe1;rea de gesti&#xf3;n presupuestaria y financiera; sin descartar que surgiera de una autoridad pol&#xed;tica en la c&#xfa;spide de la organizaci&#xf3;n o fuera fruto del impulso de alg&#xfa;n empleado sin excesiva capacidad jer&#xe1;rquica. De manera mayoritaria, las respuestas para DVMI sit&#xfa;an el origen el proyecto en el &#xe1;mbito del responsable pol&#xed;tico de la administraci&#xf3;n, seguido ya a gran distancia de un impulso consensuado entre los diferentes roles citados en la pregunta. En el caso de CMI ambas opciones aparece igualadas como origen de la iniciativa, probablemente de nuevo debido al menor tama&#xf1;o de las entidades, lo que facilitar&#xed;a los consensos. Resulta sorprendente, tanto en un caso como en el otro, el escaso origen en las &#xe1;reas t&#xe9;cnicas de tecnolog&#xed;as de la informaci&#xf3;n y comunicaci&#xf3;n (TIC) o de gesti&#xf3;n.</p>
				<p>Como principal motivador de este impulso se encuentra el deseo de excelencia, seguido en menor medida por el anhelo de pertenecer a un grupo de entidades innovadoras. Sorprende la escasa tasa de respuesta que obtuvo como motivador el deseo de responder a las peticiones ciudadanas de mejorar la transparencia y rendici&#xf3;n de cuentas de la administraci&#xf3;n p&#xfa;blica. No obstante, el reparto de las respuestas es desigual entre ambos grupos, para el caso de DVMI el consenso es muy elevado para el deseo de excelencia, pero la divergencia aumenta en el grupo de CMI donde la tasa de respuesta es ligeramente m&#xe1;s elevada para el deseo de pertenecer a un grupo de entidades innovadoras e incluso para la respuesta a la demanda social. Consideramos que esta diferencia puede ser debida al hecho de que CMI se comercializa como producto integrante de un paquete de herramientas de gobierno abierto, mientras que DVMI es un producto &#xfa;nico. El deseo de mejorar en la carrera profesional no es considerado como un motivador, ni en tasa de respuesta ni por los comentarios recibidos a las preguntas, resultado coherente con que el liderazgo del proyecto no provenga principalmente del cuerpo de funcionarios de TIC o de gesti&#xf3;n presupuestaria.</p>
				<fig id="f1">
					<label>Figura 1</label>
					<caption>
						<title>&#xc1;mbito de iniciativa del proyecto</title>
					</caption>
					<graphic id="gra-1" xlink:href="REDC-44-03-e305-gf1.jpg"/>
				</fig>
				<fig id="f2">
					<label>Figura 2</label>
					<caption>
						<title>Motivaci&#xf3;n para el impulso (valoraci&#xf3;n media)</title>
					</caption>
					<graphic id="gra-2" xlink:href="REDC-44-03-e305-gf2.png"/>
				</fig>
			</sec>
			<sec id="sec4.2">
				<label>4.2</label>
				<title>¿Cu&#xe1;les son los objetivos perseguidos con la herramienta?</title>
				<p>Mayoritariamente los responsables valoran como primer objetivo de la herramienta la transparencia financiera y presupuestaria, en un grado manifiestamente superior para DVMI que para CMI, un resultado evidente hablando de un visor presupuestario. Pero, tambi&#xe9;n se obtienen tasas de respuesta considerables refiriendo el uso de la aplicaci&#xf3;n en procesos participativos y en lo que se llama microtransparencia (localizaci&#xf3;n de datos espec&#xed;ficos de inter&#xe9;s). Este &#xfa;ltimo objetivo es m&#xe1;s elevado en el caso de CMI que en el de DVMI, creemos que debido al menor tama&#xf1;o de estas administraciones que ocasiona una mayor cercan&#xed;a al ciudadano y que estos se preocupen m&#xe1;s de actuaciones concretas. Adicionalmente, en la respuesta abierta para otros objetivos, tambi&#xe9;n se comentan los usos en campa&#xf1;as de prensa y de concienciaci&#xf3;n fiscal de los ciudadanos. Es evidente que una herramienta puede no tener un &#xfa;nico objetivo, pero los resultados muestran como lo que pudiera parecer un objetivo obvio (transparencia financiera y presupuestaria) pudiera no serlo tanto, fij&#xe1;ndose otros ya desde su inicio. En particular, la transparencia participativa y la microtransparencia, que pueden ser considerados usos m&#xe1;s sofisticados pues conectan directamente con los objetivos de participaci&#xf3;n y colaboraci&#xf3;n del gobierno abierto, estar&#xed;an en l&#xed;nea con la proactividad requerida de gobiernos innovadores.</p>
				<fig id="f3">
					<label>Figura 3</label>
					<caption>
						<title>Objetivos de transparencia</title>
					</caption>
					<graphic id="gra-3" xlink:href="REDC-44-03-e305-gf3.png"/>
				</fig>
				<p>Asimismo, constatamos que, mayoritariamente y con un amplio consenso, los responsables creen que, adem&#xe1;s de visualmente, los datos deben poder ser accesibles en formato de datos abiertos, esto es, con licencia libre para su reutilizaci&#xf3;n y en formato est&#xe1;ndar. Por supuesto, siendo datos que respondan a una demanda ciudadana y se publiquen en un tiempo oportuno. En este caso, los encuestados creen que ellos se preocupan m&#xe1;s de este aspecto que su propia entidad.</p>
				<p>Tambi&#xe9;n resulta de inter&#xe9;s conocer si la raz&#xf3;n de que se establezcan los objetivos se debe a un deseo de tener una herramienta que permita cumplir con el ordenamiento jur&#xed;dico respecto a la publicidad de informaci&#xf3;n presupuestaria, o por el contrario a una pol&#xed;tica proactiva de transparencia hacia el ciudadano, facilitando el acceso a los datos con independencia de que se ofrezcan en otros medios y formatos suficientes para cumplir las obligaciones legales. Las respuestas fueron abrumadoramente coincidentes en el af&#xe1;n de proactividad sobre el cumplimiento de la normativa legal, si bien en el caso de CMI la diferencia es m&#xe1;s estrecha, de nuevo creemos que debido al menor tama&#xf1;o de las entidades. Resulta obvio que cumplir con los requisitos legales de publicidad puede hacerse con simples documentos PDF o incluso con conjuntos de datos abiertos, pero implementar este tipo de herramientas de visualizaci&#xf3;n es ir m&#xe1;s all&#xe1; de lo requerido por cualquier ordenamiento jur&#xed;dico actual.</p>
				<fig id="f4">
					<label>Figura 4</label>
					<caption>
						<title>Marco regulatorio y proactividad (valoraci&#xf3;n media)</title>
					</caption>
					<graphic id="gra-4" xlink:href="REDC-44-03-e305-gf4.png"/>
				</fig>
				<fig id="f5">
					<label>Figura 5</label>
					<caption>
						<title>Barreras (valoraci&#xf3;n media)</title>
					</caption>
					<graphic id="gra-5" xlink:href="REDC-44-03-e305-gf5.png"/>
				</fig>
			</sec>
			<sec id="sec4.3">
				<label>4.3</label>
				<title>¿Existen barreras tecnol&#xf3;gicas, financieras u organizativas?</title>
				<p>Respecto a la existencia de barreras econ&#xf3;micas o tecnol&#xf3;gicas que pudieran haber dificultado el proyecto, no se consideraron en ning&#xfa;n momento muy relevantes y, en particular, las de car&#xe1;cter econ&#xf3;mico obtienen la menor valoraci&#xf3;n.</p>
				<p>Reciben una mayor valoraci&#xf3;n otro tipo de barreras intangibles, principalmente las din&#xe1;micas organizativas entendidas como las formas habituales de hacer las cosas, seguidas de falta de recursos humanos para la actualizaci&#xf3;n y mantenimiento de la herramienta, la falta de estrategias claras de transparencia y rendici&#xf3;n de cuentas, e incluso la resistencia de superiores jer&#xe1;rquicos. En nuestra opini&#xf3;n, estos cuatro aspectos formar&#xed;an parte del mismo problema: acciones que se ponen en marcha para reforzar la imagen de la administraci&#xf3;n como transparente, sin un plan preestablecido para canalizar recursos de una manera sostenida que permita alcanzar unos objetivos claramente definidos. No obstante, hacemos notar que en las respuestas existe una falta de consenso bastante elevada para estas barreras, y que las administraciones del grupo CMI, aunque mantienen la jerarqu&#xed;a entre ellas, otorgan una mayor puntuaci&#xf3;n a todas las barreras, creemos que de nuevo debido al menor tama&#xf1;o que hace que el proyecto sea relativamente m&#xe1;s complejo de llevar a cabo.</p>
				<p>No se consider&#xf3; excesiva la dificultad t&#xe9;cnica de implantaci&#xf3;n, siendo esta consideraci&#xf3;n a&#xfa;n m&#xe1;s favorable en el caso de DVMI, si bien aproximadamente el 80&#x25; de las administraciones recurrieron a contrataci&#xf3;n con terceros. Tampoco la diferencia de licencia del software, libre para DVMI y privativa para CMI, parece haber actuado como barrera, aunque en el caso de DVMI se encuentra una mayor valoraci&#xf3;n positiva a que sea software libre sobre la valoraci&#xf3;n de CMI como producto privativo. En ambos casos los responsables subrayan las potencialidades de mejora, ampliaci&#xf3;n o personalizaci&#xf3;n futura sobre cualquier coste econ&#xf3;mico de adquisici&#xf3;n y puesta en marcha.</p>
				<fig id="f6">
					<label>Figura 6</label>
					<caption>
						<title>Usuarios (valoraci&#xf3;n media)</title>
					</caption>
					<graphic id="gra-6" xlink:href="REDC-44-03-e305-gf6.png"/>
				</fig>
			</sec>
			<sec id="sec4.4">
				<label>4.4.</label>
				<title>¿Coinciden los usuarios definidos a priori con los reales?</title>
				<p>Los gestores de la herramienta fueron preguntados por los grupos de usuarios m&#xe1;s interesados en los datos que suministra. De manera un tanto sorprendente, por tratarse de una herramienta de tecnolog&#xed;a c&#xed;vica te&#xf3;ricamente al servicio del ciudadano, los ciudadanos individuales fueron considerados el grupo con menor inter&#xe9;s en los datos presupuestarios y de manera m&#xe1;s acusada en el grupo CMI; por el contrario, los grupos pol&#xed;ticos fueron considerados los grupos de mayor inter&#xe9;s, seguidos por los medios de comunicaci&#xf3;n. Otros grupos como contratistas con la administraci&#xf3;n y asociaciones obtuvieron valoraciones muy cercanas. El resultado es consistente con el modelo de rendici&#xf3;n de cuentas vertical, con los grupos pol&#xed;ticos y medios de comunicaci&#xf3;n actuando como intermediarios entre ciudadanos y gobiernos. Sin embargo, resulta dif&#xed;cil entender el porqu&#xe9; de la valoraci&#xf3;n recibida por los grupos pol&#xed;ticos, normalmente considerados estrechamente ligados a la acci&#xf3;n gubernamental o de oposici&#xf3;n y, por tanto, potencialmente sesgados en sus interpretaciones, si bien es cierto que los datos presupuestarios son la materia prima de su trabajo. El consenso en esta calificaci&#xf3;n result&#xf3; muy elevado, con desviaciones muy similares para todos los grupos, con independencia de la herramienta empleada, resultando a&#xfa;n mayor para la valoraci&#xf3;n de los grupos pol&#xed;ticos en el caso de administraciones con la herramienta CMI.</p>
				<p>Preguntados por los usos concretos, mayoritariamente se refirieron a usos en informaciones e investigaciones period&#xed;sticas. En cambio, resultaron m&#xe1;s escasos otros que, a priori, tambi&#xe9;n pudieran resultar interesantes, como el uso en procesos participativos o el uso para solicitar explicaciones a los responsables pol&#xed;ticos sobre acciones de gobierno o gasto p&#xfa;blico. El resultado es congruente con el obtenido para los usuarios, particularmente en el caso de los medios informativos, y tambi&#xe9;n, como se mostrar&#xe1; m&#xe1;s adelante, con los objetivos de transparencia perseguidos. Destacamos tambi&#xe9;n la mayor valoraci&#xf3;n en el grupo CMI para los usos internos y participativos, lo que refuerza nuestra idea de que el tama&#xf1;o resulta relevante para el planteamiento y uso de estas herramientas, quiz&#xe1; buscando un rendimiento adicional a la inversi&#xf3;n efectuada en software.</p>
				<p>Los resultados obtenidos a esta pregunta de investigaci&#xf3;n nos parecen en especial destacables, especialmente cuando observamos los comentarios recibidos en las preguntas abiertas al respecto. Los responsables coinciden en achacar el escaso uso ciudadano a la falta de conocimientos b&#xe1;sicos sobre el presupuesto y creen que su impacto en la transparencia y rendici&#xf3;n de cuentas podr&#xed;a haberse potenciado acompa&#xf1;ando su implantaci&#xf3;n con campa&#xf1;as informativas acerca de su existencia, modo de empleo y ejemplos de uso y obtenci&#xf3;n de datos. Por ello, no les resulta extra&#xf1;o que la mayor parte de los usos procedan de medios informativos o grupos pol&#xed;ticos. Adicionalmente, las preguntas de respuesta abierta nos facilitaron un uso no previsto a priori, el uso por parte de la propia administraci&#xf3;n para sus informes internos sobre asignaci&#xf3;n presupuestaria y comparativas interanuales, y la generaci&#xf3;n de recursos gr&#xe1;ficos para campa&#xf1;as informativas en los medios sobre las acciones de gobierno. Este tipo de usos aparecen referidos en las respuestas casi tanto como su uso en informaciones period&#xed;sticas.</p>
				<p>Queremos incluir aqu&#xed; tambi&#xe9;n un comentario recibido de varios responsables: el valor a&#xf1;adido de la herramienta como un punto de encuentro entre los desaf&#xed;os que para los usuarios puede suponer el procesamiento de datos abiertos (formatos de texto estructurado, CSV) y la poca versatilidad de los documentos PDF para su examen y an&#xe1;lisis. As&#xed;, la herramienta quiz&#xe1; no deber&#xed;a focalizarse tanto a grupos de usuarios como los antes mencionados sino a grupos de usuarios con una necesidad intermedia de procesado de los datos.</p>
				<fig id="f7">
					<label>Figura 7</label>
					<caption>
						<title>Principales usos (valoraci&#xf3;n media)</title>
					</caption>
					<graphic id="gra-7" xlink:href="REDC-44-03-e305-gf7.png"/>
				</fig>
			</sec>
			<sec id="sec4.5">
				<label>4.5</label>
				<title>¿Existen riesgos que puedan llevar al abandono del proyecto?</title>
				<p>Con esta pregunta de investigaci&#xf3;n hemos querido responder a cu&#xe1;les son los potenciales peligros que afectan a la herramienta una vez instalada y/o que puedan condicionar su expansi&#xf3;n a otras administraciones con base en la experiencia de los pioneros.</p>
				<p>De acuerdo con las respuestas abiertas recibidas de los responsables, la transferencia de datos desde el software de gesti&#xf3;n contable y presupuestaria a la aplicaci&#xf3;n de visualizaci&#xf3;n supone el mayor problema al que se enfrentan, debido a la cambiante estructura presupuestaria por reorganizaciones administrativas. Esto supone tener que dedicar tiempo de recursos humanos a esta tarea para poder mantener la comparabilidad interanual. En torno a esta problem&#xe1;tica tambi&#xe9;n se refirieron con frecuencia problemas ocasionados por la falta de una estrategia clara en temas de transparencia. Concretamente, la falta absoluta de procedimientos establecidos que determinen qui&#xe9;n, c&#xf3;mo y cu&#xe1;ndo debe ocuparse de solucionar el problema de casaci&#xf3;n de partidas presupuestarias reasignadas entre &#xf3;rganos y funciones en sucesivos ejercicios econ&#xf3;micos o de actualizar los datos. Curiosamente, las fases previa y posterior a estos problemas (estas son, la recolecci&#xf3;n de datos y su posterior carga en la aplicaci&#xf3;n una vez depurados y reclasificados) fueron las consideradas como las partes de menor dificultad t&#xe9;cnica.</p>
			</sec>
		</sec>
		<sec id="sec5" sec-type="conclusions">
			<label>5.</label>
			<title>Conclusiones</title>
			<p>Las herramientas de visualizaci&#xf3;n presupuestaria rebajan los niveles de conocimiento requeridos de los ciudadanos para acceder, comprender y contextualizar la informaci&#xf3;n presupuestaria. Por ello, son un instrumento &#xf3;ptimo para la rendici&#xf3;n de cuentas vertical a los ciudadanos, sin perjuicio de los canales cl&#xe1;sicos formales. Nuestra investigaci&#xf3;n recogi&#xf3; datos por medio de un cuestionario a los responsables de las dos principales herramientas empleadas por las administraciones espa&#xf1;olas. La tasa de respuesta global del 75&#x25; nos permite afirmar la bondad de nuestros resultados, as&#xed; como su capacidad de orientaci&#xf3;n para futuras experiencias de implantaci&#xf3;n.</p>
			<p>Los resultados nos muestran un bajo inter&#xe9;s de la ciudadan&#xed;a por los datos presupuestarios abiertos, as&#xed; como la necesidad de disponer de intermediarios o de desarrollar interfaces que permitan el acceso a los datos y su contextualizaci&#xf3;n. Tambi&#xe9;n coinciden con la literatura en la no existencia de un usuario medio de los datos, sino en grupos con inter&#xe9;s muy espec&#xed;fico en determinadas informaciones particulares (<xref ref-type="bibr" rid="B16">Gray, 2015</xref>; <xref ref-type="bibr" rid="B38">Worthy, 2015</xref>), lo que hace que el uso de la herramienta sea muy inestable y dependiente de las cambiantes necesidades informativas de esos grupos. El escaso n&#xfa;mero de usuarios no debe identificarse necesariamente con escaso inter&#xe9;s en los datos, sino con la todav&#xed;a existente necesidad de disponer de expertos que puedan crear y contar una historia al p&#xfa;blico en base a los datos; por ello, aunque estos datos sean mucho m&#xe1;s accesibles que en la era predigital o en los a&#xf1;os tempranos de la divulgaci&#xf3;n en l&#xed;nea, es todav&#xed;a necesario que los datos sean obtenidos, contextualizados, interpretados y canalizados hacia las personas legas en la materia. Esto implica una inversi&#xf3;n en tiempo y recursos que el ciudadano, destinatario final de la rendici&#xf3;n de cuentas, no puede enfrentar solo (y, quiz&#xe1;, tampoco debe) y para lo que necesita de intermediarios, normalmente periodistas y otros grupos ciudadanos que realizan las mismas funciones y canalizan los datos ya procesados como informaci&#xf3;n hacia los medios de comunicaci&#xf3;n. Por ello, no debemos calificar a los escasos usuarios como un fracaso de la herramienta sino simplemente se&#xf1;alar que probablemente el foco y las expectativas se han puesto en el grupo de usuarios equivocado, lo que puede contribuir a explicar el fen&#xf3;meno de caja negra (<xref ref-type="bibr" rid="B25">Meijer, 2013</xref>). A pesar de ello, el software estar&#xed;a cumpliendo con su objetivo de crear nuevas v&#xed;as de acceso a los datos que de otro modo precisar&#xed;an de un mayor n&#xfa;mero de expertos en la cadena de obtenci&#xf3;n y contextualizaci&#xf3;n, reduciendo as&#xed; el uso de los denominados brokers de informaci&#xf3;n (<xref ref-type="bibr" rid="B18">Heald, 2003</xref>) y rebajando las asimetr&#xed;as informativas. Como afirman <xref ref-type="bibr" rid="B32">Royo-Monta&#xf1;&#xe9;s y Ben&#xed;tez-G&#xf3;mez (2019)</xref>, para que los datos abiertos sean un catalizador de cambio social no es suficiente con divulgarlos en portales de datos abiertos, sino que tambi&#xe9;n se deben profundizar todos los aspectos que fomentan su utilizaci&#xf3;n para un p&#xfa;blico no experto. Por ello, tampoco ha de olvidarse el papel de estas tecnolog&#xed;as c&#xed;vicas en el impulso de la dimensi&#xf3;n pol&#xed;tica ciudadana de conceptos aparentemente corporativos como el de <italic>smart-city</italic>, donde pueden estar al servicio del empoderamiento ciudadano en el derecho del acceso a la informaci&#xf3;n y en procesos de toma de decisiones participativos, abiertos y transparentes; particularmente en el &#xe1;mbito de los gobiernos m&#xe1;s cercanos a los ciudadanos (<xref ref-type="bibr" rid="B6">Charnock et al., 2019</xref>).</p>
			<p>Tambi&#xe9;n destacamos las brechas de expectativas detectadas. De manera general, los responsables de las herramientas creen que ellos se preocupan m&#xe1;s que sus administraciones por atender a la demanda ciudadana de informaci&#xf3;n, por la reusabilidad de los datos y por su oportunidad temporal. Ello es consistente con lo descrito en la literatura de que muchas iniciativas de datos abiertos existen y se mantienen gracias al esfuerzo de personas concretas m&#xe1;s all&#xe1; de cualquier estrategia o programa de gobierno abierto o rendici&#xf3;n de cuentas (<xref ref-type="bibr" rid="B14">Garc&#xed;a-Garc&#xed;a y Curto-Rodr&#xed;guez, 2019</xref>), poniendo la carga de estas iniciativas m&#xe1;s en factores individuales que colectivos. La segunda brecha de expectativas es la creada entre los usuarios te&#xf3;ricos (ciudadanos) y los usuarios reales (medios de comunicaci&#xf3;n y grupos pol&#xed;ticos), que pudiera resultar en que no se vieran satisfechos indicadores de &#xe9;xito preestablecidos, ralentizando o impidiendo la difusi&#xf3;n de estas herramientas a otras administraciones. Todo esto, unido a la dificultad operativa de conciliar la cambiante estructura presupuestaria con las estructuras de datos requeridas por las herramientas, y con la declarada aspiraci&#xf3;n de buscar la excelencia, refuerza nuestro temor de que existe un serio riesgo de amenaza vital para el futuro de las herramientas de visualizaci&#xf3;n presupuestaria.</p>
			<p>En un sentido positivo, destaca la independencia de la herramienta de los condicionantes financieros o tecnol&#xf3;gicos, en el caso de DVMI en parte por ser software libre y por las expectativas de continuar con mejoras y adaptaciones particulares por cuenta propia, y tanto en el caso de CMI como DVMI por ser la inversi&#xf3;n de puesta en marcha generalmente peque&#xf1;a. No obstante, no queremos dejar de destacar la implementaci&#xf3;n en algunos municipios de menos de 15.000 habitantes para los que la inversi&#xf3;n s&#xed; resulta significativa y constituye una clara apuesta por la transparencia y rendici&#xf3;n de cuentas. En este sentido, nuestros resultados apuntan a distintos planteamientos en la adopci&#xf3;n y uso de estas herramientas seg&#xfa;n el tama&#xf1;o, algo que debemos considerar como normal dada la cercan&#xed;a al ciudadano en las administraciones de menor tama&#xf1;o y su menor capacidad de recursos que les puede llevar a optimizar los usos del software ya disponible.</p>
			<p>El impulso mayoritariamente pol&#xed;tico a la implementaci&#xf3;n tambi&#xe9;n es otro de los resultados que merece una reflexi&#xf3;n, especialmente unido a la brecha de expectativas sobre los usuarios, ya que desconocemos hasta que punto la adopci&#xf3;n de una tecnolog&#xed;a c&#xed;vica puede resultar influenciado por modas. As&#xed;, podr&#xed;amos encontrarnos no tanto ante el deseo de ser transparentes ante la ciudadan&#xed;a como ante la r&#xe9;plica de experiencias que hayan recibido una sustancial atenci&#xf3;n medi&#xe1;tica cuando fueron puestas en marcha en otras administraciones, con independencia de cualquier fijaci&#xf3;n de objetivos y evaluaci&#xf3;n de resultados. Entonces, la adopci&#xf3;n de la herramienta se convertir&#xed;a en un caso particular del fen&#xf3;meno conocido como <italic>openwashing</italic> (<xref ref-type="bibr" rid="B20">Heimst&#xe4;dt, 2017</xref>). En cualquier caso, dado el reducido coste de la implementaci&#xf3;n y la relevancia de los datos ofrecidos, creemos que es algo que siempre deber&#xed;a de existir, lo que nos lleva a plantearnos las razones por las que tan pocos gobiernos ofrecen este tipo de visualizaciones en sus webs institucionales. En este punto, no podemos sino coincidir con <xref ref-type="bibr" rid="B15">Gonz&#xe1;lez-Lim&#xf3;n y Rodr&#xed;guez-Ramos (2019)</xref> en el positivo papel de la regulaci&#xf3;n de la transparencia y de la informaci&#xf3;n p&#xfa;blica para la aparici&#xf3;n de reutilizaciones pr&#xe1;cticas de los datos abiertos, aunque siga existiendo una gran carencia en la difusi&#xf3;n, si bien creemos que, como muestran los resultados, unos responsables p&#xfa;blicos proactivos en busca de la excelencia pueden actuar como un complemento positivo a lo dispuesto en las diferentes normativas.</p>
			<p>Los resultados tambi&#xe9;n revelaron la existencia de uno de los problemas emergentes para los expertos en datos p&#xfa;blicos abiertos, que se manifiesta cuando la publicaci&#xf3;n de datos se extiende en volumen y en el tiempo: su gobernanza, definida como la interacci&#xf3;n de reglas, est&#xe1;ndares, herramientas, principios, procesos y decisiones que influyen sobre qu&#xe9; datos son liberados, c&#xf3;mo y por qui&#xe9;n (<xref ref-type="bibr" rid="B4">Brandusescu y otros 2019</xref>). Este fen&#xf3;meno se nos manifest&#xf3; claramente cuando en los comentarios a las preguntas, reiteradamente los responsables mencionaban la problem&#xe1;tica de homogeneizar la cambiante estructura de los presupuestos entre a&#xf1;os para permitir las comparativas. En general, no parec&#xed;an existir procedimientos claros sobre cu&#xe1;ndo deber&#xed;a realizarse esta tarea, si debiese formar parte del proceso presupuestario en s&#xed; mismo, o qui&#xe9;n y como deber&#xed;a ser el responsable de llevarla a cabo. Nos encontramos ante un problema de gobernanza que en el largo plazo pudiera comprometer el uso de estas herramientas o actuar como una barrera a su expansi&#xf3;n a nuevas administraciones, pues realmente constituye un coste oculto pagadero en tiempo de recursos humanos. Y, generalmente, todas las manipulaciones manuales de datos o manipulaciones con software no espec&#xed;fico requieren de tareas repetitivas de escaso valor a&#xf1;adido que con el paso del tiempo tender&#xe1;n a ser descuidadas y abandonadas a medida que el impulso inicial del proyecto decae (<xref ref-type="bibr" rid="B1">Abella y otros, 2019</xref>). En consecuencia, buena parte de los deseos de proactividad y excelencia unidos a estos proyectos deber&#xed;an enfocarse a solventar este problema de gobernanza. Los adoptantes de herramientas de visualizaci&#xf3;n presupuestaria deber&#xed;an extender sus estrategias de transparencia y rendici&#xf3;n de cuentas a los procesos operativos en torno a ellas, desarrollando, si fuera necesario, nuevas rutinas y procedimientos e incluso aplicaciones de software para reducir o erradicar estos costes ocultos.</p>
			<p>En resumen, las aplicaciones de visualizaci&#xf3;n presupuestaria son una tecnolog&#xed;a c&#xed;vica innovadora que, debido a su capacidad para reducir las asimetr&#xed;as informativas, deber&#xed;a extenderse entre las distintas administraciones p&#xfa;blicas. Sin embargo, deber&#xed;amos evitar caer en la trampa del tecnofetichismo otorgando a las tecnolog&#xed;as digitales propiedades casi m&#xe1;gicas para mejorar la transparencia de los gobiernos, especialmente en el campo de la eficiencia divulgativa. Como con cualquier otra tecnolog&#xed;a, existen una serie de factores que deben ser controlados para obtener resultados eficaces. El Premio Nobel de Econom&#xed;a Ronald Coase afirm&#xf3; que los aspectos del sistema econ&#xf3;mico que son dif&#xed;ciles de medir tienden a descuidarse (<xref ref-type="bibr" rid="B9">Coase, 1994</xref>). Tan sensata afirmaci&#xf3;n deber&#xed;a extenderse a aquellos aspectos dif&#xed;ciles de comunicar, para impedir que la ciudadan&#xed;a descuide sus leg&#xed;timos derechos de evaluaci&#xf3;n y control de gobiernos y administraciones.</p>
		</sec>
	</body>
	<back>
		<fn-group>
			<label>6.</label>
			<title>Notas</title>
			<fn fn-type="other" id="fn1">
				<label>1</label>
				<p>Presupuestos Abiertos del Ayuntamiento de Madrid : <ext-link ext-link-type="uri" xlink:href="https://presupuestosabiertos.madrid.es/es/">https://presupuestosabiertos.madrid.es/es/</ext-link>
				</p>
			</fn>
			<fn fn-type="other" id="fn2">
				<label>2</label>
				<p>Datos Econ&#xf3;micos de la Diputaci&#xf3;n de Castell&#xf3;n: <ext-link ext-link-type="uri" xlink:href="https://datoseconomicos.dipcas.es/">https://datoseconomicos.dipcas.es/</ext-link>
				</p>
			</fn>
			<fn fn-type="other" id="fn3">
				<label>3</label>
				<p>Repositorio del proyecto en <ext-link ext-link-type="uri" xlink:href="https://github.com/aragonopendata/presupuesto">https://github.com/aragonopendata/presupuesto</ext-link>
				</p>
			</fn>
			<fn fn-type="other" id="fn4">
				<label>4</label>
				<p>Repositorio de adaptaciones de Fundaci&#xf3;n Ciudadana Civio en <ext-link ext-link-type="uri" xlink:href="https://github.com/civio">https://github.com/civio</ext-link>
				</p>
			</fn>
		</fn-group>
		<ref-list>
			<label>7.</label>
			<title>Referencias</title>
			<ref id="B1">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Abella</surname>
							<given-names>A.</given-names>
						</string-name>
						<string-name>
							<surname>Ortiz-de-Urbina-Criado</surname>
							<given-names>M.</given-names>
						</string-name>
						<string-name>
							<surname>De-Pablos-Heredero</surname>
							<given-names>C.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>The process of open data publication and reuse</article-title>
					<source>Journal of the Association for Information Science and Technology</source>
					<volume>70</volume>
					<issue>3</issue>
					<fpage>296</fpage>
					<lpage>300</lpage>
					<pub-id pub-id-type="doi">10.1002/asi.24116</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B2">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Baack</surname>
							<given-names>S.</given-names>
						</string-name>
					</person-group>
					<year>2015</year>
					<article-title>Datafication and empowerment: How the open data movement re-articulates notions of democracy, participation, and journalism</article-title>
					<source>Big Data &amp; Society</source>
					<volume>2</volume>
					<issue>2</issue>
					<elocation-id>2053951715594634</elocation-id>
					<pub-id pub-id-type="doi">10.1177/2053951715594634</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B3">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Benkler</surname>
							<given-names>Y.</given-names>
						</string-name>
					</person-group>
					<year>2011</year>
					<article-title>A Free Irresponsible Press: Wikileaks and the Battle Over the Soul of the Networked Fourth Estate</article-title>
					<source>Harvard Civil Rights-Civil Liberties Law Review</source>
					<ext-link ext-link-type="uri" xlink:href="https://dash.harvard.edu/handle/1/10900863">https://dash.harvard.edu/handle/1/10900863</ext-link>
					<pub-id pub-id-type="doi">10.7146/politik.v15i2.27508</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B4">
				<mixed-citation publication-type="webpage">
					<person-group person-group-type="author">
						<string-name>
							<surname>Brandusescu</surname>
							<given-names>A.</given-names>
						</string-name>
						<string-name>
							<surname>Iglesias</surname>
							<given-names>C.</given-names>
						</string-name>
						<string-name>
							<surname>L&#xe4;mmerhirt</surname>
							<given-names>D.</given-names>
						</string-name>
						<string-name>
							<surname>Verhulst</surname>
							<given-names>S.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>Open data governance and open governance: Interplay or disconnect?</article-title>
					<source>World Wide Web Foundation</source>
					<ext-link ext-link-type="uri" xlink:href="https://webfoundation.org/2019/02/open-data-governance-and-open-governance-interplay-or-disconnect/">https://webfoundation.org/2019/02/open-data-governance-and-open-governance-interplay-or-disconnect/</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B5">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>C&#xe1;rcaba Garc&#xed;a</surname>
							<given-names>A.</given-names>
						</string-name>
						<string-name>
							<surname>Garc&#xed;a Garc&#xed;a</surname>
							<given-names>J.</given-names>
						</string-name>
					</person-group>
					<year>2003</year>
					<article-title>La informaci&#xf3;n financiera en Internet de las corporaciones locales europeas</article-title>
					<source>Partida doble</source>
					<volume>13</volume>
					<issue>144</issue>
					<fpage>56</fpage>
					<lpage>69</lpage>
				</mixed-citation>
			</ref>
			<ref id="B6">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Charnock</surname>
							<given-names>G.</given-names>
						</string-name>
						<string-name>
							<surname>March</surname>
							<given-names>H.</given-names>
						</string-name>
						<string-name>
							<surname>Ribera-Fumaz</surname>
							<given-names>R.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>From smart to rebel city? Worlding, provincialising and the Barcelona Model</article-title>
					<source>Urban Studies</source>
					<comment>OnlineFirst</comment>
					<pub-id pub-id-type="doi">10.1177/0042098019872119</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B7">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Chen</surname>
							<given-names>Y. N.</given-names>
						</string-name>
						<string-name>
							<surname>Chen</surname>
							<given-names>H. M.</given-names>
						</string-name>
						<string-name>
							<surname>Huang</surname>
							<given-names>W.</given-names>
						</string-name>
						<string-name>
							<surname>Ching</surname>
							<given-names>R. K. H.</given-names>
						</string-name>
					</person-group>
					<year>2006</year>
					<article-title>E-Government Strategies in Developed and Developing Countries: An Implementation Framework and Case Study</article-title>
					<source>Journal of Global Information Management (JGIM)</source>
					<issue>1</issue>
					<pub-id pub-id-type="doi">10.4018/jgim.2006010102</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B8">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Clarke</surname>
							<given-names>A.</given-names>
						</string-name>
						<string-name>
							<surname>Francoli</surname>
							<given-names>M.</given-names>
						</string-name>
					</person-group>
					<year>2014</year>
					<article-title>What’s in a name? A comparison of ‘open government’ definitions across seven Open Government Partnership members</article-title>
					<source>JeDEM - EJournal of EDemocracy and Open Government</source>
					<volume>6</volume>
					<issue>3</issue>
					<fpage>248</fpage>
					<lpage>266</lpage>
					<pub-id pub-id-type="doi">10.29379/jedem.v6i3.227</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B9">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Coase</surname>
							<given-names>R. H.</given-names>
						</string-name>
					</person-group>
					<year>1994</year>
					<source>Essays on economics and economists</source>
					<publisher-name>Univ. of Chicago Press</publisher-name>
				</mixed-citation>
			</ref>
			<ref id="B10">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>de la Cueva Gonz&#xe1;lez-Cotera</surname>
							<given-names>J.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>La configuraci&#xf3;n del software como cuesti&#xf3;n pol&#xed;tica</article-title>
					<source>Teknokultura. Revista de Cultura Digital y Movimientos Sociales</source>
					<volume>16</volume>
					<issue>2</issue>
					<fpage>159</fpage>
					<lpage>180</lpage>
					<pub-id pub-id-type="doi">10.5209/TEKN.63795</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B11">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Fuchs</surname>
							<given-names>C.</given-names>
						</string-name>
					</person-group>
					<year>2010</year>
					<article-title>Alternative Media as Critical Media</article-title>
					<source>European Journal of Social Theory</source>
					<volume>13</volume>
					<issue>2</issue>
					<fpage>173</fpage>
					<lpage>192</lpage>
					<pub-id pub-id-type="doi">10.1177/1368431010362294</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B12">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Garc&#xed;a-Garc&#xed;a</surname>
							<given-names>J.</given-names>
						</string-name>
					</person-group>
					<year>2014</year>
					<article-title>Gobierno abierto: Transparencia, participaci&#xf3;n y colaboraci&#xf3;n en las administraciones p&#xfa;blicas</article-title>
					<source>Innovar</source>
					<volume>24</volume>
					<issue>54</issue>
					<fpage>75</fpage>
					<lpage>88</lpage>
					<pub-id pub-id-type="doi">10/gcx5v5</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B13">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Garc&#xed;a-Garc&#xed;a</surname>
							<given-names>J.</given-names>
						</string-name>
						<string-name>
							<surname>Curto-Rodr&#xed;guez</surname>
							<given-names>R.</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<article-title>Divulgaci&#xf3;n de informaci&#xf3;n p&#xfa;blica de las comunidades aut&#xf3;nomas espa&#xf1;olas (2013-2017): Portal de datos abiertos, portal de transparencia y web institucional</article-title>
					<source>El Profesional de la Informaci&#xf3;n</source>
					<volume>27</volume>
					<issue>5</issue>
					<fpage>1051</fpage>
					<pub-id pub-id-type="doi">10.3145/epi.2018.sep.09</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B14">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Garc&#xed;a-Garc&#xed;a</surname>
							<given-names>J.</given-names>
						</string-name>
						<string-name>
							<surname>Curto-Rodr&#xed;guez</surname>
							<given-names>R.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>El ejercicio de la rendici&#xf3;n de cuentas mediante portales de datos abiertos en las comunidades aut&#xf3;nomas espa&#xf1;olas</article-title>
					<source>IDP. Revista de Internet, Derecho y Pol&#xed;tica</source>
					<issue>29</issue>
					<ext-link ext-link-type="uri" xlink:href="https://www.raco.cat/index.php/IDP/article/view/373562">https://www.raco.cat/index.php/IDP/article/view/373562</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B15">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Gonz&#xe1;lez-Lim&#xf3;n</surname>
							<given-names>M.</given-names>
						</string-name>
						<string-name>
							<surname>Rodr&#xed;guez-Ramos</surname>
							<given-names>A.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>Revisi&#xf3;n del cumplimiento de los Datos Abiertos por los Ayuntamientos espa&#xf1;oles en la iniciativa Aporta</article-title>
					<source>Revista Espa&#xf1;ola de Documentaci&#xf3;n Cient&#xed;fica</source>
					<volume>42</volume>
					<issue>4</issue>
					<elocation-id>e247</elocation-id>
					<pub-id pub-id-type="doi">10.3989/redc.2019.4.1605</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B16">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<string-name>
							<surname>Gray</surname>
							<given-names>J.</given-names>
						</string-name>
					</person-group>
					<year>2015</year>
					<source>Open Budget Data: Mapping the landscape</source>
					<publisher-name>Open Knowledge</publisher-name>
					<ext-link ext-link-type="uri" xlink:href="http://www.fiscaltransparency.net/eng/resource_open_public.php?IdToOpen=20150902128">http://www.fiscaltransparency.net/eng/resource_open_public.php?IdToOpen=20150902128</ext-link>
					<pub-id pub-id-type="doi">10.2139/ssrn.2654878</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B17">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Guti&#xe9;rrez</surname>
							<given-names>M.</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<source>Data activism and social change</source>
					<publisher-name>Springer Berlin Heidelberg</publisher-name>
					<pub-id pub-id-type="doi">10.1007/978-3-319-78319-2</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B18">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Heald</surname>
							<given-names>D.</given-names>
						</string-name>
					</person-group>
					<year>2003</year>
					<article-title>Fiscal Transparency: Concepts, Measurement and UK Practice</article-title>
					<source>Public Administration</source>
					<volume>81</volume>
					<issue>4</issue>
					<fpage>723</fpage>
					<lpage>759</lpage>
					<pub-id pub-id-type="doi">10.1111/j.0033-3298.2003.00369.x</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B19">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Heald</surname>
							<given-names>D.</given-names>
						</string-name>
					</person-group>
					<year>2012</year>
					<article-title>Why is transparency about public expenditure so elusive?</article-title>
					<source>International Review of Administrative Sciences</source>
					<volume>78</volume>
					<issue>1</issue>
					<fpage>30</fpage>
					<lpage>49</lpage>
					<pub-id pub-id-type="doi">10/gcx5x2</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B20">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Heimst&#xe4;dt</surname>
							<given-names>M.</given-names>
						</string-name>
					</person-group>
					<year>2017</year>
					<article-title>Openwashing: A decoupling perspective on organizational transparency</article-title>
					<source>Technological Forecasting and Social Change</source>
					<volume>125</volume>
					<fpage>77</fpage>
					<lpage>86</lpage>
					<pub-id pub-id-type="doi">10.1016/j.techfore.2017.03.037</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B21">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Johnson</surname>
							<given-names>N. F.</given-names>
						</string-name>
						<string-name>
							<surname>Vel&#xe1;squez</surname>
							<given-names>N.</given-names>
						</string-name>
						<string-name>
							<surname>Restrepo</surname>
							<given-names>N. J.</given-names>
						</string-name>
						<string-name>
							<surname>Leahy</surname>
							<given-names>R.</given-names>
						</string-name>
						<string-name>
							<surname>Gabriel</surname>
							<given-names>N.</given-names>
						</string-name>
						<string-name>
							<surname>Oud</surname>
							<given-names>S. E.</given-names>
						</string-name>
						<string-name>
							<surname>Zheng</surname>
							<given-names>M.</given-names>
						</string-name>
						<string-name>
							<surname>Manrique</surname>
							<given-names>P.</given-names>
						</string-name>
						<string-name>
							<surname>Wuchty</surname>
							<given-names>S.</given-names>
						</string-name>
						<string-name>
							<surname>Lupu</surname>
							<given-names>Y.</given-names>
						</string-name>
					</person-group>
					<year>2020</year>
					<article-title>The online competition between pro- and anti-vaccination views</article-title>
					<source>Nature</source>
					<fpage>1</fpage>
					<lpage>4</lpage>
					<pub-id pub-id-type="doi">10.1038/s41586-020-2281-1</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B22">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Kahneman</surname>
							<given-names>D.</given-names>
						</string-name>
					</person-group>
					<year>2012</year>
					<source>Thinking, fast and slow</source>
					<publisher-name>Penguin Books</publisher-name>
				</mixed-citation>
			</ref>
			<ref id="B23">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Kiess</surname>
							<given-names>H. O.</given-names>
						</string-name>
						<string-name>
							<surname>Green</surname>
							<given-names>B. A.</given-names>
						</string-name>
					</person-group>
					<year>2009</year>
					<source>Statistical Concepts for the Behavioral Sciences</source>
					<edition>4th</edition>
					<publisher-name>Pearson</publisher-name>
				</mixed-citation>
			</ref>
			<ref id="B24">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Lazer</surname>
							<given-names>D. M. J.</given-names>
						</string-name>
						<string-name>
							<surname>Baum</surname>
							<given-names>M. A.</given-names>
						</string-name>
						<string-name>
							<surname>Benkler</surname>
							<given-names>Y.</given-names>
						</string-name>
						<string-name>
							<surname>Berinsky</surname>
							<given-names>A. J.</given-names>
						</string-name>
						<string-name>
							<surname>Greenhill</surname>
							<given-names>K. M.</given-names>
						</string-name>
						<string-name>
							<surname>Menczer</surname>
							<given-names>F.</given-names>
						</string-name>
						<string-name>
							<surname>Metzger</surname>
							<given-names>M. J.</given-names>
						</string-name>
						<string-name>
							<surname>Nyhan</surname>
							<given-names>B.</given-names>
						</string-name>
						<string-name>
							<surname>Pennycook</surname>
							<given-names>G.</given-names>
						</string-name>
						<string-name>
							<surname>Rothschild</surname>
							<given-names>D.</given-names>
						</string-name>
						<string-name>
							<surname>Schudson</surname>
							<given-names>M.</given-names>
						</string-name>
						<string-name>
							<surname>Sloman</surname>
							<given-names>S. A.</given-names>
						</string-name>
						<string-name>
							<surname>Sunstein</surname>
							<given-names>C. R.</given-names>
						</string-name>
						<string-name>
							<surname>Thorson</surname>
							<given-names>E. A.</given-names>
						</string-name>
						<string-name>
							<surname>Watts</surname>
							<given-names>D. J.</given-names>
						</string-name>
						<string-name>
							<surname>Zittrain</surname>
							<given-names>J. L.</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<article-title>The science of fake news</article-title>
					<source>Science</source>
					<volume>359</volume>
					<issue>6380</issue>
					<fpage>1094</fpage>
					<lpage>1096</lpage>
					<pub-id pub-id-type="doi">10.1126/science.aao2998</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B25">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Meijer</surname>
							<given-names>A.</given-names>
						</string-name>
					</person-group>
					<year>2013</year>
					<article-title>Understanding the Complex Dynamics of Transparency</article-title>
					<source>Public Administration Review</source>
					<volume>73</volume>
					<issue>3</issue>
					<fpage>429</fpage>
					<lpage>439</lpage>
					<pub-id pub-id-type="doi">10/f4xbkv</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B26">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Moon</surname>
							<given-names>M. J.</given-names>
						</string-name>
					</person-group>
					<year>2002</year>
					<article-title>The Evolution of E-Government among Municipalities: Rhetoric or Reality?</article-title>
					<source>Public Administration Review</source>
					<volume>62</volume>
					<issue>4</issue>
					<fpage>424</fpage>
					<lpage>433</lpage>
					<pub-id pub-id-type="doi">10/frssdj</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B27">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Morozov</surname>
							<given-names>E.</given-names>
						</string-name>
					</person-group>
					<year>2013</year>
					<source>To save everything, click here: Technology, solutionism, and the urge to fix problems that don’t exist</source>
					<publisher-name>Penguin</publisher-name>
					<publisher-loc>UK</publisher-loc>
				</mixed-citation>
			</ref>
			<ref id="B28">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<string-name>
							<surname>Nielsen</surname>
							<given-names>R. K.</given-names>
						</string-name>
						<string-name>
							<surname>Graves</surname>
							<given-names>L.</given-names>
						</string-name>
					</person-group>
					<year>2017</year>
					<source>News you don’t believe: Audience perspectives on fake news</source>
					<ext-link ext-link-type="uri" xlink:href="https://reutersinstitute.politics.ox.ac.uk/sites/default/files/2017-10/Nielsen&amp;Graves_factsheet_1710v3_FINAL_download.pdf">https://reutersinstitute.politics.ox.ac.uk/sites/default/files/2017-10/Nielsen&amp;Graves_factsheet_1710v3_FINAL_download.pdf</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B29">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>O’Donell</surname>
							<given-names>G. A.</given-names>
						</string-name>
					</person-group>
					<year>1994</year>
					<article-title>Delegative Democracy</article-title>
					<source>Journal of Democracy</source>
					<volume>5</volume>
					<issue>1</issue>
					<fpage>55</fpage>
					<lpage>69</lpage>
					<pub-id pub-id-type="doi">10.1353/jod.1994.0010</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B30">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Parks</surname>
							<given-names>W.</given-names>
						</string-name>
					</person-group>
					<year>1957</year>
					<article-title>Open Government Principle: Applying the Right to Know Under the Constitution</article-title>
					<source>George Washington Law Review</source>
					<volume>26</volume>
					<issue>1</issue>
					<fpage>1</fpage>
					<lpage>77</lpage>
				</mixed-citation>
			</ref>
			<ref id="B31">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Rodr&#xed;guez</surname>
							<given-names>D.</given-names>
						</string-name>
					</person-group>
					<year>2013</year>
					<source>Memecracia: Los virales que nos gobiernan</source>
					<publisher-name>Gesti&#xf3;n 2000</publisher-name>
				</mixed-citation>
			</ref>
			<ref id="B32">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Royo-Monta&#xf1;&#xe9;s</surname>
							<given-names>S.</given-names>
						</string-name>
						<string-name>
							<surname>Ben&#xed;tez-G&#xf3;mez</surname>
							<given-names>A.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>Portales de datos abiertos. Metodolog&#xed;a de an&#xe1;lisis y aplicaci&#xf3;n a municipios espa&#xf1;oles</article-title>
					<source>El Profesional de la Informaci&#xf3;n</source>
					<volume>28</volume>
					<issue>6</issue>
					<elocation-id>e280609</elocation-id>
					<pub-id pub-id-type="doi">10.3145/epi.2019.nov.09</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B33">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Tarhini</surname>
							<given-names>A.</given-names>
						</string-name>
						<string-name>
							<surname>Arachchilage</surname>
							<given-names>N. A. G.</given-names>
						</string-name>
						<string-name>
							<surname>Masa’deh</surname>
							<given-names>R.</given-names>
						</string-name>
						<string-name>
							<surname>Abbasi</surname>
							<given-names>M. S.</given-names>
						</string-name>
					</person-group>
					<year>2015</year>
					<article-title>A Critical Review of Theories and Models of Technology Adoption and Acceptance in Information System Research</article-title>
					<source>International Journal of Technology Diffusion</source>
					<volume>6</volume>
					<issue>4</issue>
					<fpage>58</fpage>
					<lpage>77</lpage>
					<pub-id pub-id-type="doi">10.4018/IJTD.2015100104</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B34">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Torres</surname>
							<given-names>L.</given-names>
						</string-name>
						<string-name>
							<surname>Pina</surname>
							<given-names>V.</given-names>
						</string-name>
						<string-name>
							<surname>Acerete</surname>
							<given-names>B.</given-names>
						</string-name>
					</person-group>
					<year>2005</year>
					<article-title>E-government developments on delivering public services among EU cities</article-title>
					<source>Government Information Quarterly</source>
					<volume>22</volume>
					<issue>2</issue>
					<fpage>217</fpage>
					<lpage>238</lpage>
					<pub-id pub-id-type="doi">10.1016/j.giq.2005.02.004</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B35">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Vosoughi</surname>
							<given-names>S.</given-names>
						</string-name>
						<string-name>
							<surname>Roy</surname>
							<given-names>D.</given-names>
						</string-name>
						<string-name>
							<surname>Aral</surname>
							<given-names>S.</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<article-title>The spread of true and false news online</article-title>
					<source>Science</source>
					<volume>359</volume>
					<issue>6380</issue>
					<fpage>1146</fpage>
					<lpage>1151</lpage>
					<pub-id pub-id-type="doi">10.1126/science.aap9559</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B36">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<string-name>
							<surname>Wardle</surname>
							<given-names>C.</given-names>
						</string-name>
						<string-name>
							<surname>Derakhshan</surname>
							<given-names>H.</given-names>
						</string-name>
					</person-group>
					<year>2017</year>
					<source>Information disorder: Toward an interdisciplinary framework for research and policy making</source>
					<gov>DGI(2017)09</gov>
					<publisher-name>Council of Europe</publisher-name>
					<ext-link ext-link-type="uri" xlink:href="http://edoc.coe.int/en/media/7495-information-disorder-toward-an-interdisciplinary-framework-for-research-and-policy-making.html">http://edoc.coe.int/en/media/7495-information-disorder-toward-an-interdisciplinary-framework-for-research-and-policy-making.html</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B37">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Woolley</surname>
							<given-names>S. C.</given-names>
						</string-name>
						<string-name>
							<surname>Howard</surname>
							<given-names>P. N.</given-names>
						</string-name>
					</person-group>
					<year>2016</year>
					<article-title>Political Communication, Computational Propaganda, and Autonomous Agents</article-title>
					<source>International Journal of Communication</source>
					<volume>10</volume>
					<fpage>4882</fpage>
					<lpage>4890</lpage>
				</mixed-citation>
			</ref>
			<ref id="B38">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Worthy</surname>
							<given-names>B.</given-names>
						</string-name>
					</person-group>
					<year>2015</year>
					<article-title>The Impact of Open Data in the UK: Complex, Unpredictable, and Political</article-title>
					<source>Public Administration</source>
					<volume>93</volume>
					<issue>3</issue>
					<fpage>788</fpage>
					<lpage>805</lpage>
					<pub-id pub-id-type="doi">10/f7rr53</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B39">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Young</surname>
							<given-names>R. K.</given-names>
						</string-name>
						<string-name>
							<surname>Veldman</surname>
							<given-names>D. J.</given-names>
						</string-name>
					</person-group>
					<year>1972</year>
					<source>Introductory statistics for the behavioral sciences</source>
					<publisher-name>Holt, Rinehart and Winston</publisher-name>
				</mixed-citation>
			</ref>
			<ref id="B40">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Yu</surname>
							<given-names>H.</given-names>
						</string-name>
						<string-name>
							<surname>Robinson</surname>
							<given-names>D. G.</given-names>
						</string-name>
					</person-group>
					<year>2012</year>
					<article-title>The New Ambiguity of “Open Government”</article-title>
					<source>UCLA Law Review</source>
					<volume>59</volume>
					<fpage>178</fpage>
					<lpage>208</lpage>
					<pub-id pub-id-type="doi">10.2139/ssrn.2012489</pub-id>
				</mixed-citation>
			</ref>
		</ref-list>
	</back>
</article>