<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD Journal Publishing DTD v3.0 20080202//EN" "http://dtd.nlm.nih.gov/publishing/3.0/journalpublishing3.dtd">
<article article-type="research-article" dtd-version="3.0" xml:lang="es" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink">
	
	<front>
		
		<journal-meta>
			<journal-id journal-id-type="publisher-id">REDC</journal-id>
			<journal-title-group>
				<journal-title>Revista Espa&#x00F1;ola de Documentaci&#x00F3;n Cient&#x00ED;fica</journal-title>
				<abbrev-journal-title>Rev. Esp. Doc. Cient.</abbrev-journal-title>
			</journal-title-group>
			<issn pub-type="ppub">0210-0614</issn>
			<issn pub-type="epub">1988-4621</issn>
			<publisher>
				<publisher-name>Consejo Superior de Investigaciones Cient&#x00ED;ficas</publisher-name>
			</publisher>
		</journal-meta>
		
		<article-meta>
			<article-id pub-id-type="publisher-id">redc.2019.2.1580</article-id>
			<article-id pub-id-type="doi">10.3989/redc.2019.2.1580</article-id>
			
			<article-categories>
				<subj-group subj-group-type="heading">
				<subject>ESTUDIOS / RESEARCH STUDIES</subject>
				</subj-group>
			</article-categories>
			
			<title-group>
				<article-title>Caracterizaci&#x00F3;n de las publicaciones de Espa&#x00F1;a y Portugal sobre Open Science y an&#x00E1;lisis de su presencia en las redes sociales</article-title>
				<trans-title-group xml:lang="en">
				<trans-title>Characterization of the Iberian publications on open science and analysis of their presence in social media</trans-title>
				</trans-title-group>
				<alt-title alt-title-type="running-head">Caracterizaci&#x00F3;n de las publicaciones de Espa&#x00F1;a y Portugal sobre Open Science y an&#x00E1;lisis de su presencia en las redes sociales</alt-title>
			</title-group>
			
			<contrib-group>
		
				<contrib contrib-type="author" corresp="yes">
					<name>
					 <surname>De Filippo</surname>
					 <given-names>Daniela</given-names>
					</name>
					<xref ref-type="aff" rid="U1"/>
					<xref ref-type="corresp" rid="cor1"/>
				</contrib>
				
				<contrib contrib-type="author" corresp="yes">
					<name>
					 <surname>Silva</surname>
					 <given-names>Paulo</given-names>
					</name>
					<xref ref-type="aff" rid="U2"/>
					<xref ref-type="corresp" rid="cor2"/>
				</contrib>
				
				<contrib contrib-type="author" corresp="yes">
					<name>
					 <surname>Borges</surname>
					 <given-names>Mar&#x00ED;a Manuel</given-names>
					</name>
					<xref ref-type="aff" rid="U3"/>
					<xref ref-type="corresp" rid="cor3"/>
				</contrib>
			</contrib-group>
					
			<aff id="U1">Instituto INAECU, Universidad Carlos III de Madrid</aff>
			<aff id="U2">Faculdade de Letras, Universidade de Coimbra, Portugal</aff>
			<aff id="U3">Faculdade de Letras, Universidade de Coimbra, Portugal</aff>
			
			<author-notes>
				<corresp id="cor1">Correo-e: <email xlink:href="dfilippo@bib.uc3m.es">dfilippo@bib.uc3m.es</email>
					ORCID iD: <ext-link ext-link-type="uri" xlink:href="https://orcid.org/0000-0001-9297-9970">https://orcid.org/0000-0001-9297-9970</ext-link>
				</corresp>
				
				<corresp id="cor2">Correo-e: <email xlink:href="uc2015201252@student.uc.pt">uc2015201252@student.uc.pt</email>
					ORCID iD: <ext-link ext-link-type="uri" xlink:href="https://orcid.org/0000-0003-1833-8846">https://orcid.org/0000-0003-1833-8846</ext-link>
				</corresp>
				
				<corresp id="cor3">Correo-e: <email xlink:href="mmb@fl.uc.pt">mmb@fl.uc.pt</email>
					ORCID iD: <ext-link ext-link-type="uri" xlink:href="https://orcid.org/0000-0002-7755-6168">https://orcid.org/0000-0002-7755-6168</ext-link>
				</corresp>
			</author-notes>
			
			<pub-date pub-type="epub">
				<day>30</day>
				<month>06</month>
				<year>2019</year>
			</pub-date>
			
			<pub-date pub-type="collection">
			<year>2019</year>
			</pub-date>
			
			<volume>42</volume>
			<issue>2</issue>
		
			<elocation-id>e235</elocation-id>
		
			<history>
			
				<date date-type="received">
					<day>13</day>
					<month>04</month>
					<year>2018</year>
				</date>
				<date date-type="rev-recd1">
					<day>05</day>
					<month>10</month>
					<year>2018</year>
				</date>
				<date date-type="accepted">
					<day>08</day>
					<month>10</month>
					<year>2018</year>
				</date>
			</history>
		 
			<permissions>
				<copyright-statement>&#x00A9; 2019 CSIC</copyright-statement>
				<copyright-year>2019</copyright-year>
				<license license-type="open-access" xlink:href="https://creativecommons.org/licenses/by/4.0/">
					<license-p>Este es un art&#x00ED;culo de acceso abierto distribuido bajo los t&#x00E9;rminos de la licencia de uso y distribuci&#x00F3;n Creative Commons Reconocimiento 4.0 Internacional (CC BY 4.0).</license-p>
				</license>
			</permissions>
		
			
			<abstract xml:lang="es">
			<title>RESUMEN</title>
			<p>Se analizan las publicaciones sobre Ciencia Abierta de Espa&#x00F1;a y Portugal en la base de datos SCOPUS. A trav&#x00E9;s de indicadores bibliom&#x00E9;tricos y altm&#x00E9;tricos se estudia la repercusi&#x00F3;n de la producci&#x00F3;n en redes sociales. Entre 2000 y 2016 se detectaron 1273 documentos sobre el tema en ambos pa&#x00ED;ses, concentrados especialmente en el &#x00FA;ltimo quinquenio. Destacan las publicaciones sobre Open data y las tem&#x00E1;ticas de mayor producci&#x00F3;n han sido Computer Science y Social Science. Un tercio de las publicaciones con DOI ha tenido repercusi&#x00F3;n en las redes sociales siendo Twitter el medio que concentra mayor n&#x00FA;mero de menciones. Si bien una tercera parte de los documentos se public&#x00F3; en acceso abierto, no se detect&#x00F3; relaci&#x00F3;n entre este indicador y la presencia en redes sociales.</p>
			</abstract>
						
			<trans-abstract xml:lang="en">
			<title>ABSTRACT</title>
			<p>In this paper, the publications on Open Science in SCOPUS, from Spain and Portugal, are analyzed and the impact of that production on social media is studied through bibliometric and altmetric indicators. Between 2000 and 2016, 1273 documents on this subject were detected for both countries, especially concentrated in the last five years. Open Data is one of the more frequent topics, and Computer Science and Social Science are the subjects with a higher production. One third of the publications with DOI have had an impact on social networks, with Twitter being the medium with the highest number of mentions. Although one third of the documents were published in open access, no link was found between this indicator and the presence in social media.</p>
			</trans-abstract>
			
			<kwd-group xml:lang="es">
				<title>PALABRAS CLAVE</title> 
				<kwd>Ciencia Abierta</kwd>
				<kwd>Bibliometr&#x00ED;a</kwd>
				<kwd>Altmetr&#x00ED;a</kwd>
				<kwd>Espa&#x00F1;a</kwd>
				<kwd>Portugal</kwd>
			</kwd-group>
			
			<kwd-group xml:lang="en"> 
				<title>KEYWORDS</title> 
				<kwd>Open Science</kwd>
				<kwd>bibliometric indicators</kwd>
				<kwd>altmetric indicators</kwd>
				<kwd>Spain</kwd>
				<kwd>Portugal</kwd>
			</kwd-group>
		
		</article-meta>
	</front>
	
	<body>

			<sec id="S1">
			<title>1. INTRODUCCI&#x00D3;N</title>
			<p>En la actual sociedad de la informaci&#x00F3;n, el conocimiento cient&#x00ED;fico y tecnol&#x00F3;gico juega un rol central y, como ya anticiparan autores como Manuel Castells (<xref ref-type="bibr" rid="CIT04">1996</xref>), tanto el acceso como la gesti&#x00F3;n del conocimiento, se convierten en factores clave. En este contexto, especialmente en los &#x00FA;ltimos a&#x00F1;os, la investigaci&#x00F3;n cient&#x00ED;fica est&#x00E1; atravesando una transici&#x00F3;n cultural que abarca nuevos modelos de publicaci&#x00F3;n y reutilizaci&#x00F3;n de informaci&#x00F3;n en un intento de mayor apertura, con un enfoque digital para promover el acceso a los resultados cient&#x00ED;ficos. Es por esto que algunos autores plantean la necesidad de adoptar un concepto m&#x00E1;s amplio de “producci&#x00F3;n cient&#x00ED;fica” que pueda incluir en su definici&#x00F3;n toda la gama de recursos cient&#x00ED;ficos producidos durante el proceso de investigaci&#x00F3;n (Machado, <xref ref-type="bibr" rid="CIT24">2015</xref>).</p>
			 
			<p>Desde hace poco m&#x00E1;s de una d&#x00E9;cada, el movimiento Open Science, un t&#x00E9;rmino amplio que se desdobla en m&#x00FA;ltiples iniciativas y significados (Bartling y Friesike, <xref ref-type="bibr" rid="CIT01">2014</xref>), ha tenido un impacto notable. Los or&#x00ED;genes del proceso de apertura del conocimiento cient&#x00ED;fico pueden encontrarse en 2002 con el movimiento de Acceso Abierto, culminando en la apertura de la literatura cient&#x00ED;fica financiada con fondos p&#x00FA;blicos. El avance de la tecnolog&#x00ED;a, la producci&#x00F3;n masiva de datos, las redes sociales cient&#x00ED;ficas, la ciencia ciudadana, los recursos educacionales y el c&#x00F3;digo abierto, en conjunto, generaron una ciencia diferente. Este concepto m&#x00E1;s amplio de ciencia, definido como Ciencia Abierta, pretende abrir todo un conjunto de formatos y recursos cient&#x00ED;ficos con especial &#x00E9;nfasis en los datos de investigaci&#x00F3;n financiados con fondos p&#x00FA;blicos (da Silva, <xref ref-type="bibr" rid="CIT07">2017</xref>). Com&#x00FA;nmente hace referencia al esfuerzo por hacer m&#x00E1;s accesibles los resultados de investigaci&#x00F3;n cient&#x00ED;fica financiada por el sector p&#x00FA;blico, en formato digital, para la comunidad cient&#x00ED;fica, el sector empresarial o la sociedad en general (OECD, <xref ref-type="bibr" rid="CIT29">2015</xref>), pero es evidente que va m&#x00E1;s all&#x00E1;. La Ciencia Abierta representa un cambio cultural en la forma en que las partes interesadas en la investigaci&#x00F3;n, la educaci&#x00F3;n y el intercambio de conocimientos, crean, almacenan, comparten y entregan los resultados de su actividad (LERU, <xref ref-type="bibr" rid="CIT23">2018</xref>). Es, en definitiva, un cambio de sistema, donde la ciencia se lleva a cabo y se comunica de una manera que permite a los dem&#x00E1;s contribuir, colaborar y sumar al esfuerzo de investigaci&#x00F3;n, con todo tipo de datos, resultados y protocolos libremente disponibles, en diferentes etapas del proceso de investigaci&#x00F3;n (Research Information Network, <xref ref-type="bibr" rid="CIT32">2010</xref>). Asimismo, el concepto de “inclusi&#x00F3;n” es central en algunas definiciones encontradas ya que hay quienes la consideran una pr&#x00E1;ctica de ciencia colaborativa, y un importante facilitador de participaci&#x00F3;n p&#x00FA;blica en ciencia (Leonelli y otros, <xref ref-type="bibr" rid="CIT22">2015</xref>; FOSTER, <xref ref-type="bibr" rid="CIT18">2016</xref>). Entre las principales iniciativas relacionadas con la Open Science destacan: Open Access; Open data; investigaci&#x00F3;n participativa y ciencia ciudadana (STEPS, <xref ref-type="bibr" rid="CIT34">2016</xref>).</p>
			 
			<p>La importancia que ha adquirido la ciencia abierta puede observarse tambi&#x00E9;n en las diferentes pol&#x00ED;ticas implementadas por organismos internacionales para su promoci&#x00F3;n y puesta en pr&#x00E1;ctica. A nivel europeo, por ejemplo, en 2012, el Open Access (OA) fue adoptado como principio. Desde entonces los proyectos desarrollados en el marco del Programa Horizonte 2020, deben poner en OA toda la literatura cient&#x00ED;fica producida bajo financiaci&#x00F3;n p&#x00FA;blica (European Union, <xref ref-type="bibr" rid="CIT15">2013</xref>). Despu&#x00E9;s de un proyecto piloto que requer&#x00ED;a el dep&#x00F3;sito de datos cient&#x00ED;ficos en un repositorio de 9 &#x00E1;reas del conocimiento, en 2017, el mandato de apertura de los datos de investigaci&#x00F3;n que dan origen a las publicaciones cient&#x00ED;ficas se ha ampliado a todas las &#x00E1;reas del conocimiento (European Commission, <xref ref-type="bibr" rid="CIT12">2016a</xref>). Las iniciativas de promoci&#x00F3;n de Open Science se extienden tambi&#x00E9;n al campo de las infraestructuras, con el proyecto OpenAire que permite la agregaci&#x00F3;n de toda la literatura cient&#x00ED;fica producida en proyectos bajo financiaci&#x00F3;n europea y proporciona v&#x00ED;nculos entre esas publicaciones y los datos subyacentes. La tercera fase del proyecto arranc&#x00F3; en 2017 con el objetivo de establecer puentes tecnol&#x00F3;gicos y sociales y proporcionar servicios de intercambio de informaci&#x00F3;n cient&#x00ED;fica, independientemente del formato (OpenAIRE, <xref ref-type="bibr" rid="CIT30">2017</xref>). Adem&#x00E1;s, la Uni&#x00F3;n Europea manifest&#x00F3; su intenci&#x00F3;n de crear una European Open Science Cloud (EOSC) para proporcionar a los investigadores una infraestructura de acceso a herramientas y datos para la investigaci&#x00F3;n y la innovaci&#x00F3;n (European Commission, <xref ref-type="bibr" rid="CIT13">2016b</xref>). La Comisi&#x00F3;n Europea cre&#x00F3; tambi&#x00E9;n el Open Science Monitor, definiendo tres categor&#x00ED;as de apertura: OA a las publicaciones, OA a los datos de investigaci&#x00F3;n y formas abiertas de comunicaci&#x00F3;n acad&#x00E9;mica (European Commission: Direcci&#x00F3;n General de Investigaci&#x00F3;n e Innovaci&#x00F3;n, <xref ref-type="bibr" rid="CIT14">2017</xref>).</p>
			 
			<p>Bajo la recomendaci&#x00F3;n de la Comisi&#x00F3;n Europea sobre el acceso a la informaci&#x00F3;n cient&#x00ED;fica y su conservaci&#x00F3;n (EUR-Lex, <xref ref-type="bibr" rid="CIT11">2012</xref>), Portugal y Espa&#x00F1;a han estado haciendo esfuerzos en favor de la apertura de los resultados cient&#x00ED;ficos generados a trav&#x00E9;s de fondos p&#x00FA;blicos. En Portugal, el Ministerio de Ciencia, Tecnolog&#x00ED;a y Educaci&#x00F3;n Superior (Portugal, <xref ref-type="bibr" rid="CIT31">2016</xref>) estableci&#x00F3; como meta para el a&#x00F1;o 2018 la adopci&#x00F3;n y aplicaci&#x00F3;n de una pol&#x00ED;tica cient&#x00ED;fica abierta. La Resoluci&#x00F3;n del Consejo de Ministros Nº 21/2016 define los principios de aplicaci&#x00F3;n de la pol&#x00ED;tica de ciencia abierta en Portugal en torno a cuatro ejes: Acceso abierto y datos abiertos; Infraestructuras y preservaci&#x00F3;n digital; Evaluaci&#x00F3;n cient&#x00ED;fica; Responsabilidad social cient&#x00ED;fica. En Espa&#x00F1;a, el Plan Estatal de Investigaci&#x00F3;n Cient&#x00ED;fica y T&#x00E9;cnica y de Innovaci&#x00F3;n 2017-2020 defini&#x00F3; la apertura de resultados y datos de investigaci&#x00F3;n obtenidos bajo financiaci&#x00F3;n p&#x00FA;blica como obligatoria (Espa&#x00F1;a, <xref ref-type="bibr" rid="CIT10">2017</xref>).</p>
			 
			<p>La difusi&#x00F3;n de los resultados de investigaci&#x00F3;n a trav&#x00E9;s de publicaciones y patentes fue, hasta hace pocos a&#x00F1;os, el modelo m&#x00E1;s frecuente en la producci&#x00F3;n y evaluaci&#x00F3;n de conocimiento. En este sentido, como explicaran Callon y otros (<xref ref-type="bibr" rid="CIT03">1995</xref>) la cienciometr&#x00ED;a y la bibliometr&#x00ED;a se convirtieron en las principales herramientas para el an&#x00E1;lisis de la productividad cient&#x00ED;fica, y la medici&#x00F3;n de su impacto en la comunidad cient&#x00ED;fica. Una marca distintiva de nuestra &#x00E9;poca es el crecimiento exponencial de la producci&#x00F3;n de informaci&#x00F3;n, con la proliferaci&#x00F3;n de nuevas tecnolog&#x00ED;as de informaci&#x00F3;n y comunicaci&#x00F3;n que permiten el aumento del intercambio de informaci&#x00F3;n, el n&#x00FA;mero de art&#x00ED;culos cient&#x00ED;ficos publicados y la producci&#x00F3;n masiva de datos. El acceso generalizado a internet propici&#x00F3; un cambio en el paradigma de acceso y publicaci&#x00F3;n de contenidos cient&#x00ED;ficos. En este sentido, desde hace pocos a&#x00F1;os, asistimos a un cambio considerable y revolucionario en el modelo tradicional de comunicaci&#x00F3;n cient&#x00ED;fica con el advenimiento de la web 2.0, que ha favorecido la comunicaci&#x00F3;n y la colaboraci&#x00F3;n entre los distintos agentes acad&#x00E9;micos. As&#x00ED;, es posible observar que numerosas plataformas de intercambio de informaci&#x00F3;n como foros, blogs y aplicaciones de redes sociales (entre ellas Facebook o Twitter) no s&#x00F3;lo han tenido una buena acogida entre el p&#x00FA;blico en general, sino que tambi&#x00E9;n han seducido a los miembros de la comunidad cient&#x00ED;fica dando lugar a la llamada ‘web social acad&#x00E9;mica’. Este nuevo espacio de colaboraci&#x00F3;n permite a los investigadores compartir y validar sus proyectos de investigaci&#x00F3;n a trav&#x00E9;s de aplicaciones propias del entorno acad&#x00E9;mico como los gestores bibliogr&#x00E1;ficos sociales (e.j. Mendeley o CiteULike), las redes profesionales, (e.j. ResearchGate o ScienceOpen), y las aplicaciones de identidad digital como ResearcherID de Web of Science u ORCID. Una muestra del impacto de estas nuevas herramientas es el uso que muchos investigadores afirman darles ya que, como muestran Kramer y Bosman en un estudio reciente (<xref ref-type="bibr" rid="CIT21">2016</xref>), junto a los repositorios institucionales, ResearchGate se ha convertido en la herramienta preferida para dar a conocer los resultados de las investigaciones actuales. A todo este conjunto de herramientas se suma el movimiento de acceso abierto a la ciencia y las publicaciones y repositorios en l&#x00ED;nea (PLos ONE, ArXiv, CiteSearch, PubMed o RePEc). En este contexto, seg&#x00FA;n afirman Mohammadi y Thelwall (<xref ref-type="bibr" rid="CIT26">2013</xref>) la multiplicaci&#x00F3;n de canales de comunicaci&#x00F3;n informales constituye un nuevo reto para el an&#x00E1;lisis de la actividad cient&#x00ED;fica. Es por ello que resulta fundamental proponer nuevos modelos de abordaje y an&#x00E1;lisis de la comunicaci&#x00F3;n cient&#x00ED;fica que integren los mecanismos ya consolidados junto a las nuevas herramientas.</p>
			 
			<p>Para ello, los estudios tradicionales basados en el an&#x00E1;lisis bibliom&#x00E9;trico pueden ser ampliados y complementados con los nuevos indicadores altm&#x00E9;tricos, que aportan una medida del inter&#x00E9;s que genera sobre la sociedad la I+D+i en un determinado sector. El concepto de Altmetr&#x00ED;a fue definido por Jason Priem en un post en el que la describe como: “La creaci&#x00F3;n y estudio de nuevos indicadores (metrics) basados en la web social para analizar y caracterizar la actividad acad&#x00E9;mica (scholarship)”.</p>
			 
			<p>A partir de la situaci&#x00F3;n descrita, este estudio se propone alcanzar dos objetivos:</p>
			 
							<list list-type="order">
								<list-item>
									<p>Identificar y caracterizar las publicaciones sobre Open Science indexadas en bases de datos internacionales de Espa&#x00F1;a y Portugal.</p>
								</list-item>
								<list-item>
									<p>Detectar y analizan los indicadores altm&#x00E9;tricos asociados a dicha producci&#x00F3;n.</p>
								</list-item>
							</list>


			<p>Por &#x00FA;ltimo, se intenta interpretar cu&#x00E1;l es la situaci&#x00F3;n que se vive en la pen&#x00ED;nsula Ib&#x00E9;rica en cuanto a la producci&#x00F3;n sobre Open Science, poniendo en relaci&#x00F3;n los resultados obtenidos con las pol&#x00ED;ticas p&#x00FA;blicas e institucionales que se han puesto en marcha recientemente en ambos pa&#x00ED;ses.</p>
		</sec>
		
		<sec id="S2">
			<title>2. METODOLOG&#x00CD;A</title>

			<p>La recuperaci&#x00F3;n de publicaciones sobre Open Science se ha realizado usando como fuente de informaci&#x00F3;n la base de datos SCOPUS. La selecci&#x00F3;n de esta fuente se justifica por su amplia cobertura de revistas y prestigio internacional. En este sentido, como han demostrado otros estudios previos, la cobertura de Espa&#x00F1;a y Portugal es mayor que en otras fuentes como Web of Science, especialmente en las &#x00E1;reas de Ciencias Sociales y Humanas (de Moya-Aneg&#x00F3;n y otros, <xref ref-type="bibr" rid="CIT27">2007</xref>; Codina y otros, <xref ref-type="bibr" rid="CIT06">2014</xref>). Asimismo, la posibilidad de realizar b&#x00FA;squedas por campos espec&#x00ED;ficos como el de Palabras clave, ha sido un valor agregado. Se ha evidenciado que la consulta simult&#x00E1;nea en campos como T&#x00ED;tulo, Palabras clave y Resumen produce mucho ruido porque recupera documentos que pueden mencionar los t&#x00E9;rminos buscados en el resumen aunque no se trate del tema principal. Poder tratar las palabras clave de manera independiente favorece la fiabilidad de la informaci&#x00F3;n recogida.</p>
			 
			<p>Por ello, se ha definido una estrategia de b&#x00FA;squeda “ad-hoc” a partir de t&#x00E9;rminos relacionados con Open Science que est&#x00E1;n presentes tanto en el t&#x00ED;tulo como en las palabras clave de los art&#x00ED;culos. Todos los t&#x00E9;rminos se han buscado con diferentes variantes, tanto de idioma como de g&#x00E9;nero y n&#x00FA;mero.</p>
			 
			<p>TITLE ( “open access” OR “open data” OR “citizen science” OR “open research” OR “open science” OR “citizen* scienc*” OR “communit* science*” OR “participator* research*” OR “participator* action* research*” OR “communit*-based research*” OR “citizen* research*” OR “science* shop*” OR “citizen* scient*” OR “Public-participation” OR “open innovation” ) OR KEY ( “open access” OR “open data” OR “citizen science” OR “open research” OR “open science” OR “open innovation” OR “citizen* scienc*” OR “communit* science*” OR “participator* research*” OR “participator* action* research*” OR “communit*-based research*” OR “citizen* research*” OR “science* shop*” OR “citizen* scient*” OR “Public-participation” OR “open innovation”)</p>
			 
			<p>Si bien toda selecci&#x00F3;n de t&#x00E9;rminos destinados a identificar la producci&#x00F3;n de un campo tem&#x00E1;tico siempre es subjetiva, partimos del supuesto de que las palabras clave seleccionadas conforman el n&#x00FA;cleo de t&#x00E9;rminos relacionados con la tem&#x00E1;tica abordada y que han sido extra&#x00ED;dos de la bibliograf&#x00ED;a af&#x00ED;n. Es evidente que puede haber muchas otras delimitaciones tem&#x00E1;ticas, pero hemos decidido acotar la selecci&#x00F3;n de publicaciones a aqu&#x00E9;llas que, tras la lectura de los res&#x00FA;menes, hemos comprobado que se ajustan al tema tratado. Es importante destacar que el n&#x00FA;mero concreto de documentos recogidos es una aproximaci&#x00F3;n al conjunto de la producci&#x00F3;n sobre ciencia abierta, dado que puede haber t&#x00E9;rminos no incluidos que hablen sobre el tema, pero cuya inclusi&#x00F3;n hubiera generado dificultades en el an&#x00E1;lisis y pocos cambios en las tendencias generales.</p>
			 
			<p>El per&#x00ED;odo de an&#x00E1;lisis ha sido 2000-2016.</p>
			 
			<p>Tras la recogida de documentos, se ha realizado la normalizaci&#x00F3;n y depuraci&#x00F3;n de la informaci&#x00F3;n y se ha elaborado una base de datos relacional en MySQL para la gesti&#x00F3;n y obtenci&#x00F3;n de indicadores bibliom&#x00E9;tricos y altm&#x00E9;tricos.</p>
			 
			<p>Para caracterizar la producci&#x00F3;n cient&#x00ED;fica sobre Open Science se han obtenido los siguientes indicadores:</p>

							<list list-type="bullet">
								<list-item>
									<p>Evoluci&#x00F3;n anual del n&#x00FA;mero de documentos en el mundo: se ha detectado la producci&#x00F3;n global sobre Open Science en cada uno de los a&#x00F1;os estudiados y se ha calculado el incremento interanual y el promedio de crecimiento en el per&#x00ED;odo.</p>
								</list-item>
								<list-item>
									<p>Principales productores: se ha identificado la producci&#x00F3;n por pa&#x00ED;ses y se ha calculado un &#x00CD;ndice de Actividad para detectar los pa&#x00ED;ses con producci&#x00F3;n intensiva en este tema. El &#x00ED;ndice de actividad se calcula como la aportaci&#x00F3;n porcentual de cada pa&#x00ED;s al tema estudiado frente a su aportaci&#x00F3;n porcentual al total de la producci&#x00F3;n cient&#x00ED;fica en SCOPUS. Los valores &gt;1 indican alta especializaci&#x00F3;n en el tema mientras que las cifras &lt;1 muestran baja intensidad. Los valores que rondan el 1 muestran una producci&#x00F3;n similar a la esperada. En el caso de Espa&#x00F1;a y Portugal se ha identificado tambi&#x00E9;n la producci&#x00F3;n por instituciones.</p>
								</list-item>
								<list-item>
									<p>Aportaci&#x00F3;n de Espa&#x00F1;a y Portugal: se ha identificado la producci&#x00F3;n total de ambos pa&#x00ED;ses y se ha calculado su aportaci&#x00F3;n al mundo en el conjunto de documentos de SCOPUS. Se ha calculado tambi&#x00E9;n la aportaci&#x00F3;n al total de documentos sobre Open Science tanto en valores absolutos como porcentuales considerando su crecimiento interanual. Se ha obtenido un indicador de especializaci&#x00F3;n considerando la aportaci&#x00F3;n porcentual al tema estudiado frente a la aportaci&#x00F3;n al total de la producci&#x00F3;n en la base de datos.</p>
								</list-item>
								<list-item>
									<p>Especializaci&#x00F3;n tem&#x00E1;tica de la producci&#x00F3;n: para detectar las &#x00E1;reas tem&#x00E1;ticas a las que se vincula la producci&#x00F3;n sobre Open Science, se han identificado las revistas de publicaci&#x00F3;n y las 27 disciplinas en las que las clasifica el Scimago Journal Rank. Para detectar los temas concretos sobre los que versan las publicaciones en este campo, se han normalizado las palabras clave y se han realizado an&#x00E1;lisis de frecuencia de apariciones en el texto.</p>
								</list-item>
								<list-item>
									<p>Acceso abierto de las revistas: se han identificado los documentos en Acceso Abierto que incluye la base de datos y se ha calculado el porcentaje de documentos de Espa&#x00F1;a y Portugal en revistas Open Access (OA). Para ello se han considerado las revistas registradas en DOAJ (Directory of Open Access Journal) (<xref ref-type="bibr" rid="CIT09">2017</xref>) o en ROAD (Directory of Open Access Scholarly Resources) (<xref ref-type="bibr" rid="CIT33">2018</xref>).</p>
								</list-item>
						</list>


			<p>Se ha obtenido tambi&#x00E9;n informaci&#x00F3;n sobre la repercusi&#x00F3;n de las publicaciones en las redes sociales. Al descargar los documentos de SCOPUS se ha trabajado con el campo DOI (Digital Object Identifier) para obtener los principales indicadores altm&#x00E9;tricos. Para ello, se ha utilizado un script -desarrollado en el Laboratorio de Estudios M&#x00E9;tricos de la Informaci&#x00F3;n (LEMI) de la Universidad Carlos III de Madrid- que consulta directamente la informaci&#x00F3;n de la plataforma Altmetric.com que ofrece datos desde 2010. De este modo se accede masivamente a la misma informaci&#x00F3;n que ofrece Almetric.com para cada documento. Los indicadores obtenidos fueron:</p>

							<list list-type="bullet">
								<list-item>
									<p>N&#x00FA;mero y porcentaje de documentos con DOI</p>
								</list-item>
								<list-item>
									<p>N&#x00FA;mero de documentos con indicadores altm&#x00E9;tricos</p>
								</list-item>
								<list-item>
									<p>Porcentaje de documentos con menciones en Facebook</p>
								</list-item>
								<list-item>
									<p>Porcentaje de documentos con menciones en Twitter</p>
								</list-item>
								<list-item>
									<p>Porcentaje de documentos con menciones en Wikipedia</p>
								</list-item>
								<list-item>
									<p>Porcentaje de documentos con menciones en feeds</p>
								</list-item>
								<list-item>
									<p>Porcentaje de documentos con menciones en mainstream media (msm)</p>
								</list-item>
								<list-item>
									<p>Relaci&#x00F3;n entre citas e indicadores altm&#x00E9;tricos</p>
								</list-item>
						</list>
			 
			<p>Finalmente, para comprobar si los textos sobre Open Science tienen impacto acad&#x00E9;mico y repercusi&#x00F3;n en redes sociales, se ha realizado una correlaci&#x00F3;n entre las dos dimensiones relacionadas con el impacto: citas recibidas de publicaciones cient&#x00ED;ficas frente a menciones en redes sociales.</p>
		</sec>
		
		<sec id="S3">
			<title>3. RESULTADOS</title>

			<p>En el per&#x00ED;odo de estudio, la producci&#x00F3;n mundial sobre Open Science (recogida con la metodolog&#x00ED;a descrita) ha sido de 27.767 documentos. Se presentan a continuaci&#x00F3;n los principales resultados obtenidos:</p>

			<sec id="S3.1">
			<title>Evoluci&#x00F3;n anual de la producci&#x00F3;n y principales productores</title>

			<p>En valores absolutos destaca la producci&#x00F3;n de pa&#x00ED;ses como Estados Unidos y Reino Unido que, en conjunto, superan el 40% de las publicaciones sobre este tema. En la <xref ref-type="fig" rid="F1">figura 1</xref> se muestra la distribuci&#x00F3;n por pa&#x00ED;ses se&#x00F1;alando con color m&#x00E1;s oscuro los pa&#x00ED;ses m&#x00E1;s productivos y con tonos claros los de baja producci&#x00F3;n sobre Open Science.</p>
			 
								<fig id="F1">
									<label>Figura 1</label>
									<caption>
										<title>Distribuci&#x00F3;n de la producci&#x00F3;n sobre Open Science por pa&#x00ED;ses</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F1.jpg"/>
								</fig>
			 
			<p>A partir del c&#x00E1;lculo del &#x00ED;ndice de Actividad se ha detectado que hay pa&#x00ED;ses como: Sud&#x00E1;frica, Finlandia, Canad&#x00E1;, Australia y Holanda que muestran una actividad intensiva en este tema (IA&gt;1,7). En la <xref ref-type="table" rid="T1">tabla I</xref> se muestran los valores absolutos resaltando aqu&#x00E9;llos con una importante actividad en este tema (IA&gt;1) y, entre ellos, se encuentran Espa&#x00F1;a y Portugal (IA=1,27 y 1,64 respectivamente).</p>

								<fig id="T1">
									<label>Tabla I</label>
									<caption>
										<title>Distribuci&#x00F3;n de la producci&#x00F3;n en Open Science frente al total de publicaciones en SCOPUS. &#x00CD;ndice de actividad por pa&#x00ED;s</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T1.jpg"/>
								</fig>

			</sec>
			
			<sec id="S3.2">
			<title>Aportaci&#x00F3;n de Espa&#x00F1;a y Portugal</title>

			<p>Los documentos de la Pen&#x00ED;nsula Ib&#x00E9;rica sobre Open Science han sido 1273: 1016 corresponden a Espa&#x00F1;a y 291 a Portugal, 34 de ellos fueron publicados en colaboraci&#x00F3;n entre ambos pa&#x00ED;ses. Espa&#x00F1;a ocupa la posici&#x00F3;n 7 del mundo por producci&#x00F3;n en este tema, mientras que Portugal se ubica en la posici&#x00F3;n 23. En ambos casos, aunque los valores absolutos del n&#x00FA;mero de documentos resulten escasos, los dos pa&#x00ED;ses realizan una aportaci&#x00F3;n al total mundial mayor de lo que cabr&#x00ED;a esperar. Esto se debe a que Espa&#x00F1;a publica un 3,65% de los documentos del mundo en Open Science, mientras que su aportaci&#x00F3;n en toda la base de datos SCOPUS es del 2,8% del mundo. Asimismo, Portugal, aporta un 1,05% de los documentos mundiales sobre el tema frente a un 0,65% del mundo en todas las &#x00E1;reas (<xref ref-type="table" rid="T2">tabla II</xref>).</p>

								<fig id="T2">
									<label>Tabla II</label>
									<caption>
										<title>Distribuci&#x00F3;n de la producci&#x00F3;n sobre Open Science y aportaci&#x00F3;n de Espa&#x00F1;a y Portugal (SCOPUS 2000-2016)</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T2.jpg"/>
								</fig>


			<p>Los documentos recuperados son textos muy recientes, ya que un 80% de los documentos se ha publicado a partir de 2012. Esto implica que la aportaci&#x00F3;n de la producci&#x00F3;n de la Pen&#x00ED;nsula Ib&#x00E9;rica al total del mundo se haya incrementado notablemente, pasando del 0,45% en 2002 (primer a&#x00F1;o en que hay documentos en ambos pa&#x00ED;ses) al 5,6% en 2016. La m&#x00E1;xima aportaci&#x00F3;n se registra en 2015 donde los documentos de Espa&#x00F1;a y Portugal representan el 6,1% del mundo (<xref ref-type="fig" rid="F2">Figura 2</xref>).</p>

								<fig id="F2">
									<label>Figura 2</label>
									<caption>
										<title>Evoluci&#x00F3;n anual del n&#x00FA;mero de documentos sobre Open Science de Espa&#x00F1;a y Portugal y aportaci&#x00F3;n al total de la producci&#x00F3;n sobre el tema</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F2.jpg"/>
								</fig>


			<p>En cuanto a las instituciones m&#x00E1;s productivas sobre Open Science, en Espa&#x00F1;a predominan las universidades p&#x00FA;blicas y los centros del Consejo Superior de Investigaciones Cient&#x00ED;ficas. Destacan especialmente: Universidad Polit&#x00E9;cnica de Madrid, Universidad de Barcelona, Universidad Aut&#x00F3;noma de Barcelona, Universidad de Granada, Universidad Polit&#x00E9;cnica de Valencia, Universidad Carlos III de Madrid y Universidad Complutense de Madrid. Algo similar ocurre en Portugal dado que predomina la producci&#x00F3;n de las universidades, especialmente la de Minho, Nova de Lisboa, Porto, Lisboa y Coimbra. En la <xref ref-type="fig" rid="F3">figura 3</xref> se puede apreciar la distribuci&#x00F3;n geogr&#x00E1;fica de la producci&#x00F3;n que se concentra en las grandes ciudades de ambos pa&#x00ED;ses.</p>

								<fig id="F3">
									<label>Figura 3</label>
									<caption>
										<title>Distribuci&#x00F3;n geogr&#x00E1;fica de los documentos sobre Open Science</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F3.jpg"/>
								</fig>


			</sec>
			
			<sec id="S3.3">
			<title>Especializaci&#x00F3;n tem&#x00E1;tica de la producci&#x00F3;n</title>

			<p>Considerando las &#x00E1;reas tem&#x00E1;ticas (disciplinas SCOPUS) en que se publican los documentos sobre Open Science, se aprecia que la producci&#x00F3;n de Espa&#x00F1;a se ha publicado en revistas de 26 &#x00E1;reas distintas y la de Portugal se recoge en 25. Las categor&#x00ED;as que concentran mayor n&#x00FA;mero de publicaciones son Computer Science y Social Science. Se puede advertir que las tendencias de la Pen&#x00ED;nsula Ib&#x00E9;rica difieren de la producci&#x00F3;n media del mundo en este tema con menor proporci&#x00F3;n de lo esperado de documentos en &#x00E1;reas como Medicine.</p>
			 
			<p>A partir de la distribuci&#x00F3;n porcentual de la producci&#x00F3;n en cada pa&#x00ED;s, frente a la distribuci&#x00F3;n del mundo, se ha obtenido el &#x00CD;ndice de Actividad por &#x00E1;rea tem&#x00E1;tica. En la <xref ref-type="fig" rid="F4">figura 4</xref> se muestran aquellas &#x00E1;reas de especializaci&#x00F3;n (IA&gt;1) y las de menor intensidad (IA&lt;1) pudiendo observar las diferencias entre ambos pa&#x00ED;ses.</p>

								<fig id="F4">
									<label>Figura 4</label>
									<caption>
										<title>&#x00CD;ndice de actividad por &#x00E1;rea tem&#x00E1;tica en la producci&#x00F3;n sobre Open Science</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F4.jpg"/>
								</fig>


			<p>Si se consideran las revistas en las que se han publicado los documentos sobre Open Science de Espa&#x00F1;a, se advierte que esta producci&#x00F3;n se ha difundido en 137 revistas (con m&#x00E1;s de 1 documento). En el caso de Portugal se han detectado 26 t&#x00ED;tulos con m&#x00E1;s de 1 documento. En el primer caso, el 20% de los documentos se ha concentrado en las 10 primeras revistas. De ellas destacan “El Profesional de la Informaci&#x00F3;n” (5,4%); “Lecture Notes in Computer Science” (3,5% de los documentos) y “Revista Espa&#x00F1;ola de Documentaci&#x00F3;n Cient&#x00ED;fica” (1,3%). En el caso de Portugal la primera revista (“Lecture Notes in Computer Science”), incluye un 4,5% de los documentos. Le sigue “Procedia Computer Science”, con un 2% de la producci&#x00F3;n.</p>
			 
			<p>Utilizando las palabras clave de las publicaciones se han podido identificar los t&#x00E9;rminos m&#x00E1;s frecuentes. En ambos pa&#x00ED;ses, los estudios de caso nacionales son un objeto de estudio bastante habitual dado que, tanto “Espa&#x00F1;a” como “Portugal”, son t&#x00E9;rminos mencionados reiteradas veces. Entre las palabras clave relacionadas con Open Science, aqu&#x00E9;llos vinculados con “open innovation”, “open data” y “open access” tienen una alta frecuencia de aparici&#x00F3;n en ambos pa&#x00ED;ses (<xref ref-type="table" rid="T3">tabla III</xref>).</p>

								<fig id="T3">
									<label>Tabla III</label>
									<caption>
										<title>Frecuencia de las palabras clave en los documentos sobre Open Science de Espa&#x00F1;a y Portugal (SCOPUS 2000-2016)</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T3.jpg"/>
								</fig>

			 
			<p>Otro de los aspectos a analizar es el idioma de los documentos. En Espa&#x00F1;a un 79% de las publicaciones fueron escritas en ingl&#x00E9;s, un 21% en idioma local (mayoritariamente espa&#x00F1;ol y en alg&#x00FA;n caso catal&#x00E1;n) y se han registrado 4 publicaciones en portugu&#x00E9;s. En el caso de Portugal solo 16 publicaciones (5,5%) se han escrito en portugu&#x00E9;s siendo la amplia mayor&#x00ED;a en ingl&#x00E9;s (94%).</p>
			</sec>
			
			<sec id="S3.4">
			<title>Repercusi&#x00F3;n de las publicaciones en redes sociales</title>

			<p>Tras la recuperaci&#x00F3;n de documentos, se realiz&#x00F3; la identificaci&#x00F3;n de sus DOI para poder obtener los indicadores altm&#x00E9;tricos. Se ha observado que un 79% de los documentos analizados tiene DOI. En el caso de Espa&#x00F1;a se han detectado documentos con indicadores altm&#x00E9;tricos desde 2007 y en el caso de Portugal desde 2011. Considerando los porcentajes de publicaciones con indicadores altm&#x00E9;tricos sobre el total de publicaciones en esos mismos a&#x00F1;os, los valores rondan el 38% en ambos pa&#x00ED;ses. En la <xref ref-type="table" rid="T4">tabla IV</xref> se pueden comprobar los valores para cada caso.</p>

								<fig id="T4">
									<label>Tabla IV</label>
									<caption>
										<title>Distribuci&#x00F3;n idiom&#x00E1;tica de documentos sobre Open Science con DOI</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T4.jpg"/>
								</fig>


			<p>Entre las publicaciones que cuentan con indicadores altm&#x00E9;tricos las m&#x00E1;s frecuentes son las menciones en post y Twitter (tweets) (89% y 87% de los documentos con altm&#x00E9;tricos, respectivamente). Las menciones en Facebook, feeds, y sms, aunque son escasas, cuentan con una mayor proporci&#x00F3;n en el caso de Portugal (<xref ref-type="table" rid="T5">tabla V</xref>).</p>

								<fig id="T5">
									<label>Tabla V</label>
									<caption>
										<title>Distribuci&#x00F3;n de indicadores altm&#x00E9;tricos en las publicaciones sobre Open Science seg&#x00FA;n tipo de fuente</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T5.jpg"/>
								</fig>


			<p>La distribuci&#x00F3;n de las menciones es muy variable dado que, aunque lo m&#x00E1;s frecuente es que haya pocos documentos con muchas menciones, tambi&#x00E9;n se han detectado documentos con m&#x00E1;s de 100 menciones. Lo m&#x00E1;s habitual es que esto ocurra en el caso de los post y los tweets. En la <xref ref-type="fig" rid="F5">figura 5</xref> se puede observar esta distribuci&#x00F3;n para ambos pa&#x00ED;ses y se aprecia que, a pesar de que el volumen es diferente, existe un patr&#x00F3;n de actividad similar.</p>

								<fig id="F5">
									<label>Figura 5</label>
									<caption>
										<title>Distribuci&#x00F3;n de las menciones en redes sociales de las publicaciones sobre Open Science</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F5.jpg"/>
								</fig>


			<p>Se ha considerado tambi&#x00E9;n la relaci&#x00F3;n entre el contenido y el tipo de acceso al documento. As&#x00ED;, se ha podido constatar que el 1,4% de los documentos de SCOPUS en el per&#x00ED;odo estudiado son Open Access. Estos porcentajes ascienden al 3% en el caso de la producci&#x00F3;n sobre Open Science y son a&#x00FA;n mayores en las publicaciones de la Pen&#x00ED;nsula Ib&#x00E9;rica sobre el tema (un 4,8% en Espa&#x00F1;a y un 6,8% en Portugal). El tipo documental m&#x00E1;s frecuente en las publicaciones es el art&#x00ED;culo que, en promedio, presenta acceso abierto en un 5% de los casos. En la <xref ref-type="table" rid="T6">tabla VI</xref> se puede apreciar la distribuci&#x00F3;n por tipo de documentos.</p>

								<fig id="T6">
									<label>Tabla VI</label>
									<caption>
										<title>Distribuci&#x00F3;n de indicadores altm&#x00E9;tricos en las publicaciones sobre Open Science seg&#x00FA;n tipo documental</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T6.jpg"/>
								</fig>


			<p>Al analizar la relaci&#x00F3;n entre el tipo de acceso al documento y la repercusi&#x00F3;n en las redes sociales, se ha constatado que los documentos OA tienen mayor n&#x00FA;mero de indicadores altm&#x00E9;tricos que los otros. En Espa&#x00F1;a un 55% de los documentos OA cuentan con menciones en las redes sociales frente a un 34% con menciones pero sin acceso abierto. En Portugal la distancia entre ambos grupos es mayor ya que un 80% de los documentos OA tienen indicadores altm&#x00E9;tricos, frente al 25% sin OA y con menciones en las redes (<xref ref-type="table" rid="T7">tabla VII</xref>).</p>

								<fig id="T7">
									<label>Tabla VII</label>
									<caption>
										<title>Relaci&#x00F3;n entre documentos con acceso abierto e indicadores altm&#x00E9;tricos en las publicaciones sobre Open Science</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T7.jpg"/>
								</fig>


			<p>Para la producci&#x00F3;n espa&#x00F1;ola se ha advertido que los documentos OA recibieron mayor n&#x00FA;mero de citas que los otros (9,79 citas/doc versus 6,43 citas/doc); sin embargo en el caso de Portugal, la situaci&#x00F3;n observada es la contraria (<xref ref-type="table" rid="T8">tabla VIII</xref>).</p>

								<fig id="T8">
									<label>Tabla VIII</label>
									<caption>
										<title>Relaci&#x00F3;n entre acceso abierto e indicadores altm&#x00E9;tricosy citas en las publicaciones sobre Open Science</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/T8.jpg"/>
								</fig>

			<p>La comparaci&#x00F3;n entre el impacto bibliom&#x00E9;trico tradicional y la repercusi&#x00F3;n en redes sociales, se ha realizado teniendo en cuenta, por un lado, las citas recibidas y, por otro, las menciones en diferentes canales de comunicaci&#x00F3;n. A pesar de que pueda pensarse que los documentos con mayor presencia en las redes sociales suelen ser los m&#x00E1;s citados (y viceversa) no se aprecia una clara relaci&#x00F3;n entre ambas dimensiones. En la <xref ref-type="fig" rid="F6">figura 6</xref> se muestra la relaci&#x00F3;n entre citas y menciones en Twitter, el indicador altm&#x00E9;trico m&#x00E1;s habitual.</p>

								<fig id="F6">
									<label>Figura 6</label>
									<caption>
										<title>Relaci&#x00F3;n entre citas y menciones en Twitter en las publicaciones sobre Open Science</title>
									</caption>
									<graphic xmlns:xlink="http://www.w3.org/1999/xlink" xlink:href="../images/F6.jpg"/>
								</fig>


			</sec>
		</sec>
		
		<sec id="S4">
			<title>4. DISCUSI&#x00D3;N</title>

			<p>Los resultados obtenidos como parte de este trabajo permiten inferir que el inter&#x00E9;s por la investigaci&#x00F3;n relacionada con Open Science es bastante reciente, dado que es en los &#x00FA;ltimos 5 a&#x00F1;os en los que se concentra la mayor parte de la producci&#x00F3;n. Esto coincide con la puesta en marcha (desde 2011/2012) de diferentes pol&#x00ED;ticas europeas e ib&#x00E9;ricas, centradas en la promoci&#x00F3;n y consolidaci&#x00F3;n del movimiento Open Science.</p>
			 
			<p>Entre los resultados obtenidos se ha observado que los grandes pa&#x00ED;ses productores cient&#x00ED;ficos como Estados Unidos. y Reino Unido, son tambi&#x00E9;n los m&#x00E1;s productivos en este campo pero aparecen otros con una intensa actividad en el tema como Sud&#x00E1;frica, Finlandia, Canad&#x00E1;, Australia y Holanda.</p>
			 
			<p>Esto puede explicarse por una serie de pol&#x00ED;ticas desarrolladas en consonancia con la Open Science. En el caso de Finlandia, por ejemplo, la Open Science and Research Iniciative, auspiciada por el Ministerio de Educaci&#x00F3;n y Cultura, tiene como objetivo la apertura y disponibilidad permanente de todos los resultados de investigaci&#x00F3;n, con la intenci&#x00F3;n de convertir al pa&#x00ED;s en l&#x00ED;der del acceso abierto (Finland, <xref ref-type="bibr" rid="CIT16">2014</xref>; Forsstr&#x00F6;m y Haataja, <xref ref-type="bibr" rid="CIT17">2016</xref>). Asimismo, la Academia de Finlandia recomienda la publicaci&#x00F3;n en OA siempre que sea posible (Forsstr&#x00F6;m y Haataja, <xref ref-type="bibr" rid="CIT17">2016</xref>). Por su parte, Holanda, puso en marcha en 2017 el National Plan Open Science cuyos objetivos son promover el OA de publicaciones y datos para su uso y reutilizaci&#x00F3;n y tambi&#x00E9;n adoptar sistemas de evaluaci&#x00F3;n y recompensa en el &#x00E1;mbito de la Open science (Netherlands, <xref ref-type="bibr" rid="CIT28">2017</xref>). En el caso de Canad&#x00E1;, se ha desarrollado el Action Plan on Open Government 2.0 que permite un mayor acceso a los resultados de investigaci&#x00F3;n cient&#x00ED;fica financiada con fondos p&#x00FA;blicos y promueve una mayor colaboraci&#x00F3;n entre el sector p&#x00FA;blico y el privado (OECD, <xref ref-type="bibr" rid="CIT29">2015</xref>). El esfuerzo realizado por el gobierno de Sud&#x00E1;frica en consonancia con la Open Science se ha visto reflejado, especialmente en sus pol&#x00ED;ticas de OA. Es por ello que la UNESCO (<xref ref-type="bibr" rid="CIT37">2015</xref>) analiza el crecimiento del OA en &#x00C1;frica, presentando el caso de este pa&#x00ED;s como un ejemplo de apertura del conocimiento cient&#x00ED;fico, a trav&#x00E9;s del dep&#x00F3;sito en repositorios.</p>
			 
			<p>A nivel regional se ha podido comprobar que, aunque Espa&#x00F1;a es m&#x00E1;s productiva que Portugal, ambos pa&#x00ED;ses cuentan con una producci&#x00F3;n cient&#x00ED;fica relevante en este tema, dado que aportan porcentajes mayores al promedio de producci&#x00F3;n considerando todos los campos del conocimiento. Esto no ocurre solamente con las publicaciones recogidas en SCOPUS, sino que la misma tendencia se evidencia en Web of Science (Clarivate Analytics, <xref ref-type="bibr" rid="CIT05">2017</xref>).</p>
			 
			<p>Al identificar las tem&#x00E1;ticas con mayor relaci&#x00F3;n con la Open Science destacan Computer Science y Social Science. Esto resulta l&#x00F3;gico al observar que muchas de las publicaciones analizan aspectos t&#x00E9;cnicos vinculados con el acceso abierto a la informaci&#x00F3;n, la interconexi&#x00F3;n de diferentes fuentes de datos, etc. Por otro lado, tambi&#x00E9;n cobran relevancia publicaciones sobre cuestiones que afectan a la sociedad como la participaci&#x00F3;n ciudadana en los procesos de producci&#x00F3;n de nuevo conocimiento, la transparencia de la informaci&#x00F3;n o los cambios en la comunicaci&#x00F3;n.</p>
			 
			<p>Se ha podido constatar, adem&#x00E1;s, que las universidades son las instituciones que m&#x00E1;s documentos producen sobre Open Science, especialmente aqu&#x00E9;llas que implementaron estrategias de promoci&#x00F3;n de la apertura cient&#x00ED;fica, principalmente a trav&#x00E9;s de la creaci&#x00F3;n de repositorios institucionales, proyectos sobre Open Science, participaci&#x00F3;n en redes para el desarrollo del OA, etc.</p>
			 
			<p>En Espa&#x00F1;a, el Recolector de Ciencia Abierta (RECOLECTA) agrupa a todos los reposit&#x00F3;rios cient&#x00ED;ficos nacionales, teniendo el mismo papel el Reposit&#x00F3;rio Cient&#x00ED;fico de Acesso Aberto (RCAAP) en Portugal. Seg&#x00FA;n los datos de OpenDOAR, Portugal cuenta actualmente con 55 repositorios y Espa&#x00F1;a con 133, en su mayor&#x00ED;a pertenecientes a universidades. En t&#x00E9;rminos de pol&#x00ED;ticas de dep&#x00F3;sito obligatorias, Portugal cuenta con 26 (25 de ellas provenientes de universidades o centros de investigaci&#x00F3;n), mientras que en Espa&#x00F1;a existen 39 (35 relacionadas con universidades o centros de investigaci&#x00F3;n) (ROARMAP). A nivel institucional, la Fundaci&#x00F3;n Espa&#x00F1;ola para la Ciencia y la Tecnolog&#x00ED;a y la Universidade do Minho destacan como promotoras de Ciencia Abierta a trav&#x00E9;s de su participaci&#x00F3;n en proyectos como OpenAIRE, Confederation of Open Access Repositories (COAR) o Mediterranean Open Access Network (MedOANet).</p>
			 
			<p>El an&#x00E1;lisis de los indicadores altm&#x00E9;tricos de cada publicaci&#x00F3;n se realiz&#x00F3; a partir del DOI. Esto permiti&#x00F3; comprobar que la presencia en redes sociales alcanza al 38% de los documentos, valores superiores a los detectados en &#x00E1;reas como F&#x00ED;sica o Ingenier&#x00ED;a en los que no supera el 21%. Asimismo, en otros campos como Plant Sciences ronda el 31% y es en Communication donde llega a un 43%. Algunos estudios previos en los que se analiza el impacto en redes sociales en todas las &#x00E1;reas, muestran que el porcentaje de publicaciones con indicadores altm&#x00E9;tricos se suele situar entre el 15% y el 24% y son las Ciencias Sociales y las Humanidades las que presentan los valores m&#x00E1;s elevados. Una posible causa puede ser la relaci&#x00F3;n existente entre el objeto de estudio y su impacto en redes sociales, dado que los temas relacionados con la comunicaci&#x00F3;n de la ciencia parecen ser los de mayor repercusi&#x00F3;n en los social media (De Filippo y Sanz-Casado, <xref ref-type="bibr" rid="CIT08">2018</xref>).</p>
			 
			<p>En cuanto al acceso abierto de los documentos, se ha evidenciado que la producci&#x00F3;n sobre Open Science se publica en OA en mayor porcentaje que en otros temas y, Espa&#x00F1;a y Portugal, presentan proporciones de documentos OA por encima de la media. Sin embargo, no deja de resultar llamativo que las proporciones de documentos OA sean tan escasas al tratar, justamente, temas de ciencia abierta. Se ha podido comprobar que la publicaci&#x00F3;n en OA favorece la repercusi&#x00F3;n en redes sociales ya que los documentos en acceso abierto contaron con mayor n&#x00FA;mero de menciones en diferentes medios, especialmente en tweets. Estos resultados coinciden con los observados por autores como Bruns y Stieglitz (<xref ref-type="bibr" rid="CIT02">2012</xref>).</p>
			 
			<p>Aunque podr&#x00ED;a parecer que los documentos en acceso abierto tendr&#x00ED;an tambi&#x00E9;n mayor impacto acad&#x00E9;mico, s&#x00F3;lo en el caso de Espa&#x00F1;a se ha verificado una relaci&#x00F3;n positiva entre el OA y las citas recibidas. En este sentido, estudios previos como el de Swan (<xref ref-type="bibr" rid="CIT35">2010</xref>) han mostrado que, en general, existe un incremento de las citas cuando se publica en OA. Por su parte, el trabajo de Gargouri afirma que el impacto del OA en la citaci&#x00F3;n es satisfactorio, pero &#x00E9;ste se incrementa m&#x00E1;s en art&#x00ED;culos de revistas OA con un alto Journal Impact Factor (Gargouri y otros, <xref ref-type="bibr" rid="CIT19">2010</xref>). Por su parte, McCabe &amp; Snyder (<xref ref-type="bibr" rid="CIT25">2014</xref>) plantean que, a pesar de existir una relaci&#x00F3;n positiva entre los art&#x00ED;culos OA y el n&#x00FA;mero de citas recibidas, los valores obtenidos en su estudio son m&#x00E1;s modestos que los esperados. Otro trabajo que analiza el impacto de las publicacione OA por v&#x00ED;a dorada muestra que en Espa&#x00F1;a este impacto es bajo, especialmente comparado con pa&#x00ED;ses como Reino Unido o Dinamarca (Torres-Salinas y otros, <xref ref-type="bibr" rid="CIT36">2016</xref>). Seg&#x00FA;n los autores el motivo podr&#x00ED;a deberse al hecho de que muchas publicaciones se difunden en revistas nacionales con un Journal Impact Factor menor. Esta situaci&#x00F3;n tambi&#x00E9;n afecta a Portugal y puede ser aplicable a los resultados obtenidos en este estudio.</p>
			 
			<p>Tampoco se ha constatado relaci&#x00F3;n entre el impacto tradicional (n&#x00FA;mero de citas recibidas) y las menciones en redes sociales. En este sentido, seg&#x00FA;n Holmberg y Thelwall (<xref ref-type="bibr" rid="CIT20">2013</xref>), los estudios que confirman una relaci&#x00F3;n positiva entre las citas tradicionales y las menciones en redes sociales, se basan en revistas de &#x00E9;lite. Seg&#x00FA;n muestran los autores en el mencionado estudio, es posible asociar 6 de los 11 indicadores altm&#x00E9;tricos estudiados a las citas tradicionales en las &#x00E1;reas de medicina y biolog&#x00ED;a. Sin embargo, el estudio no demostr&#x00F3; ninguna correlaci&#x00F3;n entre las mismas.</p>
			 
			<p>Aunque los indicadores altm&#x00E9;tricos pueden ofrecer informaci&#x00F3;n interesante para valorar la repercusi&#x00F3;n social de las publicaciones cient&#x00ED;ficas, existen limitaciones que impiden detectar claras relaciones entre los diferentes indicadores. Entre ellas destaca el hecho de que los documentos analizados son muy recientes y esto reduce considerablemente su ventana de citaci&#x00F3;n; asimismo, el reducido n&#x00FA;mero absoluto de documentos con menciones en redes sociales, tampoco permite sacar conclusiones relevantes.</p>
			 
			<p>Es por ello que en estudios futuros se har&#x00E1; especial hincapi&#x00E9; en el an&#x00E1;lisis del contenido de las publicaciones, utilizando t&#x00E9;cnicas de miner&#x00ED;a de textos para detectar posibles relaciones entre el tipo de contenido y su repercusi&#x00F3;n en las redes sociales.</p>
		</sec>
		
		<sec id="S5">
			<title>5. CONCLUSIONES</title>
			
			<p>Entre los aspectos m&#x00E1;s destacados del estudio podemos resaltar los siguientes:</p>

							<list list-type="bullet">
								<list-item>
									<p>Las publicaciones relacionadas con Open Science tienen un inter&#x00E9;s reciente ya que una gran parte de la producci&#x00F3;n se concentra en los &#x00FA;ltimos 5 a&#x00F1;os.</p>
								</list-item>
								<list-item>
									<p>Las iniciativas de Open Access son las m&#x00E1;s asentadas pero va ganando espacio el Open data.</p>
								</list-item>
								<list-item>
									<p>Espa&#x00F1;a y Portugal son muy activos en la publicaci&#x00F3;n sobre Open Science.</p>
								</list-item>
								<list-item>
									<p>Las &#x00E1;reas tem&#x00E1;ticas m&#x00E1;s relacionadas con Open Science son Computer Science y Social Science.</p>
								</list-item>
								<list-item>
									<p>Las universidades p&#x00FA;blicas son los principales productores, en concreto las que han desarrollado estrategias para la promoci&#x00F3;n de la ciencia abierta.</p>
								</list-item>
								<list-item>
									<p>La publicaci&#x00F3;n sobre Ciencia Abierta tiene mayor presencia que otros temas en revistas Open Access pero las proporciones son, aun, llamativamente bajas.</p>
								</list-item>
								<list-item>
									<p>Un 75%-80% de las publicaciones tiene DOI y, de ellas, un 38% indicadores altm&#x00E9;tricos (cifras elevadas ya que en general el promedio es de un 20%).</p>
								</list-item>
								<list-item>
									<p>Hay escasa informaci&#x00F3;n sobre indicadores altm&#x00E9;tricos (valores absolutos bajos, documentos muy recientes), por lo que no es posible obtener informaci&#x00F3;n sobre relaciones entre variables bibliom&#x00E9;tricas y altm&#x00E9;tricas.</p>
								</list-item>
							</list>
			</sec>

	</body>

	
	<back>
	
		<ack>
			<title>6. AGRADECIMIENTOS</title>
			<p>Los aspectos metodol&#x00F3;gicos desarrollados en este trabajo han sido realizados en el marco del Proyecto “Detecci&#x00F3;n de nuevos frentes de investigaci&#x00F3;n e innovaci&#x00F3;n en Eficiencia Energ&#x00E9;tica. An&#x00E1;lisis de los flujos de conocimiento entre el ambito cient&#x00ED;fico, la industria y la sociedad” (REF: CSO2014-51916-C2-1-R) financiado por el Ministerio Espa&#x00F1;ol de Econom&#x00ED;a y Competitividad (MINECO).</p>
			
			<p><bold>ACKNOWLEDGMENTs</bold></p>

			<p>Methodological aspects developed in this work have been carried out within the framework of the Project “Detection of new fronts of research and innovation in Energy Efficiency. Analysis of knowledge flows between the scientific field, industry and society” (REF: CSO2014-51916-C2-1-R) financed by the Spanish Ministry of Economy and Competitiveness (MINECO).</p>
		</ack>
	
		
	
		<ref-list>
			<title>7. REFERENCIAS</title>
				
				<ref id="CIT01">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Bartling</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Friesike</surname>
					  <given-names>S.</given-names>	  
				  </name>
			  </person-group>
			  <year>2014</year>
			  <source>Opening Science. The Evolving Guide on How the Internet is Changing Research, Collaboration and Scholarly Publishing</source>
			  <publisher-name>Springer</publisher-name>
			  <isbn>978-3-319-00025-1</isbn>
			  <comment><ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1007/978-3-319-00026-8">https://doi.org/10.1007/978-3-319-00026-8</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT02"> 
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Bruns</surname>
					  <given-names>A.</given-names>	  
				  </name>
				  <name>
					  <surname>Stieglitz</surname>
					  <given-names>S.</given-names>	  
				  </name>
			  </person-group>
			  <year>2012</year>
			  <article-title>Quantitative Approaches to Comparing Communication Patterns on Twitter</article-title>
			  <source>Journal of Technology in Human Services</source>
			  <volume>30</volume>
			  <issue>3-4</issue>
			  <comment><ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1080/15228835.2012.744249">https://doi.org/10.1080/15228835.2012.744249</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT03">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Callon</surname>
					  <given-names>M.</given-names>	  
				  </name>
				  <name>
					  <surname>Courtial</surname>
					  <given-names>J.P.</given-names>	  
				  </name>
				  <name>
					  <surname>Penan</surname>
					  <given-names>H.</given-names>	  
				  </name>
			  </person-group>
			  <year>1995</year>
			  <source>Cienciometr&#x00ED;a: la medici&#x00F3;n de la actividad cient&#x00ED;fica: de la bibliometr&#x00ED;a a la vigilancia tecnol&#x00F3;gica</source>
			  <publisher-loc>Gij&#x00F3;n</publisher-loc>
			  <publisher-name>Trea</publisher-name>
			</element-citation>
			</ref>

			<ref id="CIT04">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Castells</surname>
					  <given-names>M.</given-names>	  
				  </name>
			  </person-group>
			  <year>1996</year>
			  <source>The Rise of the Network Society. The Information Age: Economy, Society and Culture</source>
			  <volume>I</volume>
			  <publisher-loc>Cambridge, MA</publisher-loc>
			  <publisher-loc>Oxford</publisher-loc>
			  <publisher-name>Blackwell</publisher-name>
			</element-citation>
			</ref>

			<ref id="CIT05">
			<element-citation publication-type="webpage">
			  <collab>Clarivate Analytics</collab>
			  <year>2017</year>
			  <source>Web of Science database</source>
			  <comment><ext-link ext-link-type="uri" xlink:href="https://clarivate.com/products/web-of-science/databases/">https://clarivate.com/products/web-of-science/databases/</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT06">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Codina</surname>
					  <given-names>L.</given-names>	  
				  </name>
				  <name>
					  <surname>Corti&#x00F1;as</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Monistrol</surname>
					  <given-names>R.</given-names>	  
				  </name>
				  <name>
					  <surname>P&#x00E9;rez-Montoro</surname>
					  <given-names>M.</given-names>	  
				  </name>
			  </person-group>
			  <year>2014</year>
			  <article-title>Web of Science versus Scopus para estudios en Comunicaci&#x00F3;n: Propuesta de sistema de an&#x00E1;lisis y resultados</article-title>
			  <source>Textual &amp; Visual Media</source>
			  <volume>7</volume>
			  <fpage>137</fpage>
			  <lpage>162</lpage>
			</element-citation>
			</ref>

			<ref id="CIT07">
			<element-citation publication-type="thesis">
			  <person-group person-group-type="author">
				  <name>
					  <surname>da Silva</surname>
					  <given-names>P.</given-names>	  
				  </name>
			  </person-group>
			  <year>2017</year>
			  <source>As Pol&#x00ED;ticas de Open Data em Portugal: an&#x00E1;lise da sua implementa&#x00E7;&#x00E3;o e impacto</source>
			  <publisher-name>Departamento de Filosof&#x00ED;a, Comunicaci&#x00F3;n e Informaci&#x00F3;n, Facultad de Letras, Universidad de Coimbra</publisher-name>
			  <comment>Tesina de la Maestr&#x00ED;a en Ciencias de la Informaci&#x00F3;n</comment>
			</element-citation>
			</ref>

			<ref id="CIT08">
			<element-citation publication-type="journal">
			<person-group person-group-type="author">
                  <name>
                      <surname>De Filippo</surname>
                      <given-names>D.</given-names>      
                  </name>
                  <name>
                      <surname>Sanz-Casado</surname>
                      <given-names>E.</given-names>      
                  </name>
              </person-group>
              <year>2018</year>
               <article-title>Bibliometric and Altmetric Analysis of Three Social Science Disciplines</article-title>
			   <source>Front. Res. Metr. Anal.</source>
			   <volume>3</volume>
			   <elocation-id>34</elocation-id>
			   <comment><ext-link ext-link-type="uri" xlink:href="https://doi.org/10.3389/frma.2018.00034">https://doi.org/10.3389/frma.2018.00034</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT09">
			<element-citation publication-type="webpage">
			  <year>2017</year>
			  <article-title>Search</article-title>
			  <source>Directory of Open Access Journals (DOAJ)</source>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://doaj.org/">https://doaj.org/</ext-link></comment>
			  <date-in-citation content-type="access-date">[Consultado a 10-03-2018]</date-in-citation>
			</element-citation>
			</ref>

			<ref id="CIT10"> 
			<element-citation publication-type="report">
			  <collab>Espa&#x00F1;a. Ministerio de Econom&#x00ED;a, Industria y Competitividad, Secretar&#x00ED;a de Investigaci&#x00F3;n, Desarrollo e Innovaci&#x00F3;n</collab>
			  <year>2017</year>
			  <source>Plan Estatal de Investigaci&#x00F3;n Cient&#x00ED;fica y T&#x00E9;cnica y de Innovaci&#x00F3;n 2017-2020</source>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://www.idi.mineco.gob.es/stfls/MICINN/Prensa/FICHEROS/2018/PlanEstatalIDI.pdf">http://www.idi.mineco.gob.es/stfls/MICINN/Prensa/FICHEROS/2018/PlanEstatalIDI.pdf</ext-link></comment> 
			</element-citation>
			</ref>

			<ref id="CIT11">
			<element-citation publication-type="gov">
			  <collab>EUR-Lex</collab>
			  <year>2012</year>
			  <article-title>COMMISSION RECOMMENDATION of 17 July 2012 on access to and preservation of scientific information (2012/417/EU)</article-title>
			  <source>Official Journal of the European Union</source>
			  <fpage>39</fpage>
			  <lpage>43</lpage>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://publications.europa.eu/en/publication-detail/-/publication/48558fc9-d4c8-11e1-905c-01aa75ed71a1">https://publications.europa.eu/en/publication-detail/-/publication/48558fc9-d4c8-11e1-905c-01aa75ed71a1</ext-link></comment> 
			</element-citation>
			</ref>

			<ref id="CIT12">
			<element-citation publication-type="webpage">
			  <collab>European Commission</collab>
			  <year>2016a</year>
			  <article-title>Europa l&#x00ED;der mundial da economia baseada nos dados, gra&#x00E7;as &#x00E0; iniciativa europeia para a computa&#x00E7;&#x00E3;o em nuvem</article-title>
			  <comment>Comunicado de imprensa. Accesible en: <ext-link ext-link-type="uri" xlink:href="http://europa.eu/rapid/press-release_IP-16-1408_pt.htm">http://europa.eu/rapid/press-release_IP-16-1408_pt.htm</ext-link></comment> 
			</element-citation>
			</ref>

			<ref id="CIT13">
			<element-citation publication-type="report">
			  <collab>European Commission</collab>
			  <year>2016b</year>
			  <source>Open innovation, Open Science, open to the world. A vision for Europe</source>
			  <publisher-loc>Brussels</publisher-loc>
			  <publisher-name>European Commission, Directorate-General for Research and Innovation</publisher-name>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://bookshop.europa.eu/en/open-innovation-open-science-open-tothe-world-pbKI0416263/">http://bookshop.europa.eu/en/open-innovation-open-science-open-tothe-world-pbKI0416263/</ext-link></comment> 
			</element-citation>
			</ref>

			<ref id="CIT14">
			<element-citation publication-type="webpage">
			<collab>European Commission. Direcci&#x00F3;n General de Investigaci&#x00F3;n e Innovaci&#x00F3;n</collab>
			  <year>2017</year>
			  <source>Open Science Monitor</source>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://ec.europa.eu/research/openscience/index.cfm?pg=about&amp;section=monitor">http://ec.europa.eu/research/openscience/index.cfm?pg=about&amp;section=monitor</ext-link></comment> 
			</element-citation>
			</ref>

			<ref id="CIT15">
			<element-citation publication-type="gov">
			<collab>European Union</collab>
			  <year>2013</year>
			  <article-title>Regulamento (UE) Nº 1291/2013 do Parlamento Europeu e do Conselho de 11 de dezembro de 2013</article-title>
			  <source>Jornal Oficial da Uni&#x00E3;o Europeia</source>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://ec.europa.eu/research/participants/data/ref/h2020/legal_basis/fp/h2020-eu-establact_pt.pdf">http://ec.europa.eu/research/participants/data/ref/h2020/legal_basis/fp/h2020-eu-establact_pt.pdf</ext-link></comment> 
			</element-citation>
			</ref>

			<ref id="CIT16">
			<element-citation publication-type="report">
			  <collab>Finland. The Ministry of Education and Culture’s Open Science and Research Initiative 2014–2017</collab>
			  <year>2014</year>
			  <source>The Open Science and Research Roadmap</source>
			  <series>Reports of the Ministry of Education and Culture, Finland</series>
			  <issue>2014:21</issue>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://julkaisut.valtioneuvosto.fi/bitstream/handle/10024/75210/okm21.pdf">http://julkaisut.valtioneuvosto.fi/bitstream/handle/10024/75210/okm21.pdf</ext-link></comment> 
			</element-citation>
			</ref>

			<ref id="CIT17">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Forsstr&#x00F6;m</surname>
					  <given-names>P.</given-names>	  
				  </name>
				  <name>
					  <surname>Haataja</surname>
					  <given-names>J.</given-names>	  
				  </name>
 			  </person-group>
			  <year>2016</year>
			  <article-title>Open Science as an Instrument for Effective Research</article-title>
			  <source>Signum</source>
			  <issue>2</issue>
			  <fpage>11</fpage>
			  <lpage>15</lpage>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://journal.fi/signum/article/view/58741">https://journal.fi/signum/article/view/58741</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT18">
			<element-citation publication-type="webpage">
			  <collab>FOSTER</collab>
			  <year>2016</year>
			  <article-title>Open Science Definition</article-title>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://www.fosteropenscience.eu/taxonomy/term/100">https://www.fosteropenscience.eu/taxonomy/term/100</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT19">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Gargouri</surname>
					  <given-names>Y.</given-names>	  
				  </name>
				  <name>
					  <surname>Hajjem</surname>
					  <given-names>C.</given-names>	  
				  </name>
				  <name>
					  <surname>Larivi&#x00E8;re</surname>
					  <given-names>V.</given-names>	  
				  </name>
				  <name>
					  <surname>Gingras</surname>
					  <given-names>Y.</given-names>	  
				  </name>
				  <name>
					  <surname>Carr</surname>
					  <given-names>L.</given-names>	  
				  </name>
				  <name>
					  <surname>Brody</surname>
					  <given-names>T.</given-names>	  
				  </name>
				  <name>
					  <surname>Harnad</surname>
					  <given-names>S.</given-names>	  
				  </name>
			  </person-group>
			  <year>2010</year>
			  <article-title>Self-selected or mandated, open access increases citation impact for higher quality research</article-title>
			  <source>PloS one</source>
			  <volume>5</volume>
			  <issue>10</issue>
			  <elocation-id>e13636</elocation-id>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://dx.doi.org/10.1371/journal.pone.0013636">http://dx.doi.org/10.1371/journal.pone.0013636</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT20">
			<element-citation publication-type="conf-proc">
			<person-group person-group-type="author">
                  <name>
                      <surname>Holmberg</surname>
                      <given-names>K.</given-names>      
                  </name>
                  <name>
                      <surname>Thelwall</surname>
                      <given-names>M.</given-names>      
                  </name>
              </person-group>
              <year>2013</year>
              <article-title>Disciplinary differences in twitter scholarly communication</article-title>
              <conf-name>14th International Society of Scientometrics and Informetrics Conference</conf-name>
              <conf-loc>Viena</conf-loc>
			  <conf-date>15-19 Julio</conf-date>
            </element-citation>
			</ref>
			
			<ref id="CIT21">
			<element-citation publication-type="webpage">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Kramer</surname>
					  <given-names>B.</given-names>	  
				  </name>
				  <name>
					  <surname>Bosman</surname>
					  <given-names>J.</given-names>	  
				  </name>
			  </person-group>
			  <year>2016</year>
			  <article-title>Innovations in Scholarly Communication</article-title>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://101innovations.wordpress.com/">https://101innovations.wordpress.com/</ext-link></comment>
			  <date-in-citation content-type="access-date">[consultado el 24-05-2018]</date-in-citation>
			</element-citation>
			</ref>
			
			<ref id="CIT22">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Leonelli</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Spichtinger</surname>
					  <given-names>D.</given-names>	  
				  </name>
				  <name>
					  <surname>Prainsack</surname>
					  <given-names>B.</given-names>	  
				  </name>
			  </person-group>
			  <year>2015</year>
			  <article-title>Sticks and carrots: encouraging open science at its source</article-title>
			  <source>Geography and Environment</source>
			  <volume>2</volume>
			  <fpage>12</fpage>
			  <lpage>16</lpage>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://onlinelibrary.wiley.com/enhanced/exportCitation/doi/10.1002/geo2.2">http://onlinelibrary.wiley.com/enhanced/exportCitation/doi/10.1002/geo2.2</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT23">
			<element-citation publication-type="working-paper">
			<collab>LERU (League of European Research Universities)</collab>
			  <year>2018</year>
			  <source>Open Science and its role in universities: A roadmap for cultural change</source>
			  <series>Advice paper</series>
			  <issue>24</issue>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://www.leru.org/publications/open-science-and-its-role-in-universities-a-roadmap-for-cultural-change">https://www.leru.org/publications/open-science-and-its-role-in-universities-a-roadmap-for-cultural-change</ext-link></comment>
			</element-citation>
			</ref>

			
			<ref id="CIT24">
			<element-citation publication-type="book">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Machado</surname>
					  <given-names>J.</given-names>	  
				  </name>
			  </person-group>
			  <year>2015</year>
			  <chapter-title>Open Data and Open Science</chapter-title>
			  <person-group person-group-type="editor">
				  <name>
					  <surname>Albagli</surname>
					  <given-names>S.</given-names>	  
				  </name>
				  <name>
					  <surname>Maciel</surname>
					  <given-names>M.</given-names>	  
				  </name>
				  <name>
					  <surname>Abdo</surname>
					  <given-names>A.</given-names>	  
				  </name>
			  </person-group>
			  <source>Open Science, Open Issues</source>
			  <publisher-loc>Bras&#x00ED;lia</publisher-loc>
			  <publisher-loc>Rio de Janeiro</publisher-loc>
			  <publisher-name>IBICT</publisher-name>
			  <publisher-name>Unirio</publisher-name>
			  <fpage>189</fpage>
			  <lpage>214</lpage>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://livroaberto.ibict.br/bitstream/1/1061/1/Open%20Science%20open%20issues_Digital.pdf">http://livroaberto.ibict.br/bitstream/1/1061/1/Open%20Science%20open%20issues_Digital.pdf</ext-link></comment>
			</element-citation>
			</ref>

			
			<ref id="CIT25">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>McCabe</surname>
					  <given-names>M. J.</given-names>	  
				  </name>
				  <name>
					  <surname>Snyder</surname>
					  <given-names>C. M.</given-names>	  
				  </name>
			  </person-group>
			  <year>2014</year>
			  <article-title>Identifying the Effect of Open Access on Citations Using a Panel of Science Journals</article-title>
			  <source>Economic Inquiry</source>
			  <volume>52</volume>
			  <issue>4</issue>
			  <fpage>1284</fpage>
			  <lpage>1300</lpage>
			</element-citation>
			</ref>
			
			<ref id="CIT26">
			<element-citation publication-type="conf-proc">
              <person-group person-group-type="author">
                  <name>
                      <surname>Mohammadi</surname>
                      <given-names>E.</given-names>      
                  </name>
                  <name>
                      <surname>Thelwall</surname>
                      <given-names>M.</given-names>      
                  </name>
              </person-group>
              <year>2013</year>
              <article-title>Assessing the Mendeley readership of social sciences and humanities research</article-title>
              <conf-name>14th International Society of Scientometrics and Informetrics Conference</conf-name>
              <conf-loc>Viena</conf-loc>
			  <conf-date>15-16 Julio</conf-date>
            </element-citation>
			</ref>
			
			<ref id="CIT27">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Moya-Aneg&#x00F3;n</surname>
					  <given-names>F. de</given-names>	  
				  </name>
				  <name>
					  <surname>Chinchilla-Rodr&#x00ED;guez</surname>
					  <given-names>Z.</given-names>	  
				  </name>
				  <name>
					  <surname>Vargas-Quesada</surname>
					  <given-names>B.</given-names>	  
				  </name>
				  <name>
					  <surname>Corera-&#x00C1;lvarez</surname>
					  <given-names>E.</given-names>	  
				  </name>
				  <name>
					  <surname>Mu&#x00F1;oz-Fern&#x00E1;ndez</surname>
					  <given-names>F.L.</given-names>	  
				  </name>
				  <name>
					  <surname>Gonz&#x00E1;lez-Molina</surname>
					  <given-names>A.</given-names>	  
				  </name>
				  <name>
					  <surname>Herrero-Solana</surname>
					  <given-names>V.</given-names>	  
				  </name>
			  </person-group>
			  <year>2007</year>
			  <article-title>Coverage analysis of Scopus: A journal metric approach</article-title>
			  <source>Scientometrics</source>
			  <volume>73</volume>
			  <issue>1</issue>
			  <fpage>53</fpage>
			  <lpage>78</lpage>
			  <comment><ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1007/s11192-007-1681-4">https://doi.org/10.1007/s11192-007-1681-4</ext-link></comment>
			</element-citation>
			</ref>
			
			<ref id="CIT28">
			<element-citation publication-type="report">
			  <collab>Netherlands. Dutch Ministry of Education, Culture and Science</collab>
			  <year>2017</year>
			  <source>National Plan Open Science</source>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://doi.org/10.4233/uuid:9e9fa82e-06c1-4d0d-9e20-5620259a6c65">http://doi.org/10.4233/uuid:9e9fa82e-06c1-4d0d-9e20-5620259a6c65</ext-link></comment>
			</element-citation>
			</ref>


			<ref id="CIT29"> 
			<element-citation publication-type="working-paper">
			  <collab>OECD</collab>
			  <year>2015</year>
			  <source>Making Open Science a Reality</source>
			  <series>OECD Science, Tecnology and Industy Policy Papers</series>
			  <issue>25</issue>
			  <publisher-loc>Paris</publisher-loc>
			  <publisher-name>OECD Publications</publisher-name>
			  <comment><ext-link ext-link-type="uri" xlink:href="http://doi.org/10.1787/5jrs2f963zs1-en">http://doi.org/10.1787/5jrs2f963zs1-en</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT30">
			<element-citation publication-type="webpage">
			  <collab>OpenAIRE</collab>
			  <year>2017</year>
			  <article-title>About OpenAIRE-Connect</article-title>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://www.openaire.eu/connect">https://www.openaire.eu/connect</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT31">
			<element-citation publication-type="webpage">
			  <collab>Portugal. Minist&#x00E9;rio da Ci&#x00EA;ncia, Tecnologia e Ensino Superior (MCTES)</collab>
			  <year>2016</year>
			  <article-title>Ci&#x00EA;ncia Aberta, Conhecimento para todos: Princ&#x00ED;pios orientadores</article-title>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="https://www.fosteropenscience.eu/content/ciencia-aberta-conhecimento-para-todos">https://www.fosteropenscience.eu/content/ciencia-aberta-conhecimento-para-todos</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT32">
			<element-citation publication-type="report">
			  <collab>Research Information Network</collab>
			  <year>2010</year>
			  <source>Open science case studies</source>
			  <comment>Acesible en: <ext-link ext-link-type="uri" xlink:href="http://www.rin.ac.uk/system/files/attachments/RINews_Issue_11_0.pdf">http://www.rin.ac.uk/system/files/attachments/RINews_Issue_11_0.pdf</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT33">
			<element-citation publication-type="webpage">
			  <source>ROAD: the Directory of Open Access Scholarly Resources</source>
			  <comment>Acesible en: <ext-link ext-link-type="uri" xlink:href="http://www.issn.org/the-issn-international-is-pleased-to-introduce-road/">http://www.issn.org/the-issn-international-is-pleased-to-introduce-road/</ext-link></comment>
			  <date-in-citation content-type="access-date">[Consultado a 10-03-2018]</date-in-citation>
			</element-citation>
			</ref>	

			<ref id="CIT34">
			<element-citation publication-type="report">
			  <collab>STEPS Am&#x00E9;rica Latina</collab>
			  <year>2016</year>
			  <source>Ciencia abierta, colaborativa y alternativa: un camino para resolver problemas de desarrollo</source>
			</element-citation>
			</ref>


			<ref id="CIT35">
			<element-citation publication-type="working-paper">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Swan</surname>
					  <given-names>A.</given-names>	  
				  </name>
			  </person-group>
			  <year>2010</year>
			  <article-title>The open access citation advantage: studies and results to date</article-title>
			  <comment>Accesible en:<ext-link ext-link-type="uri" xlink:href="http://eprints.soton.ac.uk/268516/2/Citation_advantage_paper.pdf">http://eprints.soton.ac.uk/268516/2/Citation_advantage_paper.pdf</ext-link></comment>
			</element-citation>
			</ref>

			<ref id="CIT36">
			<element-citation publication-type="journal">
			  <person-group person-group-type="author">
				  <name>
					  <surname>Torres-Salinas</surname>
					  <given-names>D.</given-names>	  
				  </name>
				  <name>
					  <surname>Robinson-Garc&#x00ED;a</surname>
					  <given-names>N.</given-names>	  
				  </name>
				  <name>
					  <surname>Aguillo</surname>
					  <given-names>I.</given-names>	  
				  </name>
			  </person-group>
			  <year>2016</year>
			  <article-title>Bibliometric and benchmark analysis of gold Open Access in Spain: big output and little impact</article-title>
			  <source>El profesional de la informaci&#x00F3;n</source>
			  <volume>25</volume>
			  <issue>1</issue>
			  <fpage>17</fpage>
			  <lpage>24</lpage>
			</element-citation>
			</ref>


			<ref id="CIT37"> 
			<element-citation publication-type="book">
			  <collab>UNESCO</collab>
			  <year>2015</year>
			  <source>Concepts of Openness and Open Access. Open Access for Researchers</source>
			  <publisher-loc>Paris</publisher-loc>
			  <publisher-name>UNESCO</publisher-name>
			  <comment>Accesible en: <ext-link ext-link-type="uri" xlink:href="http://unesdoc.unesco.org/images/0023/002322/232207E.pdf">http://unesdoc.unesco.org/images/0023/002322/232207E.pdf</ext-link></comment>
			</element-citation>
			</ref>

		</ref-list>
		
					
		
	</back>
</article>
