<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD with OASIS Tables with MathML3 v1.1 20151215//EN" "JATS-journalpublishing-oasis-article1-mathml3.dtd">
<article article-type="research-article" dtd-version="1.1" xml:lang="es" xmlns:ali="http://www.niso.org/schemas/ali/1.0/" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
	<front>
		<journal-meta>
			<journal-id journal-id-type="publisher-id">ARBOR</journal-id>
			<journal-title-group>
				<journal-title>ARBOR Ciencia, Pensamiento y Cultura</journal-title>
				<abbrev-journal-title abbrev-type="publisher">Arbor</abbrev-journal-title>
			</journal-title-group>
			<issn publication-format="print">0210-1963</issn>
			<issn publication-format="electronic">1988-303X</issn>
			<issn-l>0210-1963</issn-l>
			<publisher>
				<publisher-name>Consejo Superior de Investigaciones Cient&#xed;ficas</publisher-name>
			</publisher>
		</journal-meta>
		<article-meta>
			<article-id pub-id-type="publisher-id">arbor.2021.802001</article-id>
			<article-id pub-id-type="doi">10.3989/arbor.2021.802001</article-id>
			<article-categories>
				<subj-group subj-group-type="heading">
					<subject>Art&#xed;culos</subject>
				</subj-group>
			</article-categories>
			<title-group>
				<article-title>Vivir con robots. Reflexiones &#xe9;ticas, jur&#xed;dicas, sociales y culturales</article-title>
				<trans-title-group xml:lang="en">
					<trans-title>Living with robots. Ethical, legal, social, and cultural reflections</trans-title>
				</trans-title-group>
			</title-group>
			<contrib-group>
				<contrib contrib-type="author" corresp="yes">
					<contrib-id contrib-id-type="orcid">https://orcid.org/0000-0001-9284-3643</contrib-id>
					<name>
						<surname>Toboso Mart&#xed;n</surname>
						<given-names>Mario</given-names>
					</name>
					<email xlink:href="mario.toboso@csic.es">mario.toboso@csic.es</email>
					<aff id="aff1"><institution>Consejo Superior de Investigaciones Cient&#xed;ficas</institution></aff>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">https://orcid.org/0000-0002-0482-2816</contrib-id>
					<name>
						<surname>Grau Ruiz</surname>
						<given-names>Mar&#xed;a Amparo</given-names>
					</name>
					<email xlink:href="grauruiz@ucm.es">grauruiz@ucm.es</email>
					<aff id="aff2"><institution>Universidad Complutense de Madrid</institution></aff>
				</contrib>
			</contrib-group>
			<pub-date pub-type="epub">
				<day>28</day>
				<month>12</month>
				<year>2021</year>
			</pub-date>
			<pub-date pub-type="collection">
				<month>12</month>
				<year>2021</year>
			</pub-date>
			<volume>197</volume>
			<issue>802</issue>
			<elocation-id>a623</elocation-id>
			<permissions>
				<copyright-statement>&#xa9; 2021 CSIC</copyright-statement>
				<copyright-year>2021</copyright-year>
				<license license-type="open-access" xlink:href="https://creativecommons.org/licenses/by/4.0/">
					<license-p>Este es un art&#xed;culo de acceso abierto distribuido bajo los t&#xe9;rminos de la licencia de uso y distribuci&#xf3;n Creative Commons Reconocimiento 4.0 Internacional (CC BY 4.0).</license-p>
				</license>
			</permissions>
			<self-uri xlink:href="http://arbor.revistas.csic.es/index.php/arbor/article/view/XXXX/XXXX"/>
			<funding-group id="fw-01">
				<award-group id="aw1">
					<award-id>H2020, 780073</award-id>
				</award-group>
				<award-group id="aw2">
					<award-id>H2020, 779982</award-id>
				</award-group>
				<award-group id="aw3">
					<funding-source>Ministerio de Ciencia, Innovaci&#xf3;n y Universidades</funding-source>
					<award-id>PID2019-105959RB-I00</award-id>
				</award-group>
				<funding-statement>Este trabajo se ha realizado en el marco de los siguientes proyectos de investigaci&#xf3;n: INBOTS (H2020, 780073), EXTEND (H2020, 779982) y AudIT-S (RETOS PID2019-105959RB-I00 Ministerio de Ciencia, Innovaci&#xf3;n y Universidades).</funding-statement>
			</funding-group>
			<counts>
				<fig-count count="0"/>
				<table-count count="0"/>
				<equation-count count="0"/>
				<ref-count count="19"/>
				<page-count count="9"/>
			</counts>
		</article-meta>
	</front>
	<body>
		<sec id="sec1">
			<title>Rob&#xf3;tica e inteligencia artificial: rob&#xf3;tica interactiva</title>
			<p>La rob&#xf3;tica estudia el dise&#xf1;o y la construcci&#xf3;n material de robots. Junto con las interfaces para la interacci&#xf3;n virtual entre humanos y m&#xe1;quinas, las redes neuronales o los sistemas multiagente constituyen en la actualidad tecnolog&#xed;as disruptivas que se desarrollan r&#xe1;pidamente, y cuyo potencial de transformaci&#xf3;n del ser humano, de la naturaleza y de la sociedad es enorme. La inteligencia artificial (IA) y la rob&#xf3;tica son tecnolog&#xed;as digitales que, como ha se&#xf1;alado <xref ref-type="bibr" rid="B13">Vincent M&#xfc;ller (2020)</xref>, en un futuro pr&#xf3;ximo tendr&#xe1;n un impacto significativo en el desarrollo de la humanidad. Traen a primer plano cuestiones importantes acerca de qu&#xe9; deber&#xed;amos hacer con estos sistemas, qu&#xe9; deber&#xed;an poder hacer, o no hacer, esos mismos sistemas, sobre los riesgos implicados en nuestra convivencia con ellos y sobre la manera de gestionarlos.</p>
			<p>Desde las primeras conceptualizaciones imaginarias, antes de que la tecnolog&#xed;a los hiciera materialmente posibles, los robots nos han preocupado, porque nunca hemos tenido claro si nos servir&#xed;an realmente de ayuda o supondr&#xed;an en alg&#xfa;n momento una amenaza. La posibilidad de crear vida e IA nos confronta con nosotros mismos. En la rob&#xf3;tica, la figura de Frankenstein sirve de arquetipo de la ciencia ficci&#xf3;n dist&#xf3;pica, en la que la vida artificial creada por el ser humano llega a convertirse en un peligro. Especialmente la ciencia ficci&#xf3;n de la primera mitad del siglo XX compart&#xed;a esta visi&#xf3;n dist&#xf3;pica, como en la pel&#xed;cula <italic>Metr&#xf3;polis</italic> de Fritz Lang o en la famosa obra de teatro <italic>R.U.R. Rossum&#x2019;s Universal Robots</italic> de Karel Capek, estrenada en 1920, en la que apareci&#xf3; por primera vez la palabra <italic>robot</italic> (<xref ref-type="bibr" rid="B11">INBOTS, 2019b: 35</xref>)<xref ref-type="fn" rid="fn1">
					<sup>1</sup>
				</xref>. Los robots nos colocan ante un espejo en el que mirarnos y constatar nuestras propias luces y sombras. Guardan una dial&#xe9;ctica prometeica y al mismo tiempo de caja de Pandora.</p>
			<p>Al igual que otras tecnolog&#xed;as, los robots est&#xe1;n culturalmente incardinados. En consecuencia, en la interacci&#xf3;n entre humanos y robots (<italic>Human-Robot Interaction</italic>, HRI), la aceptaci&#xf3;n social debe desempe&#xf1;ar un papel fundamental. La confianza social se convierte en un elemento clave. Las personas llegan a aceptar y a confiar en las nuevas tecnolog&#xed;as cuando, de una manera pragm&#xe1;tica, las eval&#xfa;an favorablemente al satisfacer una necesidad determinada o un conjunto de necesidades. Esta evaluaci&#xf3;n pr&#xe1;ctica depender&#xe1; de valores que pueden ser de naturaleza muy diversa: t&#xe9;cnicos, instrumentales, econ&#xf3;micos, culturales, sociales, &#xe9;ticos, o incluso religiosos; pero tambi&#xe9;n depender&#xe1; de las habilidades funcionales para su uso, de la educaci&#xf3;n o alfabetizaci&#xf3;n tecnol&#xf3;gica de las personas usuarias, de sus expectativas sobre la tecnolog&#xed;a en cuesti&#xf3;n y de las actitudes, favorables o desfavorables, hacia la misma (<xref ref-type="bibr" rid="B11">INBOTS, 2019b: 35, 38</xref>)</p>
			<p>El desarrollo de una rob&#xf3;tica inteligente no solo implica incorporar t&#xe9;cnicas de IA a los robots para que se relacionen de la manera &#xf3;ptima entre ellos y con los humanos. La inteligencia a la que debe apelarse en mayor medida en el proceso actualmente en curso, en el que estamos inmersos, es la inteligencia verdaderamente humana. La apuesta decidida por comprender las caracter&#xed;sticas y la magnitud de este proceso y poder hacer propuestas con sentido para resolver los problemas que pueda traer consigo requiere conocer y compartir experiencias para fomentar una apropiaci&#xf3;n social del conocimiento y de las pr&#xe1;cticas que puedan ser m&#xe1;s provechosas al respecto.</p>
			<p>Mientras que la IA puede consistir &#xfa;nicamente en software, los robots son m&#xe1;quinas f&#xed;sicas que se mueven, exploran e intervienen sobre el entorno mediante conjuntos de sensores y actuadores (<xref ref-type="bibr" rid="B13">M&#xfc;ller, 2020</xref>). Los robots interactivos son robots que interact&#xfa;an muy estrechamente con las personas. De manera m&#xe1;s precisa: son sistemas artificiales, dotados de un cuerpo f&#xed;sico y de elementos de IA, que se sit&#xfa;an y operan en entornos de actividades humanas, en condiciones de proximidad muy estrecha con las personas (<xref ref-type="bibr" rid="B11">INBOTS, 2019b: 8</xref>). Consideradas como un campo en pleno desarrollo cient&#xed;fico y tecnol&#xf3;gico, las investigaciones sobre la interacci&#xf3;n humano-robot prestan una atenci&#xf3;n notable a las cuestiones &#xe9;ticas, a los estudios de percepci&#xf3;n y aceptaci&#xf3;n, a las din&#xe1;micas de comunicaci&#xf3;n e interacci&#xf3;n funcional entre ambas partes y a los valores e intereses implicados en esta peculiar relaci&#xf3;n social entre humanos y robots, incluyendo los aspectos que tienen que ver con su trabajo colaborativo (<xref ref-type="bibr" rid="B2">Arnold y Scheutz, 2017</xref>; <xref ref-type="bibr" rid="B13">M&#xfc;ller, 2020</xref>)</p>
			<p>Los robots interactivos no son meros instrumentos. Constituyen mediaciones que surgen de un contexto sociocultural y sociotecnol&#xf3;gico determinado, que ofrecen nuevas posibilidades para el funcionamiento humano. En este sentido, puede decirse que, al igual que otras tecnolog&#xed;as, no solo transforman la materia, sino tambi&#xe9;n nuestros h&#xe1;bitos, costumbres y relaciones. Por ello, si se entiende la rob&#xf3;tica interactiva de una manera sist&#xe9;mica, ser&#xe1; dif&#xed;cil dudar de su capacidad transformadora sobre los sistemas, ya sean estos sociales o naturales (<xref ref-type="bibr" rid="B14">O&#x2019;Brolchain y Grau Ruiz, 2020</xref>). Esta capacidad genera conflictos de valores asociados al proceso de su desarrollo tecnol&#xf3;gico e implantaci&#xf3;n social. Cuando las innovaciones tecnol&#xf3;gicas inciden marcadamente en la sociedad, las controversias derivadas suelen plantearse en t&#xe9;rminos de la dicotom&#xed;a entre actitudes tecn&#xf3;filas y tecn&#xf3;fobas (<xref ref-type="bibr" rid="B10">INBOTS, 2019a: 118</xref>). En el caso particular de la rob&#xf3;tica interactiva, los contextos sociales en los que esta se aplique determinar&#xe1;n, delimitar&#xe1;n y har&#xe1;n m&#xe1;s complejo el alcance del conflicto axiol&#xf3;gico mencionado, creando, por ejemplo, controversias entre subsistemas de valores en &#xe1;mbitos de aplicaci&#xf3;n como el asistencial, el sanitario o el militar.</p>
			<p>Al igual que cualquier otro artefacto tecnol&#xf3;gico, los robots interactivos incorporan valores procedentes de los diferentes agentes y comunidades implicadas en su dise&#xf1;o, fabricaci&#xf3;n, comercializaci&#xf3;n, uso, etc. Cada comunidad particular puede tener su propio discurso acerca de los posibles beneficios o perjuicios de tales robots. La confrontaci&#xf3;n entre los diferentes discursos mediante debates p&#xfa;blicos abiertos deber&#xed;a constituirse en una condici&#xf3;n necesaria (<xref ref-type="bibr" rid="B17">UNESCO, 2017</xref>; <xref ref-type="bibr" rid="B6">European Group on Ethics, 2018</xref>) para que la introducci&#xf3;n de la rob&#xf3;tica interactiva en las sociedades llegue a favorecer realmente el bienestar y la justicia social (<xref ref-type="bibr" rid="B10">INBOTS, 2019a</xref>).</p>
		</sec>
		<sec id="sec2">
			<title>Desaf&#xed;os que plantea la implantaci&#xf3;n social de la rob&#xf3;tica interactiva</title>
			<p>Hoy en d&#xed;a, algunos sectores cr&#xed;ticos para el desarrollo econ&#xf3;mico cuentan con sistemas espec&#xed;ficos de gobernanza. Por ejemplo, en el sector bancario, tradicionalmente han supervisado el cumplimiento de normas especiales sobre contabilidad, seguridad y estabilidad econ&#xf3;mica los Bancos Nacionales o el Banco Central Europeo. Por otro lado, la situaci&#xf3;n de vulnerabilidad generalizada que puede ocasionar su quiebra a particulares y empresas hace que las entidades bancarias se sometan peri&#xf3;dicamente a pruebas de <italic>stress</italic>, simul&#xe1;ndose diferentes escenarios econ&#xf3;micos para conocer la situaci&#xf3;n hipot&#xe9;tica en la que se encontrar&#xed;an. La inyecci&#xf3;n de capital acaba siendo la herramienta empleada m&#xe1;s com&#xfa;nmente en la pr&#xe1;ctica para tratar de resolver males hasta cierto punto impensables <italic>a priori</italic> o inevitables. </p>
			<p>La previsible dependencia creciente de la rob&#xf3;tica para el ejercicio de actividades econ&#xf3;micas y para el desenvolvimiento normal de la vida de las personas en sociedades tecnol&#xf3;gicamente desarrolladas deber&#xed;a hacernos pensar si, en esa tesitura de posible vulnerabilidad, cabr&#xed;a arbitrar alg&#xfa;n sistema de gobernanza similar al bancario, reforz&#xe1;ndolo y haciendo acopio de caudales m&#xed;nimamente suficientes para el caso de eventuales desastres. En este orden de cosas, no son de extra&#xf1;ar algunas propuestas sobre el registro de robots, que llevar&#xed;a aparejado el pago de las respectivas p&#xf3;lizas de seguro y la creaci&#xf3;n de fondos para abordar posibles contingencias.</p>
			<p>De manera alternativa, se podr&#xed;a pensar en tomar como referencia otros sistemas vigentes en la Uni&#xf3;n Europea que, de hecho, ya influyen de manera m&#xe1;s o menos directa en campos afines. En concreto, interesar&#xed;a analizar los sistemas de gobernanza aplicables en el mundo de los datos, por estar muy estrechamente ligados al funcionamiento de los robots interactivos en los que opera la IA. As&#xed; mismo, por el impacto que la robotizaci&#xf3;n tiene en la competitividad, en tanto en cuanto el uso inadecuado de la financiaci&#xf3;n p&#xfa;blica puede alterar la competencia en los mercados, ser&#xed;a oportuno prestar atenci&#xf3;n a los sistemas de gobernanza en esta materia, por sus efectos en la desigualdad interpersonal e interterritorial.</p>
			<p>Lejos ya de ser los protagonistas abstractos de mitos o del folclore popular, de la literatura de ciencia ficci&#xf3;n o del cine, vemos, pues, c&#xf3;mo los robots se vienen adentrando en importantes &#xe1;mbitos pr&#xe1;cticos, y su repercusi&#xf3;n en campos de conocimiento como el derecho y la econom&#xed;a, la ciencia de datos, la sociolog&#xed;a o la filosof&#xed;a. La rob&#xf3;tica interactiva ofrece tambi&#xe9;n posibilidades prometedoras en &#xe1;mbitos como la educaci&#xf3;n, la medicina, los cuidados, la convivencia o la administraci&#xf3;n, pero surgen, igualmente, importantes interrogantes &#xe9;ticos, jur&#xed;dicos, pol&#xed;ticos, sociales, econ&#xf3;micos y culturales. Desde el punto de vista filos&#xf3;fico y jur&#xed;dico &#xbf;debemos concebir a los robots (incluidos los que se dotan de IA) como sujetos morales o agentes de pleno derecho? &#xbf;Es aceptable, sostenible, este enfoque? &#xbf;Existen aproximaciones alternativas? &#xbf;Qu&#xe9; consecuencias tendr&#xed;an estos planteamientos en cuestiones jur&#xed;dicas tan importantes como la atribuci&#xf3;n de responsabilidad? &#xbf;Cu&#xe1;les son las consecuencias del auge de la rob&#xf3;tica interactiva para el derecho laboral, para el futuro del trabajo, para los mecanismos de protecci&#xf3;n de la propiedad industrial e intelectual? &#xbf;Qu&#xe9; elementos del derecho fiscal y de la responsabilidad social de las empresas deber&#xed;an revisarse en este contexto? (<xref ref-type="bibr" rid="B10">INBOTS, 2019a</xref>).</p>
			<p>En todos estos casos, el peso espec&#xed;fico de cada factor depender&#xe1; de la voluntad humana, ya sea esta manifestada formalmente en el plano colectivo o a trav&#xe9;s del margen del libre albedr&#xed;o individual. En la actualidad, se hace patente, m&#xe1;s que nunca, la necesidad de detectar alternativas, de debatir las opiniones encontradas y de generar consensos para apostar por soluciones suficientemente equilibradas en un entorno globalizado. En consecuencia, una aproximaci&#xf3;n razonable y sensata a estos temas requerir&#xe1; de un di&#xe1;logo continuado de naturaleza interdisciplinar e intercultural. </p>
			<p>Si el motor de b&#xfa;squeda de Google, la publicidad segmentada de Facebook o el funcionamiento de asistentes virtuales como Alexa y Siri son posibles gracias a la potencia actual de los algoritmos de IA, presentes igualmente en los veh&#xed;culos autoconducidos, en la actividad policial predictiva o preventiva, y en las armas aut&#xf3;nomas que permiten ejecutar acciones letales sin la necesidad de la intervenci&#xf3;n humana, no se deben perder de vista las complejas implicaciones &#xe9;ticas inherentes a estas y otras aplicaciones (<xref ref-type="bibr" rid="B4">Coeckelbergh, 2020</xref>). Muchas de estas implicaciones se relacionan con la privacidad, con la responsabilidad y con la delegaci&#xf3;n o sustituci&#xf3;n en la toma de decisiones mediada por algoritmos, ligada a un cuestionable ideal de transparencia acompa&#xf1;ado de insalvables sesgos de todo tipo, asociados a la calidad de los datos. El avance, no solo de la IA sino tambi&#xe9;n de las tecnolog&#xed;as rob&#xf3;ticas arroja, pues, nuevas preocupaciones &#xe9;ticas acuciantes: si acaso fuese posible, &#xbf;deber&#xed;an programarse los robots para seguir c&#xf3;digos &#xe9;ticos?; si existiese la posibilidad de crear v&#xed;nculos emocionales con robots, &#xbf;cu&#xe1;les ser&#xed;an los riesgos implicados, y c&#xf3;mo gestionarlos?; &#xbf;podr&#xed;a la rob&#xf3;tica llegar a transformar, no solo la sociedad, sino tambi&#xe9;n el significado de la &#xe9;tica y el car&#xe1;cter de sus pr&#xe1;cticas? (<xref ref-type="bibr" rid="B12">Lin, Abney y Beckey, 2011</xref>). </p>
			<p>A medida que las tecnolog&#xed;as rob&#xf3;ticas se vuelven m&#xe1;s aut&#xf3;nomas, es necesario identificar los valores y principios &#xe9;ticos que deber&#xed;an regular su interacci&#xf3;n con las personas. Si toda tecnolog&#xed;a es el resultado de las decisiones de una pluralidad de agentes, que hacen que esta llegue a ser lo que finalmente es, y estas decisiones implican valores muy diversos, entre los cuales suelen prevalecer los valores t&#xe9;cnicos y econ&#xf3;micos, &#xbf;no deber&#xed;a ampliarse el marco de valores en tales decisiones para llegar a involucrar a la mayor representaci&#xf3;n posible de agentes sociales: usuarios, consumidores, comunicadores, pol&#xed;ticos, responsables de los productos tecnol&#xf3;gicos, grupos sociales afectados por ellos&#x2026;? (<xref ref-type="bibr" rid="B10">INBOTS, 2019a: 118</xref>).</p>
			<p>La presencia de la &#xe9;tica en este campo de investigaci&#xf3;n tecnol&#xf3;gica se da a trav&#xe9;s de dos v&#xed;as. Por un lado, la denominada &#xab;&#xe9;tica de los robots&#xbb;, que se refiere a los problemas &#xe9;ticos que el uso de los robots plantea para las personas y los entornos de actividades humanas. Por otro lado, las preguntas por el estatus &#xe9;tico de los robots y por la posibilidad de dotarles de cualidades morales remite a la denominada &#xab;&#xe9;tica de las m&#xe1;quinas&#xbb;. La &#xe9;tica de la IA y de la rob&#xf3;tica representan un &#xe1;mbito incipiente dentro del terreno de la &#xe9;tica aplicada, con un dinamismo apreciable que llega a ofrecer cuestiones muy relevantes pero, por el momento, deficitariamente planteadas, por carecer de marcos generales bien establecidos que permitan abordarlas de una manera integral (<xref ref-type="bibr" rid="B13">M&#xfc;ller, 2020</xref>)<xref ref-type="fn" rid="fn2">
					<sup>2</sup>
				</xref>.</p>
			<p>La mirada se pone a menudo en los sectores particulares en los que la confluencia de la rob&#xf3;tica y la IA puede tener previsiblemente un mayor impacto, como las manufacturas, la medicina, la agricultura, la log&#xed;stica y el transporte o el consumo (<xref ref-type="bibr" rid="B5">Comisi&#xf3;n Europea, 2014</xref>), confi&#xe1;ndose en los mecanismos de supervisi&#xf3;n preexistentes en cada uno de ellos. As&#xed; viene sucediendo hasta la fecha. Sin embargo, el intento de fijar la mirada, de manera introspectiva, en el propio sector de la rob&#xf3;tica inteligente, podr&#xed;a resultar enormemente &#xfa;til. Al menos en lo que a la relativa invisibilidad de su an&#xe1;lisis sectorial respecta, pues es f&#xe1;cil observar que habitualmente se ha pasado por alto.</p>
			<p>En este punto, parece obvio que los resultados e impactos (negativos y positivos) de los procesos de robotizaci&#xf3;n deban analizarse; pero, simult&#xe1;neamente, ello no exime de analizar tambi&#xe9;n los procesos en s&#xed; mismos. Por eso, m&#xe1;s all&#xe1; del ritmo de implantaci&#xf3;n de los robots y de su adecuado funcionamiento, en el fondo, debe preocuparnos no solo el hecho de que no da&#xf1;en a otros (como desde el derecho romano se postulaba <italic>(neminem laedere</italic> o <italic>alterum non laedere)</italic>, sino tambi&#xe9;n atender a que se aproveche la oportunidad de utilizarlos para el logro del bien com&#xfa;n, sin desperdiciar su potencial en este sentido.</p>
			<p>Uno de los principales retos en la investigaci&#xf3;n, el desarrollo e implantaci&#xf3;n social de nuevas tecnolog&#xed;as como la rob&#xf3;tica es la desconfianza e incluso el rechazo de la sociedad. El compromiso p&#xfa;blico es esencial para que la investigaci&#xf3;n alcance las mejores soluciones posibles en cuestiones &#xe9;ticas delicadas, y para garantizar la aceptaci&#xf3;n y la confianza del p&#xfa;blico en dicha investigaci&#xf3;n. El enfoque de <italic>Investigaci&#xf3;n e Innovaci&#xf3;n Responsables (Responsible Research and Innovation,</italic> RRI<italic>)</italic> tiene como objetivo hacer que la sociedad en su conjunto participe de la ciencia y la innovaci&#xf3;n desde sus fases iniciales, involucrando a todos los actores posibles, y alineando los procesos y los resultados de la investigaci&#xf3;n con los valores, necesidades y expectativas sociales. De acuerdo con la RRI, se deben utilizar metodolog&#xed;as inclusivas y participativas en todas las etapas de los procesos de investigaci&#xf3;n e innovaci&#xf3;n. Un elemento importante para avanzar en el camino hacia una rob&#xf3;tica realmente inclusiva ser&#xe1; identificar y analizar los mecanismos de evaluaci&#xf3;n que se dan a lo largo del proceso de innovaci&#xf3;n de la rob&#xf3;tica interactiva, que se orientan a favorecer la satisfacci&#xf3;n de valores sociales relevantes, como, en este caso, la inclusi&#xf3;n (<xref ref-type="bibr" rid="B10">INBOTS, 2019a</xref>).</p>
			<p>Desde una perspectiva interdisciplinar, caracter&#xed;stica de los estudios de Ciencia, Tecnolog&#xed;a y Sociedad (CTS), se han elaborado las siguientes conclusiones acerca de la hoja de ruta para la implantaci&#xf3;n social de la rob&#xf3;tica interactiva (<xref ref-type="bibr" rid="B11">INBOTS, 2019b: 8</xref>): 1) La aceptaci&#xf3;n de los robots interactivos no puede producirse de una manera aislada del contexto social. 2) El significado pr&#xe1;ctico y el valor de las tecnolog&#xed;as, como los robots interactivos, no son predecibles independientemente del contexto social en el que se pretenden implementar. 3) La aceptaci&#xf3;n potencial de los robots interactivos no se puede separar de desarrollos tecnol&#xf3;gicos anteriores, ya que no se trata de un desarrollo tecnol&#xf3;gico rupturista, sino evolutivo. Desde la perspectiva de las ciencias sociales, el desarrollo actual de los robots interactivos puede considerarse como la continuaci&#xf3;n de una automatizaci&#xf3;n en curso, que se remonta a varias d&#xe9;cadas atr&#xe1;s y en la que los ciudadanos han ido aprendiendo y aceptando gradualmente nuevas formas de comunicaci&#xf3;n e interacci&#xf3;n mediadas por diversas tecnolog&#xed;as.</p>
			<p>En este n&#xfa;mero monogr&#xe1;fico se tratan algunos de los retos principales que plantea este nuevo escenario tecnol&#xf3;gico. Entre otras cuestiones: c&#xf3;mo desarrollar unas tecnolog&#xed;as rob&#xf3;ticas inclusivas, sostenibles y socialmente responsables; qu&#xe9; consecuencias tendr&#xe1;n sobre el mercado laboral o la legislaci&#xf3;n; qu&#xe9; impacto tendr&#xe1;n el aprendizaje autom&#xe1;tico y el aprendizaje profundo en los procesos de toma de decisi&#xf3;n mediante algoritmos en &#xe1;mbitos tan importantes como el empleo, la medicina, la justicia o el acceso a derechos humanos fundamentales; qu&#xe9; papel jugar&#xe1;n los valores, las creencias, las emociones, el lenguaje y los sesgos cognitivos en esos procesos algor&#xed;tmicos de aprendizaje y decisi&#xf3;n; de qu&#xe9; manera estas tecnolog&#xed;as, cada vez menos emergentes y m&#xe1;s presentes, van a afectar, en definitiva, al funcionamiento de los sistemas sociales.</p>
		</sec>
		<sec id="sec3">
			<title>La gobernanza de la rob&#xf3;tica interactiva</title>
			<p>Ante esta situaci&#xf3;n de cambio tecnol&#xf3;gico, conviene plantearse qu&#xe9; esquemas de gobernanza son deseables y factibles para garantizar el bienestar de las personas. A la hora de proteger los derechos humanos, sociales y pol&#xed;ticos, es absolutamente necesario establecer sistemas de control, principalmente en la toma de decisiones o al desarrollar determinadas actividades en materia sensible. C&#xf3;mo arbitrar la gobernanza del modo m&#xe1;s eficaz es perfectamente discutible, pues puede fiarse al autocontrol, crearse un sistema novedoso o tratar de combinar otros ya existentes que puedan ser relevantes, teniendo alguna conexi&#xf3;n m&#xe1;s o menos directa. En cualquier caso, pensamos que queda fuera de toda duda que la supervisi&#xf3;n ha de ser, en &#xfa;ltima instancia, esencialmente humana. Conviene, sin embargo, afrontar una importante restricci&#xf3;n de partida: el sistema de gobernanza que se dise&#xf1;e ha de ser ciertamente eficaz y suficientemente garantista, pero no deber&#xed;a frenar las ventajas que la innovaci&#xf3;n en la rob&#xf3;tica pueda traer consigo.</p>
			<p>En un primer estadio, es l&#xf3;gico que el derecho sea fundamentalmente de corte reactivo con respecto a los posibles inconvenientes que se vayan descubriendo. As&#xed;, suele inicialmente atenderse a los intereses de las partes implicadas en algunos supuestos de hecho con normas sobre responsabilidad y seguros, e incluso sobre protecci&#xf3;n de datos ante posibles violaciones del ordenamiento jur&#xed;dico, ofreciendo niveles de protecci&#xf3;n variable en funci&#xf3;n de las circunstancias del caso concreto. Con frecuencia, la idea de remediar, o en su defecto paliar o compensar el da&#xf1;o, procurando los fondos necesarios es la principal soluci&#xf3;n en la que se inspira el legislador, anticipando para ello una estimaci&#xf3;n cuantitativa. La forma de reunir las cuant&#xed;as monetarias precisas variar&#xe1; seg&#xfa;n el riesgo y el impacto esperado.</p>
			<p>En un momento posterior, con un planteamiento m&#xe1;s maduro, quiz&#xe1;s cabr&#xed;a dar un paso m&#xe1;s y orientar el derecho de forma proactiva. Esto supondr&#xed;a articular medidas de fomento que incentivasen los comportamientos que la sociedad valore como &#xfa;tiles por reportar beneficios no solo de orden econ&#xf3;mico, sino tambi&#xe9;n medioambientales, de buena gobernanza y sociales. Hacia este punto, pensamos, deber&#xed;a avanzar cualquier regulaci&#xf3;n futura de la rob&#xf3;tica, enfilando hacia la direcci&#xf3;n trazada mediante la adopci&#xf3;n de las diferentes medidas normativas y, en su caso, el margen dejado a la autorregulaci&#xf3;n. La posibilidad de adaptaci&#xf3;n continua habr&#xed;a de incorporarse al sistema de gobernanza para corregir, en su caso, el rumbo eficazmente. Una buena regulaci&#xf3;n redundar&#xe1; en una mayor seguridad jur&#xed;dica y, por ende, en una mayor aceptaci&#xf3;n social de la rob&#xf3;tica.</p>
			<p>Para dise&#xf1;ar un sistema de gobernanza puede contarse, de entrada, con instituciones privadas o p&#xfa;blicas (o de ambos tipos), con esquemas centralizados o descentralizados, teniendo en cuenta el n&#xfa;mero de niveles a la hora de valorar los costes (econ&#xf3;micos, de tiempo, de complejidad en las operaciones) y las ventajas que supongan. Ser&#xed;a conveniente optimizar la creaci&#xf3;n de instituciones, limit&#xe1;ndolas a las estrictamente necesarias seg&#xfa;n sus objetivos y el oportuno reparto competencial (conforme al territorio o la materia, evitando solapamientos que puedan dar lugar a conflictos). Deber&#xed;an aprovecharse, adem&#xe1;s, las sinergias que puedan surgir al considerar enfoques cooperativos con otros organismos. La ambici&#xf3;n del sistema de gobernanza habr&#xed;a de ser alcanzar al mayor n&#xfa;mero posible de pa&#xed;ses y empresas, sin perder efectividad. Igualmente importa se&#xf1;alar las tareas que se asignan al organismo en cuesti&#xf3;n en el marco de gobernanza (por ejemplo, relativas a la fiscalizaci&#xf3;n, decisi&#xf3;n o ejecuci&#xf3;n).</p>
			<p>Entre las normas europeas que ya han establecido algunos sistemas de gobernanza de posible inter&#xe9;s para el sector de la rob&#xf3;tica (la inteligencia artificial y los datos masivos) figuran las siguientes:</p>
			<list list-type="bullet">
				<list-item>
					<p>Reglamento (CE) No. 1060/2009 del Parlamento europeo y del Consejo de 16 de septiembre de 2009 sobre las agencias de calificaci&#xf3;n crediticia.</p>
				</list-item>
				<list-item>
					<p>Reglamento (UE) No. 1095/2010 del Parlamento europeo y del Consejo de 24 de noviembre de 2010 por el que se crea una Autoridad Europea de Supervisi&#xf3;n (Autoridad Europea de Valores y Mercados), se modifica la Decisi&#xf3;n 716/2009/CE y se deroga la Decisi&#xf3;n 2009/77/CE de la Comisi&#xf3;n. </p>
				</list-item>
				<list-item>
					<p>Reglamento (UE) 2016/679 del Parlamento europeo y del Consejo de 27 de abril de 2016 relativo a la protecci&#xf3;n de las personas f&#xed;sicas en lo que respecta al tratamiento de datos personales y a la libre circulaci&#xf3;n de estos datos y por el que se deroga la Directiva 95/46/CE.</p>
				</list-item>
				<list-item>
					<p>Reglamento (UE) 2017/2394 del Parlamento europeo y del Consejo de 12 de diciembre de 2017 sobre la cooperaci&#xf3;n entre las autoridades nacionales responsables de la aplicaci&#xf3;n de la legislaci&#xf3;n en materia de protecci&#xf3;n de los consumidores y por el que se deroga el Reglamento (CE) No. 2006/2004.</p>
				</list-item>
			</list>
			<p>A la vista de su contenido, dependiendo del grado de compromiso de los Estados miembros, bien podr&#xed;a establecerse una agencia europea, o bien contar con una red de autoridades estatales coordinada por la Uni&#xf3;n Europea. En el primer caso, la adopci&#xf3;n de decisiones podr&#xed;a hacerse recaer en un Comit&#xe9; de Responsables Europeos, del que formar&#xed;an parte las autoridades nacionales (con derecho a voto) junto con un representante de la Comisi&#xf3;n Europea (sin derecho a voto). Deber&#xed;a tambi&#xe9;n aclararse qu&#xe9; decisiones requerir&#xed;an ser aprobadas por mayor&#xed;a simple o cualificada. En el segundo caso, podr&#xed;a establecerse una red de cooperaci&#xf3;n entre autoridades nacionales coordinadas a nivel europeo, que podr&#xed;a apoyarse en la investigaci&#xf3;n y ejecuci&#xf3;n en las estructuras nacionales ya disponibles. La Comisi&#xf3;n Europea pondr&#xed;a en conocimiento de la red los casos en los que estimase pertinente su actuaci&#xf3;n. Para la fijaci&#xf3;n de la autoridad competente podr&#xed;a tenerse en cuenta la sede principal de la empresa afectada (con el riesgo de que se frecuentaran los lugares con est&#xe1;ndares m&#xe1;s bajos) o permitir que las autoridades implicadas eligieran la nacional mejor posicionada para coordinar el caso, preparar un borrador de decisi&#xf3;n y discutirlo con las restantes en la b&#xfa;squeda de consenso, previendo mecanismos de desbloqueo en su caso por un comit&#xe9; europeo. Deber&#xed;a, especificarse el alcance territorial de los efectos de la decisi&#xf3;n adoptada</p>
			<p>Otros modelos de gobernanza h&#xed;bridos pueden idearse como fruto de combinaciones en el reparto de tareas entre las autoridades europeas y nacionales. Deber&#xed;an sopesarse, en cualquier caso, los cambios organizativos que comporte el sistema a aplicar, evitando duplicar estructuras en cada Estado y que se incurra en costes innecesarios en momentos de recuperaci&#xf3;n econ&#xf3;mica tras la crisis provocada por la pandemia COVID-19. La gobernanza ha de responder al criterio de centralizaci&#xf3;n econ&#xf3;micamente eficiente sin menoscabar la descentralizaci&#xf3;n jur&#xed;dica necesaria, de acuerdo con el principio de subsidiariedad que ha de guiar el grado de la intervenci&#xf3;n de las instituciones europeas<xref ref-type="fn" rid="fn3">
					<sup>3</sup>
				</xref>. Es pues el momento oportuno para reflexionar sobre la Resoluci&#xf3;n del Parlamento Europeo de 20 de octubre de 2020<xref ref-type="fn" rid="fn4">
					<sup>4</sup>
				</xref> que contiene propuestas en torno a las autoridades supervisoras del cumplimiento de principios &#xe9;ticos y obligaciones jur&#xed;dicas. La Comisi&#xf3;n Europea la ha considerado en la formulaci&#xf3;n de su Propuesta de Reglamento del Parlamento Europeo y del Consejo por el que se establecen normas armonizadas en materia de inteligencia artificial (Ley de inteligencia artificial) y se modifican determinados actos legislativos de la Uni&#xf3;n<xref ref-type="fn" rid="fn5">
					<sup>5</sup>
				</xref>, que ya ha sido transmitida al Consejo de la Uni&#xf3;n Europea<xref ref-type="fn" rid="fn6">
					<sup>6</sup>
				</xref>. </p>
			<p>Con independencia de la forma particular en la que se esboce el sistema de gobernanza, conviene resaltar que cuando cualquier debate se centra excesivamente en la autonom&#xed;a del robot, en cierto sentido, se desenfoca. Lo esencial es la autonom&#xed;a humana a la que este tipo de herramienta t&#xe9;cnica debe servir. Finalmente, su impacto habr&#xe1; de juzgarse no solo desde una perspectiva meramente individualista, sino siendo tambi&#xe9;n considerada desde la preocupaci&#xf3;n de la sociedad en su conjunto. </p>
		</sec>
		<sec id="sec4">
			<title>Contribuciones a este monogr&#xe1;fico</title>
			<p>En la contribuci&#xf3;n que abre este monogr&#xe1;fico, Daniel L&#xf3;pez Castro ilustra la presencia creciente de la rob&#xf3;tica en nuestras vidas como resultado de una transici&#xf3;n, en curso, desde la rob&#xf3;tica industrial, operante en entornos cerrados y predecibles, hacia la rob&#xf3;tica interactiva que opera en entornos abiertos y complejos, en los que el ser humano pasa a estar presente. Esta transici&#xf3;n, de lo industrial a lo personal, pero tambi&#xe9;n a lo social, ampl&#xed;a el alcance de la investigaci&#xf3;n tradicional a m&#xfa;ltiples disciplinas y trae consigo nuevos desaf&#xed;os, tanto &#xe9;ticos como tecnocient&#xed;ficos. En el art&#xed;culo lleva a cabo una cartograf&#xed;a de los mismos, a partir de tres dimensiones pr&#xe1;cticas atribuidas normalmente a los robots, igual que a las personas: sentir, pensar y actuar. Sobre la base narrativa de un conjunto amplio de entrevistas a personas expertas en diversos campos y aplicaciones de la rob&#xf3;tica y la IA, muestra las posibilidades, las implicaciones y las limitaciones de tal atribuci&#xf3;n.</p>
			<p>El art&#xed;culo de Christi Amesti Mendiz&#xe1;bal y Natalia Zardoya Jim&#xe9;nez atiende a los retos jur&#xed;dicos y &#xe9;ticos que plantea la rob&#xf3;tica interactiva y la introducci&#xf3;n de robots inteligentes en entornos sociales. Los retos principales giran en torno a la posibilidad de que tales robots se consideren como m&#xe1;quinas capaces de aprender y de tomar decisiones con cierto grado de autonom&#xed;a, e interferir con la independencia y libertad humanas, que deber&#xed;an trazarse como l&#xed;neas fundamentales en el dise&#xf1;o de la actuaci&#xf3;n de los robots inteligentes. Se plantea adem&#xe1;s el dilema sobre la manera de configurar un sistema de supervisi&#xf3;n por parte de las personas, que sea lo suficientemente garantista y que, al mismo tiempo, respete y fomente el potencial de innovaci&#xf3;n propio de estas tecnolog&#xed;as, mediante iniciativas orientadas hacia una regulaci&#xf3;n m&#xe1;s proactiva que reactiva de los robots y de la IA en la sociedad.</p>
			<p>El art&#xed;culo de Mar&#xed;a Yolanda S&#xe1;nchez-Ur&#xe1;n Aza&#xf1;a se sit&#xfa;a en el terreno de conflicto entre la robotizaci&#xf3;n y el empleo. Considerado el trabajo como un factor principal de inclusi&#xf3;n social, que conlleva promover la garant&#xed;a de los derechos de los trabajadores, junto a la libertad de empresa (incluyendo la libertad de innovaci&#xf3;n en aras de la mayor productividad), se presenta como objetivo la integraci&#xf3;n real y efectiva de todos los ciudadanos. Si el aumento de la robotizaci&#xf3;n genera una mayor riqueza en los pa&#xed;ses, esta podr&#xed;a ser utilizada por los gobiernos para reducir la desigualdad a trav&#xe9;s de pol&#xed;ticas redistributivas, mejorando la situaci&#xf3;n de los ciudadanos. Urge, pues, prestar m&#xe1;s atenci&#xf3;n a la empleabilidad de las personas que a los puestos de trabajo en s&#xed;, tratando de superar el efecto de sustituci&#xf3;n de humanos por robots y apoyar el uso de los robots colaborativos en el lugar del trabajo.</p>
			<p>En el siguiente art&#xed;culo, Pablo Jim&#xe9;nez Schlegl ofrece primero una panor&#xe1;mica general de los paradigmas de aprendizaje de sistemas artificiales: m&#xe9;todos supervisados y no supervisados, describiendo los tipos de fuentes de datos actualmente disponibles para la comunidad rob&#xf3;tica. En este sentido, atiende a continuaci&#xf3;n al sesgo observable en los conjuntos de datos de im&#xe1;genes, originado por la anotaci&#xf3;n humana de las mismas que, utilizada en el entrenamiento de clasificadores, puede llegar a transmitir los prejuicios de los anotadores, especialmente en la categorizaci&#xf3;n de personas. Si esta cuesti&#xf3;n de los sesgos presentes en los entornos humanos no se aborda adecuadamente, el aprendizaje autom&#xe1;tico aplicado a la rob&#xf3;tica puede provocar comportamientos totalmente inadecuados de los robots.</p>
			<p>Por su parte, en su contribuci&#xf3;n Ricardo Morte Ferrer, en contra de la consideraci&#xf3;n generalizada, mantiene que tanto el derecho como las normas, de diferente tipo, pueden y deben ser aplicables a las nuevas tecnolog&#xed;as (computaci&#xf3;n en la nube, <italic>big data</italic>, Internet de las cosas, robots, IA). Centr&#xe1;ndose en la IA, plantea criterios para que esta se desarrolle y aplique de forma adecuada a los derechos fundamentales en general y a la privacidad en particular. Recurriendo a los objetivos de protecci&#xf3;n (disponibilidad, confidencialidad, integridad, transparencia, no encadenabilidad y capacidad de intervenir) y a los principios de la ciber&#xe9;tica, incluyendo una referencia especial a la sostenibilidad y la resiliencia de este tipo de sistemas, profundiza en ideas como la posibilidad y necesidad de controlar los sistemas de IA (hasta el punto de poder detenerlos) y de auditarlos.</p>
			<p>El monogr&#xe1;fico se cierra con una contribuci&#xf3;n que aborda la tem&#xe1;tica de los Objetivos de Desarrollo Sostenible (ODS) en relaci&#xf3;n con la implantaci&#xf3;n social de la rob&#xf3;tica. An&#xed;bal Monasterio Astobiza ofrece en su art&#xed;culo numerosos casos de aplicaci&#xf3;n de la rob&#xf3;tica y la IA encaminados al cumplimiento de los ODS. Frente a una narrativa dist&#xf3;pica frecuente en torno a la IA, cuyo avance y desarrollo se presentan habitualmente en medios de comunicaci&#xf3;n y en la cultura popular en t&#xe9;rminos de amenazas y riesgos (desempleo tecnol&#xf3;gico, sistemas de armas aut&#xf3;nomas letales, robots asesinos, etc&#xe9;tera), se valora de manera cr&#xed;tica y constructiva, en esta contribuci&#xf3;n, el papel de la IA en el logro del bien com&#xfa;n (AI4SG), su aplicaci&#xf3;n para la mejora del bienestar de las personas y para el desarrollo hacia sociedades m&#xe1;s pr&#xf3;speras.</p>
			<p>En definitiva, cabe concluir que este asunto transdisciplinar es cabal abordarlo con una mirada abierta, capaz de interconectar prudentemente el conocimiento, para ayudar a comprender el mundo presente y pensar en la trascendencia futura de las decisiones que se adopten en materia tan sensible. </p>
		</sec>
	</body>
	<back>
		<ack>
			<title>Agradecimientos</title>
			<p>Este trabajo se ha realizado en el marco de los siguientes proyectos de investigaci&#xf3;n: INBOTS (H2020, 780073), EXTEND (H2020, 779982) y AudIT-S (RETOS PID2019-105959RB-I00 Ministerio de Ciencia, Innovaci&#xf3;n y Universidades).</p>
		</ack>
		<fn-group>
			<title>Notas</title>
			<fn fn-type="other" id="fn1">
				<label>
					<sup>1</sup>
				</label>
				<p>INBOTS es el acr&#xf3;nico del proyecto europeo de investigaci&#xf3;n Inclusive Robotics for a Better Society (CSA H2020, 780073). El objetivo general de este proyecto es crear un espacio de investigaci&#xf3;n que re&#xfa;na a expertos para debatir y establecer un paradigma de investigaci&#xf3;n e innovaci&#xf3;n responsable para la rob&#xf3;tica interactiva, que potencie el liderazgo de la Uni&#xf3;n Europea en este campo. Para ello, el proyecto coordina y apoya las acciones dirigidas a tender puentes entre los siguientes cuatro &#xe1;mbitos de expertise, que abarcan a todas las partes interesadas en la rob&#xf3;tica interactiva: el &#xe1;mbito t&#xe9;cnico, el empresarial, el &#xe1;mbito &#xe9;tico, jur&#xed;dico y socioecon&#xf3;mico, y el &#xe1;mbito de los usuarios finales, de los responsables pol&#xed;ticos y del p&#xfa;blico en general. El proyecto se ha llevado a cabo por un consorcio de veinticinco entidades participantes, de doce pa&#xed;ses europeos. Algunas de las contribuciones incluidas en este monogr&#xe1;fico son el resultado de la participaci&#xf3;n de sus autoras y autores en este proyecto.</p>
			</fn>
			<fn fn-type="other" id="fn2">
				<label>
					<sup>2</sup>
				</label>
				<p>M&#xfc;ller se&#xf1;ala, sin embargo, excepciones, como la labor del European Group on Ethics in Science and New Technologies (2018), algunas investigaciones destacadas acerca del impacto social de estas tecnolog&#xed;as (<xref ref-type="bibr" rid="B7">Floridi et al., 2018</xref>; <xref ref-type="bibr" rid="B15">Taddeo y Floridi 2018</xref>; <xref ref-type="bibr" rid="B16">Taylor et al., 2018</xref>; <xref ref-type="bibr" rid="B18">Walsh, 2018</xref>; <xref ref-type="bibr" rid="B3">Bryson, 2019</xref>; <xref ref-type="bibr" rid="B8">Gibert, 2019</xref>; <xref ref-type="bibr" rid="B19">Whittlestone et al., 2019</xref>), y el trabajo experto llevado a cabo en espacios en los que se generan, finalmente, recomendaciones pol&#xed;ticas, como el High-Level Expert Group on Artificial Intelligence, dependiente de la Comisi&#xf3;n Europea (<xref ref-type="bibr" rid="B1">AI HLEG, 2019</xref>) o el Institute of Electrical and Electronics Engineers (<xref ref-type="bibr" rid="B9">IEEE, 2019</xref>).</p>
			</fn>
			<fn fn-type="other" id="fn3">
				<label>
					<sup>3</sup>
				</label>
				<p>Para financiar debidamente el funcionamiento del sistema de gobernanza, deber&#xed;a subrayarse la posibilidad de exigir las correspondientes tasas de registro o de supervisi&#xf3;n, o ambas. Estas deben ser proporcionales al coste en que haya incurrido la autoridad competente.</p>
			</fn>
			<fn fn-type="other" id="fn4">
				<label>
					<sup>4</sup>
				</label>
				<p>Con recomendaciones destinadas a la Comisi&#xf3;n sobre un marco de los aspectos &#xe9;ticos de la inteligencia artificial, la rob&#xf3;tica y las tecnolog&#xed;as conexas (2020/2012(INL)). Disponible en: <ext-link ext-link-type="uri" xlink:href="https://www.europarl.europa.eu/doceo/document/TA-9-2020-0275">https://www.europarl.europa.eu/doceo/document/TA-9-2020-0275_ES.html</ext-link> [Fecha de consulta 23 de noviembre de 2021 ].</p>
			</fn>
			<fn fn-type="other" id="fn5">
				<label>
					<sup>5</sup>
				</label>
				<p>Direcci&#xf3;n General de Redes de Comunicaci&#xf3;n, Contenido y Tecnolog&#xed;as, COM/2021/206 final, Bruselas, 21 de abril de 2021. Disponible en el siguiente enlace: <ext-link ext-link-type="uri" xlink:href="https://eur-lex.europa.eu/legal-content/ES/TXT/HTML/?uri=CELEX:52021PC0206">https://eur-lex.europa.eu/legal-content/ES/TXT/HTML/?uri=CELEX:52021PC0206</ext-link> [&#xfa;ltima consulta 23 de noviembre de 2021 ].</p>
			</fn>
			<fn fn-type="other" id="fn6">
				<label>
					<sup>6</sup>
				</label>
				<p>Expediente interinstitucional: 2021/0106 (COD). Documento ST 8115/21 INIT de env&#xed;o por la Secretaria General de la Comisi&#xf3;n de la COM/2021/206 final a las Delegaciones, Bruselas, 23 de abril de 2021. </p>
				<p>Disponible en el siguiente enlace: <ext-link ext-link-type="uri" xlink:href="https://data.consilium.europa.eu/doc/document/ST-8115-2021-INIT/ES/pdf">https://data.consilium.europa.eu/doc/document/ST-8115-2021-INIT/ES/pdf</ext-link> [&#xfa;ltima consulta 23 de noviembre de 2021 ]. Sigue abierto el procedimiento legislativo ordinario en curso 2021/0106(COD), esperando ahora que se pronuncien algunos Comit&#xe9;s del Parlamento Europeo. </p>
			</fn>
		</fn-group>
		<ref-list>
			<title>Referencias</title>
			<ref id="B1">
				<mixed-citation publication-type="webpage">
					<person-group person-group-type="author">
						<collab>AI HLEG</collab>
					</person-group>
					<year>2019</year>
					<article-title>High-Level Expert Group on Artificial Intelligence: Ethics Guidelines for Trustworthy AI</article-title>
					<source>European Commission</source>
					<ext-link ext-link-type="uri" xlink:href="https://ec.europa.eu/digital-single-market/en/news/ethics-guidelines-trustworthy-ai">https://ec.europa.eu/digital-single-market/en/news/ethics-guidelines-trustworthy-ai</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B2">
				<mixed-citation publication-type="confproc">
					<person-group person-group-type="author">
						<string-name>
							<surname>Arnold</surname>
							<given-names>Thomas</given-names>
						</string-name>
						<string-name>
							<surname>Scheutz</surname>
							<given-names>Matthias</given-names>
						</string-name>
					</person-group>
					<year>2017</year>
					<source>Beyond Moral Dilemmas: Exploring the Ethical Landscape in HRI</source>
					<conf-name>Proceedings of the 2017 ACM/IEEE International Conference on Human-Robot Interaction</conf-name>
					<conf-loc>Vienna</conf-loc>
					<conf-sponsor>ACM Press</conf-sponsor>
					<fpage>445</fpage>
					<lpage>452</lpage>
					<ext-link ext-link-type="uri" xlink:href="https://hrilab.tufts.edu/publications/landscape.pdf">https://hrilab.tufts.edu/publications/landscape.pdf</ext-link>
					<pub-id pub-id-type="doi">10.1145/2909824.3020255</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B3">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Bryson</surname>
							<given-names>Joanna J.</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<article-title>The Past Decade and Future of AI&#x2019;s Impact on Society</article-title>
					<source>Towards a New Enlightenment: A Transcendent Decade</source>
					<publisher-loc>Madrid</publisher-loc>
					<publisher-loc>Turner</publisher-loc>
					<publisher-name>BBVA</publisher-name>
					<ext-link ext-link-type="uri" xlink:href="https://www.bbvaopenmind.com/en/articles/the-past-decade-and-future-of-ais-impact-on-society">https://www.bbvaopenmind.com/en/articles/the-past-decade-and-future-of-ais-impact-on-society</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B4">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Coeckelbergh</surname>
							<given-names>Mark</given-names>
						</string-name>
					</person-group>
					<year>2020</year>
					<source>AI Ethics</source>
					<publisher-loc>Cambridge MA</publisher-loc>
					<publisher-name>The MIT Press</publisher-name>
					<pub-id pub-id-type="doi">10.7551/mitpress/12549.001.0001</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B5">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<collab>Comisi&#xf3;n Europea</collab>
					</person-group>
					<year>2014</year>
					<source>Strategic Research Agenda for Robotics in Europe 2014-2020</source>
					<publisher-name>euRobotics</publisher-name>
					<ext-link ext-link-type="uri" xlink:href="https://www.eu-robotics.net/sparc/upload/topic_groups/SRA2020_SPARC.pdf">https://www.eu-robotics.net/sparc/upload/topic_groups/SRA2020_SPARC.pdf</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B6">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<collab>European Group on Ethics in Science and New Technologies</collab>
					</person-group>
					<year>2018</year>
					<source>Statement on Artificial Intelligence, Robotics and &#x2018;Autonomous&#x2019; Systems</source>
					<publisher-loc>Luxembourg</publisher-loc>
					<publisher-name>Publications Office of the European Union</publisher-name>
					<ext-link ext-link-type="uri" xlink:href="https://ec.europa.eu/research/ege/pdf/ege_ai_statement_2018.pdf">https://ec.europa.eu/research/ege/pdf/ege_ai_statement_2018.pdf</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B7">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Floridi</surname>
							<given-names>Luciano</given-names>
						</string-name>
						<string-name>
							<surname>Cowls</surname>
							<given-names>Josh</given-names>
						</string-name>
						<string-name>
							<surname>Beltrametti</surname>
							<given-names>Monica</given-names>
						</string-name>
						<string-name>
							<surname>Chatila</surname>
							<given-names>Raja</given-names>
						</string-name>
						<string-name>
							<surname>Chazerand</surname>
							<given-names>Patrice</given-names>
						</string-name>
						<string-name>
							<surname>Dignum</surname>
							<given-names>Virginia</given-names>
						</string-name>
						<string-name>
							<surname>Luetge</surname>
							<given-names>Christoph</given-names>
						</string-name>
						<string-name>
							<surname>Madelin</surname>
							<given-names>Robert</given-names>
						</string-name>
						<string-name>
							<surname>Pagallo</surname>
							<given-names>Ugo</given-names>
						</string-name>
						<string-name>
							<surname>Rossi</surname>
							<given-names>Francesca</given-names>
						</string-name>
						<string-name>
							<surname>Schafer</surname>
							<given-names>Bukhard</given-names>
						</string-name>
						<string-name>
							<surname>Valcke</surname>
							<given-names>Peggy</given-names>
						</string-name>
						<string-name>
							<surname>Vayena</surname>
							<given-names>Effy</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<article-title>AI4People-An Ethical Framework for a Good AI Society: Opportunities, Risks, Principles, and Recommendations</article-title>
					<source>Minds and Machines</source>
					<volume>28</volume>
					<issue>4</issue>
					<fpage>689</fpage>
					<lpage>707</lpage>
					<ext-link ext-link-type="uri" xlink:href="https://link.springer.com/content/pdf/10.1007/s11023-018-9482-5.pdf">https://link.springer.com/content/pdf/10.1007/s11023-018-9482-5.pdf</ext-link>
					<pub-id pub-id-type="doi">10.1007/s11023-018-9482-5</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B8">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Gibert</surname>
							<given-names>Martin</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<chapter-title>&#xc9;thique Artificielle (Version Grand Public)</chapter-title>
					<person-group person-group-type="editor">
						<string-name>
							<surname>Kristanek</surname>
							<given-names>Maxime</given-names>
						</string-name>
					</person-group>
					<source>L&#x2019;Encyclop&#xe9;die Philosophique</source>
					<ext-link ext-link-type="uri" xlink:href="https://encyclo-philo.fr/item/199">https://encyclo-philo.fr/item/199</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B9">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<collab>IEEE</collab>
					</person-group>
					<year>2019</year>
					<source>Ethically Aligned Design: A Vision for Prioritizing Human Well-Being with Autonomous and Intelligent Systems</source>
					<ext-link ext-link-type="uri" xlink:href="https://standards.ieee.org/content/dam/ieee-standards/standards/web/documents/other/ead1e.pdf">https://standards.ieee.org/content/dam/ieee-standards/standards/web/documents/other/ead1e.pdf</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B10">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<collab>INBOTS</collab>
					</person-group>
					<year>2019a</year>
					<source>INBOTS White Paper on Interactive Robotics Legal, Ethics and Socieconomics Aspects</source>
					<comment>Deliverable 2.1</comment>
					<ext-link ext-link-type="uri" xlink:href="http://inbots.eu/wp-content/uploads/2019/07/Attachment_0-1.pdf">http://inbots.eu/wp-content/uploads/2019/07/Attachment_0-1.pdf</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B11">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<collab>INBOTS</collab>
					</person-group>
					<year>2019b</year>
					<source>INBOTS White Paper on Interactive Robotics Strategies to Increase Public Awareness and Acceptance</source>
					<comment>Deliverable 6.1</comment>
					<ext-link ext-link-type="uri" xlink:href="http://inbots.eu/wp-content/uploads/2019/07/Attachment_0-5.pdf">http://inbots.eu/wp-content/uploads/2019/07/Attachment_0-5.pdf</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B12">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Lin</surname>
							<given-names>Patrick</given-names>
						</string-name>
						<string-name>
							<surname>Abney</surname>
							<given-names>Keith</given-names>
						</string-name>
						<string-name>
							<surname>Beckey</surname>
							<given-names>George A.</given-names>
						</string-name>
					</person-group>
					<year>2011</year>
					<source>Robot Ethics: The Ethical and Social Implications of Robotics</source>
					<publisher-loc>Cambridge MA</publisher-loc>
					<publisher-name>The MIT Press</publisher-name>
				</mixed-citation>
			</ref>
			<ref id="B13">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>M&#xfc;ller</surname>
							<given-names>Vincent</given-names>
						</string-name>
					</person-group>
					<year>2020</year>
					<chapter-title>Ethics of Artificial Intelligence and Robotics</chapter-title>
					<source>Standford Encyclopedia of Philosophy</source>
					<ext-link ext-link-type="uri" xlink:href="https://plato.stanford.edu/entries/ethics-ai">https://plato.stanford.edu/entries/ethics-ai</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B14">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>O&#x2019;Brolchain</surname>
							<given-names>Fiachra</given-names>
						</string-name>
						<string-name>
							<surname>Grau Ruiz</surname>
							<given-names>M. Amparo</given-names>
						</string-name>
					</person-group>
					<year>2020</year>
					<chapter-title>Environmental Impact of Robotics: Ethical Concerns and Legal Alternatives</chapter-title>
					<person-group person-group-type="editor">
						<string-name>
							<surname>Leal</surname>
							<given-names>Walter</given-names>
							<suffix>Filho</suffix>
						</string-name>
						<string-name>
							<surname>Marisa Azul</surname>
							<given-names>Anabel</given-names>
						</string-name>
						<string-name>
							<surname>Brandli</surname>
							<given-names>Luciana</given-names>
						</string-name>
						<string-name>
							<surname>Lange Salvia</surname>
							<given-names>Amanda</given-names>
						</string-name>
						<string-name>
							<surname>Wall</surname>
							<given-names>Toni</given-names>
						</string-name>
					</person-group>
					<source>Industry, Innovation and Infrastructure</source>
					<comment>Encyclopedia of the UN Sustainable Development Goals</comment>
					<publisher-name>Springer</publisher-name>
					<pub-id pub-id-type="doi">10.1007/978-3-319-71059-4_147-1</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B15">
				<mixed-citation publication-type="journal">
					<person-group person-group-type="author">
						<string-name>
							<surname>Taddeo</surname>
							<given-names>Mariarosaria</given-names>
						</string-name>
						<string-name>
							<surname>Floridi</surname>
							<given-names>Luciano</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<article-title>How AI Can Be a Force for Good</article-title>
					<source>Science</source>
					<volume>361</volume>
					<issue>6404</issue>
					<fpage>751</fpage>
					<lpage>752</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://science.sciencemag.org/content/sci/361/6404/751.full.pdf">http://science.sciencemag.org/content/sci/361/6404/751.full.pdf</ext-link>
					<pub-id pub-id-type="doi">10.1126/science.aat5991</pub-id>
				</mixed-citation>
			</ref>
			<ref id="B16">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<string-name>
							<surname>Taylor</surname>
							<given-names>Steve</given-names>
						</string-name>
						<string-name>
							<surname>Pickering</surname>
							<given-names>Brian</given-names>
						</string-name>
						<string-name>
							<surname>Boniface</surname>
							<given-names>Michael</given-names>
						</string-name>
						<string-name>
							<surname>Anderson</surname>
							<given-names>Michael</given-names>
						</string-name>
						<string-name>
							<surname>Danks</surname>
							<given-names>David</given-names>
						</string-name>
						<string-name>
							<surname>Folstad</surname>
							<given-names>Asbjorn</given-names>
						</string-name>
						<string-name>
							<surname>Leese</surname>
							<given-names>Matthias</given-names>
						</string-name>
						<string-name>
							<surname>M&#xfc;ller</surname>
							<given-names>Vincent C.</given-names>
						</string-name>
						<string-name>
							<surname>Sorell</surname>
							<given-names>Tom</given-names>
						</string-name>
						<string-name>
							<surname>Winfield</surname>
							<given-names>Alan</given-names>
						</string-name>
						<string-name>
							<surname>Woolard</surname>
							<given-names>Fiona</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<source>Responsible AI - Key Themes, Concerns and Recommendations for European Research and Innovation: Summary of Consultation with Multidisciplinary Experts</source>
					<ext-link ext-link-type="uri" xlink:href="https://www.ngi.eu/wp-content/uploads/sites/48/2018/07/Responsible-AI-Consultation-Public-Recommendations-V1.0.pdf">https://www.ngi.eu/wp-content/uploads/sites/48/2018/07/Responsible-AI-Consultation-Public-Recommendations-V1.0.pdf</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B17">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<collab>UNESCO</collab>
					</person-group>
					<year>2017</year>
					<source>Report of COMEST on robotics ethics</source>
					<ext-link ext-link-type="uri" xlink:href="https://unesdoc.unesco.org/ark:/48223/pf0000253952">https://unesdoc.unesco.org/ark:/48223/pf0000253952</ext-link>
				</mixed-citation>
			</ref>
			<ref id="B18">
				<mixed-citation publication-type="book">
					<person-group person-group-type="author">
						<string-name>
							<surname>Walsh</surname>
							<given-names>Toby</given-names>
						</string-name>
					</person-group>
					<year>2018</year>
					<source>Machines That Think: The Future of Artificial Intelligence</source>
					<publisher-loc>Amherst, Mass.</publisher-loc>
					<publisher-name>Prometheus Books</publisher-name>
				</mixed-citation>
			</ref>
			<ref id="B19">
				<mixed-citation publication-type="report">
					<person-group person-group-type="author">
						<string-name>
							<surname>Whittlestone</surname>
							<given-names>Jess</given-names>
						</string-name>
						<string-name>
							<surname>Nyrup</surname>
							<given-names>Rune</given-names>
						</string-name>
						<string-name>
							<surname>Alexandrova</surname>
							<given-names>Anna</given-names>
						</string-name>
						<string-name>
							<surname>Dihal</surname>
							<given-names>Kanta</given-names>
						</string-name>
						<string-name>
							<surname>Cave</surname>
							<given-names>Stephen</given-names>
						</string-name>
					</person-group>
					<year>2019</year>
					<source>Ethical and Societal Implications of Algorithms, Data, and Artificial Intelligence: A Roadmap for Research</source>
					<publisher-loc>Cambridge</publisher-loc>
					<publisher-name>Nuffield Foundation, University of Cambridge</publisher-name>
					<ext-link ext-link-type="uri" xlink:href="https://mk0nuffieldfounpg9ee.kinstacdn.com/wp-content/uploads/2019/12/Ethical-and-Societal-Implications-of-Data-and-AI-report-Nuffield-Foundat.pdf">https://mk0nuffieldfounpg9ee.kinstacdn.com/wp-content/uploads/2019/12/Ethical-and-Societal-Implications-of-Data-and-AI-report-Nuffield-Foundat.pdf</ext-link>
				</mixed-citation>
			</ref>
		</ref-list>
	</back>
</article>