DISCLAIMER: En este apartat es recullen aquelles preguntes que es consideren d'interés. No obstant això, en cas de discrepància entre el contingut d'este apartat i el text de la convocatòria, prevaldrà el text de la convocatòria. El present text no genera drets ni expectatives de drets.
Preguntas Frecuentes
Para promoure el desenvolupament i ús d'una IA responsable, fomentar la innovació i facilitar la implantació dels requisits per als sistemes d'alt risc a les empreses es crea un entorn controlat de proves en intel·ligència artificial.
En este context, s'ha publicat la primera convocatòria del Sandbox de IA amb la finalitat de realitzar d'un assaig dels requisits establits per als sistemes d'alt risc en el Reglament europeu d'intel·ligència artificial (capítol III, secció 2).
Con esta iniciativa, es busca minimitzar els costos de compliment, especialment per a les pimes i startups, mitjançant la creació d'un entorn que afavoreix la cooperació entre els àmbits de la innovació i regulació. Se obté com a resultat un informe que conté bones pràctiques i conclusions recaptades durant l'experiència, així com unes guies tècniques d'implementació i supervisió basades en l'evidència i l'experimentació que es posaran a la disposició del públic general a la finalització d'aquest.
- Aportar claredat sobre els requisits establits en el reglament i validar l'aplicabilitat de les guies tècniques d'implementació que es posaran a la disposició de tota la població.
- Transferir know-how sobre el compliment de la llei a entitats que desenvolupen solucions de IA.
- Fomentar el desenvolupament de sistemes de IA innovadors i de confiança.
- Aumentar les capacitats i el coneixement en matèria de supervisió d'Inteligencia Artificial, que després serà reutilitzable per l'Agència Espanyola de Supervisió d'Inteligencia Artificial (AESIA).
- Evaluar l'impacte del Reglament i les seues obligacions en un entorn controlat, i proporcionar experiència i aprenentatge pràctic per a donar suport al desenvolupament d'estàndards, orientació i eines a nivell nacional i europeu.
- Influir en el desenvolupament dels actes d'execució del Reglament d'Intel·ligència i els processos d'estandardització europeus sobre el Reglament.
- Convertir a España en referent del desenvolupament de IA responsable a la UE i en el món, donant suport a la competitivitat del nostre teixit productiu i fomentant la creació de solucions de IA responsables per a reptes socials i econòmics.
Un sandbox regulador en sistemes de IA és un espai controlat de proves per a provar sistemes d'Intel·ligència Artificial i ajudar als sistemes intervinents a la seua adequació al Reglament de IA. La participació de les entitats en estos entorns de proves pot accelerar el desenvolupament de solucions responsables i èticament conscients que eventualment podrien ser desplegades a una escala més àmplia.
Este pilot de sandbox que es posa en marxa a Espanya té com a objectiu principal l'optimització de les Guies tècniques sobre els diferents articles del Reglament de IA elaborades per la Secretaria d'Estat de Digitalització i IA basant-se en l'experiència obtinguda d'en este Sandbox IA.
- La Secretaria d'Estat de Digitalització i Intel·ligència Artificial posarà a la disposició dels participants especificacions i guies tècniques, així com assessoria personalitzada de la mà d'experts, relatives als requisits que establix el Reglament.
- Se realitzaran activitats formatives sobre les guies tècniques.
- Los participants acordaran amb la Secretaria d'Estat de Digitalització i Intel·ligència Artificial un pla d'adaptació. El proveïdor IA haurà d'implementar els requisits en el seu entorn privat de desenvolupament d'acord amb el pla d'adaptació acordat i amb el suport i l'ajuda de les guies tècniques i l'assessorament personalitzat.
- Durante la implementació hi haurà una comunicació permanent entre els participants i la Secretaria d'Estat de Digitalització i Intel·ligència Artificial.
- El proveïdor IA, i en el seu cas juntament amb l'usuari del sistema, haurà de realitzar un informe d'impacte de gènere.
- Los participants realitzaran una declaració de compliment dels requisits i presentaran la documentació indicada per a la seua posterior verificació
- El proveïdor IA prepararà un pla de seguiment posterior a la comercialització i l'adjuntarà a la documentació relativa a la declaració de compliment de requisits.
- La Secretaria d'Estat de Digitalització i Intel·ligència Artificial avaluarà els plans de seguiment, i traslladarà a cada entitat la seua valoració.
- Els participants hauran d'implementar aquest pla.
Durante tota l'experiència s'organitzaran reunions entre els participants i la Secretaria d'Estat de Digitalització i Intel·ligència Artificial a fi de fomentar un aprenentatge col·laboratiu.
Deberá existir sempre un proveïdor IA d'un sistema d'alt risc que serà qui haja de sol·licitar la participació en la convocatòria del Sandbox presentant un sistema d'intel·ligència artificial d'alt risc, que haurà de comptar amb els drets de propietat intel·lectual, considerant que per a aquells sistemes que partisquen de codi open source es refereix al fet que es tinga el dret de poder comercialitzar el sistema. El objectiu d'este requeriment és que el proveïdor del sistema puga realitzar les adaptacions necessàries en el programari.
En la candidatura, haurà d'existir almenys una entitat que tinga la consideració de pime o empresa emergent. Esta podrà ser tant el proveïdor IA, com l'usuari o com un col·laborador.
- Se haurà de complir amb el que es preveu en el RGPD i altra normativa de protecció de dades.
- Els tractaments de dades que es realitzen en el marc de l'entorn controlat de proves hauran de complir amb la normativa assenyalada en l'apartat anterior.
- Se haurà de complir amb el que es preveu en la normativa de propietat intel·lectual.
- En el cas que el sistema d'intel·ligència artificial puga trobar-se en l'àmbit d'aplicació de legislació sectorial concreta, haurà d'aportar l'informe favorable de l'Autoritat Nacional competent sobre el correcte compliment de la legislació sectorial específica.
- Esta convocatòria va dirigida a ajudar sobretot a les pimes i empreses emergents en el compliment de les obligacions del Reglament d'intel·ligència artificial per al que en els sistemes de IA sol·licitants haurà de participar almenys una pime o startup.
- Tanto la resta de tipologia d'entitats com les entitats públiques podran participar en el Sandbox com a part d'una agrupació en la qual almenys una de les entitats participants siga pime o startup.
Podrán participar entitats residents a la Unió Europea en col·laboració amb entitats amb residència a Espanya, sempre que l'entitat que presente la sol·licitud siga esta última.
Se permet la participació de les següents entitats:
- Toda persona jurídica privada o administració pública o entitat del sector públic institucional resident a Espanya o que dispose d'un establiment permanent a Espanya.
- Toda persona jurídica privada resident a la Unió Europea, sempre que estiga associada o compte amb algun altre tipus de vinculació similar amb una empresa resident a Espanya.
- Serán elegibles els sistemes d'intel·ligència artificial emmarcats dins de l'annex I de la convocatòria (corresponents a l'annex III de l'AI Act) i els sistemes regulats per alguna de les següents normes harmonitzades de la Unió Europea:
- Directiva 2006/42/CE del Parlament Europeu i del Consell, de 17 de maig de 2006, relativa a les màquines i per la qual es modifica la Directiva 95/16/CE (refundició).
- Reglament (UE) 2017/745 del Parlament Europeu i del Consell, de 5 d'abril de 2017, sobre els productes sanitaris, pel qual es modifiquen la Directiva 2001/83/CE, el Reglament (CE) núm. 178/2002 i el Reglament (CE) núm. 1223/2009 i pel qual es deroguen les Directives 90/385/CEE i 93/42/CEE del Consell.
- Reglament (UE) 2017/746 del Parlament Europeu i del Consell, de 5 d'abril de 2017, sobre els productes sanitaris per a diagnòstic in vitro i pel qual es deroguen la Directiva 98/79/CE i la Decisió 2010/227/UE de la Comissió.
- Els sistemes presentats hauran d'estar ja introduïts en el mercat o llocs en servei, o que presente un grau d'avanç raonable corresponent a un TRL superior a 6 que permeta la seua introducció en mercat o posada en servei en una data el més pròxima possible a l'inici del pla de seguiment poscomercialización.
Els sistemes de IA d'alt risc contemplats en l'Annex III són:
- Biometría, en la mesura en què el seu ús estiga permés pel Dret de la Unió o nacional aplicable:
- Con finalitats de verificació biomètrica l'única finalitat de la qual siga confirmar que una persona física concreta és la persona que afirma ser
- A ser utilitzats per a la categorització biomètrica en funció d'atributs o característiques sensibles o protegits basada en la inferència d'aquests atributs o característiques
- Destinados a ser utilitzats per al reconeixement d'emocions
- Infraestructures crítiques: Sistemas de IA utilitzats com a components de seguretat en la gestió i el funcionament de les infraestructures digitals crítiques, del trànsit rodat o del subministrament d'aigua, gas, calefacció o electricitat.
- Educació i formació professional:
- Para determinar l'accés o l'admissió de persones físiques a centres educatius i de formació professional
- Per a avaluar els resultats de l'aprenentatge
- Per a avaluar el nivell d'educació adequat de persones
- Per al seguiment i la detecció de comportaments prohibits per part dels estudiants durant els exàmens
- Ocupació, gestió dels treballadors i accés a l'autoocupació:
- Per a la contractació o la selecció de persones físiques, en particular per a publicar anuncis d'ocupació específics, analitzar i filtrar les sol·licituds d'ocupació i avaluar als candidats
- Per a prendre decisions que afecten de les condicions de les relacions d'índole laboral o a la promoció o rescissió de relacions contractuals d'índole laboral, o per a supervisar i avaluar el rendiment i el comportament de les persones en el marc d'aquestes relacions
- Acceso a serveis privats essencials i a serveis i prestacions públics essencials i gaudi d'estos serveis i prestacions:
- Per a avaluar l'admissibilitat de les persones físiques per a beneficiar-se de serveis i prestacions essencials d'assistència pública, inclosos els serveis d'assistència sanitària, així com per a concedir, reduir o retirar aquests serveis i prestacions o reclamar la seua devolució
- Per a avaluar la solvència de persones físiques o establir la seua qualificació crediticia/creditícia, excepte els sistemes de IA utilitzats a fi de detectar fraus financers
- Per a l'avaluació de riscos i la fixació de preus en relació amb les persones físiques en el cas de les assegurances de vida i de salut
- Per a l'avaluació i la classificació de les trucades d'emergència realitzades
- Garantía del compliment del Dret, en la mesura en què el seu ús estiga permés pel Dret de la Unió o nacional aplicable:
- Per a avaluar el risc de què una persona física siga víctima de delictes
- Sistemes de IA destinats com polígrafos o eines similars
- Per a avaluar la fiabilitat de les proves durant la recerca o l'enjudiciament de delictes
- Per a avaluar el risc que una persona física cometa un delicte o reincidisca en la comissió d'un delicte, o per a avaluar trets i característiques de la personalitat o comportaments delictius passats de persones físiques o col·lectius
- Per a elaborar perfils de persones físiques durant la detecció, la recerca o l'enjudiciament de delictes
- Migració, asil i gestió del control fronterer, en la mesura en què el seu ús estiga permés pel Dret de la Unió o nacional aplicable:
- Sistemes de IA destinats com polígrafos o eines similars
- Per a avaluar un risc, per exemple, un risc per a la seguretat, la salut o de migració irregular, que plantege una persona física que tinga la intenció d'entrar en el territori d'un Estat membre o haja entrat en ell
- Per a ajudar de les autoritats públiques competents a examinar les sol·licituds d'asil, visat o permís de residència i les reclamacions connexes
- Per a detectar, reconéixer o identificar a persones físiques, amb excepció de la verificació de documents de viatge
- Administració de justícia i processos democràtics:
- Per a ajudar a una autoritat judicial en la recerca i interpretació de fets i de la llei
- Sistemes de IA destinats a ser utilitzats per a influir en el resultat d'una elecció o referèndum o en el comportament electoral de persones físiques que exercisquen el seu dret de vot en eleccions o referèndums.
De acuerdo con el considerant 55 del Reglament d'Intel·ligència Artificial, es consideren infraestructures digitals crítiques aquelles llistades en el punt 8 de l'Annex de la Directiva (UE) 2022/2557.
La duració aproximada serà de dotze mesos a partir de la data de kick off del Sandbox IA, primers d'abril, que donarà principi una vegada seleccionats els sistemes de IA participants.
La participació en l'entorn per part dels diferents proveïdors IA, col·laboradors i usuaris constarà de dues etapes.
- Una primera en la qual es realitzarà la implantació dels requisits i que finalitzarà amb la declaració de compliment.
- Una segona etapa durant el qual es realitzarà el pla del seguiment posterior a la comercialització dels sistemes d'intel·ligència artificial.
Estes etapes es divideixen en les següents fases:
Fase 1. Formació. Se donarà una formació online als participants sobre els requisits seguint les guies tècniques. Reunions setmanals amb una estimació de 3 mesos.
Fase 2. Anàlisi del grau de compliment del Reglament. Se analitzarà conjuntament amb el participant el GAP dels sistemes IA per al compliment del Reglament. Se analitzaran aquelles mesures a implementar, finalitzant amb la presentació per part del proveïdor d'un pla d'adaptació amb el calendari d'adaptació del sistema, els recursos i la dedicació d'aquests. Se abordarà en paral·lel amb la fase anterior podent finalitzar un mes després de la fase 1 amb l'acord del pla.
Fase 3. Implementació del Pla d'Adaptació. El proveïdor haurà d'abordar l'adaptació del sistema de IA d'acord al pla. Estos desenvolupaments els haurà de realitzar en el seu propi entorn de desenvolupament. La duració estimada d'esta fase són 6 mesos. El seguiment serà individualitzat amb cadascun dels participants, establint una reunió cada 15 dies per a veure l'avanç i detecció de necessitats.
Fase 4. Autoevaluación. El proveïdor haurà de realitzar una autoavaluació respecte als requisits. Una vegada finalitzada entregarà una declaració de compliment i presentarà tota la documentació requerida per a la seua posterior revisió inclòs el pla de seguiment posterior a la comercialització. Finalment es realitzarà un informe de valoració de la informació aportada.
Fase 5. Seguiment posterior a la posada en marxa del sistema. S'analitzarà el pla de seguiment posterior a la comercialització entregat en la fase anterior per a la detecció dels possibles riscos.
En totes les etapes hi haurà una comunicació permanent entre els participants i la Secretaria d'Estat de Digitalització i IA, així com el suport dels experts segons siguen requerits.
S'ha de presentar en el moment de la sol·licitud. En el cas que el sistema d'intel·ligència artificial implique tractament de dades de caràcter personal, haurà de presentar la declaració responsable de compliment de la normativa en matèria de protecció de dades personals, especificada en l'annex IV de la convocatòria en el moment de la sol·licitud.
L'accés a l'entorn controlat de proves serà gratuït per a participants, d'igual manera tampoc rebran cap mena de contraprestació econòmica.
No obstant això, la participació en este Sandbox IA suposarà beneficis indirectes com són l'accés a un servei de consultoria del sector públic, assessorament d'alt nivell oferit per experts independents i la disponibilitat de les guies tècniques d'implementació dels requisits, així com resta del material formatiu que facilitaran l'aplicació de la normativa. Això redundarà en una reducció de riscos legals i un augment de la reputació, a més d'un camí més ràpid cap a la comercialització de productes de IA conformes amb la regulació.
Els criteris per a mesurar el grau de maduresa tecnològica són nivells de preparació tecnològica (TRL) proposats per la unió europea en el Programa Marc de R+D de la Comissió Europea, Horizonte Europa.
TRL (nivells de maduresa de la tecnologia) amb valor 6, correspon a un nivell de validació de sistema o subsistema en un entorn rellevant i previ al desplegament, per a més detalls es pot consultar: NIVELLS DE MADURESA DE LA TECNOLOGIA. TECHNOLOGY READINESS LEVELS. TRLS.
La presentació del formulari de sol·licitud es realitzarà des de la seu electrònica. En este enllaç també li indicarà la documentació necessària que haurà d'adjuntar, així com els enllaços de descàrrega.
En este sentit la sol·licitud haurà d'acompanyar-se de la següent documentació degudament emplenada i signada:
- Memoria Técnica. Mediante la presentación del modelo normalizado de memoria técnica de la solicitud.
- Declaració responsable sobre drets de propietat intel·lectual, especificada en la convocatòria.
- En el cas que el sistema d'intel·ligència artificial implique tractament de dades de caràcter personal, haurà de presentar la declaració responsable de compliment de la normativa en matèria de protecció de dades personals, especificada la convocatòria.
- En el cas que el sistema d'intel·ligència artificial puga trobar-se en l'àmbit d'aplicació de legislació sectorial concreta, haurà d'aportar l'informe favorable de l'Autoritat Nacional competent sobre el correcte compliment de la legislació sectorial específica.
- En el cas de sol·licitar la participació juntament amb col·laboradors concorrent en règim d'associació o vinculació similar hauran de consignar el formulari de compromís de col·laboració d'entitats, que figura en la convocatòria.
- Declaració responsable de comercialització del sistema de IA, especificada en la convocatòria.
La convocatòria indica els requisits d'accés i descriu l'esquema de valoració i selecció de les sol·licituds, que vol garantir el mèrit de les sol·licituds triades alhora que la diversitat d'empreses participants i de sistemes d'intel·ligència artificial. La valoració es realitza seguint els següents criteris:
Una vegada establida la puntuació per a cadascun dels sistemes IA participants se seleccionarà el de major puntuació de cadascun dels sectors indicats per a garantir una major diversitat de sistemes de IA, tal com s'especifica en la següent qüestió.
Tanto la puntuació dels criteris A i B, com la total (100) ha d'aconseguir el 50% de la puntuació màxima.
Es realitzarà una selecció fins a un màxim de 12 sistemes d'intel·ligència artificial d'alt risc.
Els sistemes que obtinguen una puntuació igual o superior als llindars establits, i que complisquen amb els criteris establits, seran dividits en els sectors d'activitat contemplats en la convocatòria. De tal manera que les sol·licituds de major puntuació de cada bloc, fins a un màxim de dotze sistemes, seran les seleccionades per a la seua participació en el Sandbox.
A continuació, s'identifiquen els sectors:
- Biometría
- Infraestructures crítiques
- Educació i formació Ocupació
- Acceso a serveis i ajudes
- Llei, justícia i processos democràtics
- Migració, asil i control fronterer
- Maquinària
- Productos sanitaris
- Otros
Sí, segons el criteri de valoració G) Tipologia d'entitats, es valorarà positivament propostes presentades per un major nombre de pimes (fins a un màxim de 5 entitats) sempre que estes tinguen sentit en el cicle de vida del sistema de IA.
- Una sèrie de guies tècniques per al compliment dels requisits del Reglament de IA per als sistemes d'alt risc.
- Formació específica de cadascuna de les guies tècniques. La formació es realitzarà durant els dos primers mesos del sandbox i quedarà gravada a la disposició dels participants.
- Assessoria sota demanda per part d'un expert de cada guia tècnica.
- Seguiment personalitzat per part d'un contacte de la SEDIA durant tot el sandbox.
El temps que cada entitat haja d'invertir dependrà del grau de maduresa del propi sistema de IA.
Hay que recordar que el sandbox s'enfoca en aquelles obligacions que el Reglament establix per als sistemes de IA d'Alt Risc, per la qual cosa, gràcies a les guies i l'assessoria de la SEDIA, es podrà optimitzar el temps necessari per al compliment d'aquestes obligacions.
Durante la duració del Sandbox les entitats comptaran amb flexibilitat per a realitzar les adaptacions necessàries, sí que sent necessària la seua assistència a les reunions tant de formació com de seguiment. Estes reunions seran online per a evitar desplaçaments.
Es necessari que durant l'execució del Sandbox hi haja una comunicació permanent entre els participants i la SEDIA i, un alt grau de compromís per part dels participants en cadascuna de les fases del Sandbox, des de l'assistència a les formacions, com el compromís d'elaboració del pla d'adaptació o, l'assistència a les reunions periòdiques de seguiment que es duran a terme. L'incompliment reiterat d'estes aviacions podrà donar lloc a la finalització anticipada per al participant.
Sí, En qualsevol moment, els participants podran sol·licitar la retirada voluntària motivada de l'entorn mitjançant comunicació a la SEDIA.
En la governança del Sandbox existiran diversos actors intervinents, entre els quals destaquen la SEDIA, els assessors experts i, els sistemes de IA. También es preveu la participació de la Comissió Europea i, d'altres organismes nacionals i europeus.
Per a la correcta gestió cada sistema estarà acompanyat d'un mentor amb coneixements en l'àmbit de la intel·ligència artificial, que tindrà a la seua disposició també al grup assessor d'experts.
Així mateix, per a la coordinació i governança de tots els agents implicats, es definiran diverses reunions de treball i, Comités, amb uns temes a tractar i periodicitat establida. En funció de cada temàtica serà necessari la representació i/o assistència d'uns actors o altres. Este model de governança es transmetrà als sistemes que accedisquen al Sandbox de IA.
La garantia de confidencialitat s'aplicarà sobre la informació que aporten tant els proveïdors IA participants com, en el seu cas, els usuaris i col·laboradors participants sobre procediments propis de les empreses o altres entitats, plans comercials, drets de propietat industrial i intel·lectual o secrets empresarials, així com sobre les dades i informació facilitats durant el procés d'autoavaluació. Es dir, tant les sol·licituds que es presenten com les preguntes que es formulen en aquesta bústia, seran confidencials i, qualsevol informació que es publique es realitzarà de manera generalista i anonimizada.
- Els participants que hagen finalitzat tot el procés rebran un document acreditatiu de la participació en l'entorn i un informe d'avaluació de la seua participació.
- Las guies tècniques entregades a l'inici de l'entorn controlat de proves, actualitzades amb els coneixements obtinguts durant l'experiència, donaran lloc a les guies tècniques d'execució i supervisió definitives basades en l'evidència i l'experimentació
- La SEDIA publicarà un informe de conclusions sobre el resultat de l'entorn controlat de proves, bones pràctiques i recomanacions, així com altres aspectes que considere rellevants de l'aplicació experimental del Reglament.
- Els resultats obtinguts podrien servir com a punt de partida per al desenvolupament d'una plataforma de programari que facilite una primera autoavaluació no vinculant sobre el compliment dels principis del Reglament.
Tanto els desenvolupaments que es vegen pertinents dins del transcurs del Sandbox com les proves tècniques que es pretenguen realitzar sobre els sistemes de IA, seran abordats en els entorns de desenvolupament del proveïdor de IA.
Per a facilitar l'arrencada del Sandbox i assegurar la confidencialitat no es podran mitjans tecnològics a la disposició dels participants.
La formació únicament està contemplada per a les entitats participants.
Las guies tècniques inicials només es facilitaran a les entitats participants.
Terminado l'entorn controlat de proves, les guies tècniques definitives basades en l'experimentació i experiència sorgides durant l'entorn controlat de proves podran posar-se de lliure accés al públic.
Al llarg del sandbox es contempla la participació d'observadors a través de dues vies baix:
- Reunions puntuals
- Assessorament de grup d'experts
El grup de persones assessores expertes estarà integrat per professionals independents de reconegut prestigi i experiència en l'àmbit de la intel·ligència artificial, tant des d'una perspectiva tècnica com jurídica. Els experts podran pertànyer a l'àmbit acadèmic, institucions col·legials, associacions d'un altre tipus, a l'Administració o al sector empresarial.
En 2023 es va realitzar una manifestació d'interés per a ser formar part del grup assessor d'experts. D'esta manifestació s'obtindrà una selecció de 35 experts independents que seran nomenats per resolució de la Secretaria d'Estat. La resta de les persones interessades passarà a formar part d'una bossa de reserva que podran ser incorporats a este grup segons la demanda.
L'objectiu principal dels experts de l'entorn regulat de proves és l'assessorament específic durant l'execució del Sandbox en funció de la casuística plantejada. A més, es crearà un Grup de Treball abans d'arrancar de manera operativa el Sandbox, on es crearan entorns participatius i col·laboratius en els quals es realitzarà una revisió i/o valoració de les Guies Tècniques amb la finalitat de poder implementar millores que augmenten la qualitat ja demostrada d'aquestes.