INVALSI Istituto nazionale per la valutazione
INVALSI
Istituto nazionale per la valutazione
del sistema educativo di istruzione e di formazione CAPITOLATO TECNICO
PROCEDURA APERTA PER LA STIPULA DI UN ACCORDO QUADRO CON UN UNICO OPERATORE ECONOMICO
AVENTE AD OGGETTO LA SUCCESSIVA CONCLUSIONE DI SINGOLI CONTRATTI RELATIVI AL SERVIZIO DI IMPLEMENTAZIONE DELLA PIATTAFORMA PER LA SOMMINISTRAZIONE COMPUTER BASED TEST DELLE PROVE STANDARDIZZATE INVALSI SU LARGA SCALA CONNESSO AL PROGETTO “MISURAZIONE DIACRONICO- LONGITUDINALE DEI LIVELLI DI APPRENDIMENTO DEGLI STUDENTI”, PER IL PERIODO 2015-2023 NELL’AMBITO DEL PON PLURIFONDO FSE-FESR 2014-2020 “PER LA SCUOLA – COMPETENZE E AMBIENTI PER L’APPRENDIMENTO” IN FAVORE DI TUTTE LE SCUOLE DEL TERRITORIO NAZIONALE E FINANZIATO A VALERE SULL’ASSE III “CAPACITA’ ISTITUZIONALE E AMMINISTRATIVA”. Codice CUP F88C15001080006.
Art. | 1 | NORMATIVA DI RIFERIMENTO | Pag. | 2 | |
Art. | 2 | OBIETTIVI | Pag. | 2 | |
Art. | 3 | OGGETTO | Pag. | 3 | |
Art. | 4 | CONTENUTO DEL SERVIZIO | Pag. | 4 | |
Par. | 4.1 | Caratteristiche della piattaforma open source per la somministrazione CBT delle prove del progetto PON-CBT “MISURAZIONE DIACRONICO-LONGITUDINALE DEI LIVELLI DI APPRENDIMENTO DEGLI STUDENTI”, PER IL PERIODO 2015-2023 NELL’AMBITO DEL PON PLURIFONDO FSE-FESR 2014-2020 “PER LA SCUOLA – COMPETENZE E AMBIENTI PER L’APPRENDIMENTO” IN FAVORE DI TUTTE LE SCUOLE DEL TERRITORIO NAZIONALE E FINANZIATO A VALERE SULL’ASSE III “CAPACITA’ ISTITUZIONALE E AMMINISTRATIVA”. | Pag. | 5 | |
Art. | 5 | Pag. | 8 | ||
Art. | 6 | Pag. | 8 |
L’INVALSI, sulla base della Disposizione presidenziale n. 6 del 4 aprile 2017 e nella Determinazione n. 80 del 12 aprile 2017,intende procedere alla stipula di un Accordo Quadro, con un unico operatore economico, avente ad oggetto la successiva conclusione di singoli contratti relativi al SERVIZIO DI IMPLEMENTAZIONE DELLA PIATTAFORMA PER LA SOMMINISTRAZIONE COMPUTER BASED TEST DELLE PROVE STANDARDIZZATE INVALSI SU LARGA SCALA CONNESSO AL PROGETTO “MISURAZIONE DIACRONICO-LONGITUDINALE DEI LIVELLI DI APPRENDIMENTO DEGLI STUDENTI”, PER IL PERIODO 2015-2023 NELL’AMBITO DEL PON PLURIFONDO FSE-FESR 2014-2020 “PER LA SCUOLA – COMPETENZE E AMBIENTI PER L’APPRENDIMENTO” IN FAVORE DI TUTTE LE SCUOLE DEL TERRITORIO NAZIONALE E FINANZIATO A VALERE SULL’ASSE III “CAPACITA’ ISTITUZIONALE E AMMINISTRATIVA”.
1. NORMATIVA DI RIFERIMENTO
• Convenzione stipulata tra MIUR e INVALSI in data 16 dicembre 2015 per il potenziamento e la misurazione degli apprendimenti nell'ambito del PON "Per la scuola" 2014-2020, approvata con nota prot. AOODGEFID
n. 23773 del 15 dicembre 2015;
• Decreto Legislativo 18 aprile 2016, n. 50 recante L’attuazione delle direttive 2014/23/UE, 2014/24/UE e 2014/25/UE sull’aggiudicazione dei contratti di concessione, sugli appalti pubblici e sulle procedure d’appalto degli enti erogatori nei settori dell’acqua, dell’energia, dei trasporti e dei servizi postali, nonché il riordino della disciplina vigente in materia di contratti pubblici relativi a lavori, servizi e forniture.
• Normativa in materia di sicurezza sul lavoro di cui al D.Lgs. 81/2008 e successive modifiche ed integrazioni.
• Legge 136/2010 e successive modifiche e integrazioni in materia di tracciabilità dei flussi finanziari.
• Legge 241/1990 e successive modifiche e integrazioni.
• D.Lgs. 104/2010 e successive modifiche e integrazioni (Codice del processo amministrativo).
Per quanto non espressamente previsto si fa riferimento alle leggi e ai regolamenti in vigore.
2. OBIETTIVI
L’INVALSI, in qualità di ente in house del MIUR, attraverso apposita Convenzione, è affidatario del progetto denominato "Misurazione diacronico-longitudinale dei livelli di apprendimento degli studenti", per il periodo 2015-2023 nell'ambito del PON plurifondo FSE-FESR 2014-2020 "Per la scuola - competenze e ambienti per l'apprendimento" in favore di tutte le scuole del territorio nazionale e finanziato a valere sull'Asse III "Capacità istituzionale e amministrativa".
Si rende, pertanto, necessario strutturare l'Istituto di adeguate soluzioni tecniche al fine di dare attuazione al progetto affidato rispettando i criteri di efficienza ed efficacia gestionale propri degli interventi di riferimento.
A tal fine, l’Amministrazione scrivente intende giungere alla stipula di un accordo quadro, con un unico operatore economico avente ad oggetto la successiva conclusione di singoli contratti relativi al servizio di implementazione della piattaforma per la somministrazione computer based test delle prove standardizzate invalsi su larga scala connesso al progetto “Misurazione diacronico-longitudinale dei livelli di apprendimento degli studenti”, per il periodo 2015-2023 nell’ambito del pon plurifondo fse-fesr 2014-2020 “per la scuola – competenze e ambienti per l’apprendimento” in favore di tutte le scuole del territorio nazionale e finanziato a valere sull’asse iii “capacita’ istituzionale e amministrativa”.
3. OGGETTO
Oggetto della gara è la stipula di un accordo quadro, con un unico operatore economico avente ad oggetto la successiva conclusione di singoli contratti relativi ai servizi per la progettazione, realizzazione e gestione di una piattaforma open source per la somministrazione di prove per la valutazione delle competenze degli studenti medianti prove standardizzate, così come previste dal progetto “Misurazione diacronico-longitudinale dei livelli di apprendimento degli studenti” (di seguito denominato “progetto PON-CBT”). La predetta piattaforma deve essere in grado di supportare le fasi di authoring, delivery, anche in forma adattiva, e scoring connesse alle somministrazioni delle prove del predetto progetto.
In particolare, costituiscono oggetto dell'Accordo Quadro i seguenti servizi:
1. Servizio annuo di supporto e assistenza
Tale servizio deve includere:
a. Help desk con le seguenti caratteristiche:
i. numero illimitato di incidenti sulla piattaforma,
ii. capacità di risposta entro 60 minuti,
iii. disponibilità dalle 7.00 alle 20.00 da lunedì a sabato (inclusi);
b. assistenza sulla piattaforma;
c. assistenza in fase di produzione (somministrazione) delle prove;
d. assistenza in fase di pre-produzione delle prove;
e. assistenza sulle customizzazioni di proprietà dell’INVALSI sviluppate dall’aggiudicatario;
f. assistenza e gestione dei servizi end-of-live sulle customizzazioni di proprietà dell’INVALSI sviluppate dall’aggiudicatario;
g. Assicurazione Open source a favore di INVALSI;
h. Incontri trimestrali di aggiornamento e revisione sulle modalità di assistenza e supporto.
2. Servizio di Software Engineering.
Tale servizio deve comprendere le attività di programmazione, di pianificazione e di managment correlate, compresi tutti i connessi costi:
- di quality assurance,
- di gestione,
- ammistrativi;
3. Servizio di cloud per il CBT (computer based test) mediante piattaforma open source. Il servizio di CBT cloud comprende tutti I servizi necessari per la somministrazione on line di test e per tutte le attività connesse alla produzione delle domande (authoring).
A. Servizio di somministrazione on line di test. Esso deve includere:
- la predisposizione di una infrastruttura che soddisfi elevati requisiti di flessibilità e sicurezza;
- supporto e assistenza;
- disponibilità del servizio per almeno il 98% del tempo dichiarato;
- sistemi di back-up attivi almeno una volta ogni 60 minuti.
Il servizio 3.A deve essere organizzato come segue in funzione del numero massimo rispondente (studenti) a una data prova:
SERVIZIO 3.A: Servizio di somministrazione on line di test | 1. CBT Cloud fino a 10.000 studenti |
2. CBT Cloud fino a 25.000 studenti | |
3. CBT Cloud fino a 100.000 studenti | |
4. CBT Cloud fino a 400.000 studenti | |
5. CBT Cloud per più di 400.000 studenti |
B. Servizio per tutte le attività connesse alla produzione delle domande (authoring). Esso deve includere:
- la predisposizione di una infrastruttura che soddisfi elevati requisiti di flessibilità e sicurezza;
- supporto e assistenza;
- sistemi di back-up attivi almeno una volta ogni 60 minuti.
Tutti i servizi sopra indicati devono avere le caratteristiche minime stabilite nel presente Capitolato Tecnico.
4. CONTENUTO DEL SERVIZIO
I servizi di cui all’art. 3 hanno il seguente contenuto:
1. Servizio annuo di supporto e assistenza. Esso deve includere:
a. Help desk con le seguenti caratteristiche:
i. numero illimitato di incidenti sulla piattaforma,
ii. capacità di risposta entro 60 minuti,
iii. disponibilità dalle 7.00 alle 20.00 da lunedì a sabato (inclusi);
b. assistenza sulla piattaforma;
c. assistenza in fase di produzione (somministrazione) delle prove;
d. assistenza in fase di pre-produzione delle prove;
e. assistenza sulle customizzazioni di proprietà dell’INVALSI sviluppate dall’aggiudicatario;
f. assistenza e gestione dei servizi end-of-live sulle customizzazioni di proprietà dell’INVALSI sviluppate dall’aggiudicatario;
g. Assicurazione Open source a favore di INVALSI;
h. Incontri trimestrali di aggiornamento e revisione sulle modalità di assistenza e supporto.
2. Servizio di Software Engineering. Esso deve comprendere le attività di programmazione, di pianificazione e di managment correlate, compresi tutti i connessi costi di:
- quality assurance,
- di gestione,
- amministrativi;
3. Servzio di cloud per il CBT (computer based test) mediante piattaforma open source. Il servizio di CBT cloud comprende tutti I servizi necessari per la somministrazione on line di test e per tutte le attività connesse alla produzione delle domande (authoring).
A. Servizio di somministrazione on line di test. Esso deve includere:
- la predisposizione di una infrastruttura che soddisfi elevati requisiti di flessibilità e sicurezza;
- supporto e assistenza;
- disponibilità del servizio per almeno il 98% del tempo dichiarato;
- sistemi di back-up attivi almeno una volta ogni 60 minuti.
B. Servizio per tutte le attività connesse alla produzione delle domande (authoring). Esso deve includere:
- la predisposizione di una infrastruttura che soddisfi elevati requisiti di flessibilità e sicurezza;
- supporto e assistenza;
- sistemi di back-up attivi almeno una volta ogni 60 minuti.
I servizi suddetti devono essere composti dall’aggiudicatario per realizzare la piattaforma open source di cui all’art.
3. La piattaforma e lo sviluppo del software ad essa connessa dovranno possedere i requisiti e le caratteristiche di seguito descritti. In ciascun contratto di appalto sarà indicata la quantità dei servizi di cui al precedente art. 3 (servizio 1, 2 e 3) da utilizzare per la realizzazione degli obiettivi specifici previsti nei contratti stessi.
La predetta piattaforma deve comprendere moduli per:
1. creazione di item tradizionali e ad alto contenuto tecnologico con particolare riguardo all’inserimento di elementi multimediali e dinamici;
2. creazione di item adatti alla misurazione delle competenze linguistiche ricettive e produttive;
3. item e test banking, creazione di prove e per la gestione di data base relazioni interrogabili a diversi livelli;
4. test delivery sequenziale e adaptive (multi-stage);
5. correzione automatica dei quesiti aperti e di gestione di correzione umana effettuata da più soggetti operanti on line.
4.1 Caratteristiche della piattaforma open source per la somministrazione CBT delle prove del progetto PON- CBT “MISURAZIONE DIACRONICO-LONGITUDINALE DEI LIVELLI DI APPRENDIMENTO DEGLI STUDENTI”, PER IL PERIODO 2015-2023 NELL’AMBITO DEL PON PLURIFONDO FSE-FESR 2014-2020 “PER LA SCUOLA – COMPETENZE E AMBIENTI PER L’APPRENDIMENTO” IN FAVORE DI TUTTE LE SCUOLE DEL TERRITORIO NAZIONALE E FINANZIATO A VALERE SULL’ASSE III “CAPACITA’ ISTITUZIONALE E AMMINISTRATIVA”.
Aspetti infrastrutturali:
- Workflow di sviluppo: verificabilità delle procedure di programmazione, dei diversi stadi di avanzamento dei codici di programmazione;
- Affidabilità e disponibilità: strategie per soddisfare elevati standard di affidabilità necessari per la realizzazione di una piattaforma in grado di somministrare test high stakes a diverse centinaia di migliaia di studenti. Misure di redundacy setup per l’infrastruttura fisica alla base della piattaforma per mitigare eventi negativi durante la somministrazione. Flussi di backup e strumenti di monitoraggio per la prevenzione di incidenti durante la somministrazione e relative misure di mitigazione degli effetti di eventi non previsti;
- Scalabilità: comprovata capacità dell’infrastruttura di sostenere la somministrazione di test high stakes fino a 50.000 utenti strettamente contemporanei (concurrent users) per prove che coinvolgono un’intera leva scolastica (fino a 600.000 studenti) nell’arco di 6-8 settimane;
- Sicurezza: misure e piani di mitigazione degli effetti negativi derivanti da attacchi DDOS (DISTRIBUTED
DENIAL-OF-SERVICE), security patches, data storage e criptazione dei canali di comunicazione;
- Supporto: da lunedì al sabato, dalle 7.00 alle 20.00 con capacità di risposta di presa in carico entro 60 minuti dalla ricezione della segnalazione del problema.
Requisiti non infrastrutturali:
- Modularità: comprovata capacità di inserire nella tecnologia proposta moduli in grado di rispondere a esigenze di INVALSI che via via si determineranno per la realizzazione delle prove previste dal progetto PON-CBT. Comprovata capacità di acquisire domande di INVALSI già migrate su supporto elettronico e comprovata capacità di implementazione di domande rispondenti agli standard IMS-QTI1, PCI2, LTI3, MathML4 and OpenID5. La piattaforma deve essere in grado di supportare almeno gli standard QTI 2.1. Inoltre, la piattaforma deve supportare le seguenti interazioni:
o scelta singola e multipla con funzionalità di shuffle parametrizzato
o associazione singola e multipla all’interno di tabelle
o ordinamento e riordinamento
o completamento di testo con xxxxxx partendo da un elenco chiuso di proposte
o evidenziazione di parti di un testo
o riempimento di lacune
o movimentazione di un cursore (slider interaction)
o tipologia grafica:
▪ selezione di un punto
▪ selezione di una zona/area
▪ riempimento grafico da un elenco (etichette, legende, ecc.)
▪ ordinamento grafico
▪ associazione grafica
Inoltre la piattaforma deve essere in grado di supportare contenuti multimediali (Audio, video,
cascading style sheets, ecc.) nei principali formati e includere componenti reader-type e equation editor.
- Integrabilità: la piattaforma deve possedere elevate caratteristiche di integrabilità in grado di garantire:
o possibilità di migrare banche di test e di domande in possesso di INVALSI e implementate in formato QTI 2.1 e assemblate secondo le specifiche di packaging QTI. La possibilità di migrazione deve includere anche test e domande implementati secondo gli standard PCI;
o possibilità di acquisizione massiva da formato .csv di credenziali di studenti e di regole di assegnazioni individuali o di gruppo di prove o di domande secondo regole fornite da INVALSI;
o possibilità di fornire data export parziali e secondo tracciati definiti da INVALSI.
- Proprietà dei codici di programmazione: i codici sorgente per la customizzazione della piattaforma open source e realizzati durante l’utilizzo della stessa devono essere messi a disposizioni di INVALSI senza alcuna
1 Instructional Management Systems (IMS), Question and Test Interoperability specification (QTI).
2 Portable Custom Interactions.
3 Learning Tools Interoperability.
4 Mathematical Markup Language.
5 Open standard and decentralized authentication protocol.
restrizione e senza alcun costo aggiuntivo, nel pieno rispetto degli standard open source definiti dalla
Open Standard Initiative (OSI: xxxxx://xxxxxxxxxx.xxx)
Funzionalità del software:
- Strumenti per la valutazione mediante prove standardizzate degli allievi con bisogni educativi speciali (BES): disponibilità di funzioni di audio-lettura (donatore di voce), di ingrandimento, di uso dei contrasti visivi, ingrandimento totale e parziale, ecc.;
- Strumenti diagnostici per la verifica della funzionalità delle strumentazioni informatiche delle scuole: disponibilità di diagnostic tool per la verifica in sede e in remoto delle caratteristiche tecniche delle strumentazioni e della connettività delle singole scuole;
- Test e item banking: disponibilità di un sistema gerarchico di archiviazione/gestione delle domande e dei test con funzionalità di inserimento, cancellazione, modifica, ecc. Il sistema di banking deve consentire anche l’indicizzazione delle domande e delle prove per garantire la piena interrogabilità delle banche;
- Authoring per:
o test assembly secondo regole predefinite che consentano la strutturazione di prove o blocchi in base al tempo di somministrazione, difficoltà delle domande e altri aspetti indicizzati nel sistema di banking;
o item assembly che consenta di inserire più interazioni QTI e con la possibilità di avere funzioni avanzate di anteprima (preview). Il sistema di item assembly deve supportare item già in possesso di INVALSI implementati secondo standard QTI e PCI e che includono un editor matematico con funzioni trigonometriche, indicazioni di intervalli, operatori di comparazione e i simboli matematici inclusi nei più diffusi editor matematici dei software per la gestione di testi;
- Strutturazione/composizione del test: possibilità di implementare regole di selezione delle domande (branching rules) complesse in funzione delle risposte fornite e anche secondo un approccio multi-stage adaptive;
- Stampa: possibilità di stampare item e test sia in ambiente authoring sia per il rispondente con la possibilità di visionare le risposte fornite, anche con eventuale apposizione di firma digitale sul documento stampato.
L’aggiudicatario deve fornire adeguate e dettagliate informazioni relativamente a quali tra le suddette funzionalità sono già implementate nel software messo a disposizione e quali devono essere implementate parzialmente o ex novo in seguito all’aggiudicazione del presente contratto.
Requisiti del sistema di test delivery:
- Navigabilità: disponibilità di funzioni di navigazione all’interno del test per facilitare lo svolgimento della prova per lo studente con la possibilità di muoversi all’interno della stessa anche in modalità non sequenziale;
- Flagging: possibilità per lo studente di selezionare domande alle quali ha già risposto per poterle rivedere, eventualmente modificando la risposta fornita, prima della chiusura definitiva del test;
- Precaricamento di dati: possibilità di precaricare dati (di qualsiasi natura) già disponibili da proporre al rispondente in modo che questi possa confermarli o modificarli;
- Strumenti di calcolo: disponibilità di strumenti di calcolo e di misura (calcolatrice di base e scientifica, righello elettronico, squadra elettronica, goniometro elettronico, ecc.);
- Consultazione di documenti .pdf: possibilità per lo studente di consultare predefiniti documenti .pdf durante lo svolgimento del test.
- Kiosk mode: diponibilità di impostare il sistema di delivery in modalità kiosk.
Metodologia di sviluppo del software: per tutti gli sviluppi richiesti da INVALSI l’aggiudicatario deve fornire una descrizione dettagliata della metodologia seguita, preferibilmente secondo un framework di sviluppo di tipo SCRUM, specificando ruoli e responsabilità degli sviluppatori coinvolti, la backlog size e le modalità di pianificazione.
5. OBBLIGO DI RISERVATEZZA
L’Aggiudicatario si obbliga ad osservare e a far osservare la massima riservatezza su informazioni, documenti o altro tipo di materiale provenienti dall’INVALSI, da Amministrazioni o da altri soggetti coinvolti nell’espletamento del servizio. L’Aggiudicatario si obbliga, altresì, ad eguale riservatezza per tutti i risultati, anche parziali, elaborati in qualsiasi forma (cartacea, informatica, ecc.) della propria attività, salvo che lo stesso INVALSI ne indichi la diffusione, secondo le modalità giudicate più opportune.
In caso di inadempienza, l’INVALSI si avvarrà degli strumenti di risoluzione contrattuale e risarcimento danni, ove non ritenga più efficace il ricorso all’esecuzione in danno previa diffida (art. 6 DPR 20.08.2001, n° 384), fatto salvo il ricorso all’Autorità giudiziaria ove ricorrano i presupposti previsti dall’art. 622 del Codice Penale.
6. TUTELA DELLA RISERVATEZZA DEI DATI PERSONALI
Ai sensi del D. Lgs. 30 giugno 2003, n. 196 (Codice in materia di protezione dei dati personali), l’Aggiudicatario si impegna a garantire la sicurezza nella gestione dei dati e dei sistemi in modo da ridurre al minimo i rischi di distruzione o perdita anche accidentale dei dati stessi, di accesso non autorizzato o di trattamento non consentito o non conforme alle finalità della raccolta.
L’Aggiudicatario s’impegna, altresì, ad adottare le misure minime individuate nel citato D. Lgs. 196/2003, volte ad assicurare un livello adeguato di protezione dei dati personali.