Codice insegnamento

4S010675

Crediti

12

Coordinatore

Alberto Castellini

Lingua di erogazione

Inglese

Settore Scientifico Disciplinare (SSD)

ING-INF/05 - SISTEMI DI ELABORAZIONE DELLE INFORMAZIONI

Corsi Singoli

Autorizzato

Moodle Seminari 0

L'insegnamento è organizzato come segue:

Obiettivi di apprendimento

Il modulo di Reinforcement Learning introduce le studentesse e gli studenti all'apprendimento per rinforzo. In particolare, il modulo si concentra sulla progettazione di algoritmi che consentono alle macchine di apprendere in base al concetto di rinforzo, cioè da feedback parziali, impliciti e con effetti estesi nel tempo, ottenuti interagendo ripetutamente con l'ambiente o gli utenti. Al termine del corso, le studentesse e gli studenti dovranno dimostrare di aver acquisito capacità di i) affrontare problemi di decisione sequenziale con tecniche di apprendimento per rinforzo, ii) identificare ed applicare gli algoritmi più efficaci ed efficienti per risolvere specifici problemi di decisione sequenziale, iii) progettare nuovi algoritmi di apprendimento per rinforzo. In particolare, le conoscenze acquisite riguardano tecniche avanzate per la risoluzione dei processi decisionali di Markov (e.g., ricerca con metodi Monte Carlo), i problemi di tipo bandit, l’apprendimento per rinforzo con e senza modello, l’apprendimento per rinforzo Bayesiano, l’apprendimento per rinforzo utilizzando reti neurali profonde, e cenni di tecniche avanzate di apprendimento (e.g., miglioramento sicuro delle policy, ambienti parzialmente osservabili, apprendimento gerarchico, per imitazione, inverso, e meta-apprendimento). Il modulo di Advanced Programming for AI mira a fornire informazioni sui linguaggi di programmazione, gli strumenti e le architetture software emerse nel campo dello sviluppo di sistemi software (SW) basati sull'intelligenza artificiale. L'obiettivo è quello di fornire alle studentesse ed agli studenti la comprensione delle caratteristiche specifiche e dei principi chiave alla base di diversi linguaggi e strumenti avanzati e per risolvere alcune classi di problemi in AI. Le studentesse e gli studenti acquisiranno competenze di programmazione in Python, saranno in grado di scrivere programmi per risolvere problemi tipici e di assemblare moduli software, gestire modelli, patterns, e operare deployment su Cloud, con particolare riferimento a interoperabilità ed explainability.

Prerequisiti e nozioni di base

Essendo un esame di primo anno, primo semestre, non vi sono prerequisiti specifici differenti da quelli richiesti per l’accesso al corso di laurea.

Programma

REINFORCEMENT LEARNING
- Processi decisionali di Markov
- Ricerca con metodi Monte Carlo
- Problemi di tipo bandit
- Apprendimento per rinforzo con e senza modello
- Apprendimento per rinforzo Bayesiano
- Apprendimento per rinforzo con reti neurali profonde
- Tecniche avanzate di apprendimento per rinforzo
--- miglioramento sicuro delle policy
--- ambienti parzialmente osservabili
--- apprendimento gerarchico
--- apprendimento per imitazione
--- apprendimento inverso
--- meta-apprendimento
ADVANCED PROGRAMMING FOR AI

Bibliografia

Modalità didattiche

Lezioni frontali, esperienze di laboratorio, esercitazioni.

Modalità di verifica dell'apprendimento

Per superare l'esame gli studenti dovranno dimostrare di:
- aver compreso i principi alla base del funzionamento dell’apprendimento per rinforzo e dei metodi per la programmazione di moduli basati su intelligenza artificiale
- essere in grado di esporre concetti di apprendimento per rinforzo e programmazione di moduli basati su intelligenza artificiale in modo preciso e organico senza divagazioni,
- saper applicare le conoscenze acquisite per risolvere problemi applicativi presentati sotto forma di esercizi, domande e progetti.
L'esame è costituito da una prova orale sugli argomenti trattati nella corso. In caso di elevata partecipazione la prova orale sarà sostituita da un esame scritto con domande equivalenti. Le domande potranno riguardare sia la parte teorica che le esercitazioni svolte in laboratorio.

Criteri di valutazione

Conoscenza teorica ed applicata delle tecniche insegnate nel corso; capacità critica di selezione delle tecniche in base al problema; capacità di utilizzo delle tecniche insegnate nel corso.

Criteri di composizione del voto finale

Il voto finale è rappresentato dalla media aritmetica dei voti delle due parti (RL/Advanced programming for AI) del corso.

Lingua dell'esame

Inglese (English)

Sustainable Development Goals - SDGs

Questa iniziativa contribuisce al perseguimento degli Obiettivi di Sviluppo Sostenibile dell'Agenda 2030 dell'ONU.
Maggiori informazioni su www.univr.it/sostenibilita