Sound and Music Computing è una conferenza un po’ diversa dalle altre analoghe, tipo NIME, ICMC, DAFX et similia, per un motivo abbastanza preciso: non si concentra su un particolare aspetto, al contrario lo spettro di contributi che accetta è estremamente ampio, penso per incoraggiare il cross-thinking [1] che conduce a piacevoli situazioni in cui si arriva a risultati nell’ambito facendo giri strani [2].

I vari paper di quest’anno erano tutti molto interessanti. Per forza di cose ho dovuto glissare un po’ sui poster, ma le sessioni di talk me le sono fatte tutte [3] però le sessioni a cui ho assistito, il keynote di Ricard Solé sull’aspetto evoluzionistico di cellule, linguaggio e tecnologia, e il panel sul rapporto tra strumenti (tools) e musica, sono stati tutti fonte di ispirazione, senza eccezione.

Poi è venuto il venerdì pomeriggio, la sessione di Interaction in cui dovevo presentare il mio paper — che si trova qui per chi volesse leggerlo. Il talk è andato abbastanza bene, quantomeno sono riuscito a far ridere il pubblico quando volevo io e a mantenere l’interesse. Soprattutto sono riuscito ad evitare il cartello giallo che il chairman alza quando mancano cinque minuti allo scadere del tempo. Mi sono state fatte un paio di domande interessanti che mi hanno dato spunti per riflettere. Insomma, sono proprio contento.

Passato il talk finalmente sono riuscito a rilassarmi e godermi il resto della conferenza con un po’ di leggerezza in più — non che abbia passato una settimana a preoccuparmi del venerdì pomeriggio, sia chiaro, ma sì, insomma :)

C’è stato un altro aspetto che chi mi ha seguito su Twitter probabilmente avrà notato, cioè quello dei concerti. Allora, uno pensa “oh, via, andiamo a sentire un po’ di musica”, e invece no. L’opening act è stato ad opera di Barry Truax, che è questo professore canadese luminare nella creazione di soundscapes. È stata una bella performance in una bella sala con un bel sistema ad otto canali molto immersivo. Bello. I brani erano un po’ lunghi, ma piacevoli. Per chi non sa cosa sia un soundscape, in parole povere è come uscire di casa e ascoltare i rumori che ci sono attorno. Col vantaggio che ci si può immergere in paesaggi fantastici e molto lontani dalla propria realtà, e addirittura raccontare storie. Molto bello, anche per chi si occupa di sonorizzazione di opere visive.

Nei giorni seguenti ci sono stati altri concerti. Ecco, ora. Io non saprei. Probabilmente sono io che non conosco cosa sta dietro a tutto questo, ma francamente sentire rumori senza filo logico in octofonia per 20+ minuti a “brano”… è un po’ noioso :) A meno, ovviamente, che questi rumori siano interessanti, comunichino qualcosa, o almeno ci provino. Vabè. C’è stato qualche highlight, ovviamente, tipo la performance “Swish & Break”, di Maurizio Goina, Pietro Polotti e Sarah Taylor, in cui quest’ultima indossava degli accelerometri e teneva in mano due torce, e faceva una specie di balletto che veniva convertito in suoni. Veramente spettacolare. Poi un altro highlight dev’essere stato “Baroque Basso Continuo for Cello,Heart (ECG) and Mind (EEG)”, di Stephen Barrass e Diane Whitmer, con Sasha Agranov al violoncello, che purtroppo mi sono perso. Infine uno che ho apprezzato moltissimo è stato “Mimar” di Mikel Chamizo, per quartetto di sassofoni e Reactable. Molto bello il brano per sassofoni, magistralmente arricchito dal Reactable.

Il problema è che tutta questa art music risulta un po’, come dire, incomprensibile. Tanto incomprensibile. Uno ha sempre l’impressione di non sapere se si sta perdendo qualche pezzo o se effettivamente sta assistendo a cat /dev/urandom > /dev/dsp… :) E quindi i simpatici organizzatori hanno pensato ad una sessione di Vocaloid + LoopMash per spezzare il sabato. È stato un gran peccato che non sia riuscito ad arrivare questo signore dal Giappone che ci doveva spiegare come mai Vocaloid ha avuto un tale successo da avere una quantità di dischi in classifica. Tuttavia un’attendibile fonte giapponese (che, ad onor del vero, vive in Italia da molti anni) sostiene che secondo lei la società giapponese è un po’ malata. E se lo dice lei… (ciao Tomoko, ciao Mathieu :)

La parte divertente è stata quando Xavier Serra ha fatto partire questo video e i giapponesi nella sala si sono pisciati dalle risate. Notably enough, il resto dell’audience aveva più un’espressione basita, tipo “SRSLY?“, mentre quelli dell’MTG, che è uno dei maggiori contributori a Vocaloid, nella persona di Jordi Bonada, avevano una faccia tipo “oh, merda, noi abbiamo creato questo mostro”… e ad ogni video successivo l’incredulità e lo sgomento aumentavano. Vabè, dopo giorni di “art music”, un po’ di JPop ha fatto solo bene alle orecchie :) Peccato che alla fine me ne sono uscito con un tale mal di testa che mi sono dovuto ritirare in ostello un paio d’ore.

Alla fine della fiera (…) ho imparato due cose importanti: la Fnac di Barcellona chiude di Domenica (mannaggia a loro), ed esiste tutto un ecosistema di roba fighissima che non avevo mai veramente sospettato. Lezioni jolly: se si atterra a El Prat terminal 1 bisogna prendere l’autobus circolare per andare al terminal 2 dove si trova il trenino per Sants, e se si vuole andare da Sants a El Prat bisogna prendere la R2 Nord, oppure scendere a El Prat de Llobregat e cambiare.

In definitiva, grazie a tutti, è stata una settimana fantastica, e ci rivedremo l’anno prossimo a Padova (yay! :)

1. Uscitevene voi con una parola italiana altettanto efficace…
2. Tipo in Efficient Finite Difference-based Sound Synthesis using GPUs, che è una cosa a cui pensavo da un po’ ma che non ho avuto occasione di provare.
3. Non è vero, ho saltato quelle su Sound Modelling and Processing e Music Classification and Annotation, perché in effetti mi interessavano meno e avevo altro da fare :)

Dopo essermi riorientato, e fatta un’interminabile nuotata nel collegamento sotterraneo tra le stazioni verde e viola di Passeig De Gracia (ma allora un motivo c’era se non prendevo quell’ingresso ma facevo il giro da sopra) finalmente sono arrivato in ostello dove mi aspettava un simpatico cambio di camera, da singola a quadrupla, per via che alcune camere, tra cui la mia, erano chiuse per disinfestazione. La cosa dovrebbe durare solo per questa notte, ma forse domani mi mettono comunque in doppia. Vabè, pazienza.

Non abbastanza moralmente sconfitto, scendo e decido di farmi un giro in città. Infilo la viola a Encants, scendo a salutare la Sagrada Familia, riprendo la viola constatando che il Pizza Hut è morto ma KFC è ancora lì — Sisma, ne sai qualcosa? :) — e smonto di nuovo a Passeig De Gracia. A piedi mi faccio la Rambla, constatando che le statue umane sono sempre le stesse, e arrivo al Port Vell da dove faccio tappa al MareNostrum, circumnavigo il porto — scoprendo che ci sono almeno una medusa — e finisco alla spiaggia della Barceloneta. La foto ve la caccio appena posso, ma scommetto che indovinate qual’è. :)

Da lì riprendo la metro gialla, constatando che Valle Hermoso ha finito di costruire ed è pronto ad affittare, e faccio tappa a in piazza Jaume I per un panino da Bocatta — che però a quanto pare è stata mangiata da Pans & Co.

Sufficientemente stufo, passo a salutare Sant’Eulalia, scorro le vetrine che si chiudono e mi reinfilo in metro per buttarmi in doccia. Devo ammettere che aprire Twitter e Facebook è stato quasi rilassante.

Il paper e la presentazione ve li pubblico dopo la conferenza.

Con tutto questo tremare di terra, dopotutto, mi è un po’ passata la voglia di fare il post in cui tiravo le somme, quindi mi limito a comunicare che ho finito la tesi — dove per “finito” si intende che è tutto da rifare da capo ma che almeno la demo è andata bene e comunque mi mancano due esami — e che sabato mattina mi attende l’avione per riportarmi a zompettare per gl’italici lidi — oltre a sottolineare che il terremoto non è mica venuto perché ho finito la tesi, razza di malelingue…

Mi piacerebbe pubblicare la relazione in cui riassumo per filo e per segno i sei mesi che ho passato qui all’MTG, ma sto cercando di trarre un paper da inviare a SMC [1] per cercare di raggranellare qualche punto in più per quando farò domanda di dottorato. In compenso credo di poter pubblicare qualche foto e qualche video — almeno spero, ma qua pare che durante il trasloco ci siano stati gli sciacalli che si sono rubati la videocamera…

Per tutto quello che ho imparato, sia dal punto di vista tecnico che, e soprattutto, circa le diversità di rapporti e gestioni di fatti e cose in un pezzetto di Terra diverso dall’Italia, probabilmente non mi sarà sufficiente una vita per raccontarlo e rimetterlo in pratica, quindi voi intanto cominciate a farvene una ragione, che poi si vedrà.

Per tutto il resto, dicono, c’è Mastercard… tranne in Spagna dove le carte Maestro sono praticamente inutili.

1. La scadenza è il 17 Aprile ma prima di un mese non si saprà se l’accettano o meno, quindi almeno fino ad allora non credo di poterlo diffondere a causa del processo di valutazione.

Ora devo solo capire se la mia licenza by-nc-nd non cozza con l’uso in Schmap, ma dopotutto sono stati così gentili da chiedere che non penso farò ulteriori obiezioni.

Pensando a Dorothy nella fattoria del Kansas, mi sono consolato che, se così fosse stato, almeno Barcellona ci avrebbe guadagnato. E invece ci ha perso tre bambini e un palazzetto.

Allora, eravamo rimasti al video figoso in cui io disegnavo delle cose in rosso e poi i rettangolini blu diventavano bianchi, giusto? WordPress mi conferma che è così, e quindi c’è una parte che manca all’appello.

Tanti piccoli accordi

Discutendo col prof — che infine ha dovuto mettermi un freno ché sennò gli fornivo idee per tre anni di progetti e non era bello — siamo giunti a due idee:

1. la mia proposta iniziale era di selezionare un accordo di base (es. G#7) poi selezionare uno stile musicale (es Blues) e poi selezionare una delle possibili progressioni Blues che cominciano — o contengono in qualche posizione — l’accordo selezionato. L’idea sarebbe stata anche buona ma effettivamente incasinata;
2. la sua controproposta è stata di costruire attorno al Tonalizer un “chord set”, ossia un insieme in cui l’utente inserisce degli accordi a sua discrezione, ordinabile, cioè che lui per conto suo si comporta come un insieme nel senso matematico, però sui suoi elementi si può costruire una sovrastruttura ordinata, che a noi che ci piace il pane con la soppressa piacerà chiamare “sequenza”. Questa sequenza andrà quindi suonata con tempi da definire, ma suppongo si andrà di multipli non per forza interi della battuta.

A quel punto la mia controcontroproposta è stata di non abbandonare per forza l’idea iniziale ma di semplificarla, nel senso che l’utente inserisce un accordo, questo viene preso come accordo di base (cioè, il primo di una progressione) e si mostrano tutte le progressioni che possono cominciare con quell’accordo. Poi l’utente ne inserisce un altro e si mostrano tutte le progressioni che cominciano con l’accordo di base e contengono da qualche parte il grado/modo del nuovo accordo relativo a quello di base, e via così col terzo, il quarto e tutti gli accessori.

Inserire gli accordi

E qui viene la parte interessante. Ci sono due paradigmi principali sul reacTable, che sono l’interfaccia tangibile di cui ho già parlato, e l’interfaccia a strisci e ditate di cui è pieno il mondo, YouTube e anche gli scaffali dei negozi. Per cui uno potrebbe pensare di sviluppare una serie di oggetti a rappresentare accordi, accidenti, gradi, modi, il tutto gioiosamente componibile in catene e… e dopo il terzo accordo è finito lo spazio sul tavolo.

L’opzione due è appena un po’ più vecchia dell’homo sapiens, e cioè si tratta di usare le dita per scrivere nomi, accidenti, gradi, modi e tutto quanto — dove per “tutto quanto” intendo la scelta di stili e progressioni, nonché la costruzione della famosa sequenza. Bello, dice. Mica facile, però. Questa eventualità va sotto il nome di handwriting recognition e ci sono sostanzialmente due sistemi su cui fare affidamento:

• data un’immagine con le scritte da riconoscere, si applicano le ben note tecniche di riconoscimento ottico (il famoso OCR) basate su algoritmi di varia complessità che vanno dalle più semplici correlazioni alle più sofisticate tecniche per la ricerca i feature invarianti alle trasformazioni.
• data una spezzata definita per punti sul piano 2D, si possono applicare varie tecniche più o meno fantasiose, a partire dalla ricerca di similarità tra NURBS fino a simpatiche deviazioni del problema della visibilità.

La mia situazione è questa: reacTIVision rileva le ditate e ne trasforma il movimento proprio in sequenze di punti. La seconda via è evidentemente la mia via, motivo per cui da un po’ di giorni mi sto industriando per cercare quanti più metodi diversi riesco a trovare. Averne più di uno mi garantirebbe due vantaggi: primo, inserire un po’ di algoritmica un minimo sofisticata per contentare chi non vive senza; secondo, poter confrontare i vari sistemi in termini di facilità d’uso, flessibilità e velocità. Per ora mi sto concentrando su un sistema di similarità tra NURBS e un sistema basato su superfici non convesse costruite  per triangoli.

• NURBS: l’idea di base è di costruire dei modelli di riferimento, uno o più per ciascun glifo diverso, e usarli per confrontare la NURBS costruita dai dati ricevuti dall’utente. In verità non voglio confrontare veramente le curve ma solo il loro guscio convesso formato dai punti di controllo. Supponendo di usare i punti che arrivano da reacTIVision, questo sono tipicamente tanti e sparpagliati, in generale molto diversi da un modellino bello come questo:(non è che questo sia bellissimo, ma è meglio di niente). Il trucco starebbe nel calcolare un’approssimazione della curva inferta dall’input umano con un certo numero fissato di punti di controllo il più possibile equidistanti tra loro. La domanda è: qualcuno ha idee? Perché, una volta che questo è possibile in modo sufficientemente veloce, posto che i glifi di riferimento siano stati costruiti in modo analogo, allora diventa molto facile confrontare punto per punto l’input con la lista dei glifi, diciamo nell’ordine di m·n passi con m il numero di glifi ed n il numero di punti di controllo.
  Ci sono diverse condizioni problematiche, tra cui come allineare la coppia per il confronto. Per esempio scegliendo di far combaciare i due estremi, si deve per forza ripetere due volte il confronto per ogni coppia, nel caso gli estremi venissero scambiati: con un po’ di immaginazione dovreste riuscire a capire cosa intendo guardando l’esempio sopra. Un altro problema derivante dall’allineamento degli estremi è l’imprecisione dell’utente che può far variare anche di molto il punteggio. Tuttavia sono fiducioso circa la buona diversità tra i glifi.
• Superfici triangolate: il secondo metodo su cui mi sto concentrando consiste nel prepare dei modelli in questa forma: e poi guardare quanti punti dell’input cadono dentro la superficie. Con questo metodo il problema dell’allineamento è ancora peggiore: occorrerebbe individuare dei punti nei cui intorni possono situarsi gli estremi dell’input. Tuttavia, una volta scelto un “buon allineamento”, la robustezza all’imprecisione dell’input è nettamente superiore (e modulata dalla larghezza della striscia) e c’è anche il vantaggio che non si devono fare calcoli complessi con polinomi di grado elevato bensì un più rapido e veloce test di appartenenza — velocità comunque mitigata dal fatto che ogni punto va testato con ciascun triangolo o al più con un “intorno” di triangoli. Il punto sta tutto nel trovare detto buon allineamento.

Naturalmente se avete suggerimenti a riguardo — anche per altri metodi sulla piazza — io sono disponibile e, in caso, vi guadagnereste un posto tra i ringraziamenti.

Gestire il set

Una volta costruito il set, costruire la sequenza è un compito abbastanza semplice: il dito collega gli accordi con una sorta di spezzata, reacTIVision fornisce il percorso del dito per punti con associata anche la velocità del dito in ogni punto. Assumendo che il dito “rallenti” quando fa tappa su un accordo, si può usare questa informazione per costruire la catena. O qualcosa del genere, ci penserò più avanti. La gestione automatica di stili e progressioni invece è molto più facile, si può sviluppare con una combo di glifi alfanumerici e liste visualizzate sul tavolo.

Sì, insomma, di cose da fare ce n’è. Mi sono fissato il 9 febbraio per avere tutte queste meraviglie pronte per il test — anche se più realisticamente la fine dello sviluppo cadrà nella relativa settimana e non proprio quel lunedì. E poi si vedrà, fino al 9 aprile c’è tempo per inventarsi altre meraviglie.

In Spagna, se passi accanto ad un cantiere, anche lì senti musica. Ma qua, fuori dalla finestra, sul tetto della Estació de França, ascoltano i Metallica e i System Of A Down.

Non trarrò conclusioni macabre, ma poi dice che in Italia, sul lavoro, si muore il 30% in più che in Spagna.

Eppure al negozio (con le insegne VISA, Mastercard, AmEx e Cirrus/Maestro) non paghi con la carta meno di dieci euro e sul sito delle ferrovie la moneta elettronica (i.e. VISA Electron) non è accettata. Metteteci che prima di farvi dare un IBAN completo dovete spiegargli che cos’è, perché vi serve e dove lo trovano e non avete esattamente l’immagine del paese moderno che invece si ha della Spagna.

EDIT: Alla fine ho dovuto fare una coda mortifera alla stazione (e per fortuna che sono arrivato dopo le 16 perché prima i biglietti AVE e lunga percorrenza non si vendono e io non è che lo sapevo…) perché alla stazione Sants l’unica speranza (esclusi gli sportelli che già comunque versavano in condizioni penose) era l’automatica che però bisognava essere già clienti (con tessera cliente) e aver acquistato il biglietto prima, senza contare che “se ce l’ha già stampato, non serve stamparlo da qua”. Così sono tornato mesto mesto alla stazione di França, ho fatto la coda e in relativamente poco tempo il solerte impiegato mi ha fatto i biglietti. Peccato che la mia carta Maestro non funzionasse (ma come, al supermercato funziona sempre…) e invece, indovinate un po’? La Visa Electron sì.

Ma dico.