Pseudo-haptics exploit carefully crafted visual or auditory cues to trick the brain into "feeling" forces that are never physically applied, offering a low-cost alternative to traditional haptic hardware. Here, we present a comparative psychophysical study that quantifies how visual and auditory stimuli combine to evoke pseudo-haptic pressure sensations on a commodity tablet. Using a Unity-based Rollball game, participants (n = 4) guided a virtual ball across three textured terrains while their finger forces were captured in real time with a Robotous RFT40 force-torque sensor. Each terrain was paired with a distinct rolling-sound profile spanning 440 Hz - 4.7 kHz, 440 Hz - 13.1 kHz, or 440 Hz - 8.9 kHz; crevice collisions triggered additional "knocking" bursts to heighten realism. Average tactile forces increased systematically with cue intensity: 0.40 N, 0.79 N and 0.88 N for visual-only trials and 0.41 N, 0.81 N and 0.90 N for audio-only trials on Terrains 1-3, respectively. Higher audio frequencies and denser visual textures both elicited stronger muscle activation, and their combination further reduced the force needed to perceive surface changes, confirming multisensory integration. These results demonstrate that consumer-grade isometric devices can reliably induce and measure graded pseudo-haptic feedback without specialized actuators, opening a path toward affordable rehabilitation tools, training simulators and assistive interfaces.
- ID Articolo: 2510.09570
- Titolo: Differential Analysis of Pseudo Haptic Feedback: Novel Comparative Study of Visual and Auditory Cue Integration for Psychophysical Evaluation
- Autori: Nishant Gautam, Somya Sharma, Peter Corcoran, Kaspar Althoefer
- Istituzioni: Queen Mary University of London (Advanced Robotics), University of Galway (C3I)
- Classificazione: cs.HC cs.GR cs.NE cs.RO physics.med-ph
- Link Articolo: https://arxiv.org/abs/2510.09570
Questo studio esplora la tecnologia del feedback pseudo-aptico, che inganna il cervello nel "sentire" forze non effettivamente applicate attraverso segnali visivi o uditivi accuratamente progettati, fornendo un'alternativa a basso costo all'hardware aptico tradizionale. La ricerca utilizza uno studio psicofisico comparativo basato su Unity con il gioco Rollball, analizzando quantitativamente come gli stimoli visivi e uditivi si combinano per evocare sensazioni di pressione pseudo-aptica su tablet commerciali. Quattro partecipanti hanno controllato una palla virtuale attraverso tre tipi di terreno con texture diverse, mentre un sensore di forza-coppia Robotous RFT40 ha catturato in tempo reale la forza delle dita. I risultati sperimentali mostrano che nei terreni 1-3, le forze tattili medie nei soli test visivi sono rispettivamente 0,40 N, 0,79 N e 0,88 N, mentre nei soli test uditivi sono 0,41 N, 0,81 N e 0,90 N. Lo studio dimostra che i dispositivi isometrici di livello consumer possono indurre e misurare in modo affidabile il feedback pseudo-aptico graduato.
La tecnologia aptica tradizionale affronta diverse sfide critiche:
- Costi hardware elevati: I motori di retroazione di forza e gli attuatori professionali sono ingombranti e costosi, limitando l'applicazione diffusa al di là dei laboratori di ricerca e dei simulatori di fascia alta
- Mancanza di prove quantitative: Nonostante il concetto di proof-of-concept del feedback pseudo-aptico risalga a vent'anni fa, mancano ancora prove quantitative su come specifici parametri visivi e audio si modulano congiuntamente sulla percezione della pressione
- Insufficiente precisione di misurazione: Rimane poco chiaro se i dispositivi isometrici di livello consumer possono indurre e misurare tali effetti con sufficiente fedeltà per ricerche psicofisiche rigorose
La tecnologia pseudo-aptica promette di fornire esperienze tattili a basso costo e definite dal software spostando il "carico tattile" dall'hardware all'integrazione multisensoriale, scalabile a telefoni e tablet commerciali. Questa tecnologia ha importanti applicazioni in:
- Dispositivi di riabilitazione motoria
- Strumenti tattili assistivi
- Giochi immersivi
- Robotica
- Applicazioni biomediche
- Piattaforma di test multimodale economicamente pratica: Dimostra che un tablet da 200 sterline più sensori di forza commerciali possono replicare le funzionalità chiave di dispositivi aptici di fascia alta, consentendo esperimenti rapidi e portatili
- Mappatura sistematica segnale-forza: Disaccoppiando i canali audio e visivi, dimostra che texture a frequenza spaziale più elevata e suoni a tonalità più alta provocano entrambi una pressione autonoma più forte, con la loro combinazione che produce effetti sovraadditivi
- Benchmark psicofisici: Riporta differenze appena percettibili (JND) inferiori a 0,05 N per variazioni di superficie, stabilendo intervalli di pressione basale (0,40-0,90 N)
- Prospettive applicative: Apre la strada a dispositivi di riabilitazione economici, strumenti tattili assistivi e giochi immersivi
La ricerca utilizza il gioco "Rollball" sviluppato con il motore Unity come piattaforma sperimentale, dove i partecipanti devono far rotolare una palla virtuale su tre tipi di terreno con texture diverse.
- Dispositivo tablet: Tablet Lenovo M10 HD 2nd Gen 10.1"
- Sensore di forza: Sensore di forza-coppia Robotous RFT40 (capacità 100 N, precisione a livello di millinewton)
- Specifiche dimensionali: 40(P)×18,5(A) mm, peso 60 g
- Terreno 1: Superficie liscia, senza ostacoli, fornisce misurazioni di base
- Terreno 2: Texture simile a ghiaia, contiene ostacoli di buche e crepe
- Terreno 3: Texture montuosa, con pendii ripidi e diversificati
Ogni terreno è associato a diverse configurazioni di suoni di rotolamento:
- Terreno 1: 440 Hz - 4,7 kHz
- Terreno 2: 440 Hz - 13,1 kHz (produce suoni di "colpo" durante le collisioni)
- Terreno 3: 440 Hz - 8,9 kHz
La ricerca ha progettato tre condizioni sperimentali:
- Solo segnali visivi: I partecipanti si affidano solo alle informazioni di texture visiva
- Solo segnali uditivi: I partecipanti si affidano solo al feedback audio
- Combinazione audiovisiva: Fornisce contemporaneamente segnali visivi e uditivi
Quando l'utente tocca lo schermo, viene generato un "cerchio di effetto tocco" il cui raggio è proporzionale alla pressione applicata:
P=Te×td
dove Te è l'evento di tocco o il cerchio di effetto tocco, e td è la durata totale del tocco (secondi).
Calcolata utilizzando la legge di Weber:
K=ΔI/I
dove ΔI rappresenta lo stimolo aggiuntivo oltre l'intensità originale, I rappresenta l'intensità originale della sensazione, e K è la costante di Weber.
- Gruppo sperimentale: 4 individui (2 maschi, 2 femmine), età 22-26 anni
- Gruppo di controllo: 2 candidati (1 maschio 34 anni, 1 femmina 33 anni)
- Criteri di selezione: Esclusione di candidati con storia di epilessia, emicrania o malattie neurologiche
- Ambiente controllato, evitando variazioni improvvise di temperatura e umidità
- Evitare l'applicazione di forza o coppia eccessiva al sensore
- Tablet equipaggiato con pellicola protettiva antigraffio
- Acquisizione dati di forza-coppia in tempo reale
- Telemetria del raggio di tocco
- Misurazioni medie di 10 tocchi/clic per ogni terreno
| Terreno | Pressione Solo Visiva (N) | Pressione Solo Uditiva (N) |
|---|
| Terreno 1 | 0,39834 | 0,40550 |
| Terreno 2 | 0,7889 | 0,8077 |
| Terreno 3 | 0,8825 | 0,9022 |
| Terreno | Intervallo Pixel | Valore Indicatore (0-10) |
|---|
| Terreno 1 | 13-34 | 0,69-2,82 |
| Terreno 2 | 19-58 | 0,97-6,15 |
| Terreno 3 | 13-56 | 0,97-6,14 |
- Aumento sistematico della forza: La forza tattile aumenta sistematicamente con l'intensità dei segnali
- Predominanza uditiva: Nella condizione solo uditiva, gli utenti applicano una pressione leggermente superiore rispetto alla condizione solo visiva
- Integrazione multisensoriale: Nella condizione audiovisiva combinata, la forza necessaria per percepire i cambiamenti di superficie diminuisce ulteriormente
- Correlazione frequenza-pressione: Frequenze audio più elevate e texture visive più dense provocano entrambe un'attivazione muscolare più forte
I partecipanti hanno riferito di percepire quasi immediatamente differenze nella forza richiesta per l'interazione con il touchpad quando il terreno o il feedback uditivo cambiavano. Lo studio ha stabilito benchmark JND per variazioni di superficie, fornendo intervalli di pressione target per future interfacce pseudo-aptiche.
- Yoshida et al. (1968): Utilizzo del metodo SD per studiare la percezione tattile dei materiali
- Hollins et al. (2000): Ricerca sulla percezione multidimensionale utilizzando 17 materiali con texture
- Li et al. (2016): Simulazione di superfici morbide basata su CAD
- "Illusione della pelle di pergamena": Qualsiasi cambiamento nel feedback uditivo induce cambiamenti nella percezione della texture
- Effetto di ritardo audio: Il ritardo nel feedback uditivo indebolisce l'effetto di pseudo-retroazione
- Identificazione del materiale: Suoni a tonalità bassa fanno percepire agli utenti gli oggetti come più pesanti
- Fattibilità tecnica: I dispositivi isometrici di livello consumer possono indurre e misurare in modo affidabile il feedback pseudo-aptico graduato
- Integrazione multisensoriale: La combinazione di segnali visivi e uditivi produce effetti sovraadditivi, confermando la teoria dell'integrazione multisensoriale
- Potenziale applicativo: Apre la strada a strumenti di riabilitazione economici, simulatori di addestramento e interfacce assistive
- Precisione di misurazione: Stabilisce benchmark con JND inferiore a 0,05 N e intervallo di pressione basale 0,40-0,90 N
- Dimensione del campione: Solo 4 partecipanti, dimensione campionaria ridotta
- Tempo sperimentale: Limitato da vincoli temporali di due mesi e mezzo
- Misurazioni fisiologiche: Mancanza di misurazioni psicofisiche come conduttanza cutanea e frequenza cardiaca
- Dipendenza dal dispositivo: I valori del raggio di tocco dipendono dal dispositivo specifico
- Ricerca estesa: Collaborazione con neuroscienziati, utilizzo di elettromiografia e elettrooculografia
- Applicazioni terapeutiche: Terapia dispersiva per pazienti ustionati e rieducazione sensoriale
- Integrazione tecnologica: Integrazione con array tattile a ultrasuoni Ultraleap e framework MediaPipe
- Esplorazione multimodale: Integrazione di feedback termico e di flusso d'aria
- Approccio innovativo: Prima quantificazione sistematica dell'impatto dei segnali visivi e uditivi sul feedback pseudo-aptico
- Valore pratico: Dimostra la fattibilità di dispositivi consumer a basso costo, con importanti prospettive di applicazione commerciale
- Progettazione rigorosa: Utilizza molteplici metodi di misurazione (sensore di forza, raggio di tocco, valutazione psicofisica)
- Significato interdisciplinare: Combina interazione uomo-computer, psicofisica, robotica e altri campi
- Potenza statistica insufficiente: Dimensione campionaria di 4 persone troppo piccola, influisce sulla significatività statistica e sulla generalizzabilità dei risultati
- Progettazione del gruppo di controllo: Manca un vero gruppo di controllo senza segnali
- Analisi delle differenze individuali: Analisi insufficiente delle differenze tra individui e dei fattori influenti
- Effetti a lungo termine: Mancanza di ricerca su effetti di adattamento e impatto dell'uso prolungato
- Contributo accademico: Fornisce una base quantitativa importante per la ricerca sul feedback pseudo-aptico
- Applicazione industriale: Fornisce nuovi percorsi tecnologici per l'elettronica consumer, i giochi e la medicina riabilitativa
- Valore metodologico: Stabilisce paradigmi sperimentali e standard di misurazione riproducibili
- Medicina riabilitativa: Addestramento di riabilitazione motoria, recupero della funzione sensoriale
- Formazione educativa: Simulatori chirurgici, sistemi di addestramento alle competenze
- Elettronica consumer: Miglioramento del feedback tattile dei dispositivi mobili
- Tecnologie assistive: Sistemi di navigazione per non vedenti, strumenti tattili assistivi
L'articolo cita 41 riferimenti correlati, coprendo importanti lavori nei campi della percezione tattile, integrazione multisensoriale, realtà virtuale, interazione uomo-computer e altri domini di ricerca, fornendo una solida base teorica per la ricerca.
Valutazione complessiva: Questo studio fornisce un contributo importante nel campo del feedback pseudo-aptico, quantificando sistematicamente attraverso una progettazione sperimentale rigorosa l'impatto dei segnali audiovisivi sulla percezione tattile, aprendo nuovi percorsi per lo sviluppo di tecnologie aptiche a basso costo. Nonostante le limitazioni come la piccola dimensione del campione, il suo approccio innovativo e il valore pratico lo rendono un importante riferimento in questo campo.