בכנס Mobile HCI 2013 האחרון במינכן, הוצג מאמר קצר של סטודנטים מהאקדמיה הסינית למדעים ומאוניברסיטת פנסילבניה בנושא "SpeechTouch: Precise Cursor Positioning on Touch Screen Mobiles".

העבודה הקצרה שהכינו הסטודנטים עסקה בפתרון "בעיית האצבע השמנה" בהפעלת מסכי מגע בכל הנוגע לקריאה או עריכה של מיילים או פתקים. במקרה זה, האצבע מכסה את האובייקטים בתצוגה של טלפונים סלולריים עם מסך מגע או מכשירים ניידים אחרים שלפניהם יש להציב את הסמן לאינטראקציות נוספות.

זה מוביל לעתים קרובות שגיאות קלט. עם SpeechTouch, התלמידים פיתחו שיטה multimodal המשפרת את הדיוק של מיקום סמן בנגיעה אחת. זה פשוט משלב את קלט המגע הלא מדויק ואת הקלט הקולי הפשוט. המשתמש נוגע במילה שבה הוא רוצה למקם את הסמן באצבעו ובו זמנית מבטא בקול רם את האות שלפניה ממוקם הסמן. ניסויים של התלמידים הראו כי שיטה זו עובדת היטב וניתן ליישם.