Combinatorial structure of iconic strategies in the manual-visual modality: evidence from silent gestures by hearing non-signers
ساختار ترکیبی راهبردهای شمایلی در وجه حرکتی-بصری: شواهدی از حرکات بیصدا توسط افراد شنوا و غیرزباناشارهای
چکیده
Iconicity, understood as perceived resemblance between aspects of form and meaning, provides a central basis for representing conceptual information in the manual-visual modality. Previous research on silent gesture has shown systematic associations between semantic categories and particular iconic strategies, with several strategies sometimes used together to represent a concept. How these strategies are organized when they are used together, however, remains less well understood. Using an individually administered task adapted from an established silent gesture paradigm, we elicited silent gestures from 38 Mandarin-speaking hearing non-signers to represent 246 concepts spanning concrete and abstract conceptual categories. We examined how concreteness and conceptual category were related to the occurrence of combinations and how meaningful manual units were organized sequentially, simultaneously, or in mixed structures. Our results show that most manual productions contained a single meaningful unit. Concrete concepts were more likely than abstract concepts to elicit combinations overall and simultaneous-only combinations, while conceptual category was associated with all three organizational formats. Sequential combinations were the most frequent, with drawing and embodying tending to precede acting, while pointing and schema mapping tended to precede symbolic mapping. Simultaneous combinations were characterized by recurrent pairings across the hands, especially acting with embodying and representing with locating, and broader iconicity-type pairings varied across conceptual categories. Mixed combinations were rare but clustered in concepts that invited both temporal staging and bimanual integration. Our findings extend patterned iconicity beyond the selection of individual form-meaning mappings to the relations among multiple iconic depictions. They show that the manual-visual modality provides temporal and spatial resources through which conceptual relations can be externalized and systematically organized even in the absence of an established sign language system.
شمایلیت، که بهعنوان شباهت ادراکشده میان جنبههای صورت و معنا درک میشود، مبنای مرکزی برای بازنمایی اطلاعات مفهومی در وجه حرکتی-بصری فراهم میکند. پژوهشهای پیشین درباره حرکات بیصدا، ارتباطهای نظاممند میان دستههای معنایی و راهبردهای شمایلی خاص را نشان دادهاند، بهطوریکه گاه چندین راهبرد بهطور همزمان برای بازنمایی یک مفهوم بهکار میروند. با این حال، چگونگی سازماندهی این راهبردها هنگام استفاده همزمان، کمتر شناخته شده باقی مانده است. با استفاده از یک تکلیف فردی برگرفته از الگوی تثبیتشده حرکات بیصدا، حرکات بیصدایی از ۳۸ فرد شنوا و غیرزباناشارهای چینیزبان (Mandarin-speaking) برای بازنمایی ۲۴۶ مفهوم در دستههای مفهومی عینی و انتزاعی گردآوری شد. ما بررسی کردیم که چگونه عینیت و دسته مفهومی با وقوع ترکیبها و نحوه سازماندهی واحدهای معنادار حرکتی بهصورت پیدرپی، همزمان یا ساختارهای ترکیبی مرتبط هستند. نتایج ما نشان داد که بیشتر تولیدات حرکتی تنها یک واحد معنادار داشتند. مفاهیم عینی نسبت به مفاهیم انتزاعی، بیشتر ترکیبهای کلی و ترکیبهای صرفاً همزمان را برمیانگیختند، در حالی که دسته مفهومی با هر سه قالب سازمانی مرتبط بود. ترکیبهای پیدرپی بیشترین فراوانی را داشتند، بهطوریکه ترسیم و تجسم معمولاً پیش از اجرا قرار میگرفتند و اشاره و نگاشت شِمایی معمولاً پیش از نگاشت نمادین قرار میگرفتند. ترکیبهای همزمان با جفتشدنهای مکرر میان دستها، بهویژه اجرای عمل با تجسم و بازنمایی با مکانیابی، مشخص میشدند و جفتشدنهای گستردهتر از نوع شمایلی در دستههای مفهومی مختلف متفاوت بود. ترکیبهای مختلط نادر بودند اما در مفاهیمی که هم صحنهپردازی زمانی و هم یکپارچگی دودستی را ایجاب میکردند، متمرکز بودند. یافتههای ما، الگوهای شمایلی را فراتر از انتخاب نگاشتهای منفرد صورت-معنا به روابط میان چندین بازنمایی شمایلی گسترش میدهد. این نتایج نشان میدهد که وجه حرکتی-بصری منابع زمانی و مکانی را فراهم میکند که از طریق آنها روابط مفهومی حتی در غیاب یک نظام زبان اشاره تثبیتشده میتواند برونسازی و بهطور نظاممند سازماندهی شود.