English as a Second Language Learners' Exploration of Multimodal Texts in a Junior High School

This study is concerned with the significance of the affordances of multimodality in contemporary conceptualizations of ESL/literacy pedagogies. Using a cellular phone advertisement, 18 students composed visual representations of their understandings of the text. Drawing on the social semiotic framework of Kress and van Leeuwen, the annotated drawings of the students were analyzed and interpreted for meaning making. The findings showed that multimodal texts afforded the students opportunities for diverse interpretations and representations of visual images based on the interplay of self‐identity and social‐cultural worlds. تهتم هذه الدراسة بأهمية توفير فرص متعددة الطرق بالتخيلات المعاصرة في علم تعليم معرفة القراءة والكتابة والإنكليزية كلغة ثانية. وبواسطة استخدام إعلانات الهاتف الخلوي نظّم ثمانية عشر طالباَ تمثيلات بصرية لفهمهم النص. واستناداً إلى الإطار الاجتماعي المتعلق بالعلامات مؤسسيه كريس وفان ليووين قد تم تحليل رسومات الطلاب المصحوبة بملاحظاتهم وتفسيرها لصناعة المعنى. وقد بيّنت النتائج أن النصوص المتعددة الطرق وفّرت لطلاب فرصاً لتشكيل تفاسير متنوعة وتماثيل من الصور البصرية بناء على التفاعل بين عالَمَيْ الهوية الذاتية والثقافة الاجتماعية. 本研究是有关当代英语为第二语言/读写能力教育学的概念形成中多模态可用性的重要意义。18名学生根据他们对一个手机广告文本的理解，绘作出他们的视觉表征。研究者利用Kress和van Leeuwen的社会符号框架，对学生的诠释绘图作意义建构的分析与解读。研究结果显示：多模态文本给学生提供可用性的机会，让他们根据自已的身分认同和社会文化世界观的互相作用，对视觉图像作出多样的解读与表征。 Cette étude porte sur la signification que permet la multimodalité selon les conceptions contemporaines des pédagogies de l'anglais langue deux / de la littératie. En utilisant la publicité d'un téléphone cellulaire, 18 étudiants ont composé une représentation visuelle de ce qu'ils avaient compris de ce texte. En nous appuyant sur la structure sémiotique sociale de Kress et van Leeuwen, nous avons analysé et interprété la façon dont les étudiants ont fait du sens avec ces dessins commentés. Les résultats montrent que les textes multimodaux offrent aux étudiants des possibilités d'interprétation diverse et des représentations des images visuelles qui reposent sur l'interaction entre l'identité personnelle et leur univers socio‐culturel. Настоящее исследование посвящено значению мультимодальных возможностей в современных контекстах – при обучении английскому как второму языку и преподавании различных видов грамотности. Осмыслив рекламу мобильных телефонов, 18 учащихся изобразили свое о ней представление – т.е. создали визуальную презентацию текста. Содержание аннотированных рисунков учащихся было проанализировано и интерпретировано на основе социально‐семиотического подхода (Kress и van Leeuwen). Результаты показали, что мультимодальные тексты предоставили учащимся возможности для разнообразных интерпретаций и визуального представления образов, которые формируются на основе их самоидентичности и социально‐культурного окружения. Este estudio trata sobre el significado de lo que es proporcionado por muchas modalidades en el concepto contemporáneo de las pedagogías del ESL y de conocimientos. Dieciocho estudiantes crearon representaciones visuales de su entendimiento del texto de un anuncio sobre teléfonos celulares. Usando el marco semiótico social de Kress y van Leeuwen, se analizaron los dibujos anotados de los estudiantes para interpretar su creación de significado. Los resultados mostraron que los textos de múltiples modalidades les dieron a los estudiantes oportunidades para varias interpretaciones y representaciones de las imágenes visuales basadas en el juego entre la propia identidad y los mundos socioculturales.