The use of Augmented Reality (AR) in comic stories (Comics) applied in educational contexts

a systematic literature review

Authors

Keywords:

Comics, Augmented Reality, Systematic literature review

Abstract

Comic books (comics) have become important pedagogical tools, promoting the contextualization of content and playful activities, in addition to encouraging critical reflection. With technological advances, immersive tools amplify the reader's experience, making it easier to understand the narrative and its elements. This work, through a systematic literature review, investigates the use of comics with augmented reality (AR) in educational contexts, analyzing scientific articles and works in annals of international events in the databases: DOAJ, ERIC, IEEE Xplore, JSTOR , ScienceDirect, SciELO, Springer, Scopus, Taylor & Francis and Web of Science. There was an increase in publications on AR in comics between 2019 and 2022, with 33 teaching and research institutions involved. AR comics have shown effectiveness in raising awareness about gender-based violence, educational applications, and skills development. Software such as Augin, It Real and Immerse-AR are highlighted as viable tools for integrating AR into comics for educational purposes.

Author Biographies

Pedro Bruno Silva Lemos, Universidade da Integração Internacional da Lusofonia Afro-Brasileira

Mestre em Educação Profissional e Tecnológica - Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE). Doutorando da Rede Nordeste de Ensino (RENOEN) - Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE), Campus Fortaleza. Técnico Administrativo em Educação – Universidade da Integração Internacional da Lusofonia Afro-Brasileira (UNILAB), Campus Liberdade, Av. da Abolição, 3 - Centro, Redenção - CE, 62790-000. E-mail: pedrolemos@unilab.edu.br.

Jonathan Felipe da Silva, Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE)

Mestre em Educação Profissional e Tecnológica - Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE). Doutorando da Rede Nordeste de Ensino (RENOEN) - Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE), Campus Fortaleza. Técnico Administrativo em Educação – IFCE, Campus Morada Nova, R. Pref. Raimundo Jose Rabelo, 2717 - Morada Nova, CE, 62940-000. E-mail: jonathan.silva@ifce.edu.br.

Sandro César Silveira Jucá, Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE)

Doutor em Engenharia Elétrica - Universidade Federal do Ceará (UFC). Professor do campus Fortaleza do Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE), Av. Treze de Maio, 2081 - Benfica, Fortaleza - CE, CEP 60040-531. E-mail:  <sandrojuca@ifce.edu.br>.

Solonildo Almeida da Silva, Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE)

Doutor em Educação - Universidade Federal do Ceará (UFC). Professor do campus Fortaleza do Instituto Federal de Educação, Ciência e Tecnologia do Ceará (IFCE), Av. Treze de Maio, 2081 - Benfica, Fortaleza - CE, CEP 60040-531. E-mail:  <solonildo@ifce.edu.br>.

References

ALVES, V. da S. HQs: a imagem diante do leitor e a apreensão do significado. Literartes, v. 1, n. 8, 2018. Disponível em: < https://doi.org/10.11606/issn.2316-9826.literartes.2018.139925>. DOI: 10.11606/issn.2316-9826.literartes.2018.139925. Acesso em: 25 jun. 2024.

ASTUTI, Anisah Widi; ANGGITO, Albi; MUSTADI, Ali. Do Augmented Realty Comics Improve Reading Interest for Elementary School Student in Pandemic Era? Al-Ishlah: Jurnal Pendidikan, [S. l.], v. 14, n. 3, p. 3461–3478, 2022. DOI: 10.35445/alishlah.v14i3.1728.

AXELROD, Daryl; KAHN, Jennifer. “Then You go to Snap”: Multimodal Making of Digital Comics in a Language Arts High School Classroom. Educational technology research and development, [S. l.], v. 72, n. 1, p. 41–57, 2024. DOI: 10.1007/s11423-023-10285-2.

BARROS DE LIMA, Edivania; CRISÓSTOMO, Luiz C. da S.; MARINHO, Gabrielle S.; MARINHO, Marcia M.; MARINHO, Emmanuel S. HQ´ S VIRTUAIS: UMA PROPOSTA LÚDICA PARA O ENSINO DE TEMAS AMBIENTAIS. Redin-Revista Educacional Interdisciplinar, v. 7, n. 1, 2018. Disponível em: <http://seer.faccat.br/index.php/redin/article/view/1125>. Acesso em: 18 jun. 2024.

BHATTACHARJEE, Partha; TRIPATHI, Priyanka. Spit bubbles, speech bubbles, and COVID-19: creating comics in the age of post-infection India. Journal of Visual Communication in Medicine, [S. l.], v. 45, n. 3, p. 205–220, 2022. a. DOI: 10.1080/17453054.2022.2037408.

BHATTACHARJEE, Partha; TRIPATHI, Priyanka. Performance beyond the panel: (S)exploitation and trafficking in Ram Devineni’s Priya and the Lost Girls. Journal of Gender Studies, [S. l.], v. 31, n. 6, p. 712–725, 2022. b. DOI: 10.1080/09589236.2021.1950660.

BIBE-LUYTEN, S. M.. O que é história em quadrinhos. Brasiliense, 1985.

BORREGO, Maura; FOSTER, Margaret J.; FROYD, Jeffrey E. Systematic Literature Reviews in Engineering Education and Other Developing Interdisciplinary Fields: Systematic Literature Reviews in Engineering Education. Journal of Engineering Education, [S. l.], v. 103, n. 1, p. 45–76, 2014. DOI: 10.1002/jee.20038.

BOUCHARD, Frédéric et al. “Frozen-Ground Cartoons”: Permafrost comics as an innovative tool for polar outreach, education, and engagement. Polar Record, [S. l.], v. 54, n. 5–6, p. 366–372, 2018. DOI: 10.1017/S0032247418000633.

CHATTOPADHYAY, Dhiman. Can comic books influence consumer awareness and attitude towards rape victims and perpetrators in India? The case of Priya’s Shakti. Journal of Graphic Novels and Comics, [S. l.], v. 10, n. 1, p. 28–46, 2019. DOI: 10.1080/21504857.2017.1412992.

CUNHA, Janaiara A.; TAMIASSO-MARTINHO, Priscila; SANCHES, Angela; SOUSA, Célia. HQs no Ensino de Ciências: Linguagem, Saúde e Química. Revista Debates em Ensino de Química, v. 5, n. 1 ESP, p. 74-89, 2019. Disponível em: <https://journals.ufrpe.br/index.php/REDEQUIM/article/view/2305/482483195>. Acesso em: 25 jun. 2024.

DOMINGUEZ, Eva. Teaching Media Literacy: Harnessing the Charm of Storytelling with NUSHU. Childhood Education, [S. l.], v. 95, n. 5, p. 44–48, 2019. DOI: 10.1080/00094056.2019.1663095.

FILIPE, D. Aprenda Brincando: Astronomia em Realidade Aumentada. Sítio Eletrônico, 2017. Disponível em: <https://realidadesimulada.com/a-tecnologia-da-realidade-aumentada/>. Acesso em: 27 jun. 2024.

GINTING, Dewi Sartika Br; ARRAHMI, Ridha; SARAGIH, Mhd Afifan Aly Rahman; ARBANI ASFI DALIMUNTHE, M. D.; JERNIH; CAHYANI, Annisa. Implementation of Multimedia Development Life Cycle (MDLC) Method in Smart Comic Learning Based on Augmented Reality. In: 2023 7TH INTERNATIONAL CONFERENCE ON ELECTRICAL, TELECOMMUNICATION AND COMPUTER ENGINEERING (ELTICOM) 2023, Anais [...]. Sumatra, Indonésia: ELTICOM, 2023. p. 116–121. DOI: 10.1109/ELTICOM61905.2023.10443166. Disponível em: https://ieeexplore.ieee.org/document/10443166. Acesso em: 24 maio. 2024.

HABIDDIN, Habiddin; ASHAR, Muhammad; HAMDAN, Achmad; NASIR, Khaidir R. Digital Comic Media for Teaching Secondary School Science. International Journal of Interactive Mobile Technologies (iJIM), [S. l.], v. 16, n. 03, p. 159–166, 2022. DOI: 10.3991/ijim.v16i03.28967.

KITCHENHAM, Barbara; CHARTERS, Stuart. Guidelines for performing systematic literature reviews in software engineering version 2.3. Engineering, [S. l.], v. 45, n. 4ve, p. 1051, 2007.

KOUTNÍKOVÁ, M. The application of comics in science education. Acta Educationis Generalis, v. 7, n. 3, p. 88-98, 2017. Disponível em: < https://sciendo.com/article/10.1515/atd-2017-0026>. Acesso em: 15 jun. 2024.

KURAHASHI, Tomoki; SAKUMA, Ryota; ZEMPO, Keiichi; MIZUTANI, Koichi; WAKATSUKI, Naoto. Retrospective speech balloons on speech-visible ar via head-mounted display. In: 2018 IEEE INTERNATIONAL SYMPOSIUM ON MIXED AND AUGMENTED REALITY ADJUNCT (ISMAR-ADJUNCT) 2018, Anais [...]. Munique, Alemanha: IEEE, 2018. p. 423–424. Disponível em: https://ieeexplore.ieee.org/abstract/document/8699323/. Acesso em: 1 jun. 2024.

LEMOS, P. B.; JUCÁ, S. C. S.; SILVA, S. A.; CASTRO LIMA, A.; SILVA, J. F. . A UTILIZAÇÃO DE HISTÓRIAS EM QUADRINHOS (HQs) NO ENSINO REMOTO EMERGENCIAL DE CIÊNCIAS DA NATUREZA. ENCICLOPEDIA BIOSFERA, [S. l.], v. 18, n. 38, 2021. Disponível em: https://conhecer.org.br/ojs/index.php/biosfera/article/view/5358. Acesso em: 25 jun. 2024.

LEMOS, P. B. S; CASTRO LIMA, A.; JUCÁ, S. C. S.; SILVA, S. A. A pesquisa na pós-graduação stricto sensu acerca do uso de Hqs no ensino de ciências: uma revisão sistemática de literatura. Revista Práxis, v. 15, n. 29, 2023. Disponível em: https://revistas.unifoa.edu.br/praxis/article/view/4369. DOI: https://doi.org/10.47385/praxis.v15.n29.4369. Acesso em: 25 jun. 2024.

LIMA, M. M. P.; NASCIMENTO BARBOSA, N.; SANTANA, I. C. H.. História em quadrinhos no Ensino de Ciências por investigação, uma experiência do programa residência pedagógica, BIO-FACEDI. HUMANIDADES E TECNOLOGIA (FINOM), v. 33, n. 1, p. 182-171, 2022. Disponível em: <http://revistas.icesp.br/index.php/FINOM_Humanidade_Tecnologia/article/view/2172/1513>. Acesso em: 18 jun. 2024.

LODHIA, Sharmila. When Draupadi says #MeToo: Indian comics reimagining gender justice. Feminist Media Studies, [S. l.], v. 21, n. 5, p. 791–806, 2021. DOI: 10.1080/14680777.2020.1736121.

MANDOLINI, Nicoletta. Wonder feminisms: comics-based artivism against gender violence in Italy, intersectionality and transnationalism. Journal of Graphic Novels and Comics, [S. l.], v. 14, n. 4, p. 535–555, 2023. DOI: 10.1080/21504857.2022.2135551.

MERCADO, Víctor; NORMAND, Jean-Marie; LÉCUYER, Anatole. “Kapow!”: Augmenting Contacts with Real and Virtual Objects Using Stylized Visual Effects. In: 2020 IEEE INTERNATIONAL SYMPOSIUM ON MIXED AND AUGMENTED REALITY ADJUNCT (ISMAR-ADJUNCT) 2020. Anais [...]. Recife, Brasil: IEEE, 2020. p. 116–117. DOI: 10.1109/ISMAR-Adjunct51615.2020.00043. Disponível em: https://ieeexplore.ieee.org/document/9287824. Acesso em: 24 maio. 2024.

NIDHOM, Ahmad Mursyidun; SMARAGDINA, Azhar Ahmad; DYAH, K. N. Gres; ANDIKA, Bagus Nur R. P.; SETIADI, Cahyono P.; YUNOS, Jailani Md. Markerless Augmented Reality (MAR) through Learning Comics to Improve Student Metacognitive Ability. In: 2019 INTERNATIONAL CONFERENCE ON ELECTRICAL, ELECTRONICS AND INFORMATION ENGINEERING (ICEEIE) 2019, Anais [...]. Denpasar, Indonésia: IEEE, 2019. p. 201–205. DOI: 10.1109/ICEEIE47180.2019.8981411. Disponível em: https://ieeexplore.ieee.org/document/8981411. Acesso em: 24 maio. 2024.

SAKURAI, Sho; NARUMI, Takuji; TANIKAWA, Tomohiro; HIROSE, Michitaka. Augmented emotion by superimposing depiction in comics. In: PROCEEDINGS OF THE 8TH INTERNATIONAL CONFERENCE ON ADVANCES IN COMPUTER ENTERTAINMENT TECHNOLOGY 2011 Anais [...]. Lisboa, Portugal: : Association for Computing Machinery, 2011. p. 1–2. DOI: 10.1145/2071423.2071506. Disponível em: https://dl.acm.org/doi/10.1145/2071423.2071506. Acesso em: 1 jun. 2024.

SANTOS, R. E.; VERGUEIRO, W. Histórias em quadrinhos no processo de aprendizado. EcooS-Revista Científica, São Paulo, n.27, p.81-95, 2012. Disponível em:https://periodicos.uninove.br/index.php?journal=eccos&page=article&op=view&path% 5B%5D=3498. Acesso em: 21 jun. 2024.

SHRIVASTAVA, Nidhi. The Representation of Gender and Sexuality in Priya’s Shakti (2012). South Asian Review, [S. l.], v. 39, n. 1–2, p. 212–226, 2018. DOI: 10.1080/02759527.2018.1509553.

SINGH, Siddharth; CHEOK, Adrian David; NG, Guo Loong; FARBIZ, Farzam. 3D augmented reality comic book and notes for children using mobile phones. In: PROCEEDINGS OF THE 2004 CONFERENCE ON INTERACTION DESIGN AND CHILDREN: BUILDING A COMMUNITY 2004, New York, NY, USA. Anais [...]. Nova Yorque, EUA: Association for Computing Machinery, 2004. p. 149–150. DOI: 10.1145/1017833.1017864. Disponível em: https://doi.org/10.1145/1017833.1017864.

SILVA, I. G. da; BRITTO, P. E. de; ROTTA, J. C. G. Astronomia e Elaboração de História em Quadrinhos: Uma Proposta para o Ensino de Ciências. Revista Práxis, v. 13, n. 1sup, 2021. Disponível em: <https://revistas.unifoa.edu.br/praxis/article/download/3882/2948>. Acesso em: 22 jun. 2024.

SMARAGDINA, Azhar Ahmad; NINGRUM, Gres Dyah Kusuma; NIDHOM, Ahmad Mursyidun; RAHMAWATI, Nur Sita Yunia; RUSDIANSYAH, Muhammad Rizal; PUTRA, Andika Bagus Nur Rahma. The User Experience Analysis of Computer Graphics Educational Comics (GRAFMIC) based on Markerless Augmented Reality. In: 2019 INTERNATIONAL CONFERENCE ON ELECTRICAL, ELECTRONICS AND INFORMATION ENGINEERING (ICEEIE). Anais [...]. Denpasar, Indonésia: IEEE, 2019. p. 220–225. DOI: 10.1109/ICEEIE47180.2019.8981439. Disponível em: https://ieeexplore.ieee.org/document/8981439. Acesso em: 24 maio. 2024.

SOARES, Adriana. Realidade aumentada: o que é e como utilizar na educação?. Sítio Eletrônico, 2019. Disponível em: <https://canaldoensino.com.br/blog/realidade-aumentada-o-que-e-e-como-utilizar-na-educacao>. Acesso em: 27 jun. 2024.

TEIXEIRA, S. A.; BARBOSA, J. N. Produção de Histórias em Quadrinhos on-line na abordagem interdisciplinar de ensino de Biologia e Linguagens. Revista Letras Raras, v. 10, n. 2, p. 44-68/Eng. 44-68, 2021. Disponível em: <http://dx.doi.org/10.35572/rlr.v10i2.2088 >. DOI: 10.35572/rlr.v10i2.2088. Acesso em: 21 jun. 2024.

TORI, Romero; HOUNSELL, Marcelo da Silva (org.). Introdução à Realidade Virtual e Aumentada. Porto Alegre: Editora SBC, ISBN 978-65-87003-54-2, 2018. Disponível em:

<https://books-sol.sbc.org.br/index.php/sbc/catalog/book/66> . Acesso em 27 jun. 2024.

VERGUEIRO, W. A linguagem dos quadrinhos: uma “alfabetização” necessária. In: RAMA, Ângela; VERGUEIRO, Waldomiro. (org.). Como usar as histórias em quadrinhos na sala de aula. 4. ed. São Paulo: Contexto, 2010.

XAVIER, G. K. R. da S. Histórias em quadrinhos: panorama histórico, características e verbo-visualidade. Revista Darandina, p. 1-20, 2017. Disponível em: < https://doi.org/10.34019/1983-8379.2017.v10.28128 >. DOI: 10.34019/1983-8379.2017.v10.28128. Acesso em: 22 jun. 2024.

WANG, Xinwei; HU, Jun; HENGEVELD, Bart; RAUTERBERG, Matthias. Strategies for Panel Sequence Segmentations in d-Comics. In: STREITZ, Norbert; KONOMI, Shin’ichi (Orgs.). DISTRIBUTED, AMBIENT AND PERVASIVE INTERACTIONS 2021, Cham. Anais [...]. Cham: Springer International Publishing, 2021. p. 260–272. DOI: 10.1007/978-3-030-77015-0_19.

Downloads

Published

2024-12-30

How to Cite

Lemos, P. B. S., da Silva, J. F. ., Silveira Jucá, S. C. ., & Almeida da Silva, S. . (2024). The use of Augmented Reality (AR) in comic stories (Comics) applied in educational contexts: a systematic literature review . Revista Educação E Cultura Contemporânea, 21. Retrieved from https://mestradoedoutoradoestacio.periodicoscientificos.com.br/index.php/reeduc/article/view/11461

Issue

Vol. 21 (2024)

Section

Artigos

License

Ao submeter um artigo para publicação na Revista Educação e Cultura Contemporânea, o (s) autor(es) concordam com os seguintes termos: 1. Os autores garantem que o trabalho não foi publicado anteriormente em meio eletrônico ou impresso, tampouco encaminhado para publicação em lí­ngua portuguesa em outros periódicos. Também asseguram que todos os autores participaram na elaboração intelectual de seu conteúdo; 2. O(s) autor(es) mantêm os direitos sobre o artigo, entretanto, a publicação na revista implica na cessão integral e exclusiva dos direitos autorais, sem pagamento, sob a Licença Creative Commons Attribution CCBYNC, que permite o compartilhamento do trabalho com reconhecimento da autoria e primeira edição neste periódico; 3. Os artigos publicados representam, exclusivamente, a expressão do ponto de vista de seus autores e não a posição da Revista Educação e Cultura Contemporânea ou do Programa de Pós-Graduação em Educação da Universidade Estácio de Sá; 4. Ao(s) autor(es) de um artigo é permitida e incentivada a distribuição de trabalho on-line, por meio da divulgação do doi ou do link de acesso à revista.