Sucesso ou Fracasso? desempenho do ChatGPT nas habilidades conceituais, procedimentais e atitudinais do exame de suficiência do CFC

Revista Catarinense da Ciência Contábil

Endereço:
Av. Osvaldo Rodrigues Cabral, 1900, - Centro
Florianópolis / SC
88015-710
Site: http://revista.crcsc.org.br
Telefone: (48) 3027-7006
ISSN: 2237-7662
Editor Chefe: Rogério João Lunkes
Início Publicação: 30/11/2001
Periodicidade: Anual
Área de Estudo: Ciências Contábeis

Sucesso ou Fracasso? desempenho do ChatGPT nas habilidades conceituais, procedimentais e atitudinais do exame de suficiência do CFC

Ano: 2024 | Volume: 23 | Número: Não se aplica
Autores: Crislaine de Fátima Gonçalves Godke, Oscar Lopes da Silva, Romualdo Douglas Colauto, Jacqueline Veneroso Alves da Cunha, Samuel de Oliveira Durso
Autor Correspondente: Crislaine de Fátima Gonçalves Godke | [email protected]

Palavras-chave: chatgpt, exame de suficiência, inteligência artificial, habilidades

Resumos Cadastrados

Resumo Português:

Este estudo teve como objetivo identificar o desempenho do ChatGPT no exame de suficiência do Conselho Federal de Contabilidade (CFC), considerando habilidades conceituais, procedimentais e atitudinais. As habilidades conceituais referem-se às teorias e conceitos da Contabilidade; as habilidades procedimentais envolvem regras e técnicas necessárias para os objetivos profissionais; e as habilidades atitudinais representam disposições adquiridas para avaliar e agir em relação a diversas situações. Foram examinados todos os exames aplicados pelo CFC entre 2018 e 2022, submetendo-os à ferramenta de Inteligência Artificial (IA). Os resultados mostraram que o ChatGPT foi aprovado na maioria das edições analisadas (8 de 10), com bom desempenho em itens “conceituais” e de “interpretação de texto”, mas obteve resultados insatisfatórios em questões “procedimentais” e “atitudinais”. Esses achados indicam que a IA enfrenta desafios em áreas relacionadas à prática profissional e à aplicação do conhecimento contábil. Embora tenha se saído bem em algumas edições, sua aprovação foi, em parte, facilitada pelo número de itens anulados, ressaltando a dificuldade em resolver problemas contábeis mais complexos. A crescente presença de tecnologias como o ChatGPT levanta questões sobre o futuro dos profissionais contábeis e a necessidade de adaptação a um ambiente em constante evolução, no qual a automação pode permitir que os contadores se concentrem em atividades estratégicas, como análise financeira e consultoria. Assim, este estudo traz contribuições para os contadores, educadores e órgãos de controle sobre o impacto da tecnologia na Ciência Contábil, refletindo sobre os desafios, oportunidades e riscos que a evolução tecnológica impõe.



Resumo Inglês:

This study aimed to identify the performance of ChatGPT in the sufficiency exam of the Federal Accounting Council (CFC), considering conceptual, procedural, and attitudinal skills. Conceptual skills refer to the theories and concepts of Accounting; procedural skills involve the rules and techniques necessary for professional objectives; and attitudinal skills represent acquired dispositions to assess and act in various situations. All exams administered by the CFC between 2018 and 2022 were analyzed using the Artificial Intelligence (AI) tool. The results showed that ChatGPT passed the majority of the editions analyzed (8 out of 10), performing well on "conceptual" and "text interpretation" items but yielding unsatisfactory results on "procedural" and "attitudinal" questions. These findings indicate that AI faces challenges in areas related to professional practice and the application of accounting knowledge. While it performed well in some editions, its approval was partly facilitated by the number of nullified items, highlighting its difficulty in solving more complex accounting problems. The increasing presence of technologies such as ChatGPT raises questions about the future of accounting professionals and the need to adapt to an ever-evolving environment, where automation may allow accountants to focus on strategic activities, such as financial analysis and consulting. Thus, this study offers contributions to accountants, educators, and regulatory bodies regarding the impact of technology on Accounting Science, reflecting on the challenges, opportunities, and risks imposed by technological evolution.