À medida que a tecnologia redefine o acesso à informação, as bibliotecas estão se adaptando à era digital, colocando a IA na vanguarda. Ferramentas baseadas em IA estão revolucionando as plataformas de pesquisa, aprimorando as capacidades de busca e conectando os usuários à informação certa de forma rápida. No entanto, é essencial equilibrar recursos inovadores de IA com abordagens cuidadosas.
A EBSCO está adotando o poder da IA generativa em suas plataformas de pesquisa para aumentar a eficácia das pesquisas e transformá-las. Também estabelecemos princípios orientadores para garantir que nosso uso de IA seja responsável, ético e seguro.
Iniciamos testes e desenvolvimentos de funcionalidades de IA na interface de usuário das nossas plataformas, EBSCO Discovery Service (EDS) e EBSCOhost. Um desses projetos é o recurso chamado AI Insights.
O que é o recurso AI Insights?
O AI Insights da EBSCO é uma funcionalidade de IA generativa que resume de 3 a 5 pontos-chave de um artigo, ajudando os usuários a avaliar rapidamente sua relevância. Disponível por meio de um botão na interface da EBSCO para o EDS e a plataforma EBSCOhost, esse recurso complementa os resumos e os cabeçalhos de assunto. Os insights são claramente marcados como gerados por IA, com um aviso aos usuários para verificarem sua precisão antes de utilizá-los.
Teste Beta do AI Insights
Entre abril e maio de 2024, a EBSCO lançou uma versão beta do AI Insights para um grupo de 50 bibliotecas. Também foi realizado um estudo de experiência do usuário com 20 participantes, seguido por discussões em grupos focais em junho, com pequenos grupos de bibliotecas participantes do beta.
Quais foram os feedbacks recebidos?
Quando questionados sobre suas impressões gerais da ferramenta AI Insights:
- 20% dos respondentes foram Muito Positivos
- 41% foram Um Pouco Positivos
- 15% foram Neutros
- 20% foram Um Pouco Negativos
- 4% foram Muito Negativos
Para os usuários finais, o estudo de experiência mostrou que:
- 96% dos que se identificaram como buscadores eficientes acharam o AI Insights muito útil
85% dos que se identificaram como entusiastas de pesquisa consideraram o AI Insights útil
20% dos que se identificaram como pesquisadores poderosos consideraram o AI Insights neutro e útil
Além disso, uma média de 85% dos usuários finais achava que o AI Insights teria um impacto significativamente positivo no fluxo de trabalho do usuário.
Temas comuns no feedback positivo incluíram o fato de que o AI Insights complementa resumos, aumenta a eficiência da pesquisa e é mais fácil de ler do que a maioria dos resumos, o que ajuda pesquisadores iniciantes a entender trabalhos acadêmicos complexos. Alguns testadores valorizaram a possibilidade de ler os insights em inglês para artigos escritos em outras línguas e outros perceberam o potencial para usar a ferramenta como um recurso de alfabetização informacional nas plataformas de pesquisa.
"Vejo uma aplicação em várias fases iniciais do processo de pesquisa, como determinar palavras-chave, subtópicos, estreitar e ampliar temas, criar esboços, etc." – Bibliotecário Beta Tester
Respondentes da pesquisa destacaram que o AI Insights acelera o processo de pesquisa ao oferecer uma ferramenta de avaliação rápida antes da leitura completa dos artigos. Esse benefício foi especialmente valorizado por estudantes de graduação e pesquisadores avançados, que apreciaram o tempo economizado ao filtrar artigos irrelevantes.
"Eu realizaria mais pesquisas. Consigo rapidamente encontrar os textos que preciso; não perco tempo lendo textos que não posso usar... torna minha pesquisa mais produtiva e eficiente. Em vez de gastar horas procurando a fonte perfeita, aqui levo minutos." – Pesquisador Avançado
Alguns pesquisadores iniciantes estavam mais propensos a aplicar os insights diretamente à sua pesquisa sem antes consultar a fonte, enquanto alguns professores não estavam convencidos dos benefícios em comparação com os resumos.
"É uma visão geral interessante, mas não sei se é mais útil do que o resumo normalmente incluído no artigo. Eu precisaria clicar no artigo para obter mais informações, como o tamanho do estudo, quantos estudantes foram incluídos, se eram secundaristas ou universitários, etc." – Professor
Isso é respaldado pela literatura acadêmica, que sugere a necessidade de mais alfabetização informacional relacionada à IA. Bibliotecários participantes do teste beta em bibliotecas K-12 e acadêmicas anteciparam esse risco, mas também ressaltaram um benefício frequentemente mencionado nas respostas da pesquisa: o AI Insights oferece um “momento de aprendizado” para a instrução de alfabetização informacional na era da IA.
Houve uma ampla gama de tolerância em relação às imprecisões do GenAI entre os clientes beta. Participantes de grupos focais de algumas bibliotecas de pesquisa disseram que a ferramenta não atenderia às necessidades de seus usuários até que a IA fosse consistentemente mais precisa, enquanto outros afirmaram que não poderiam ativar o AI Insights até que ele fosse citável ou reproduzível. Observamos que os principais AI Insights com problemas de precisão eram aqueles que citavam outras referências como seu corpo principal de texto, como resenhas de livros e literatura. A maioria dos respondentes da pesquisa e dos participantes dos grupos focais não estava tão preocupada, pois sentiam que o risco de prejuízo para seus usuários era baixo. Muitos participantes dos grupos focais apontaram o benefício mencionado anteriormente: o AI Insights oferece aos instrutores de alfabetização informacional a oportunidade de incorporar a alfabetização em IA em seus resultados de ensino, ao mostrar a falibilidade ocasional das tecnologias GenAI – um ponto crítico que muitos estudantes precisam aprender.
Quais melhorias foram sugeridas pelos testadores?
Além de maior precisão para materiais referenciais, como resenhas, alguns participantes sugeriram que o AI Insights gerasse consistentemente o mesmo número de pontos para manter a uniformidade, enquanto outros apreciaram a variação de acordo com o texto. Alguns queriam insights reproduzíveis para facilitar a verificação em trabalhos acadêmicos, enquanto outros valorizaram a flexibilidade de gerar novos insights para melhorar a formulação. A transparência sobre como o AI Insights é implementado também foi importante, com bibliotecários buscando clareza sobre por que o recurso estava disponível para alguns artigos, mas não para outros.
Quais lições a EBSCO aprendeu e como isso influenciará o futuro do AI Insights?
Os gerentes de produto da EBSCO ganharam insights valiosos com o feedback, revelando diferentes níveis de conforto com ferramentas de IA nas bibliotecas. Quando o AI Insights for lançado oficialmente para o EDS e a plataforma EBSCOhost ainda este ano, os clientes poderão decidir se querem ativá-lo – o padrão será desligado. Uma lição importante foi a necessidade de capacitar bibliotecários para ensinar a alfabetização em IA, o que será apoiado por um artigo de perguntas frequentes no Connect, além de materiais sobre IA na EBSCO. A EBSCO continuará refinando o AI Insights, incorporando feedbacks ao longo do tempo.
Quer saber mais?
A EBSCO lançou o Programa Beta de IA em junho de 2024. Estamos publicando resumos executivos como este para cada teste, e também publicaremos um artigo de pesquisa acadêmica no início de 2025, com foco em como nosso trabalho e descobertas se inserem no contexto mais amplo da IA no entorno acadêmico. Todo o material e mais informações podem ser encontrados acessando IA na EBSCO.
