06.02.2023 Por Current Globalda equipa de cuidados de saúde da América do Norte.

Poking and Prodding ChatGPT: 7 Early Takeaways for the Chatbot's Potential Role in Health Communications.

Sempre fascinada pelas novas tecnologias e pelas novas formas de comunicar, a equipa de cuidados de saúde da Current Global tem estado a testar o ChatGPT, o "modelo de linguagem de grande dimensão" que tem conquistado o mundo desde o final do ano passado. Para o testar, fizemos-lhe perguntas, pressionámo-lo nas respostas e verificámos o seu trabalho. Pedimos-lhe para escrever artigos, blogues, textos para redes sociais, ensaios e muito mais, para descobrir o que pode e o que não pode fazer. Tal como outros descobriram, os resultados foram mistos - pode gerar respostas aceitáveis (nalgumas áreas mais do que noutras), mas tem deficiências que o tornam impossível para certos tipos de trabalho.

Eis as primeiras conclusões de três membros da equipa de Saúde da Current Globalda equipa de cuidados de saúde da empresa.

Alice G. Walton, PhD - Comunicações Científicas e Direção Editorial.

Como escritor e editor de ciência, tenho estado no lado mais cético do espetro ao conhecer o ChatGPT. Embora algumas das suas capacidades sejam fascinantes ou engraçadas (peça-lhe para explicar como funciona o ibuprofeno em inglês antigo), a sua propensão para inventar factos e o seu tom por vezes monótono deixam muito a desejar. Alguns destes problemas poderão ser corrigidos nas próximas iterações, mas, por agora, diria para ter uma curiosidade cautelosa.

Apresenta graves inconvenientes para a escrita científica (e para os factos em geral).

Se pedir ao ChatGPT que lhe escreva um artigo referenciado sobre um tópico científico, pode obter uma resposta clara, embora monótona. Mas se olhar com mais atenção, pode reparar que algumas das suas referências não são reais. (Se for pressionado, o ChatGPT pedirá desculpa pela sua imprecisão e dirá que se trata apenas de exemplos). O modelo não foi treinado em referências, o que é uma grande desvantagem para as pessoas que têm de anotar o seu trabalho, cumprir os regulamentos da FDA ou que apenas gostam de se cingir aos factos. A sua incapacidade para verificar as fontes e verificar os factos do seu próprio trabalho - pelo menos por enquanto - é um grande obstáculo para os escritores científicos.

Não tem uma "voz".

Embora o chatbot possa gerar conteúdo em vários níveis de complexidade, não tem realmente uma voz. O seu texto pode ser repetitivo e recorre às mesmas palavras de transição, estrutura e erros gramaticais que um aluno poderia utilizar. Isso pode mudar, pelo menos parcialmente, na próxima iteração, mas, por enquanto, seu ponto ideal parece ser uma cópia curta e informativa que não requer tom ou nuance.

A maioria das indústrias terá de estabelecer directrizes.

Nos seus primeiros dias, o ChatGPT já nos está a fazer pensar sobre algumas questões difíceis - em torno da autoria, responsabilidade legal, direitos de autor, divulgação e muito mais. Para aqueles que escrevem sobre tópicos na área dos cuidados de saúde ou da saúde mental, existem considerações adicionais, como por exemplo, se é apropriado utilizar uma ferramenta de IA para escrever materiais para o público, pacientes, populações vulneráveis. A sua utilização deve ser divulgada, sempre ou por vezes? Fala-se de marcas de água no futuro, mas não é claro como é que isso funcionaria ou que hacks se seguiriam. Em todo o caso, alguns organizações estão a começar a desenvolver directrizes para a sua utilização e espera-se que mais associações industriais e organismos governamentais sigam o exemplo.

Daniel Brackins, Diretor Digital.

O ChatGPT tem muito potencial. É uma ferramenta poderosa que pode potenciar o trabalho que as pessoas já estão a fazer. Não é uma solução mágica e só é tão boa quanto o utilizador permitir que seja.

O utilizador final é normalmente o denominador comum mais baixo na qualidade dos resultados do ChatGPT.

Tem havido muita preocupação com o facto de a IA tornar obsoletos certos empregos. Na sua forma atual, defendo que esses empregos se tornarão mais importantes do que nunca. Por exemplo, a seguinte pergunta é genérica e, consequentemente, produzirá uma resposta decente, mas genérica: "escrever um post no LinkedIn que fale sobre os benefícios da IA na área da saúde". O utilizador final entra em jogo com o seu pensamento criativo e estratégico para extrair o melhor que o ChatGPT pode oferecer. Uma sugestão mais refinada seria: "escreva um post no LinkedIn que fale sobre os benefícios da IA no campo da saúde. Concentre-se especificamente na faturação, seguros e pagadores no que diz respeito aos pacientes. Certifique-se de que a postagem seja escrita usando linguagem coloquial e não tenha um tom excessivamente científico; deve ser escrito no nível^{da 8ª} série. Forneça também três hashtags relevantes". Portanto, há uma ciência e uma arte no desenvolvimento de prompts (e mercados de prompts, como o PromptBasejá surgiram). A escrita rápida tornar-se-á uma competência essencial para os profissionais de todos os sectores.

Existem limitações para tarefas complexas.

O ChatGPT pode ajudá-lo a escrever código e fórmulas, mas não espere que ele faça o trabalho pesado. Embora possa dar sugestões ou até mesmo rever as suas tarefas complexas, não fornecerá uma solução imediata. Não lhe dará efetivamente todo o código de um sítio Web (ainda). No entanto, se precisar de ajuda com elementos do Web site que está a construir, pode fornecer-lhe fragmentos de código ou diagnosticar problemas no código. Para tal, é necessário que o utilizador final tenha os conhecimentos necessários para aperfeiçoar e orientar o ChatGPT.

Melanie Holst, Client Experience Estagiária.

Descobri que o ChatGPT pode ser útil para poupar tempo em tarefas simples ou repetitivas, embora tenha algumas limitações.

O programa pode ser utilizado para uma pesquisa básica de fundo.

Recentemente, testei-o quando estava a pesquisar um biomarcador na esclerose múltipla. Para obter alguma informação sobre a ciência antes de me debruçar sobre uma auditoria aos meios de comunicação social, pedi ao ChatGPT para "me explicar como se eu fosse uma criança de 5 anos o que é o teste do biomarcador X e porque é importante". O ChatGPT deu-me imediatamente uma resposta completa numa linguagem fácil de ler, condensando um trabalho de investigação de 25-30 minutos para 5-7 minutos. Infelizmente, a fonte de dados do ChatGPT só está actualizada até 2021, pelo que não inclui as descobertas científicas mais recentes.

Pode ser utilizado para automatizar tarefas aborrecidas - mas ainda precisa de ser verificado.

Também testei o ChatGPT para ver se consegue lidar com pesquisas de média. O ChatGPT foi capaz de me escrever código informático para automatizar pesquisas de média com base em palavras-chave específicas e adicionar os resultados a um documento Excel. Tudo o que tive de fazer foi copiar e colar o código no programa de software e ele foi capaz de recarregar as minhas pesquisas de média automaticamente. No entanto, em alguns dos pedidos que fiz, o ChatGPT "alucinou" respostas que eram inexactas. Pode fabricar eventos e apresentar exemplos que não são verdadeiros. Embora eu possa apreciar algumas das funcionalidades do ChatGPT, a tecnologia tem certamente espaço para melhorias.

-----

O resultado final? O ChatGPT é uma ferramenta impressionante - apenas uma de muitas - cujas capacidades irão crescer no futuro. Embora tenha algumas desvantagens para certos sectores, este parece ser um momento no tempo que está a abrir a porta a novas dimensões de comunicação. Estamos ansiosos por observar - e experimentar - as ferramentas à medida que evoluem.