Jenni AI vs. SciSpace: onde cada um conquista seu espaço

Jenni realizou quatro tarefas em um único parágrafo sem sair do documento. SciSpace fez as mesmas quatro tarefas em três lugares diferentes: uma página do Paraphraser, um notebook e no chat do Agent.

Jenni é um espaço de trabalho para pesquisa: o editor, a busca de citações, as revisões e a exportação ficam em um único documento. SciSpace, da PubGenius Inc., é uma plataforma de pesquisa construída em torno de um Agente de IA e um índice de busca com mais de 280 milhões de artigos, com um editor que chama de notebook.

As quatro tarefas são aquelas pelas quais todo rascunho passa: uma frase para corrigir, uma alegação para citar, um argumento para verificar, um arquivo para enviar. Jenni se destacou em todas as quatro. SciSpace chegou mais perto no argumento, onde seu Agente trabalhou por 8 minutos e 17 segundos e retornou mais sete fontes.

Cada contagem e citação abaixo foram lidas diretamente da tela enquanto o teste era executado.

<CTA title="Mantenha o rascunho, as fontes e as verificações em um só lugar" description="Reescreva uma frase, cite no cursor e execute uma revisão sem sair do documento" buttonLabel="Experimente a Jenni Grátis" link="https://app.jenni.ai/register" />

TLDR: Jenni ou SciSpace?

Escreva o artigo no Jenni: em um único documento, ele reescreveu a frase com uma alteração controlada, citou o ensaio clínico com uma referência completa em APA 7ª edição e realizou duas revisões em 76 segundos. Use o SciSpace para a busca ao redor do artigo: seu Agente auditou o parágrafo comparando-o com quatro fontes de artigos e retornou mais sete referências.

Como isso foi testado

As mesmas quatro tarefas em ambas as ferramentas, no mesmo parágrafo, relatadas a partir da tarefa em que as duas mais diferem.

• O que foi inserido - um parágrafo de 201 palavras sobre nanopartículas lipídicas e entrega de CRISPR, digitado em um novo documento em cada ferramenta.

• O que foi plantado - um erro de concordância, "There is a lot of things that still needs", e uma atenuação tripla, "could perhaps maybe".

• O que pôde ser verificado - o resultado de um ensaio clínico: transtirretina sérica reduzida em média 87 por cento na dose mais alta (Gillmore et al., NEJM 2021). O resumo apresenta 52% a 0,1 mg por quilograma e 87% a 0,3.

• Equivalente contra equivalente - cada recurso do SciSpace foi testado contra o seu equivalente no Jenni.

• Modelos - nem o Jenni nem o notebook do SciSpace mostram uma escolha de modelo. O Agente do SciSpace oferece as opções Lite, Pro e Expert, e foi executado no modo Lite.

• A última etapa - o controle de exportação. Nenhum arquivo foi baixado.

As quatro tarefas

O argumento: duas revisões no Jenni, uma execução do Agente no SciSpace

Jenni - cinco revisões estão disponíveis no botão Review: Confiança da alegação (Claim confidence), Revisão por pares (Peer Review), Qualidade da Fonte, Tom de Voz e Revisão Gramatical. Duas foram executadas: Confiança da alegação, para alegações sem fonte, e Revisão por pares, para o argumento.

A Confiança da alegação precisou de 28 segundos e três consultas ao banco de dados. Retornou com duas sugestões, uma marcada como Não Apoiada (Unsupported) e outra como Fracamente Apoiada (Weakly supported), cada uma sobre a respectiva frase com um artigo sugerido, a contagem de citações do artigo e seu fator de impacto.

Confiança da alegação no Jenni: o card de Não Apoiada na frase sobre apolipoproteína E, com a fonte sugerida, contagem de citações, fator de impacto e as opções Aceitar ou Rejeitar.

• Não apoiada, a frase sobre apolipoproteína E - Hosseini-Kharat, Bremmell e Prestidge, 2025, Molecular Therapy Methods & Clinical Development: 74 citações, fator de impacto 3.74, uma revisão sobre por que as nanopartículas lipídicas têm como alvo o fígado. Aceita com um clique, e a seção de referências passou a ter duas fontes.

• Fracamente apoiada, a frase dos 87 por cento - uma sugestão para substituir o ensaio do NEJM por um artigo de 2022 que o reporta de segunda mão, porque o trecho armazenado do ensaio omitiu o número. O número está no resumo do ensaio. Rejeitada com um clique.

A Revisão por pares levou 48 segundos. Deu nota 7 de 10 ao parágrafo e listou quatro pontos fracos, três pontos fortes e três perguntas para o autor. Um ponto fraco é a atenuação plantada: ela cita 'perhaps maybe' e a qualifica como "linguagem informal e excessivamente atenuada".

Dois comentários foram fixados nas frases. O principal (Major) diz que a frase atenuada desvaloriza o trabalho de Direcionamento Seletivo de Órgãos (Selective Organ Targeting) e cita Wei et al., 2023, na Nature Communications. O secundário (Minor) pede novamente uma fonte contendo o dado de 87 por cento.

Revisão por pares no Jenni após 48 segundos: as duas frases comentadas destacadas no texto, e a lista de Pontos Fracos identificando a atenuação empilhada.

Ambas as revisões rodaram dentro do documento, totalizando 76 segundos. A Confiança da alegação edita o texto quando uma sugestão é aceita; a Revisão por pares faz comentários e deixa a reescrita por conta do autor.

SciSpace - o notebook não possui revisão. O recurso correspondente é um dos 2.601 agentes na Galeria de Agentes: o Agente de Auditoria de Citações (Citation Audit Agent), descrito como uma "Auditoria de Citações linha por linha para sinalizar alegações não comprovadas".

A opção Executar Tarefa (Run Task) abre o Agente do SciSpace em uma nova aba com o comando já escrito; o parágrafo e sua entrada de referência foram inseridos manualmente. O seletor de modelos oferece as opções Lite, Pro e Expert, e a auditoria foi executada no modo Lite.

A execução levou 8 minutos e 17 segundos. Ele buscou no SciSpace, SciSpace Full Text, Google Scholar e PubMed, listou 920 resultados entre eles e salvou dois arquivos em Markdown no chat.

O Agente do SciSpace ao final de sua auditoria de citações: oito links de DOI, dois arquivos Markdown e o seletor de modelo indicando Lite.

• O arquivo de auditoria - uma referência confirmada, uma alegação extraída, e essa alegação marcada como Não Pôde Ser Verificada: "0 de 1 referências citadas alcançaram evidência legível". A editora recusou o acesso do Agente ao texto completo.

• O arquivo de revisão - o parágrafo reescrito em sete frases, sete notas sobre o que mudou e listas de referências nos formatos APA 7, MLA 9 e Chicago.

• As fontes - oito, sendo sete delas novas, incluindo o primeiro artigo sobre SORT e um estudo publicado três dias antes. Todos os oito são registros reais com DOIs ativos.

O Agente não oferece alterações para aceitar ou rejeitar. Ele entrega um parágrafo substituto, no qual "the most clinically advanced" se tornou "among the most clinically advanced" e a atenuação tripla sumiu.

Uma primeira execução, sem a entrada de referência, levou 6 minutos e 14 segundos e não conseguiu concluir sua auditoria formal. Sua reescrita transformou a frase da dose em "87% at one evaluated dose, with a larger reduction reported at the higher dose", o que é contradito pelo resumo; a segunda execução manteve o original.

Vencedor - Jenni, por uma verificação que o escritor pode concluir dentro do documento: duas revisões em 76 segundos, uma fonte arquivada com um clique e dois comentários fixados nas respectivas frases. A auditoria do SciSpace levou 8 minutos e 17 segundos em um chat separado e retornou um parágrafo reescrito como um arquivo.

<ProTip title="⚠️ Cuidado:" description="Verifique cada número que uma reescrita completa altera comparando-o com o resumo original da fonte. Uma das execuções de auditoria alterou a qual dose os 87% pertenciam" />

A citação: qual artigo vem primeiro?

Jenni - pressionar Cite, ou digitar @, abre uma busca no cursor. Com o título do ensaio clínico digitado, a aba Discover colocou uma reimpressão de 2022 do Yearbook of Pediatric Endocrinology em primeiro (48 citações, fator de impacto 0.00) e o ensaio do NEJM em segundo: 1.6K citações, um fator de impacto de 24.39 e um selo de Acesso Aberto (Open Access).

Jenni com o título do ensaio clínico digitado: a reimpressão do anuário de 2022 em primeiro lugar, o ensaio do NEJM em segundo com 1.6K citações e fator de impacto de 24.39.

Um clique em Cite, no card do NEJM, inseriu "(Gillmore et al., 2021)" no cursor e abriu uma seção de Referências abaixo do texto. A entrada é no padrão APA 7ª edição completo: 19 autores, reticências, o último autor, revista, volume, páginas e DOI.

Essa é a formatação que a APA 7 estabelece para 21 ou mais autores, e este artigo tem 26. O menu suspenso de estilos ao lado da lista permite buscar mais de 10.000 estilos.

SciSpace - o botão Cite na barra de ferramentas do notebook abre um painel intitulado Find references (Buscar referências). A busca pelo mesmo título colocou um estudo com camundongos de 2021 em primeiro e o ensaio clínico em segundo. Cada linha mostra um título, o primeiro autor, uma contagem de coautores e o ano, sem revista ou contagem de citações.

A mesma busca de título no notebook do SciSpace: um estudo com camundongos em primeiro, o ensaio clínico em segundo, com cada linha exibindo título, primeiro autor e ano.

O botão + Cite inseriu "(Gillmore et al., 2021)" e iniciou uma seção de Referências configurada para APA, com um seletor que busca mais de 100 estilos. A entrada começa: "Gillmore, J. D., Gane, E. J., Taubel, J., Kao, J., Fontana, M., Maitland, M. L., Seitzer, J., O’connell, D. J. C., Walsh, K. R., M, W. K., & Phillips, J. (2021)."

Trata-se de 11 nomes encerrados com um