Por
Justin Wong
—
Avaliação do Semantic Scholar: Ele encontra artigos melhores do que o Google Acadêmico?

Inserida por inteiro no Semantic Scholar, uma frase de um rascunho sobre CRISPR correspondeu a 0 dos 238.539.980 artigos que a sua caixa de pesquisa oferece. Google Scholar, dada a mesma frase, classificou o relatório do ensaio clínico do NEJM de 2021 em primeiro lugar.
Reduzida para as palavras-chave CRISPR transthyretin amyloidosis (CRISPR amiloidose por transtirretina), a pesquisa colocou esse ensaio no topo também no Semantic Scholar, e a página do ensaio contou as suas citações de contexto, métodos e resultados separadamente. Neste teste, o Semantic Scholar recompensou a pesquisa por palavras-chave e a verificação de como uma fonte foi lida, não a introdução de uma afirmação e a solicitação da sua fonte.
<CTA title="Pesquise pelo artigo sem sair do rascunho" description="Pesquise por um artigo a partir do interior do documento, e arquive com um clique a citação no texto e a respetiva referência juntas" buttonLabel="Experimente o Jenni Grátis" link="https://app.jenni.ai/register" />
TLDR
Semantic Scholar | |
Veredicto | Forte para a leitura de citações, mais fraco a corresponder a uma afirmação |
Melhor para | Ver como artigos posteriores citaram uma fonte |
Ponto fraco | Uma frase inteira resultou em Nenhum Artigo Encontrado |
Preço | Gratuito, sem plano pago |
O que foi testado | Quatro pesquisas e a caixa de diálogo Citar, ao lado do Google Scholar |
Combine com | Jenni, para citar no rascunho com referências completas |
O Semantic Scholar é melhor do que o Google Scholar para encontrar artigos?
Não neste teste. O alvo era um artigo, o relatório de 2021 do primeiro ensaio NTLA-2001 em humanos de Gillmore et al. no New England Journal of Medicine, e as mesmas quatro pesquisas foram inseridas em ambos os motores de busca com os resultados ordenados por relevância.
A frase do ensaio, inserida por inteiro - O Semantic Scholar retornou Nenhum Artigo Encontrado. O Google Scholar listou cerca de 254 resultados e classificou o relatório do NEJM em 1.º lugar.
LNP CRISPR transthyretin - o ensaio ficou em 15.º lugar de 454 no Semantic Scholar e em 1.º lugar de cerca de 2.580 no Google Scholar.
first in human CRISPR transthyretin trial - o Semantic Scholar não mostrou o ensaio nos seus primeiros 20 resultados. O Google Scholar classificou-o em 5.º lugar.
CRISPR transthyretin amyloidosis - ambos os motores classificaram o ensaio em 1.º lugar.
Portanto, o Google Scholar igualou ou superou o Semantic Scholar em todas as pesquisas aqui realizadas. Onde o Semantic Scholar se destacou foi após o artigo ter sido encontrado, no que mostrou sobre como trabalhos posteriores o citaram.
<ProTip title="🔎 Pesquise por palavras-chave, não por frases:" description="Reduza a afirmação ao método e à condição, como CRISPR transthyretin amyloidosis. Essa pesquisa de três palavras colocou o ensaio em primeiro lugar, onde a frase completa não correspondeu a nada" />
O que é o Semantic Scholar
O Semantic Scholar é um motor de pesquisa para artigos de investigação científica da Ai2, que a sua página de apresentação descreve como um instituto de investigação sem fins lucrativos. A mesma página chama-lhe uma ferramenta de pesquisa gratuita alimentada por IA para literatura científica, e a sua caixa de pesquisa oferecia 238.539.980 artigos no dia do teste.

Quatro funcionalidades situam-se acima da pesquisa e distinguem-no de um índice simples:
TLDR - um curto resumo de IA apresentado nos resultados. As FAQ referem que estes cobrem artigos de informática e biomédicos.
Tipos de citação - artigos citantes organizados em citações de contexto, métodos e resultados, com uma contagem das altamente influentes.
Excertos - a frase que um artigo citante escreveu sobre a fonte, mostrada abaixo do seu resultado.
Semantic Reader - um leitor de PDF oferecido em alguns artigos, onde uma citação no texto abre um cartão sobre o artigo citado.
A página do ensaio também apresentava os botões Guardar na Biblioteca e Criar Alerta. Este teste não utilizou nenhum dos dois, porque ambos alteram a conta.
A quem se destina o Semantic Scholar
Adapta-se à fase de leitura da investigação, uma vez conhecidos os termos do tópico. Três tipos de leitores tiram o máximo partido dele:
O estudante de doutoramento a meio da revisão de literatura - que precisa de ver quais os estudos posteriores que citam os resultados de um artigo fundamental, e não apenas a frequência com que foi citado.
O investigador a rever um manuscrito - que quer verificar como um ensaio citado tem sido descrito desde a publicação.
O estudante de mestrado com um orientador a perguntar de onde veio uma afirmação - desde que a pesquisa seja formulada como palavras-chave.
Não é uma ferramenta de escrita. Encontra e explica artigos, e a citação em si continua a acontecer noutro local.
O teste de pesquisa
A afirmação de teste veio do parágrafo sobre CRISPR utilizado nestas análises de ferramentas: "O primeiro ensaio sistémico em humanos de uma terapia CRISPR baseada em LNP relatou uma redução média na transtirretina sérica de 87 por cento na dose mais elevada após uma única perfusão."
A frase, inserida por inteiro
Digitada na caixa de pesquisa do Semantic Scholar e executada, a frase trouxe de volta uma página com o cabeçalho Nenhum Artigo Encontrado, com a linha "Desculpe, não há resultados para" e a frase repetida. Remover o ponto final e executar novamente deu a mesma página.

O Semantic Scholar após a frase do ensaio ter sido inserida na sua caixa de pesquisa
O Google Scholar pegou na mesma frase, ponto final incluído, e retornou cerca de 254 resultados com o relatório do NEJM em 1.º lugar. Para um estudante que trabalha copiando uma afirmação de um rascunho, essa é a lacuna que mais importa.
Três palavras-chave em vez disso
A pesquisa CRISPR transthyretin amyloidosis retornou cerca de 7.930 resultados, e o primeiro foi o relatório do ensaio, datado de 26 de junho de 2021, com 1.239 citações e um TLDR abaixo da linha do autor.

O primeiro resultado para CRISPR transthyretin amyloidosis, com o seu TLDR
A barra de filtros acima dos resultados oferece Áreas de Estudo, Intervalo de Datas, Tem PDF, Autor e Revistas e Conferências. Nenhum foi necessário aqui, porque o ensaio já estava em primeiro lugar.
Um segundo registo com o mesmo título
O resultado 10 nessa página apresentava o título exato do ensaio, a mesma revista e a data de 28 de outubro de 2021, com 83 citações próprias. O seu DOI termina em NEJMc2114592, que a PubMed lista como a resposta de 2 páginas dos autores às cartas sobre o ensaio, enquanto o relatório do ensaio termina em NEJMoa2107454.
Um estudante que guardasse o incorreto citaria uma resposta em vez de um ensaio. O Google Scholar também listou um segundo registo com o título do ensaio, no resultado 4 para a frase completa, pelo que a verificação se aplica em ambos os motores.
<ProTip title="🧾 Compare os DOIs antes de guardar:" description="Quando dois resultados partilharem um título, abra ambos e compare os DOIs. Aqui, o ensaio terminava em NEJMoa2107454 e a resposta às cartas terminava em NEJMc2114592" />
Até que ponto confiar no que ele mostra
O TLDR deixa de fora os números
O TLDR do ensaio diz: "Num pequeno grupo de doentes com amiloidose ATTR hereditária com polineuropatia, a administração de NTLA-2001 foi associada apenas a eventos adversos ligeiros e levou a reduções nas concentrações séricas da proteína TTR através do nocaute direcionado de TTR."
Essa é a frase de conclusões do resumo, palavra por palavra. Não traz dose nem percentagem, pelo que não pode confirmar os 87% no rascunho.
Os valores estão a um clique de distância. Expandir abre o resumo, cuja secção de resultados apresenta 52% a 0,1 mg por quilograma e 87% a 0,3 mg por quilograma no dia 28, correspondendo ao registo do PubMed.
<ProTip title="📑 Abra o resumo antes de citar:" description="Neste ensaio, o TLDR nomeou o resultado, mas não forneceu qualquer valor. Clique em Expandir e retire qualquer número da secção de resultados do resumo" />
As contagens de citações diferem entre motores
O Semantic Scholar mostrou 1.239 citações para o ensaio. O Google Scholar mostrou Citado por 2180 para o mesmo artigo na mesma noite.
Portanto, refira uma contagem de citações identificando o motor de onde veio e compare-a apenas com outras contagens desse mesmo motor.
O botão Citar precisa de um segundo olhar
A caixa de diálogo Citar oferece BibTeX, MLA, APA e Chicago, além de exportação para BibTeX e EndNote. O separador APA produziu o seguinte para o ensaio:

O separador APA da caixa de diálogo Citar do Semantic Scholar para o ensaio
Comparado com o registo do PubMed, que indica o volume 385, número 6, páginas 493 a 502, a entrada tem quatro problemas:
Sem volume, número ou páginas - a entrada termina no nome da revista.
Sem DOI - o Purdue OWL refere que a norma APA 7 inclui um DOI quando este está disponível, e este ensaio tem um.
Todos os 26 autores listados - a norma APA 7 lista os primeiros 19, depois reticências e, por fim, o último autor, como definem tanto o Purdue OWL como o guia para citar vários autores em APA.
Capitalização da revista - a revista aparece escrita como The New England journal of medicine.
O separador MLA terminou com n. pag., o que significa sem números de página, para um artigo que os tem. A entrada BibTeX não tinha campos de volume, páginas ou DOI, e apontava o seu URL para a API do Semantic Scholar.
A versão APA do Google Scholar para o mesmo artigo estava mais próxima, com o volume 385, número 6 e páginas 493-502. Listava 6 autores, seguidos de reticências e um e comercial (&) antes do último autor, e também não tinha DOI.
<ProTip title="🧩 Verifique a referência contra o PubMed:" description="Abra o artigo no PubMed e copie o volume, número, páginas e DOI para a entrada. A caixa de diálogo Citar deixou os quatro de fora para este ensaio" />
Onde o Semantic Scholar ganha o seu espaço
Um painel de citações organizado por tipo
A página do ensaio mostra 1.239 citações no total e divide algumas delas por tipo. As Citações Altamente Influentes somam 55, as Citações de Contexto 209, as Citações de Métodos 43 e as Citações de Resultados 4.

O painel de citações na página do ensaio no Semantic Scholar
O Google Scholar forneceu apenas uma contagem única de Citado por. Para uma revisão de literatura, a lista de Resultados é uma forma rápida de aceder aos artigos que citam os resultados do ensaio.
Excertos mostram o que o artigo citante disse
Filtrar as citações por Citações de Resultados deixou 4 artigos, cada um com um selo de Altamente Influenciado. Ao abrir os excertos num comentário de 2023 na Global Cardiology Science and Practice, surgiu a própria frase citante.

Um artigo citante e o seu excerto, etiquetado como Cita resultados de
Diz: "Reduções nos níveis de TTR acima de 90% neste ensaio foram alcançadas com doses mais elevadas do que as utilizadas no braço de polineuropatia do estudo relatado anteriormente 40 ; no entanto, não houve eventos adversos significativos." Isso mostra como o ensaio está a ser utilizado antes mesmo de abrir qualquer um dos artigos, algo que uma contagem simples de citações não consegue fazer.
<ProTip title="🧭 Filtre as citações por Resultados:" description="Num artigo fundamental, defina o Tipo de Citação para Citações de Resultados e, em seguida, abra os excertos. Cada um mostra a frase onde um artigo posterior cita os seus resultados" />
Cartões de citação dentro do leitor
O próprio relatório do ensaio abria apenas através do nejm.org e do PubMed, sem ligação para o leitor. O comentário de 2023 tinha uma ligação para o leitor e abriu no Semantic Reader.

Clicar na citação 40 no Semantic Reader abriu um cartão para o ensaio citado
Clicar no seu número de citação 40 abriu um cartão para o ensaio do NEJM com o título, autores, revista, data e TLDR, além de selos indicando 1.239 e 55, os mesmos valores das contagens de citações e de citações altamente influentes do ensaio.
Quanto custa o Semantic Scholar
Nada. O Semantic Scholar não tem plano pago, e as suas FAQ chamam-lhe uma ferramenta gratuita, pelo que a sua utilidade reside nas tarefas desta análise e não no preço.
Ferramenta | Preço | O que cobre |
Semantic Scholar | Gratuito | Pesquisa, TLDRs, tipos de citação, excertos, Semantic Reader |
Jenni | Gratuito; Plus $30 por mês ou $144 por ano; Pro $73 por mês ou $348 por ano | Redação, citação na posição do cursor, as cinco análises, exportação para Word e LaTeX |
Preços de outubro de 2026, consultados a 4 de outubro em semanticscholar.org/faq e jenni.ai/pricing.
O Semantic Scholar face às alternativas
Google Scholar - neste teste, a melhor escolha para introduzir uma afirmação e obter a sua fonte de volta. O guia do Google Scholar aborda os seus operadores de pesquisa, tais como aspas e OR.
Elicit - o Elicit utilizou a mesma frase completa no mesmo dia num pedido de Encontrar artigos e colocou o relatório do NEJM em primeiro lugar numa tabela de 3 linhas. Nessa execução, encontrou a fonte a partir da afirmação onde o Semantic Scholar não retornou nada.
Jenni - funciona na outra ponta, no rascunho. O seu botão Citar abre uma pesquisa de artigos na posição do cursor, e um clique arquiva a citação no texto e a referência juntas.
Num teste realizado a 1 de outubro, a sua entrada APA para este mesmo ensaio listou os primeiros 19 autores, reticências e o último autor, depois o volume 385, número 6, páginas 493 a 502 e o DOI.
Quando o título foi digitado nessa pesquisa, o Jenni classificou uma reimpressão de 2022 com o mesmo título acima do relatório do NEJM, pelo que a verificação do DOI também se aplica aí.
Os artigos encontrados no Semantic Scholar podem ser importados por DOI, ou através da importação do Zotero e Mendeley. A comparação Jenni vs ChatGPT realizou um teste semelhante de encontrar-o-ensaio contra um chatbot, e o guia de bases de dados de investigação médica lista onde mais procurar trabalho clínico.
Deve utilizar o Semantic Scholar para uma tese?
Sim, ao lado do Google Scholar e não em substituição deste. Neste teste, o Google Scholar rastreou a afirmação até à sua fonte, e o Semantic Scholar mostrou quem citou os resultados do ensaio e o que disseram.
Não considere uma citação de nenhum dos botões de Citar como finalizada. Verifique o DOI, o volume e as páginas contra o registo do PubMed, e certifique-se de que a fonte diz o que a frase afirma, tal como explica uma fonte real por trás de uma afirmação errada.
<CTA title="Cite o artigo e obtenha a referência completa" description="O Jenni arquivou este ensaio com o respetivo volume, número, páginas e DOI, e o seletor de estilos disponibiliza mais de 10.000 estilos de citação" buttonLabel="Comece a Escrever Grátis" link="https://app.jenni.ai/register" />
Para a escrita propriamente dita, redija a tese no Jenni, onde as citações e a lista de referências residem no mesmo ficheiro que os capítulos, e a funcionalidade Confiança na afirmação analisa cada afirmação em relação a fontes publicadas.
