Publicações em Computação

Jacques Wainer (wainer@ic.unicamp.br)

Março 2018

1) Busca bibliográfica

Ordem de qualidade em publicações da Computação

  • Regra geral. Há variações para subáreas específicas.
  • Maior qualidade significa que você pode confiar mais no resultado.
    • Veículo
    • Citações
    • Idade
    • Tipo de pesquisa

Qualidade

  • voce pode confiar que os autores não falsificaram os resultados? (dados falsos)
  • voce pode confiar que os autores não escolheram testes "fácies"?
  • voce pode confiar que os autores realmente demostraram as conclusões publicadas? (erros metodológicos)
  • voce pode confiar que o artigo tem detalhes suficientes para voce entender o que foi feito? (boa descrição)
  • voce pode confiar que voce conseguirá reproduzir os resultados? (reproducibilidade - dados e programas)

Veículo

  • Revistas científicas de alta qualidade
  • Conferencias de altissima qualidade (depende da área)
  • Revistas científicas boas e nem tão boas (IEEE, ACM, Plos One, etc)
  • Conferências em geral (conferencias boas mas não super competitivas)
  • Conferências regionais (brasileiras por exemplo)
  • Relatórios técnicos (arXiv) (com algum cuidado!)
  • Teses e dissertações
  • evite
  • Revistas predatórias (sempre open access) Beall list
  • Conferências predatórias uma lista

Citações

  • Citações são referências que um artigo recebe de outros artigos
  • Quanto mais citações melhor
  • Google Scholar, Scopus, Web of Science, e Microsoft Academic contam as citações de alguns artigos
  • Os diferentes serviços usam diferentes conjuntos de artigos para contar as citações.
  • Google Scholar é o mais completo

Idade

  • Artigos mais recentes são provavelmente mais relevantes que os mais antigos
  • Mas este critério entra em conflito com o de citações: artigos mais antigos tiveram mais tempo para acumular citações.
  • Artigos novos com muitas citações são particularmente interessantes.

Tipo de pesquisa

Artigos reportam em diferentes tipos de pesquisa. Por ordem de qualidade:

  • provas matemáticas (normalmente só para Teoria)
  • meta-análises (resumem os resultados de vários artigos empíricos num só resultado)
  • revisões sistemáticas (resumem os vários artigos mas não sintetizam em um só resultado)
  • surveys (textos de especialistas que resume uma área de pesquisa)
  • pesquisas empíricas quantitativas (fazem um experimento para medir várias alternativas)
  • pesquisa empíricas qualitativas (fazem experimentos para observar um ou mais sistemas)
  • pesquisa não empírica (propõem e/ou desenvolvem um sistema para resolver um problema)

Meta análises

  • Resumem resultados de vários experimentos quantitativos num só resultado final.
  • Usualmente para áreas que envolvem pessoas: engenharia de software, gerência de sistemas, informática em educação, informática em saúde
  • Usam estatísticas mais elaboradas para "tirar a média" das medidas de vários experimentos.
  • É muito importante que a seleção dos artigos/experimentos a serem agregados seja a mais objetiva e ampla possível

Revisões sistemáticas (ou mapeamento sistemático)

Surveys

  • Mapeamento de uma área por um especialista
  • Ótimo para aprender sobre um assunto e obter outras referências
  • Não há uma preocupação que a seleção de artigos referenciados seja objetiva e ampla

Ordem de qualidade em Ciência em geral

  • Apenas revistas. Não há conferências na maioria das outras áreas
  • Citações e idade: OK. As area de humanas tem uma ordem parcialmente reversa para idade (fontes originais)
  • Tipo de pesquisa: OK. Não existe surveys nas outras áreas!
  • Em medicina e nutrição não acredite em nada que só tenha uma pesquisa empírica publicada mesmo que em boa revista. Para seu consumo, busque as meta-análises: cirurgia de joelho e dieta mediterrânea
  • Em medicina, verifique a biblioteca Cochrane

Serviços de bibliografia

  • Google Scholar acesso aberto, completo, mas sem controle da ordem de resposta
  • Scopus pago, acesso via Unicamp. inclui boas revistas e boas conferencias de computação
  • Web of Science pago, acesso da Unicamp(?), inclui apenas boas revistas, padrão para contagem de citações

Passos de uma busca bibliográfica

  • Procure pelas palavras chaves (poucas!!) da sua pesquisa
    • no Scopus, restrinja para as áreas de computação/engenharia
  • Encontre os artigos de maior qualidade (veículo, citações, tipo de pesquisa)
    • no Scopus ordene por citações e talvez restrinja por veículo
    • leia apenas o Abstract dos artigos para saber se eles parecem relevantes
  • Para um artigo escolhido X
    • as referencias no artigo X podem ser úteis
    • mais importante são os artigos que fazem referencias para X
    • procure também nos "Related articles" Esses são artigos "parecidos" com X (baseado nas referencias que fazem) e podem ser muito úteis para encontrar outras famílias de artigos
  • Selecione os artigos relevantes (de novo pelo Abstract)
  • Só depois faça a primeira leitura do artigo completo - em particular as Conclusions,
    • na primeira leitura de um artigo você não precisa entender tudo, você pode pular partes. Não se atenha ao que você não sabe. Verifique apenas se é um artigo realmente importante
    • se for realmente importante (e só poucos serão nesse momento), faça a segunda (e terceira leitura).
  • Para artigos importantes, verifique outros artigos do mesmo autor.

Exemplo no Scopus

  • Eu prefiro usar o Scopus. Disponível na Unicamp e via VPN
  • Ele inclui a maioria dos veículos de boa qualidade da computação e não inclui os veículos ruins. O Scholar inclui tudo.
  • O Scopus permite controlar/limitar e ordenar a busca, e pode enviar as referencias marcadas via email

2) Onde publicar?

  • seu orientador/orientadora que decide!
  • publicar no veículo onde os leitores vão apreciar o seu artigo
  • publicar no veículo com "prestígio"
  • publicar no veículo onde a revisão vai ser a "mais fácil" vs onde voce vai "aprender mais"
  • uma métrica de prestígio é o número de citações recebido em média por artigo

Diferenças entre conferencias e revistas

Conferências

  • tamanho limitado (resumir o trabalho)
  • revisores (normalmente) não são nem rigorosos nem ajudam
  • normalmente não há a possibilidade de recorrer
  • há um componente grande de aleatoriedade na decisão
  • decisão é rápida
  • é preciso pagar para se inscrever na conferencia e geralmente é preciso ir apresentar o trabalho
  • conferencias são boas pelos contatos primeiro, e pelas apresentações em segundo

Revistas

  • tamanho quase ilimitado (ilimitado para revistas eletrônicas)
  • revisores de revistas melhores são mais rigorosos
  • revisores algumas vezes são muito generosos nas sugestões (voce aprende muito)
  • a decisão de aceitar não é binária, e há a possibilidade de recorrer ao editor quando o revisor esta sendo irrazoável
  • pode demorar muito tempo para a decisão (principalmente para revistas menos boas)
  • publicação em revistas de computação é gratuita.

Ordem genérica para revistas

  • fator de impacto (FI) = número de citações médio para atrigos publicados nos últimos 2 anos
  • Medido pelo Web of Science que não inclui muitas revistas de computação
  • revistas anunciam seu fator de impacto por exemplo esta
  • Elsevier/Scopus tem sua métrica também
  • melhores revistas de Computação tem FI de 6 a 8, as melhores do mundo tem FI de 30 a 40.
  • em geral FI$>$1 ou 2 é considerado OK
  • A CAPES criou uma metrica de qualidade para revistas chamado QUALIS (WebQualis) A1 é a melhor categoria, C ou D a pior. Normalmente Ax até B1 são OK.
  • Qualis é baseado no FI

Ordem genérica para conferências

  • conferencias de altissima qualidade
  • conferencias da ACM e IEEE
  • bons workshops, normalmente bem específicos de um assunto
  • conferencias com apoio da ACM e IEEE
  • cuidado com conferencias predatórias!!
  • Existe um Qualis para conferencias de Computação