Compilação de Corpos Comparáveis Especializados: Devemos sempre confiar nas Ferramentas de Compilação Semi-automáticas?

• Costa, Hernani ^[1] ; Dúran Muñoz, Isabel ^[1] ; Corpas Pastor, Gloria ^[1] ; Mitkov, Ruslan ^[2]
  1. [1] Universidad de Málaga

     Universidad de Málaga

     Málaga, España

     
  2. [2] University of Wolverhampton

     University of Wolverhampton

     GB.ENG.Q3.41UF, Reino Unido

     
• Localización: Linguamática, ISSN 1647-0818, Vol. 8, Nº. 1, 2016, págs. 3-19
• Idioma: portugués
• Títulos paralelos:
  • Compiling Specialised Comparable Corpora: Should we always trust (Semi-)automatic Compilation Tools?
• Enlaces
  • Texto completo
• Dialnet Métricas: 1 Cita
• Resumen
  • English

    Decisions at the outset of compiling a comparable corpus are of crucial importance for how the corpus is to be built and analysed later on.Several variables and external criteria are usually followed when building a corpus but little is been said about textual distributional similarity in this context and the quality that it brings to research. In an attempt to fulfil this gap, this paper aims at presenting a simple but efficient methodology capable of measuring a corpus internal degree of relatedness. To do so, this methodology takes advantage of both available natural language processing technology and statistical methods in a successful attempt to access the relatedness degree between documents. Our findings prove that using a list of common entities and a set of distributional similarity measures is enough not only to describe and assess the degree of relatedness between the documents in a comparable corpus, but also to rank them according to their degree of relatedness within the corpus.

  • português

    Decisões tomadas anteriormente à compilação de um corpo comparável têm um grande impacto na forma em que este será posteriormente construído e analisado.Diversas variáveis e critérios externos são normalmente seguidos na construção de um corpo, mas pouco se tem investigado sobre a sua distribuição de similaridade textual interna ou nas suas vantagens qualitativas para a investigação.Numa tentativa de preencher esta lacuna, este artigo tem como objetivo apresentar uma metodologia simples, contudo eficiente, capaz de medir o grau de similaridade interno de um corpo. Para isso, a metodologia proposta usa diversas técnicas de processamento de linguagem natural e vários métodos estatísticos, numa tentativa bem sucedida de avaliar o grau de similaridade entre documentos. Os nossos resultados demonstram que a utilização de uma lista de entidades comuns e um conjunto de medidas de similaridade distribucional são suficientes, não só para descrever e avaliar o grau de similaridade entre os documentos num corpo comparável, mas também para os classificar de acordo com seu grau de semelhança e, consequentemente, melhorar a qualidade do corpos através da eliminação de documentos irrelevantes.