Acessibilidade / Reportar erro

Alocação de referees para avaliar trabalhos submetidos a um congresso de grande porte: modelo e caso ENEGEP

Resumos

Este artigo apresenta uma experiência real de implantação de um modelo de Pesquisa Operacional para realizar a alocação de referees para avaliar trabalhos submetidos a um congresso de grande porte. Utilizando os dados reais do XV ENEGEP (Encontro Nacional de Engenharia de Produção)/ I ICIE (First International Congress of Industrial Engineering), foi mostrada a grande superioridade do método computadorizado sobre o método real. No congresso seguinte XVI ENEGEP / II ICIE o modelo efetuou a alocação de 403 referees para avaliar 954 trabalhos. O modelo se mostrou totalmente validado e algumas imprecisões que surgiram se deveu a informações não totalmente corretas sobre alguns referees. E também apresentado o uso deste modelo no processo de avaliação de trabalhos ligados à área de Gerência submetidos ao XXI ENEGEP Nas conclusões são feitas algumas considerações que poderão ser incorporadas em futuros congressos no sentido de aprimorar ainda mais o processo de avaliação de trabalhos, que sem dúvida alguma, é um dos processos mais críticos na organização de congressos científicos de grande porte.

alocação de referees; organização de congresso; linguagem de modelagem; otimização matemática; alocação de recursos; programação linear zero-um; programação linear binária


This paper presents an actual experience in implementing an Operations Research model to allocate referees to assess papers submitted to a large size congress. By means of the actual data from XV ENEGEP (National Congress of Production Engineering), it was demonstrated the great superiority of the computerized method against the method (empirical and manual) utilized. In the following congress (XVI ENEGEP III ICIE) the model made the allocation of 403 referees to assess 954 papers. The model was absolutely validated and some inaccuracies that occurred were due to the information not absolutely correct about some referees. It is also presented the usage of this model in the XXI ENEGEP's assessment process of papers related to Management area. At the conclusions, it is drawn some considerations that intend contribute to the improvement of the assessment process in future congresses. There is no doubt that the process of assessment papers is one of the most critical processes in the organization of a large size congress.

allocation of referees; congress organization; modeling language; mathematical optimization; resources allocation; zero-one linear programming; binary linear programming


Alocação de referees para avaliar trabalhos submetidos a um congresso de grande porte: modelo e caso ENEGEP

Flavio Cesar F. FernandesI; Evelyn RiosII

IProf. Dr. Dep. de Produção da Universidade Federal de São Carlos (UFSCar). Fax: 016-260.8240 ; e-mail: dfcf@power.ufscar.br

IIEngenheira de Produção pela UFSCar

RESUMO

Este artigo apresenta uma experiência real de implantação de um modelo de Pesquisa Operacional para realizar a alocação de referees para avaliar trabalhos submetidos a um congresso de grande porte. Utilizando os dados reais do XV ENEGEP (Encontro Nacional de Engenharia de Produção)/ I ICIE (First International Congress of Industrial Engineering), foi mostrada a grande superioridade do método computadorizado sobre o método real. No congresso seguinte XVI ENEGEP / II ICIE o modelo efetuou a alocação de 403 referees para avaliar 954 trabalhos. O modelo se mostrou totalmente validado e algumas imprecisões que surgiram se deveu a informações não totalmente corretas sobre alguns referees. E também apresentado o uso deste modelo no processo de avaliação de trabalhos ligados à área de Gerência submetidos ao XXI ENEGEP Nas conclusões são feitas algumas considerações que poderão ser incorporadas em futuros congressos no sentido de aprimorar ainda mais o processo de avaliação de trabalhos, que sem dúvida alguma, é um dos processos mais críticos na organização de congressos científicos de grande porte.

Palavras-chave: alocação de referees, organização de congresso, linguagem de modelagem, otimização matemática, alocação de recursos, programação linear zero-um, programação linear binária.

ABSTRACT

This paper presents an actual experience in implementing an Operations Research model to allocate referees to assess papers submitted to a large size congress. By means of the actual data from XV ENEGEP (National Congress of Production Engineering), it was demonstrated the great superiority of the computerized method against the method (empirical and manual) utilized. In the following congress (XVI ENEGEP III ICIE) the model made the allocation of 403 referees to assess 954 papers. The model was absolutely validated and some inaccuracies that occurred were due to the information not absolutely correct about some referees. It is also presented the usage of this model in the XXI ENEGEP's assessment process of papers related to Management area. At the conclusions, it is drawn some considerations that intend contribute to the improvement of the assessment process in future congresses. There is no doubt that the process of assessment papers is one of the most critical processes in the organization of a large size congress.

Keywords: allocation of referees, congress organization, modeling language, mathematical optimization, resources allocation, zero-one linear programming, binary linear programming.

Texto completo disponível apenas em PDF.

Full text available only in PDF format.

Agradecimentos do primeiro autor: · Aos referees anônimos pelas sugestões. · Ao Prof. Reinaldo Morábito por ter participado comigo da coordenação do processo descrito na seção 6. · Aos meus onentandos Fábio Molina da Silva, Gustavo Beltran de Souza e Matheus Pinotti pela ajuda na execução de várias atividades do processo descrito na seção 6.

Referencias Bibliográficas

Adema, J.J.; Boekkooi-Timminga, E.; Linden, W.J. van der: "Achievement test construction using 0-1 linear programming". European Journal of Operational Research, v. 55, n. 1, pp.103-111, 1991.

Arcelus, F.J. & Coleman, D.F.: "An effeciency review of university departments". International Journal of Systems Science, v. 28, n. 7, pp. 721-729,1997.

Ashford, R.W. & Daniel, R.C.: "Some Lessons in Solving Practical Integer Programs''. Journal of the Operational Research Society, v. 43, n. 5, p. 425-433, 1992.

Brooke, A.; Kendrick, D.; Meeraus, A.: Release 2.25 GAMS - A User's Guide. The Scientific Press, San Francisco, 1992.

Ceylan, D.; Saatçioglu, O.; Sepil, C: "Algorithm for committee construction problem ". European Journal of Operational Research, v. 77, n. 1, pp. 60-69, 1994.

Chryssolouris, G. & Dicke, K. & Lee, M.: "On the Resources Allocation Problem". International Journal of Production Research, v. 30, n. 12, p. 2773-2765, 1992.

Clack, G.B.; Baty, M.; Perrin, ª; Eddleston, A.L.W.F.: "The development of a more equitable approach to resource allocation and manpower planning for undergraduate teaching in a UK medical school". Medical Education, v. 35, n. 2, p. 102-109, February 2001.

Colonna, G. & Ragone, R.: "Referee BIAS", Nature, v. 367, n. 6459, pp. 108-108,1994.

Colyar, N.N.; Thomas, C.F.; Boudreaux, K.: "Interinstitutional use of the Louisiana Online University Information System by academic libraries". Infomation Technology and Libraries, v. 16, n. 3, pp. 132-134, 1997.

Dutta, A.: 'AUTOREF: a Deductive Database for automatic Referee Selection", Information & Management, v. 22, n. 6, p. 3711-381, 1992.

Earnshaw, J.J.; Farndon, J.R.; Guillou, P.J.; Johnson, C.D.; Murie, J.A.; Murray, G.D.: "A comparison of reports from referees chosen by authors or journal editors in the peer review process". Annals of the Royal College of Surgeons of England, v. 82, n. 4, Suppl. S, April 2000.

Farndon, J.R.; Murie, J.A.; Johnson, C.D.; Earnshaw, J.J.; Guillou, P.J.: "The referee process of The British Journal of Surgery". British Journal of Surgery, v. 84, n. 7, 1997.

Ferland, J.A. & Fleurent, C: "SAPHIR: a Decision Support System for Course Scheduling". Interfaces, v. 24, n. 2, p. 105-1115, 1994.

Fernandes, F.C.F. & Morábito, R.: "Aplicação das Linguagens de Modelagem GAMS e LINGO a um Problema de Balanceamento de Linha de Montagem". Cadernos de Engenharia de Produção, ano X, n. 20, pp. 8-31, Maio 1993.

Fernandes. F.C.F. & Costa, M.A.B.: "Alocação de Funcionários de Limpeza na UFSCar Utilizando Programação Mista/Zero-Um". In: Anais do V ENEGEP (Encontro Nacional de Engenharia de Produção), pp. 394-404, 1985.

Finney, D.J.: "The responsible referee", Biometrics, v. 53, n. 2, pp. 715-719,1997.

Kruse, M.: "Results of a blind referee test in comparison to a labelled referee test". Seed Science and Technology, v. 27, n. 3, pp. 923-928, 1999.

Nylenna, M.; Riis, P.; Karlsson, Y: "Multiple Blinded Reviews of the 2 Manuscripts - Effects of Referee Characteristics and Publication Language". Jama-Journal of the American Medical Association, v. 272, n. 2, pp. 149-151, 1994.

Sacomano, CC; Fernandes, F.C.F.; Silva, R.R. da: "Alocação de Recursos Financeiros e Política de Aquisição de Mateñal Bibliográfico". Revista Brasileira de Biblioteconomia de Brasília, Vol. 16, nº 2, pp. 179-189, 1988.

Schoepfle, O.B. & Church, R.L.: "A Fast, Network-based, Hybrid Heuristic for the Assignment of Students to Schools". Journal of the Operational Research Society, v. 40, n. 11, pp. 1029-1040, 1989.

Teich, J.E.; Wallenius, H.; Wallenius, J.; Zionts, S.: "Identifying Pareto-optimal settlements for two-party resource allocation negotiations". European Journal of Operational Research, v. 93, n.3, pp. 536-549, 1996.

Walczak, S.: "Neural network models for a resource allocations problem". IEEE Transactions on suystems man and cybernetics part B-Cybernetics, v. 28, n. 2, pp. 276-284, 1998.

Webster, R. & Oliver, M.A.: "The role of the referee". Journal Soil Science, v. 44, n.1, pp. 189-189, 1993.

  • Adema, J.J.; Boekkooi-Timminga, E.; Linden, W.J. van der: "Achievement test construction using 0-1 linear programming". European Journal of Operational Research, v. 55, n. 1, pp.103-111, 1991.
  • Arcelus, F.J. & Coleman, D.F.: "An effeciency review of university departments". International Journal of Systems Science, v. 28, n. 7, pp. 721-729,1997.
  • Ashford, R.W. & Daniel, R.C.: "Some Lessons in Solving Practical Integer Programs''. Journal of the Operational Research Society, v. 43, n. 5, p. 425-433, 1992.
  • Brooke, A.; Kendrick, D.; Meeraus, A.: Release 2.25 GAMS - A User's Guide. The Scientific Press, San Francisco, 1992.
  • Ceylan, D.; Saatçioglu, O.; Sepil, C: "Algorithm for committee construction problem ". European Journal of Operational Research, v. 77, n. 1, pp. 60-69, 1994.
  • Chryssolouris, G. & Dicke, K. & Lee, M.: "On the Resources Allocation Problem". International Journal of Production Research, v. 30, n. 12, p. 2773-2765, 1992.
  • Clack, G.B.; Baty, M.; Perrin, Ş; Eddleston, A.L.W.F.: "The development of a more equitable approach to resource allocation and manpower planning for undergraduate teaching in a UK medical school". Medical Education, v. 35, n. 2, p. 102-109, February 2001.
  • Colonna, G. & Ragone, R.: "Referee BIAS", Nature, v. 367, n. 6459, pp. 108-108,1994.
  • Colyar, N.N.; Thomas, C.F.; Boudreaux, K.: "Interinstitutional use of the Louisiana Online University Information System by academic libraries". Infomation Technology and Libraries, v. 16, n. 3, pp. 132-134, 1997.
  • Dutta, A.: 'AUTOREF: a Deductive Database for automatic Referee Selection", Information & Management, v. 22, n. 6, p. 3711-381, 1992.
  • Earnshaw, J.J.; Farndon, J.R.; Guillou, P.J.; Johnson, C.D.; Murie, J.A.; Murray, G.D.: "A comparison of reports from referees chosen by authors or journal editors in the peer review process". Annals of the Royal College of Surgeons of England, v. 82, n. 4, Suppl. S, April 2000.
  • Farndon, J.R.; Murie, J.A.; Johnson, C.D.; Earnshaw, J.J.; Guillou, P.J.: "The referee process of The British Journal of Surgery". British Journal of Surgery, v. 84, n. 7, 1997.
  • Ferland, J.A. & Fleurent, C: "SAPHIR: a Decision Support System for Course Scheduling". Interfaces, v. 24, n. 2, p. 105-1115, 1994.
  • Fernandes, F.C.F. & Morábito, R.: "Aplicação das Linguagens de Modelagem GAMS e LINGO a um Problema de Balanceamento de Linha de Montagem". Cadernos de Engenharia de Produção, ano X, n. 20, pp. 8-31, Maio 1993.
  • Fernandes. F.C.F. & Costa, M.A.B.: "Alocação de Funcionários de Limpeza na UFSCar Utilizando Programação Mista/Zero-Um". In: Anais do V ENEGEP (Encontro Nacional de Engenharia de Produção), pp. 394-404, 1985.
  • Finney, D.J.: "The responsible referee", Biometrics, v. 53, n. 2, pp. 715-719,1997.
  • Kruse, M.: "Results of a blind referee test in comparison to a labelled referee test". Seed Science and Technology, v. 27, n. 3, pp. 923-928, 1999.
  • Nylenna, M.; Riis, P.; Karlsson, Y: "Multiple Blinded Reviews of the 2 Manuscripts - Effects of Referee Characteristics and Publication Language". Jama-Journal of the American Medical Association, v. 272, n. 2, pp. 149-151, 1994.
  • Sacomano, CC; Fernandes, F.C.F.; Silva, R.R. da: "Alocação de Recursos Financeiros e Política de Aquisição de Mateñal Bibliográfico". Revista Brasileira de Biblioteconomia de Brasília, Vol. 16, nş 2, pp. 179-189, 1988.
  • Schoepfle, O.B. & Church, R.L.: "A Fast, Network-based, Hybrid Heuristic for the Assignment of Students to Schools". Journal of the Operational Research Society, v. 40, n. 11, pp. 1029-1040, 1989.
  • Teich, J.E.; Wallenius, H.; Wallenius, J.; Zionts, S.: "Identifying Pareto-optimal settlements for two-party resource allocation negotiations". European Journal of Operational Research, v. 93, n.3, pp. 536-549, 1996.
  • Walczak, S.: "Neural network models for a resource allocations problem". IEEE Transactions on suystems man and cybernetics part B-Cybernetics, v. 28, n. 2, pp. 276-284, 1998.
  • Webster, R. & Oliver, M.A.: "The role of the referee". Journal Soil Science, v. 44, n.1, pp. 189-189, 1993.

Datas de Publicação

  • Publicação nesta coleção
    05 Out 2010
  • Data do Fascículo
    Jun 2001
Associação Brasileira de Engenharia de Produção Av. Prof. Almeida Prado, Travessa 2, 128 - 2º andar - Room 231, 05508-900 São Paulo - SP - São Paulo - SP - Brazil
E-mail: production@editoracubo.com.br