> Queria agradecer a todos que contribuíram nesta última semana para a
> lista de eventos que encaminharemos às CEs da SBC para
> reencaminhamento ao CA da CAPES.

Ainda sobre este assunto, percebi que houve uma certa confusão da
comunidade com relação ao nosso objetivo na organização da mencionada
lista.  Para tentar mitigar o problema, repasso abaixo aos colegas a
mensagem do diretor da SBC que esclarece tudo o que sabemos sobre o
que nos foi pedido e sobre as pretensões do CA-CC.

Enquanto isso tratamos mais uma vez de estimular, sob a iniciativa de
Mauricio Ayala, a criação da nossa Comissão Especial na SBC.
Manteremos os interessados informados a respeito dos avanços que forem
realizados.

Saudações lógico-computacionais,
Joao Marcos

%%%

-------- Original Message --------
Subject:        [Coordpgcc-l] [*****SPAM*****] Informações do Altigran sobre
o Perfil-CC
Date:   Fri, 16 Dec 2011 17:58:27 -0200
From:   Paulo Masiero <masi...@icmc.usp.br>
To:     Fórum de Coordenadores de Pós-graduação <coordpgc...@sbc.org.br>
CC:     Altigran da Silva <a...@dcc.ufam.edu.br>

Prezados
Estou enviando uma mensagem do Altigran, a pedido dele,
esclarecendo vários aspectos da iniciativa do Perfil-CC.
Esta mensagem vai com cópia para ele.
Se houver necessidade, posso ajudar na intermediação com ele
e o comitê nesta questão.
Masiero
--------------------


Prezados Colegas,

Escrevo esse longuíssimo e-mail na tentativa de esclarecer
adequadamente as questões que vários de vocês postaram na lista do
fórum. Pedi ao Masiero que envia-se, pois não tenho acesso.

Sou Altigran (da Univ. Federal do Amazonas), Diretor de Comissões
Especiais da SBC. Também sou adjunto do Prof. Navaux no CA-CC Capes,
mas é com o chapéu de diretor da SBC que me dirijo a vocês. Gostaria
de deixar claro que está neste contexto toda a discussão que segue
(exceto quando for eventualmente indicado ao contrário).

Infelizmente a mensagem vai ser longa, e peço desculpas por isso, mas
acho importante tentar esclarecer os pontos que vocês colocaram, todos
muito relevantes. Também peço mil desculpas por assumir que a
informação correta teria chegado a vocês. Realmente houve uma falha e
ela é minha. Felizmente temos tempo, e agora oportunidade,  com este
espaço que vocês estão me abrindo, de corrigir isso.

A mensagem está tão longa que vou dividir em seções

1.Iniciativa Perfil-CC SBC
2.Metodologia
3.Estado Atual
4.Como calculamos o impacto das conferências
5.Perguntas feitas nos e-mails que recebi
6.Comentários Finais



Iniciativa Perfil-CC SBC
========================

A minha diretoria está coordenando uma iniciativa que chamamos de
"Perfil-CC SBC" que é inspirada na iniciativa Perfil-CC de 2007

realizada pela PUC-Rio, UFMG, COPPE/UFRJ, UNICAMP e ICMC-USP e cujo
objetivo era “Avaliação das principais conferências internacionais da
área de acordo com sua relevância, prestígio e impacto no cenário
mundial”. O resultado daquela iniciativa foi a base do Qualis CC no
tocante a conferências.

A iniciativa atual tem como objetivos:  (1) Levantar o conjunto de
veículos de publicação de interesse para a Comunidade Brasileira de
Computação; (2) Disponibilizar um mecanismo verificável de medição de
impacto destes veículos.

Nossa motivação foi assessorar a SBC na interlocução com a CAPES
quanto à qualificação das conferências da área oferecer referenciais
com respeito à avaliação de veículos para a comunidade.

Notem que no caso de periódicos a CAPES tem um procedimento uniforme
para todas as áreas de extração dos veículos a partir das informações
do coleta (data-capes). Em todas as áreas, o conjunto destes veículos,
ao final do triênio, forma a base do Qualis da área. O caso de
conferências não é tratado desta forma, pois é especifico para a área
de CC. Essa foi uma conquista da Coordenação de área do triênio
passado, mas, na prática, a CAPES não tem um procedimento semelhante
para conferências. A razão disto é que o conjunto de veículos não é
uniforme e estável como no caso de periódicos. Por causa disso é que
precisamos de coisas como a nossa iniciativa Perfil CC SBC.

Metodologia
===========

A metodologia proposta envolve três fases:

Fase 1: Tomando com base a lista do Perfil CC 2007, validar e,
possivelmente, expandir a lista de veículos-alvo de interesse da
comunidade. Para isso, contamos com a expertise das Comissões
Especiais da SBC. Com isso buscamos qualidade na seleção e veículos e
distribuição do esforço de seleção. Para isso, foi desenvolvida uma
ferramenta que permite aos presidentes de CE a consulta a lista do
Qualis atual e de outras fontes com DBLP, ACM-DL, IEEE Explorer para
selecionar os veículos de interesse. Também é possível listar outros
veículos os quais não se encontram nestas fontes.

Fase 2: Consiste no desenvolvimento de uma ferramenta para cálculo do
índice de impacto das conferências. Essa ferramenta vai permitir a
consulta destes índices e de uma memória de como o cálculo foi feito.
Uma pergunta importante é, "por que uma ferramenta nova". Respondo
essa pergunta mais abaixo. Essa fase inclui também um processo de
verificação e validação dos resultados, também com apoio das Comissões
Especiais da SBC. Notem que essa ferramenta não indica níveis Qualis,
pois essa indicação não é competência da SBC.

Fase 3: Encaminhar os resultados para a CAPES, ou seja, a lista de
veículos sugeridos e seu índice de impacto com memória de cálculo.
Essa fase pressupõe uma articulação entre a Presidência da SBC e a
Coordenação de Área.

Aqui cabem alguns esclarecimentos:

a) Não houve qualquer solicitação da CAPES para a SBC no sentido de
demandar este estudo. Não sei de onde surgiu essa informação, mas ela
não procede. A iniciativa partiu da SBC e será encaminhada a título de
sugestão. Esperamos que o resultado possa ser aceito e utilizado, como
foi o do Perfil CC 2007.

b) A iniciativa foi aprovada pela Diretoria da SBC e pela assembleia
das comissões especiais em Natal no último CSBC.

c) Ela já estava planejada antes que eu fosse nomeado Coordenador
Adjunto de área no meio do ano de 2011. Fazia parte do plano de
trabalho de candidatura da Diretoria da SBC quando de nossa eleição.

d) A pergunta: "porque o fórum de coordenadores não foi informado"

deve ser respondida. Bem, devia realmente ter sido, e a falha foi
minha. De novo, peço desculpas e estou tentado resolvê-la. Agradeço
desde já a compreensão e o apoio de vocês.

Estado Atual
============

Estamos concluindo a Fase 1 na próxima 2a. 19/12 e a Fase 2 já está
bastante adiantada com a ferramenta em fase final de desenvolvimento e
os dados coletados para boa parte dos veículos. Devemos ter um
resultado no fim da fevereiro pelo menos.

Chamo a atenção para o fato de a Fase 2, como descrito acima, envolver
um passo de verificação adicional pelas CEs. Além disso, podemos
acertar um canal de interlocução para que vocês possam contribuir de
alguma forma com esse processo. É importante deixar claro que seria
temerário deixar esse resultado não verificado publicamente
disponível. Conto com a compreensão de vocês neste aspecto. Assim, por
favor, gostaria de pedir que vocês pensassem em maneiras de fazer isso
e que sejam tecnicamente e institucionalmente viáveis (lembrem-se que
falo aqui como SBC).

Como calculamos o impacto das conferências
===========================================

Para a maioria das conferências, o cálculo do índice H somente é
viável pela verificação das citações através do Google Scholar (GS). O
Documento de Área prevê a utilização do GS.

As ferramentas atuais são Baseadas em consultas pelo nome do veículo
(por exemplo, publish or Perish). No entanto,
para usar essa ferramentas é necessário antecipar todas as formas com
que o nomes com que a conferência é citada

Veja esse exemplo de várias citações para um mesmo artigo do SBES 2003:

Proc. of Brazilian Symposium on Software Engineering (SBES’03),
Proc. of Brazilian Symposium. on Software Engineering (SBES),
Proc. of Brazilian Symp. on Soft. Eng.,
Proc. Brazilian Symp. on Software Engineering,
Proc of Simpósio Brasileiro de Engenharia de Software

Assim, a ferramenta que desenvolvemos cálcula o Indice-H pela

agregação das citações a cada artigo.

Para entenderem melhor, seja V uma conferencia  e seja P_i a lista de
artigos publicados em V no ano i.  Cada artigo  p_i_j em P_i tem um
número C(p_i_j)  de citações obtidas no G Scholar.  Dessa maneira
calculamos o H-index de V.  C(p_i_j) é obtido enviando uma consulta ao
G Scholar contendo o título de p_i_j.

Para fins de verificação, nossa ferramenta guarda a consulta e seu
resultado, que podem ser recuperados por quem a usa.

De novo, lembrem que o G Scholar e o H-Index estão sendo usados porque
a CAPES (CTC), no triênio passado legitimou sua escolha quando aprovou
o documento de área da CC.

Julgamos que o processo esta vez melhora o anterior pois a consulta ao
G Scholar é feita pelo título do artigo ao invés de pelo nome da
conferência, que é muito mais sujeito a ambiguidades.

De onde vem a lista dos artigos? BDBComp, DBLP, IEEE, etc. As CE tem
também indicado outras fontes.


Perguntas feitas nos e-mails que recebi
=======================================

* Celso Carneiro Ribeiro:

> Creio que o Altigran poderia responder a essa questão, na condição de
> responsável pelas Comissões Especiais na diretoria da SBC: para que
> comissão especial ou para quem devem ser enviadas as conferências da
> área de algoritmos, otimização, grafos e temas conexos?

Resposta:

Recebi e-mails de um grupo de pesquisadores da área e solicitei que eles
me encaminhassem um nome que pudesse compilar os veículos da área.
O professor Cid Carvalho da UNICAMP foi indicado, e nós abrimos
uma conta no sistema com esse fim.


* Mauricio Ayala-Rincon

> Existe uma lista de lógica gestionada pelo Professor João Marcos da UFRN na
> qual está sendo realizado um levantamento coletivo de eventos da área baseado
> em lista gerada originalmente em 2007.

Resposta:

Ótimo. Essa seria uma maneira de encaminhar essa área? Por favor Mauricio,
me escreva pessoalmente.

> Outrosim, esses eventos estão sendo
> informados via os data-capes dos programas e via outros CEs.

Resposta:

Isso está relacionado ao problema que a CAPES tem para processar conferências
no coleta (data-capes) (ver Iniciativa Perfil-CC SBC, acima) e que motivou
toda a iniciativa.

> Entendo também que uma reorganização dos CEs está sendo promovida pela SBC.

Resposta:

É verdade, mas ela é estrutural e não de criação pela SBC de novas CEs.
Estas demandas partem dos sócios e estamos abertos a elas.

> Adicionalmente, ainda que não de interesse particular do meu próprio programa,
> é importante que o CA de CC considere especialmente outras áreas relevantes
> da CC e com representatividade e visibilidade científica do País não cobertas 
> pelas
> CEs da SBC, p.ex.,  computação algébrica e numérica, otimização combinatória,
> etc., etc.

Resposta:

Não há o que discordar. Por favor, me façam chegar esses casos que vou
encaminhar.
Lembro de novo que me limito aqui ao contexto SBC, mas acho que como comunidade
devemos todos fazer o esforço de ser abrangentes o quanto pudermos.

* Celso Carneiro Ribeiro:

> Também há que se lembrar que nem sempre as CEs da SBC terão a disponibilidade
> necessária para conduzir esse trabalho, e pode haver o risco de
> heterogeneidade na profundidade do levantamento feito por cada
> área, que levará a distorções depois no processo de avaliação
> dos programas.

Resposta:

Celso, é verdade e nada pode ser garantido. No entanto, as CEs tem
trabalhado com
afinco para ter sua área bem representada. Estamos todos nos esforçando
muito pra ter um bom resultado final, embora a gente não deva esperar perfeição.


* Glaucio H. S. Carvalho

> desculpem minha pergunta (vou fazê-la por não estar acompanhadno esse
> processo). Essa discussão é a respeito apenas de conferências estou
> correto? Em algum momento será feita alguma discussão sobre periódicos?

Resposta:

Gláucio, eu acho que respondi tua pergunta na seção Iniciativa Perfil-CC SBC.

* Gerson Cavalheiro


> - A CAPES indicou ao CA a possibilidade de utilizar uma entidade científica 
> como
> consultora ad hoc para > composição da lista;
> - o CA entendeu como viável atribuir a SBC a tarefa;
> - a SBC distribuiu o encargo entre as CEs, aproveitando sua estrutura.

Resposta:

Gerson, os primeiros dois pontos não procedem. Me desculpe se em algum momento
eu deixei parecer que havia alguma demanda da CAPES envidada a SBC pelo CA-CC.
Não houve. A ideia partiu da SBC e por isso ficou limitada as CEs, o que estamos
tentando mitigar agora.

Comentários Finais
==================

Acho que coloquei a maior parte dos detalhes e peço desculpas se fui
muito prolixo.

Por favor, pediria que agora que vocês discutissem entre vocês e me
mandasse outras dúvidas de
forma consolidada. Estou a disposição.

Não posso deixar de mencionar o grande esforço e dedicação dos
presidentes e demais dirigentes de CE neste processo e muito menos de
meus colegas de aqui do IComp/UFAM, o Arilo Cláudio, David Fernandes e
Horácio Fernandes, que junto com alguns alunos estão desenvolvendo as
ferramentas e gerenciando o processo de forma totalmente voluntária.


Um abraço e boas festas a todas e a todos!

-- Altigran
_______________________________________________
Logica-l mailing list
Logica-l@dimap.ufrn.br
http://www.dimap.ufrn.br/cgi-bin/mailman/listinfo/logica-l

Responder a