Competição de Avaliação de Sistema

A categoria Competição de Avaliação de Sistema está sendo oferecida pela primeira vez no IHC 2006. A categoria propõe um sistema, este ano o JEMS (Journal and Event Management System) da SBC (Sociedade Brasileira de Computação), equipes se inscrevem para fazer a avaliação deste sistema e submetem o relatório da avaliação feita. Os melhores relatórios serão selecionados para apresentação durante o evento, quando será selecionado o campeão. A Competição busca motivar a participação no evento de alunos e professores de IHC, contribuindo para: a formação destes alunos; a geração de material didático; a experiência da comunidade; e para a qualidade de interação do JEMS.

Apoio:

Finalistas

Graduação (em ordem alfabética)
Equipe Instituição Membros da Equipe Professor-Orientador
Discovering Usability PUC-Campinas, Campinas - SP Amauri Pereira Ramos,
Wissam Ramadan,
Pablo Cristiano de Carvalho,
Leonardo Zamarion Carretoni		 José Oscar Fontanini de Carvalho
IHC-UDESCUniversidade do Estado de Santa CatarinaAndréia Teixeira Pilla,
Frank William Schwanz,
Joelson Piaia,
Raquel Weirich,
Victor Lundgren Bastos		 Isabela Gasparini
LEU-FEICentro Universitário da FEI, São Paulo André de Oliveira Argentão,
Eduardo Sacogne Fraccaroli,
Elen Collaço de Oliveira,
Thiago Tsuyoshi Nishio		 Plinio Thomaz Aquino Junior
PUCMINAS PUC-MG, Belo Horizonte - MG Diogo Vargas Tito,
Fernanda de Castro Muniz Netto,
Luiz Guilherme Hilel Drumond,
Rochester Leon Diniz Parreiras,
Sérgio Mariano Dias 		Cristiane Neri Nobre
Pós-Graduação (em ordem alfabética)
Equipe Instituição Membros da Equipe Professor-Orientador
COMUNIHCUniversidade de São PauloElisa Volpato,
Emilia Sobral,
Luis Fernando C. e Silva		 Maria Laura Martinez
GAIAUniversidade Estadual de Campinas André Constantino da Silva,
Ariel Vargas,
Eduardo Hideki Tanaka		 Heloísa Vieira da Rocha
GIHM/CG Universidade Federal de Campina Grande Danilo de Sousa Ferreira,
José Pedrosa Barreto Neto,
Yuska Paola Costa Aguiar 		Fátima Vieira

Instruções para Participação

Para participar na Competição a equipe deve cumprir três etapas:

  1. Inscrição;
  2. Execução da avaliação;
  3. Submissão do relatório de avaliação.

Serão oferecidos 2 níveis de participação: graduação e pós-graduação. A seguir descrevemos a formação da equipe para cada um destes níveis e as etapas de participação.

Formação da Equipe

A formação da equipe é que determina a sua participação no nível de graduação ou de pós-graduação. Todas as equipes devem ter um professor-orientador, vinculado a uma instituição de ensino superior. A composição de equipes deve obedecer às seguintes regras de formação, em cada nível:

Inscrição na Competição

Inscrições encerradas.

Para se inscrever, a equipe deverá preencher o formulário de inscrição, informando o nome da equipe, e os nomes, emails, instituições e departamento/cursos do professor-orientador e dos alunos. Qualquer um dos membros da equipe pode fazer a inscrição. O professor-orientador receberá um email pedindo que confirme a inscrição da equipe. Assim que confirmada a inscrição será criada na plataforma de testes do JEMS um evento (previsão de até 3 dias após a confirmação), para que a equipe possa então partir para a etapa de execução da avaliação. As inscrições estarão abertas a partir do dia 27 de março de 2006 e serão encerradas no dia (Novo) 09 de junho de 2006.

Professores que queiram ter acesso ao JEMS, independente de suas equipes, para poder examiná-lo antes ou durante o trabalho das equipes, favor enviar um email solicitando o acesso ao coordenador da competição, Elton José da Silva, através do email ihc2006_competicao@dimap.ufrn.br.

Execução da Avaliação

Uma vez criado o evento no JEMS para a equipe (previsão: até 3 dias após a confirmação de sua inscrição), ela poderá dar início à avaliação. Vale ressaltar que as equipes NÃO terão que esperar o encerramento das inscrições para dar início às suas avaliações.

As equipes terão liberdade de definir o método ou combinação de métodos que utilizarão para avaliar o sistema. Para isso, devem considerar a especificação (veja link abaixo) definida pela coordenação sobre o escopo de tarefas para a avaliação do JEMS.

Baixe aqui a especificação.

Cancelamento da Inscrição

As inscrições podem ser canceladas a qualquer momento a partir da inscrição e no máximo até o dia 19 de junho de 2006.

Submissão de Relatório

O relatório deve conter:

  1. o nome do(s) método(s) utilizado(s);
  2. a justificativa da escolha da metodologia;
  3. a descrição de aplicação da metodologia;
  4. tratamento de questões éticas envolvidas;
  5. problemas encontrados (descrição do problema, local da interface, justificativa).

Os itens de 1 a 4 do relatório devem ser escritos em no máximo 2 páginas, e o item 5 – problemas encontrados – em no máximo 8 páginas. Caso não seja possível incluir todos os problemas encontrados no espaço disponível, cabe à equipe definir quais deixar de fora. Caso a equipe escolha um método de avaliação pouco conhecido pela comunidade de IHC ela poderá anexar ao relatório no máximo mais 2 páginas de descrição do método e contendo referências para descrições mais detalhadas. A descrição do método não configura uma contribuição acadêmica da equipe, e não precisa ser original.

O relatório deverá ser submetido até o dia 21 de julho de 2006 (nova data). Vale ressaltar que só serão aceitos relatórios de equipes previamente inscritas e confirmadas na Competição.

Para mais informações sobre o formato do relatório ou como submetê-lo, visite Submissão de Trabalhos.

Datas Importantes

Processo de Avaliação

Cada relatório vai ser avaliado por revisores com experiência comprovada em IHC ou avaliação de sistema interativos. Serão levados em conta a redação do relatório, a justificativa da escolha da metodologia utilizada, a forma de condução da coleta de dados e a qualidade dos resultados encontrados por cada equipe durante suas avaliações.

Documentos:

Seleção e Apresentação

Serão selecionados finalistas em cada um dos níveis (graduação e pós-graduação) para uma curta apresentação oral, seguida por um tempo para perguntas da audiência, durante o IHC 2006, a realizar-se na cidade de Natal - RN, entre os dias 19 e 22/11/2006. Cada equipe selecionada receberá da organização do evento uma inscrição gratuita para um de seus membros alunos.

Embora seja desejável, não é obrigatória a presença de todos os membros das equipes finalistas no dia da apresentação no IHC 2006.

Premiação

As equipes vencedoras em cada nível (graduação e pós-graduação) receberão:

Vale ressaltar que concorrerão ao certificado e prêmio somente os relatórios de equipes selecionadas que tenham feito a apresentação oral no IHC 2006.

Publicação

Pelo menos um dos membros das equipes finalistas deve estar inscrito na conferência para que o relatório seja publicado nos anais do IHC 2006. Os relatórios dos finalistas serão publicados também no site da Comissão Especial de IHC (CEIHC) da SBC.

Confidencialidade de Submissões

Submissões serão mantidas confidenciais durante o processo de revisão. Os relatórios dos finalistas serão mantidos confidenciais até o início do evento. Os relatórios das equipes que não tiverem sido selecionados como finalistas poderão, mediante autorização do professor-orientador, ser divulgados no site da CEIHC.

Contato

Em caso de dúvidas sobre o JEMS, ou sobre as instruções para participação favor entrar em contato com o coordenador da competição, Elton José da Silva, através do email ihc2006_competicao@dimap.ufrn.br

Responsável: Jair C Leite    -    Design: Cláudia Tavares    -    Conteúdo: Raquel Prates e Comitê técnico do IHC 2006    -    E-mail: ihc2006@dimap.ufrn.br