Guidelines for Experimentation with Dynamic Simulation Models in the Context of Software Engineering

Estudos Baseados em Simulação (EBS) têm se mostrado uma interessante abordagem de pesquisa para a Engenharia de Software (ES). Entretanto, é possível identificar a falta de informações relevantes nos relatos desse tipo de estudos encontrados na literatura técnica, dificultando o entendimento dos procedimentos e resultados apresentados, bem como sua repetição. Além das limitações de espaço nas publicações, algumas informações não são apresentadas, aparentemente, devido às questões metodológicas não abordadas na condução dos estudos. Estas e outras questões foram identificadas na condução de uma quasi-Revisão Sistemática da Literatura que, após a evolução de uma versão preliminar, resultou na proposta de um conjunto de 30 diretrizes para planejamento e relato de EBS no contexto da ES, cujo objetivo é prover direcionamentos sobre aspectos a serem tratados em diferentes estágios de um EBS, concentrando-se na utilização de modelos de simulação dinâmicos e na identificação e mitigação de potenciais ameaças à validade desse tipo de estudo. O conjunto proposto foi organizado com base em resultados de sucessivos estudos experimentais, utilizando diferentes estratégias de pesquisa. Os resultados das primeiras avaliações indicam que o conjunto de diretrizes proposto é coerente e completo em relação aos aspectos que um EBS deve considerar no planejamento e relato. Ainda, um estudo de observação permitiu caracterizar as diretrizes quanto ao apoio na elaboração e revisão de protocolos para EBS, indicando resultados positivos para eficácia e percepção de utilidade, mas com possibilidades de melhoria principalmente relacionadas à facilidade de utilização. Assim, foi proposta uma nova versão deste conjunto, a qual necessita de avaliações adicionais, sobretudo da comunidade de ES na discussão e aplicação de EBS.