• Paradigma da Pesquisa Quantitativa
    • Prof Diego Dermeval - UFAL


Pesquisa qualitativa
  • onde se estuda objetos em seu ambiente naturl
  • Tenta interpretar fenômenos com explicaç~~oes que pessoas levam até ele
  • Aceita-se que há uma gama de interpretações possíveis
  • Tenta descobrir causas observadas pelos sujeitos do estudo
  • Busca entender "por quê?"
Pesquisa quantitativa:
  • Deseja quantificar um relacionamento ou comparar 2 ou mais grupos
  • Objetivo é identificar um relacionamento causa-efeito
  • Muitas vezes feita com experimentos controlados ou coleta de dados com estudos de casos ou surveys
  • Permite análise estatística
  • Mais adequado para estabelecer "o por quê": X -> Y


Etapas da investigação empírica


  • Definição do problema
  • Revisão da literatura
  • Planejamento
  • Execução da pesquisa
  • Análise de dados
  • Divulgação e relato da pesquisa


Definição do problema


  • Business problema: quem vai usar a pesquisa?
  • Technical problem: quem vai realizar a pesquisa?
  • Motivação e importância do problema:
  • 5W2H
    • Quais as consequências de não resolver este problema?
    • Quem está sofrendo?
    • Quais dados ou não apoiam o problema?


Revisão da Literatura (não sistemática)


  • Fichas de leitura podem ajudar
  • Fontes: livros, conferências, periódicos
  • Escolher bem o que vale a pena ler
  • Leitura crítica ativa:
    • O que está sendo dito, em geral?
    • Detalhes: quais são os argumentos?
    • Crítica> concordo ou não?
    • Qual é a relação do trabalho com os outros?]
    • E daí? Como que li me afeta, me muda?
    • Que ideias levo pra casa?


Revisão Sistemática da Literatura


  • Planejamento:
    • Identificação da necessidade de RSL
    • Formulação de uma questão de pesquisa
  • Condução:
    • Busca e seleção dos estudos primários
    • Avaliação de qualidade
    • Extração dos dados
    • Sumarização e síntese dos resultados
    • Interpretação dos resultados
  • Relatório:
    • Escrita do relatório ou artigo
Kitchenham e Charters (2007)


Exemplo de Seleção de uma RSL


  • Passos:
  1. Identificar e organizar estudos recuperados de bases eletrônicas;
  2. Remover automaticamente artigos duplicados usando START tool;
  3. Revisar títulos, palavras-chave, local de publicação e excluir todos aqueles que não atendem os critérios de inclusão. Se os dados forem insuficientes, o artigo pode ser deixado para o próximo passo;
  4. Os textos completos dos artigos revisados no passo anterior foram recuperados e revisados e todos que atenderam ao critérios de inclusão foram selecionados;
  5. Artigos NON-ITS ?? foram excluídos.


Estratégia Empírica: Survey


  • Estudo retrospectivo de uma situação para documentar relacionamentos e resultados
  • Sempre feito depois do evento
  • Não há controle sobre a situação
  • Não há manipulação de variáveis
  • Feito com entrevistas e questionários: depende da memória e opinião das pessoas.


Estratégia Empírica: Estudo de caso


  • Dados reais de um ambiente/processo real são coletados:
    • Tipicamente não é retrospectivo: a medição ocorre após o planejamento do estudo
    • Às vezes, é retrospectivo: os dados reais já foram coletados
  • Decide o que quer estudar e planeja a captura de dados
  • Objetivos:
    • Identificar fatores que podem afetar uma atividade e documenta a atividade
    • Estabelecer relacionamentos entre variáveis: construção de premissas e correlação entre variáveis
  • Não há manipulação de variáveis
    • Não é controlado; só há observação durante um período de tempo.
Can we use gamification to predict student´s performance? A Case Study supported by an Online Judge.


Estratégia Empírica: Experimento


  • Investigação controlada rigorosa
  • Fatores são identificados e manipulados para documentar seus efeitos nos resultados
  • Precisa ser reproduzível
  • Unidades experimentais (pessoas, por exemplo) são alocadas aos "tratamentos" aleatoriamente
    • Quando não é possível controlar a alocação, temos uma "quasi-experimento" pois o controle é menor
  • Experimentos são "a forma" de estabelecer uma relação causa-efeito
    • Se eu alterar apenas a variável independente X e a variável-resposta Y mudar, então "X causa Y"
  • Comparando os métodos de pesquisa quantitativos:
    • Aspectos | Survey | Estudo de caso | Experimento
    • Controle de execução | N | N S
    • Baseado em medições | N | S | S
    • Custo de investigação | Baixo | Médio | Alto
    • Facilidade de repetição | Alta | Baixa | Alta
Há pouco problemas padronizados e poucos protocolos de pesquisa replicáveis


Passos do planejamento de um experimentoo


  • Formulação de hipóteses
  • Identificação das variáveis dependentes (resposta)
  • Identificação das variáveis dependentes (fatores)
  • (Re)formulação das hipóteses usando as variáveis
  • Seleção dos participantes e do estudo
  • Seleção dos métodos de análise
  • Definição dos instrumentos
  • Análise de ameaças (validity threats)


Formulação de hipóteses


  • A análise estatística de um experimento se baseia no teste de hipóteses:
    • Tenta-se rejeitar a hipótese nula com a mais alta confiança possível (nível de significaância alfa mais baixo) usando os dados colhidos
  • Deve-se formular a hipótese nula (H0) e a hipótese alternativa (H1) e esclher alores de alfa e beta
    • alfa: ?
    • beta: ?


Seleção do contexto


  • Resultados mais válidos e mais gerais são obtidos com experimentos no mundo real e não "em lab", com alunos
  • Para diminuir o impacto no mundo real (a nova alternativa sendo testada pode não funcionar bem ...), pode-se usar "projetos off-line"
    • Também são mais baratos
  • Projetos com alunos na universidade normalmente são