Avaliação do Projeto Arte na Escola

Avaliação do Projeto Arte na Escola
Resultados
Janeiro 2012
Objetivo
Avaliar o desempenho dos alunos da 8ª série nas provas de matemática e língua
portuguesa das escolas públicas nas quais o professor de artes participa dos pólos “Arte na
Escola”
Metodologia
• Fonte dos dados
dados:: Prova Brasil 2007 (microdados)
• Análise descritiva das informações referentes a aluno, diretor e escola
• Modelos de Regressão Multinivel: (dois níveis hierárquicos)
• Aluno
• Escola
Universo de análise:
• Estudante de 8ª série
• Participante da Prova Brasil em 2007
• Escola estar localizada em município no qual que existe pelo menos uma escola
em que o professor participa do programa
Variável de interesse: Escola possui pelo menos um professor que participa do
programa Arte na Escola (duas categorias)
• Escola polo
polo: escola (municipais e estaduais) em que um professor estiver
participando do programa Arte na Escola
• Escola não polo
polo: escolas públicas pertencentes aos municípios onde se
localizam as escolas incluídas no programa Arte na Escola
Identificação do universo de análise nos
dados da prova Brasil 2007
Distribuição das escolas polos, segundo Prova
Brasil 2009
Pólos
Escolas
Distribuição das escolas polos, segundo Prova
Brasil 2007
Pólos
%
Escolas
%
1 UFPR
4
2,1
1 UFPR
3
2,0
2 UCS
2
1,0
2 UCS
1
0,7
3 UFRGS
4
2,1
3 UFRGS
4
2,7
4 UNESP BAURU
5
2,6
4 UNESP BAURU
3
2,0
5 UNICENTRO
3
1,6
5 UNICENTRO
2
1,3
6 UNIPAM
2
1,0
6 UNIPAM
2
1,3
7 UNIPLAC
9
4,7
7 UNIPLAC
8
5,3
8 URCA
26
13,5
16
10,7
9 UNICSUL
15
7,8
7
4,7
10 UEL
123
63,7
10 UEL
104
69,3
Total
193
100,0
Total
150
100,0
Fonte: Elaboração dos autores.
8 URCA
9 UNICSUL
Fonte: Elaboração dos autores.
Junção com os
microdados da
Prova Brasil
2007
• 15 escolas que não apresentam dados para
o questionário de escolas
• 23 escolas sem nota em 2007
• 5 escolas que não constam do banco de
dados do aluno
Identificação do universo de análise nos
dados da prova Brasil 2007
Número de municípios, escolas e alunos nos municípios onde se
localizam as escolas com pelo menos um professor participante do
AE e que participaram da Prova Brasil 2007
Estado
Nº de
municípios
Nº de
escolas
Nº de escolas
com
Total de
professores alunos do
participantes
estudo
do AE
Total de
alunos nas
escolas com
professor
participante
do AE
Ceará
3
58
16
4.112
1.080
Minas Gerais
1
24
2
1.687
192
São Paulo
4
1.173
10
137.098
1.267
Paraná
37
421
109
34.976
9.903
Santa Catarina
3
43
8
1.809
441
Rio Grande do Sul
2
234
5
9.732
180
50
1.953
150
189.414
13.063
Total
Fonte: MEC/INEP. Prova Brasil 2007. Elaboração dos autores
Universo de análise nos dados da prova Brasil
2007
Distribuição dos alunos nas escolas com 8ª série segundo a existência de polos
do programa Arte na Escola. Municípios com Escolas polos
2007
UF e Dependência
Administrativa
Total
Sigla da
Unidade da
Federação
N
%
Total
N
%
176.351
100,0
13.063
100,0
189.414
100,0
Ceará
3.032
1,7
1.080
8,3
4.112
2,2
Minas Gerais
1.495
0,8
192
1,5
1.687
0,9
Paraná
25.073
14,2
9.903
75,8
34.976
18,5
Rio G. Sul
9.552
5,4
180
1,4
9.732
5,1
Santa C.
1.368
0,8
441
3,4
1.809
1,0
135.831
77,0
1.267
9,7
137.098
72,4
Federal
140
0,1
53
0,4
193
0,1
Estadual
129.296
73,3
11.292
86,4
140.588
74,2
Municipal
46.915
26,6
1.718
13,2
48.633
25,7
São Paulo
Dependência
Administrativa
da Escola
Não
Existência de Escola Polo
Sim
N
%
Fonte: MEC/INEP. Prova Brasil 2007. Elaboração dos autores
7% dos alunos são de escolas polos
Universo de análise nos dados da prova Brasil
2007
Nº de Alunos da 8º série que fizeram a Prova Brasil de 2007 nos municípios onde se localizam as
escolas polos, segundo polo e estado
2007
Estado
Polo
Não Polo
Polo
1 UFPR
2 UCS
3 UFRGS
Ceará
Minas
Gerais
São
Paulo
42
16
22
2
1.163
10
312
109
3
35
8
Rio
Grande
do Sul
229
5
1
4
4 UNESP BAURU
3
5 UNICENTRO
6 UNIPAM
7 UNIPLAC
8 URCA
9 UNICSUL
10 UEL
Total
Paraná
Santa
Catarina
2
2
104
421
2
8
16
7
104
1.953
8
16
7
24
1.173
Fonte: MEC/INEP. Prova Brasil 2007. Elaboração dos autores
1.803
150
3
1
4
3
2
58
Total
43
234
Universo de análise nos dados da prova Brasil
2007
Nº de municípios onde se localizam as escolas polos segundo porte populacional
Porte Populacional(1)
Nº
%
Menos de 10 mil hab
10
20,0
De 10 mil a menos de 20 mil hab.
13
26,0
De 20 mil a menos de 50 mil hab.
6
12,0
De 50 mil a menos de 100 mil hab.
5
10,0
De 100 mil hab. e mais
16
32,0
50
100,0
Total
Fonte: MEC/INEP. Prova Brasil 2007. Elaboração dos autores
Modelo de Regressão Multinivel
Dois Modelos:
1) variável dependente: Proficiência do aluno em língua portuguesa
calculada na escala do SAEB, com média de 205 e desvio de 50 (SAEB/97)
2) variável dependente: Proficiência do aluno em matemática
calculada na escala do SAEB, com média de 205 e desvio de 50 (SAEB/97)
Universo: todas as escola (1.953)
Modelo de Regressão Multinivel
Fatores explicativos Aluno
Fatores Aluno
Sexo:
1 = Feminino
0 = Masculino (referência)
Cor:
1 = Branco
0 = Não branco (referência)
Defasagem idade e série:
1 = Adequada
0 = Defasada (referência)
Classe socioeconômica:
1 = Pertencente às classes A, B
0 = Pertencente às classes C, D e E (referência)
Escolaridade da mãe:
1 = Mais de 4 anos de estudos
0 = Até 4 anos de estudos (referência)
Mais de 20 livros na casa do aluno:
1 = Sim
0 = Não (referência)
Grau de Incentivo dos pais para estudar:
0 = Nenhum incentivo
1 = Baixo incentivo
2 = Médio incentivo
3 = Alto incentivo
Modelo de Regressão Multinivel
Fatores explicativos Escola:
Fatores
Escola tem professor participante do Projeto Arte na Escola
1 = Sim
0 = Não (referência)
% de alunos pertencentes às classes A e B na escola (Critério Brasil)
Idade do Diretor da escola
1 = Menos de 40 anos
0 = 40 anos e mais (referência
Renda familiar do diretor da escola
1 = Menos de R$2.700,00 (referência)
2 = De R$2.700,00 a R$ 3.100,00
3 = Mais de R$3.100,00
% de Professores estáveis na escola
1 = Menos de 50% (referência)
2 = De 50% a 75%
3 = Mais de 75%
Professor da respectiva disciplina realiza/realizou cursos extras de capacitação
1 = Sim
0 = Não (referência)
Professor da respectiva disciplina realiza/realizou cursos de pós-graduação
1 = Sim
0 = Não (referência)
Grau de problemas da escola
Escala varia entre 0 e 3. Quanto maior o valor, maior o grau de problemas
da escola
Resultados – Proficiência média em Língua Portuguesa
segundo Características dos Alunos
Sexo
Cor
250
250
245
Escolas Não Pólo
245
Escolas Não Pólo
240
Escola Pólo
240
Escola Pólo
235
235
230
230
225
225
220
220
215
215
210
210
205
205
200
200
Feminino
Masculino
Branco
Classe socioeconômica
Defasagem escolar
250
Não Branco
250
245
Escolas Não Pólo
245
240
Escola Pólo
240
235
235
230
230
225
225
220
220
215
215
210
210
205
205
200
Escolas Não Pólo
Escola Pólo
200
Adequado
Defasado
Pertence as classes A,B
Pertence as classes C, D e E
Resultados – Proficiência média em Língua Portuguesa
segundo Características dos Alunos
Anos de Estudo da Mãe
Nº de Livros no Domicílio
250
250
245
Escolas Não Polo
245
Escolas Não Polo
240
Escola Polo
240
Escola Polo
235
235
230
230
225
225
220
220
215
215
210
210
205
205
200
200
4 Anos ou mais
20 livros ou menos
Menos de 4 anos
Grau de Incentivo dos Pais
250
245
Escolas Não Polo
240
Escola Polo
235
230
225
220
215
210
205
200
Nenhum
Baixo
Médio
Alto
Mais de 20 livros
Resultados – Proficiência média em
Matemática, segundo Características dos Alunos
Sexo
Cor
250
Escolas Não Pólo
250
245
Escola Pólo
245
240
240
235
235
230
230
225
225
220
220
215
215
210
210
205
205
200
200
Feminino
Masculino
Escola Pólo
Branco
Não Branco
Classe socioeconômica
Defasagem escolar
250
Escolas Não Pólo
250
245
Escolas Não Pólo
245
240
Escola Pólo
240
235
235
230
230
225
225
220
220
215
215
210
210
205
205
200
200
Adequado
Defasado
Escolas Não Pólo
Escola Pólo
Pertence as classes A,B
Pertence as classes C, D e E
Resultados – Proficiência média em
Matemática, segundo Características dos Alunos
Anos de Estudo da Mãe
Nº de Livros no Domicílio
250
260
Escolas Não Polo
245
Escola Polo
240
250
235
Escolas Não Polo
Escola Polo
240
230
230
225
220
220
215
210
210
205
200
200
20 livros ou menos
4 Anos ou mais
Menos de 4 anos
Grau de Incentivo dos Pais
260
Escolas Não Polo
250
Escola Polo
240
230
220
210
200
Nenhum
Baixo
Médio
Alto
Mais de 20 livros
Resultados – Perfil das Escolas
Resultados do Modelo para todas as escolas
Proficiência em Língua Portuguesa
Modelo 4
Fatores
Coeficiente
p-valor
Nível 1 - Aluno
Sexo (feminino)
10,572
0,000
5,996
0,000
14,593
0,000
Alunos da Classe B
4,121
0,000
Alunos da Classe C
4,952
0,000
-
-
4,050
0,000
Cor (branca)
Defasagem escolar (adequada)
Escolaridade da mãe (4 ou mais anos de estudo)
4ª a 7ª série
Ensino Fundamental completo
5,288
0,000
12,486
0,000
Mais de 20 livros na casa do aluno
9,222
0,000
Grau de Incentivo dos pais para estudar
4,932
0,000
Escola polo
3,618
0,000
% de Alunos das classes C, D, E na escola
-0,449
0,000
Diretor com menos de 40 anos
-1,086
0,111
-0,336
0,691
-0,003
0,997
Entre 50% e 75%
3,972
0,000
Mais de 75%
2,656
0,000
-0,207
0,565
-0,027
0,933
-2,134
0,000
Até R$1.500,00
1,312
0,038
Mais de R$1.500,00 a R$1.900,00
1,718
0,008
Mais de R$1.900,00
1,885
0,004
241,447
0,000
Pelo menos Ensino Médio completo
Nível 2 - Escola
Renda familiar do Diretor
Entre R$2.700,00 e R$3.100,00
Acima de R$3.100,00
% de Professores estáveis
Professor de Língua Portuguesa com cursos extras
Professor de Língua Portuguesa com pós-graduação
Grau de problemas da escola
Salário do Professor
Constante
Resultados do Modelo para todas as escolas
Proficiência em Matemática
Modelo 4
Fatores
Coeficiente
p-valor
Nível 1 - Aluno
Sexo (feminino)
8,212
0,000
Cor (branca)
5,836
0,000
15,798
0,000
Alunos da Classe B
3,656
0,000
Alunos da Classe C
3,418
0,000
-
-
4ª a 7ª série
3,356
0,000
Ensino Fundamental completo
4,176
0,000
Defasagem escolar (adequada)
Escolaridade da mãe (4 ou mais anos de estudo)
10,402
0,000
Mais de 20 livros na casa do aluno
Pelo menos Ensino Médio completo
8,109
0,000
Grau de Incentivo dos pais para estudar
3,141
0,000
7,754
0,000
% de Alunos das classes C, D, E na escola
-0,4612
0,000
Diretor com menos de 40 anos
-0,0781
0,916
Entre R$2.700,00 e R$3.100,00
1,166
0,204
Acima de R$3.100,00
0,743
0,278
Entre 50% e 75%
3,117
0,000
Mais de 75%
2,326
0,002
-0,376
0,237
2,111
0,000
-2,544
0,000
Até R$1.500,00
0,284
0,640
Mais de R$1.500,00 a R$1.900,00
0,530
0,386
0,679
0,283
251,453
0,000
Nível 2 - Escola
Escola polo
Renda familiar do Diretor
% de Professores estáveis
Professor de Língua Portuguesa com cursos extras
Professor de Língua Portuguesa com pós-graduação
Grau de problemas da escola
Salário do Professor
Mais de R$1.900,00
Constante
Resultados do Modelo para todas as escolas
Resumo dos Resultados
Língua
Portuguesa
Matemática
Sexo (feminino)
+
+
Cor (branca)
+
+
Defasagem escolar (adequada)
+
+
Alunos da Classe A e B
ns
ns
Escolaridade da mãe (4 ou mais anos de estudo)
+
+
Mais de 20 livros em casa
+
+
Grau de Incentivo dos pais para estudar
+
+
-
-
Diretor com menos de 40 anos
ns
ns
Diretor com renda familiar entre R$2.700,00 e R$3.100,00
ns
ns
Diretor com renda familiar acima de R$3.100,00
ns
ns
Entre 50% e 75% dos professores são estáveis
+
+
Mais de 75% dos professores são estáveis
+
+
Professor da respectiva disciplina com cursos extras
+
ns
Professor da respectiva disciplina com pós-graduação
ns
+
Grau de problemas da escola
-
-
Escola polo
+
+
Fatores
Nível 1 – Aluno
Nível 2 – Escola
% de alunos nas classes C, D, E na escola
Resultados Gerais
Os fatores se comportam de forma análoga para o desempenho escolar da
língua portuguesa e matemática, exceto no fator - Professor da respectiva
disciplina com pós-graduação, para o qual é significativo somente no
desempenho de matemática.
Somente as variáveis referentes ao nível da escola: idade e renda familiar do
diretor, realização de curso extra por parte tanto do professor de língua
portuguesa como de matemática não se mostraram significativas no modelo.
Os fatores associados aos alunos apresentam maiores coeficientes do que
daqueles associados à escola, ou seja, os fatores associados aos alunos
mostram mais impactos na notas dos alunos. A exceção é o fator escola pólo
ou não.
Resultados Específicos
Fator – Escola Polo
Os resultados obtidos pelos dois modelos mostram que alunos que frequentam
escolas nas quais algum professor participa do programa Arte na Escola
apresentam melhor desempenho na Prova Brasil (tanto em Matemática quanto
em Língua Portuguesa).
Em Língua portuguesa o acréscimo na nota é (em média) de 2,7 pontos, e em
Matemática o acréscimo na nota é (em média) de 7,1 pontos.
Resultados Específicos
Fator – Sexo
As meninas apresentaram melhor desempenho quando comparadas com os
meninos para as duas avaliações: língua portuguesa e matemática;
Fator – Raça/Cor
Os alunos de raça/cor branca apresentaram melhor desempenho em relação
aos alunos pretos, pardos, indígenas ou amarelos. O acréscimo, em média, na
nota dos alunos brancos em relação aos demais alunos é de 6,0 e 5,8 pontos
na avaliação da língua portuguesa e matemática, respectivamente;
Resultados Específicos
Fator – Defasagem escolar
Os alunos que apresentam defasagem escolar, isto é, pelo menos dois anos
de atraso em relação à série ideal para a idade apresentaram pior
desempenho, quando comparados aos que estão adequados em termos de
idade-série. Ressalta-se que o fator defasagem escolar apresenta o maior
coeficiente (acréscimo nas notas) entre todos os fatores tanto em língua
portuguesa como em matemática;
Resultados Específicos
Fator – Classe socioeconômica do aluno
Os alunos das classes socioeconômicas B e C apresentaram melhor desempenho
nas provas do que aqueles pertencentes às classes D e E;
Fator – Escolaridade da mãe
A escolaridade da mãe mostrou-se um indicador associado ao rendimento
escolar. Os alunos apresentaram melhor desempenho nas duas provas quanto
maior a escolaridade da mãe. Quando a mãe tem pelo menos o ensino médio
completo os acréscimos nas notas da tanto de língua portuguesa como de
matemática são os segundo maiores em relação aos outros fatores;
Resultados Específicos
Fator – Posse em casa de mais de 20 livros
Os alunos que declararam possuir em casa estante com mais de 20 livros (proxy
de acesso a bens culturais) apresentaram melhor desempenho escolar do que
aqueles que não declararam não possuir;
Fator – Incentivo a estudar por parte dos pais
Os alunos que declararam serem incentivados a estudar, fazer tarefas e ir à escola
por parte dos pais ou responsáveis apresentaram melhor desempenho escolar
nas duas matérias do que aqueles que não declararam serem incentivados;
Resultados Específicos
Fator – Nível socioeconômico dos alunos que freqüentam a escola
As escolas com maior proporção de crianças pertencentes às classes C, D e E
apresentam pior desempenho em ambas as provas;
Fator – Idade e rendimento familiar do diretor da escola
A idade e o rendimento do diretor da escola não se mostraram significantes no
desempenho dos alunos, tanto da língua portuguesa quanto de matemática;
Resultados Específicos
Fator – Percentual de professores estáveis
Os alunos pertencentes às escolas com maior proporção de professores
estáveis, ou seja, escolas com menor número de professores eventuais em
relação ao total de professores apresentaram melhor desempenho na Prova
Brasil;
Fator – Frequência de cursos extras de capacitação por parte dos
professores
A freqüência de cursos extras de capacitação por parte dos professores não
se mostrou significante no desempenho escolar dos alunos de ambas as
provas;
Resultados Específicos
Fator – Frequência de cursos de pós-graduação por parte dos professores
Nas escolas em que os professores de matemática declararam freqüentar
cursos de pós-graduação, os alunos apresentaram melhor desempenho em
matemática. No entanto, o fato de o professor de língua portuguesa
freqüentar curso de pós-graduação não apresenta significância estatística
com o desempenho escolar dos alunos nessa disciplina;
Resultados Específicos
Fator – Grau de problemas encontrados na escola
Quanto maior o grau de problemas encontrados na escola, menor o
desempenho escolar de seus alunos tanto na língua portuguesa como
matemática;
Fator – Salário dos professores
O salário do professor apresenta associação com o rendimento escolar dos
alunos somente da língua portuguesa e não mostrou associação significativa
para o desempenho escolar de matemática. Quanto maior o salário do
professor, melhor é o desempenho na prova de língua portuguesa.
Conclusão
Para o conjunto das escolas estudadas, naquelas onde há professores
participantes do AE, verifica-se um melhor desempenho na Prova Brasil
2007 dos alunos da 8ª série. Esse resultado é válido tanto para Língua
portuguesa como para Matemática.
No entanto, apesar de se verificar associação estatística positiva entre a
participação do professor no AE e o desempenho escolar, não é possível, por
esses resultados, afirmar que o programa influi positivamente no
desempenho dos alunos. O que pode ser afirmado é que alunos de escolas
com professores participantes do AE tendem a apresentar melhor
desempenho na Prova Brasil. Esse resultado é verificado com o modelo
controlando
alguns
fatores
explicativos
do
tradicionalmente utilizados nesse tipo de estudo.
desempenho
escolar