Recipe 3: Three factor multiple level design

This is an R Markdown document. Markdown is a simple formatting syntax for authoring web pages (click the MD toolbar button for help on Markdown).

When you click the Knit HTML button a web page will be generated that includes both content as well as the output of any embedded R code chunks within the document. You can embed an R code chunk like this:

Recipes for the Design of Experiments: Recipe Outline

as of August 28, 2014, superceding the version of August 24. Always use the most recent version.

Three factor multiple level design

Uzma Mushtaque

RPI

October 6 2014 and Version:3.1

1. Setting

System under test

dataf<- (read.csv(file.choose(), header=T))

Factors and Levels

We conduct a three factor multiple level experiment to analyze the relationship between yield per teacher and the percentage of female students passed on the percentage of total students (minorities) passing the CS-A exam in the given years (2008-2013).We conduct an exploratory data analysis on a subset of the given data and also perform relevant diagnostics tests for model adequacy checking.

Data: A subset of the actual data set.

head(dataf)
##   year schools_offering Total yield_per_teacher diff.from.prev.year
## 1 2006               NA 14108                NA                  NA
## 2 2007               NA 14529                NA                 421
## 3 2008             1778 15014                 8                 485
## 4 2009             1879 16061                 9                1047
## 5 2010             2048 19390                 9                3329
## 6 2011             1972 21139                11                1749
##   percentage_increase number.passed percentage_passed female female.passed
## 1                  NA          8227             58.31   2495          1251
## 2               2.984          8184             56.33   2665          1262
## 3               3.338          8537             56.86   2789          1450
## 4               6.973          9925             61.80   3096          1724
## 5              20.727         12550             64.72   3726          2201
## 6               9.020         13463             63.69   4000          2302
##   percentage.female.passed percentage_female Number.of.Black
## 1              50.14028056                18             668
## 2              47.35459662                18             640
## 3              51.98996056                19             673
## 4              55.68475452                19             778
## 5              59.07139023                19             825
## 6                    57.55                19             893
##   Number.Black.Passed percentage.Black.passed Percentage.Black
## 1                 154             23.05389222            4.735
## 2                 127                19.84375            4.405
## 3                 167             24.81426449            4.482
## 4                 177             22.75064267            4.844
## 5                 224             27.15151515            4.255
## 6                 283             31.69092945            4.224
##   Number.Black.Males Number.Black.Males.passed
## 1                468                       125
## 2                437                       102
## 3                454                       123
## 4                538                       141
## 5                577                       173
## 6                671                       240
##   Percentage.Black.Male.passed Number.Black.Females
## 1                  26.70940171                  200
## 2                   23.3409611                  203
## 3                  27.09251101                  219
## 4                  26.20817844                  240
## 5                  29.98266898                  248
## 6                  35.76751118                  222
##   Number.Black.Females.passed Percentage.Black.Females.passed
## 1                          29                            14.5
## 2                          25                     12.31527094
## 3                          44                      20.0913242
## 4                          36                              15
## 5                          51                     20.56451613
## 6                          43                     19.36936937
##   Number.Hispanic Number.Hispanic.passed Percentage.Hispanic.passed
## 1            1079                    389                36.05189991
## 2            1077                    377                35.00464253
## 3            1142                    398                34.85113835
## 4            1208                    450                37.25165563
## 5            1466                    610                41.60982265
## 6            1752                    652                37.21461187
##   Number.Hispanic.Females Number.Hispanic.Females.passed
## 1                     220                             58
## 2                     250                             58
## 3                     223                             50
## 4                     281                             43
## 5                     298                             92
## 6                     364                             91
##   Percentage.H.females.passed Percentage.Hispanic Number.Hispanic.males
## 1                 26.36363636               7.648                   859
## 2                        23.2               7.413                   827
## 3                 22.42152466               7.606                   919
## 4                  15.3024911               7.521                   927
## 5                 30.87248322               7.561                  1168
## 6                          25               8.288                  1388
##   Number.Hispanic.males.passed     X Number.white Number.white.passed
## 1                          331 38.53         8240                5224
## 2                          319 38.57         8516                5191
## 3                          348 37.87         8757                5359
## 4                          407 43.91         9064                6054
## 5                          518 44.35        10556                7237
## 6                          561 40.42        11252                7633
##   Percentage.white.pass Number.white.males Number.white.females
## 1                 63.40               7081                 1159
## 2                 60.96               7333                 1183
## 3                 61.20               7453                 1304
## 4                 66.79               7725                 1339
## 5                 68.56               8938                 1618
## 6                 67.84               9604                 1648
##   Number.asian Number.asian.passed Percentage.asian.passed
## 1         2846                1733                   60.89
## 2         3319                1984                   59.78
## 3         3556                2169                   61.00
## 4         3979                2645                   66.47
## 5         5131                3625                   70.65
## 6         5914                4109                   69.48
##   Number.Asian.Male Number.Asian.Female Number.male Number.male.pass
## 1              2178                 668          NA               NA
## 2              2474                 845          NA               NA
## 3              2697                 859          NA               NA
## 4              2963                1016          NA               NA
## 5              3842                1289          NA               NA
## 6              4430                1484          NA               NA
##   male.pass.rate
## 1             NA
## 2             NA
## 3             NA
## 4             NA
## 5             NA
## 6             NA
tail(dataf)
##     year schools_offering Total yield_per_teacher diff.from.prev.year
## 156 2008               80   859                11                 -29
## 157 2009               83   913                11                  54
## 158 2010               98  1177                12                 264
## 159 2011               89  1203                14                  26
## 160 2012              101  1430                14                 227
## 161 2013              110  1655                15                 225
##     percentage_increase number.passed percentage_passed female
## 156              -3.266           402             46.80    137
## 157               6.286           515             56.41    133
## 158              28.916           736             62.53    201
## 159               2.209           715             60.37    210
## 160              18.869           854             60.37    250
## 161              15.734          1074             60.37    308
##     female.passed percentage.female.passed percentage_female
## 156            63              45.98540146                16
## 157            67              50.37593985                15
## 158           120              59.70149254                17
## 159           114              54.28571429                17
## 160           140                       56                17
## 161           207              67.20779221                19
##     Number.of.Black Number.Black.Passed percentage.Black.passed
## 156              42                  14             33.33333333
## 157              41                  13             31.70731707
## 158              50                  22                      44
## 159              61                  20             32.78688525
## 160              58                  14             24.13793103
## 161              78                  22             28.20512821
##     Percentage.Black Number.Black.Males Number.Black.Males.passed
## 156            4.889                 32                        11
## 157            4.491                 30                        11
## 158            4.248                 38                        18
## 159            5.071                 52                        19
## 160            4.056                 47                        12
## 161            4.713                 62                        17
##     Percentage.Black.Male.passed Number.Black.Females
## 156                       34.375                   10
## 157                  36.66666667                   11
## 158                  47.36842105                   12
## 159                  36.53846154                    9
## 160                  25.53191489                   11
## 161                  27.41935484                   16
##     Number.Black.Females.passed Percentage.Black.Females.passed
## 156                           3                              30
## 157                           2                     18.18181818
## 158                           4                     33.33333333
## 159                           1                     11.11111111
## 160                           2                     18.18181818
## 161                           5                           31.25
##     Number.Hispanic Number.Hispanic.passed Percentage.Hispanic.passed
## 156              40                    11*                      27.5*
## 157              41                     14                34.14634146
## 158              56                     24                42.85714286
## 159              44                     24                54.54545455
## 160              55                     26                47.27272727
## 161              90                     42                46.66666667
##     Number.Hispanic.Females Number.Hispanic.Females.passed
## 156                       8                             2*
## 157                       8                              2
## 158                       7                             3*
## 159                       6                              *
## 160                      12                             2*
## 161                       9                             2*
##     Percentage.H.females.passed Percentage.Hispanic Number.Hispanic.males
## 156                         25*               4.657                      
## 157                          25               4.491                      
## 158                      42.86*               4.758                      
## 159                           *               3.658                      
## 160                      16.67*               3.846                      
## 161                           *               5.438                      
##     Number.Hispanic.males.passed  X Number.white Number.white.passed
## 156                           NA NA           NA                  NA
## 157                           NA NA           NA                  NA
## 158                           NA NA           NA                  NA
## 159                           NA NA           NA                  NA
## 160                           NA NA           NA                  NA
## 161                           NA NA           NA                  NA
##     Percentage.white.pass Number.white.males Number.white.females
## 156                    NA                 NA                   NA
## 157                    NA                 NA                   NA
## 158                    NA                 NA                   NA
## 159                    NA                 NA                   NA
## 160                    NA                 NA                   NA
## 161                    NA                 NA                   NA
##     Number.asian Number.asian.passed Percentage.asian.passed
## 156           NA                  NA                      NA
## 157           NA                  NA                      NA
## 158           NA                  NA                      NA
## 159           NA                  NA                      NA
## 160           NA                  NA                      NA
## 161           NA                  NA                      NA
##     Number.Asian.Male Number.Asian.Female Number.male Number.male.pass
## 156                NA                  NA          NA               NA
## 157                NA                  NA          NA               NA
## 158                NA                  NA          NA               NA
## 159                NA                  NA          NA               NA
## 160                NA                  NA          NA               NA
## 161                NA                  NA          NA               NA
##     male.pass.rate
## 156             NA
## 157             NA
## 158             NA
## 159             NA
## 160             NA
## 161             NA

Continuous variables (if any)

The data essentially consists of the pass percentage of minority groups on a computer science exam. The pass percentage can be seen as a continuous variable because we take it as upto the 5th decimal place. Also, yield per teacher(number of students taught by one teacher) is a continuous variable but for analysis purposes (since it is considered as a factor) we round off the decimals to the nearest integer.

Response variables

The response variable is the total pass percentage of minority students. The data gives a break up of various ethnic groups as well as female pass percentage. We want to analyze the effect of the yield per teacher and the female pass percentage taken from 2008-2013 (another factor)on the total pass percentage of students.

The Data: How is it organized and what does it look like?

The data (see Appendix) appears for each state (50 blocks) and gives a yearly pass percentage of individuals (male and female) from minority communities on a CS exam.

Randomization

Since we have data collected over a period of 8 years from all 50 states, therefore the data is a good representative of the pop[ulation as a whole. We can say that it is well randomized.

2. (Experimental) Design

How will the experiment be organized and conducted to test the hypothesis?

We take a subset of the large data set (a certain range of yield per teacher and only 5 years of data) to conduct our experiment. The goal of the experiment can be stated as (Null Hypothesis):‘The pass percentage of minority students depends on the yield per teacher and on the passing percentage of female students and this percentage improves with each passing year’.

What is the rationale for this design?

The idea behind this design is to test whether the yield per teacher affects the performance of students (from minority groups) on a CS test. Also, it is intuitive to think that with each passing year, as the use of computers and IT is invading our lives more people will tend to perform better in such exams.We also aim to analyze the the effect of total female students passing the exam on the total pass percentage of students.

Randomize: What is the Randomization Scheme?

The randomization scheme is to test the most recent data (since year is a factor) and a large range of ‘yield per teacher’ values.

3. (Statistical) Analysis

(Exploratory Data Analysis) Graphics and descriptive summary

datanew<-subset(dataf,yield_per_teacher<21 & yield_per_teacher>10 & percentage_female>15 & percentage_female<30)

#Define a dataframe

Y<-datanew

#Summary

summary(Y)
##       year      schools_offering     Total       yield_per_teacher
##  Min.   :2008   Min.   :  11.0   Min.   :  146   Min.   :11.0     
##  1st Qu.:2010   1st Qu.:  66.8   1st Qu.:  865   1st Qu.:12.0     
##  Median :2011   Median : 102.0   Median : 1332   Median :13.0     
##  Mean   :2011   Mean   : 242.7   Mean   : 3055   Mean   :13.3     
##  3rd Qu.:2013   3rd Qu.: 173.8   3rd Qu.: 2643   3rd Qu.:15.0     
##  Max.   :2013   Max.   :2253.0   Max.   :29555   Max.   :20.0     
##                                                                   
##  diff.from.prev.year percentage_increase number.passed   percentage_passed
##  Min.   :-126        Min.   :-8.63       Min.   :   42   Min.   :28.8     
##  1st Qu.:  29        1st Qu.: 2.47       1st Qu.:  386   1st Qu.:49.8     
##  Median : 149        Median :12.42       Median :  783   Median :60.4     
##  Mean   : 369        Mean   :14.95       Mean   : 1910   Mean   :57.3     
##  3rd Qu.: 271        3rd Qu.:21.53       3rd Qu.: 1602   3rd Qu.:63.6     
##  Max.   :4773        Max.   :58.30       Max.   :19760   Max.   :73.0     
##                                                                           
##      female     female.passed percentage.female.passed percentage_female
##  Min.   :  26   24     : 2    15.38461538: 1           Min.   :16.0     
##  1st Qu.: 141   67     : 2    19.04761905: 1           1st Qu.:18.0     
##  Median : 262   107    : 1    26.54320988: 1           Median :20.0     
##  Mean   : 610   114    : 1    28.23529412: 1           Mean   :20.7     
##  3rd Qu.: 551   116    : 1    29.3040293 : 1           3rd Qu.:22.8     
##  Max.   :5485   120    : 1    34.18367347: 1           Max.   :29.0     
##                 (Other):38    (Other)    :40                            
##  Number.of.Black  Number.Black.Passed percentage.Black.passed
##  Min.   :   3.0   22     : 4          18.91891892: 2         
##  1st Qu.:  30.8   3      : 4          27.86885246: 2         
##  Median :  64.5   14     : 3          33.33333333: 2         
##  Mean   : 132.5   17     : 3          *          : 1         
##  3rd Qu.: 128.5   7      : 3          10.95890411: 1         
##  Max.   :1090.0   12     : 2          12.38095238: 1         
##                   (Other):27          (Other)    :37         
##  Percentage.Black Number.Black.Males Number.Black.Males.passed
##  Min.   : 0.935   Min.   :  2.0      12     : 4               
##  1st Qu.: 3.630   1st Qu.: 22.0      10     : 3               
##  Median : 4.424   Median : 50.5      16     : 3               
##  Mean   : 5.785   Mean   : 97.5      18     : 3               
##  3rd Qu.: 8.272   3rd Qu.: 96.0      5      : 3               
##  Max.   :14.053   Max.   :826.0      *      : 2               
##                                      (Other):28               
##  Percentage.Black.Male.passed Number.Black.Females
##  25         : 3               Min.   :  1.0       
##  *          : 2               1st Qu.:  8.0       
##  30.76923077: 2               Median : 15.5       
##  42.85714286: 2               Mean   : 34.7       
##  45.45454545: 2               3rd Qu.: 31.8       
##  60         : 2               Max.   :264.0       
##  (Other)    :33                                   
##  Number.Black.Females.passed Percentage.Black.Females.passed
##  2      : 9                  *          : 5                 
##  1      : 6                  33.33333333: 3                 
##  4      : 6                  16.66666667: 2                 
##  *      : 5                  0          : 1                 
##  5      : 5                  10         : 1                 
##  14     : 2                  10.25641026: 1                 
##  (Other):13                  (Other)    :33                 
##  Number.Hispanic  Number.Hispanic.passed Percentage.Hispanic.passed
##  Min.   :   4.0   *      : 3             *          : 3            
##  1st Qu.:  41.0   25     : 3             37.5*      : 2            
##  Median :  81.5   24     : 2             54.54545455: 2            
##  Mean   : 281.5   6*     : 2             21.43*     : 1            
##  3rd Qu.: 238.2   70     : 2             24.73684211: 1            
##  Max.   :2408.0   1      : 1             25         : 1            
##                   (Other):33             (Other)    :36            
##  Number.Hispanic.Females Number.Hispanic.Females.passed
##  Min.   :  0.0           *      :12                    
##  1st Qu.:  6.2           2*     : 4                    
##  Median : 16.0           10*    : 3                    
##  Mean   : 62.3           3*     : 3                    
##  3rd Qu.: 48.5           5*     : 3                    
##  Max.   :488.0           10     : 2                    
##                          (Other):19                    
##  Percentage.H.females.passed Percentage.Hispanic Number.Hispanic.males
##  *          :13              Min.   : 1.81              :38           
##  25*        : 2              1st Qu.: 4.45       1388   : 1           
##  31.25*     : 2              Median : 5.91       1488   : 1           
##  0          : 1              Mean   : 8.48       1602   : 1           
##  12.07*     : 1              3rd Qu.:11.61       1618   : 1           
##  13.95348837: 1              Max.   :20.55       1688   : 1           
##  (Other)    :26                                  (Other): 3           
##  Number.Hispanic.males.passed       X         Number.white  
##  Min.   : 561                 Min.   :40.4   Min.   :   46  
##  1st Qu.: 861                 1st Qu.:47.3   1st Qu.:   47  
##  Median :1010                 Median :61.7   Median :  521  
##  Mean   : 931                 Mean   :55.7   Mean   : 3874  
##  3rd Qu.:1043                 3rd Qu.:62.4   3rd Qu.: 5972  
##  Max.   :1187                 Max.   :64.2   Max.   :16059  
##  NA's   :38                   NA's   :38     NA's   :35     
##  Number.white.passed Percentage.white.pass Number.white.males
##  Min.   :  289       Min.   : 54.3         Min.   :   60     
##  1st Qu.:  644       1st Qu.: 61.9         1st Qu.:   68     
##  Median :  946       Median : 67.8         Median :   70     
##  Mean   : 3036       Mean   :329.9         Mean   : 4375     
##  3rd Qu.: 4382       3rd Qu.:611.5         3rd Qu.:10039     
##  Max.   :11119       Max.   :794.0         Max.   :13711     
##  NA's   :35          NA's   :35            NA's   :38        
##  Number.white.females  Number.asian  Number.asian.passed
##  Min.   :  26.3       Min.   : 182   Min.   :  98       
##  1st Qu.:  26.6       1st Qu.: 270   1st Qu.: 137       
##  Median :  28.0       Median :3117   Median :2138       
##  Mean   : 763.4       Mean   :3669   Mean   :2580       
##  3rd Qu.:1730.0       3rd Qu.:6630   3rd Qu.:4629       
##  Max.   :2348.0       Max.   :8475   Max.   :6178       
##  NA's   :38           NA's   :40     NA's   :40         
##  Percentage.asian.passed Number.Asian.Male Number.Asian.Female
##  Min.   :50.0            Min.   :4430      Min.   :1484       
##  1st Qu.:52.6            1st Qu.:4824      1st Qu.:1567       
##  Median :61.7            Median :5219      Median :1650       
##  Mean   :60.9            Mean   :5351      Mean   :1735       
##  3rd Qu.:69.8            3rd Qu.:5811      3rd Qu.:1861       
##  Max.   :69.9            Max.   :6403      Max.   :2072       
##  NA's   :40              NA's   :43        NA's   :43         
##   Number.male    Number.male.pass male.pass.rate
##  Min.   :24070   Min.   :16355    Min.   :68    
##  1st Qu.:24070   1st Qu.:16355    1st Qu.:68    
##  Median :24070   Median :16355    Median :68    
##  Mean   :24070   Mean   :16355    Mean   :68    
##  3rd Qu.:24070   3rd Qu.:16355    3rd Qu.:68    
##  Max.   :24070   Max.   :16355    Max.   :68    
##  NA's   :45      NA's   :45       NA's   :45
# Factor assignment

datanew$year=as.factor(datanew$year)
datanew$yield_per_teacher=as.factor(datanew$yield_per_teacher)
datanew$percentage_female=as.factor(datanew$percentage_female)

#boxplot

boxplot(percentage_passed~year,data=datanew, xlab="Year of Exam", ylab="Percentage of pass students")
title("Percentage of students passed per year")

plot of chunk unnamed-chunk-3

boxplot(percentage_passed~yield_per_teacher,data=datanew,xlab="Yield per teacher", ylab="Percentage of pass students")
title("Yield per teacher plot of pass percentage of students")

plot of chunk unnamed-chunk-3

#boxplot

boxplot(percentage_passed~percentage_female,data=datanew, xlab="Percentage of female passed", ylab="Percentage of pass students")
title("Percentage of female passed plot of pass students")

plot of chunk unnamed-chunk-3

Testing

Analysis of variance (ANOVA) is conducted to check the statistical significance of yield per teacher, pass percentage of female students and also that of each successive year on the pass percentage of minority students on a CS exam. There are various ANOVA tests that are carried out in order to check the interaction effect or a single factor effect on the response variable.

Analysis of variance for the factor year

model=aov(percentage_passed~year,data=datanew) 
anova(model)
## Analysis of Variance Table
## 
## Response: percentage_passed
##           Df Sum Sq Mean Sq F value Pr(>F)
## year       5    524   104.8    1.08   0.38
## Residuals 40   3867    96.7

Analysis of variance for the factor yield per teacher

model1=aov(percentage_passed~yield_per_teacher,data=datanew) 
anova(model1)
## Analysis of Variance Table
## 
## Response: percentage_passed
##                   Df Sum Sq Mean Sq F value Pr(>F)
## yield_per_teacher  8    595    74.4    0.72   0.67
## Residuals         37   3796   102.6

Analysis of variance for the factor percentage of female passed

model2=aov(percentage_passed~percentage_female,data=datanew) 
anova(model2)
## Analysis of Variance Table
## 
## Response: percentage_passed
##                   Df Sum Sq Mean Sq F value Pr(>F)
## percentage_female 13   1265    97.3       1   0.48
## Residuals         32   3127    97.7

Analysis of variance for 2 factors

model3=aov(percentage_passed~year*yield_per_teacher,data=datanew) 
anova(model3)
## Analysis of Variance Table
## 
## Response: percentage_passed
##                        Df Sum Sq Mean Sq F value Pr(>F)  
## year                    5    524   104.8     1.4  0.264  
## yield_per_teacher       8    717    89.7     1.2  0.346  
## year:yield_per_teacher 10   1499   149.9     2.0  0.085 .
## Residuals              22   1651    75.0                 
## ---
## Signif. codes:  0 '***' 0.001 '**' 0.01 '*' 0.05 '.' 0.1 ' ' 1
model4=aov(percentage_passed~year*percentage_female,data=datanew) 
anova(model4)
## Analysis of Variance Table
## 
## Response: percentage_passed
##                        Df Sum Sq Mean Sq F value Pr(>F)
## year                    5    524   104.8    0.92   0.50
## percentage_female      13   1426   109.7    0.96   0.53
## year:percentage_female 15   1078    71.8    0.63   0.80
## Residuals              12   1364   113.7
model5=aov(percentage_passed~yield_per_teacher*percentage_female,data=datanew) 
anova(model5)
## Analysis of Variance Table
## 
## Response: percentage_passed
##                                     Df Sum Sq Mean Sq F value Pr(>F)
## yield_per_teacher                    8    595    74.4    0.64   0.73
## percentage_female                   13   1246    95.8    0.82   0.64
## yield_per_teacher:percentage_female 14   1381    98.6    0.84   0.63
## Residuals                           10   1170   117.0

Analysis of variance for all 3 factors

model33=aov(percentage_passed~year*yield_per_teacher*percentage_female,data=datanew) 
anova(model33)
## Analysis of Variance Table
## 
## Response: percentage_passed
##                        Df Sum Sq Mean Sq F value Pr(>F)
## year                    5    524   104.8    0.77   0.62
## yield_per_teacher       8    717    89.7    0.66   0.72
## percentage_female      13   1700   130.8    0.96   0.58
## year:yield_per_teacher  8    626    78.2    0.57   0.77
## year:percentage_female  7    279    39.9    0.29   0.92
## Residuals               4    545   136.2

As is clear from the results, we do not see any significant effect of any of the factors taken separately or all taken together n the variability in the total pass percentage of students. However there is an interaction effect of year and yield per teacher (with a p value less than 0.5) and so we can conclude that these two factors taken together can cause the variability in the response variable (that it is not solely due to randomization).

Diagnostics/Model Adequacy Checking

Here we check the model adequacy (whether data is normally distributed)in order to ascertain the effectiveness of our test performed above.

qqnorm(residuals(model))
qqline(residuals(model))

plot of chunk unnamed-chunk-9

plot(fitted(model),residuals(model))

plot of chunk unnamed-chunk-9

Some part of data deviates from normality, however a significant part is normally distributed.

Interaction Plot

From our ANOVA analysis we try to see the extent of the interaction effect between the factors: year and yield per teacher as follows:

interaction.plot(datanew$year,datanew$yield_per_teacher,datanew$percentage_passed, xlab= "Year", ylab="Percentage passed", main ="Interaction plot", trace.label="Yield")

plot of chunk unnamed-chunk-10

Shapiro-Wilk test of normality. Adequate if p < 0.1

shapiro.test(Y$year)
## 
##  Shapiro-Wilk normality test
## 
## data:  Y$year
## W = 0.8764, p-value = 0.0001615
shapiro.test(Y$yield_per_teacher)
## 
##  Shapiro-Wilk normality test
## 
## data:  Y$yield_per_teacher
## W = 0.8952, p-value = 0.0005861

A small p-value indicates that we can reject the null hypothesis (regarding normally distributed data) that the data came from a normal distribution.

Tukey’s test

Tukey’s test is a single step multiple comparison procedure (ref: Wikipedia).In our experiment we use it in conjunction with ANOVA to see if the means from the given sample are significantly different from each other.Since we selected a confidence level of 95% therefore any p adj-value of less than .05 will indicate that the difference in the means of the two values (for each factor) is not solely due to randomization.

Note: A numer of fields indicate ‘NA’. Data for those fields is missing/not available.

TukeyHSD(model3, ordered = FALSE, conf.level = 0.95)
##   Tukey multiple comparisons of means
##     95% family-wise confidence level
## 
## Fit: aov(formula = percentage_passed ~ year * yield_per_teacher, data = datanew)
## 
## $year
##              diff     lwr    upr  p adj
## 2009-2008  5.5609 -11.857 22.979 0.9148
## 2010-2008  8.7270  -7.613 25.067 0.5680
## 2011-2008  9.0510  -5.171 23.273 0.3829
## 2012-2008  3.8675 -10.067 17.802 0.9510
## 2013-2008  9.5877  -3.905 23.080 0.2713
## 2010-2009  3.1660 -14.936 21.268 0.9935
## 2011-2009  3.4900 -12.726 19.706 0.9834
## 2012-2009 -1.6934 -17.658 14.271 0.9994
## 2013-2009  4.0268 -11.553 19.606 0.9635
## 2011-2010  0.3240 -14.727 15.375 1.0000
## 2012-2010 -4.8595 -19.639  9.921 0.9048
## 2013-2010  0.8607 -13.503 15.224 1.0000
## 2012-2011 -5.1834 -17.582  7.215 0.7807
## 2013-2011  0.5367 -11.362 12.436 1.0000
## 2013-2012  5.7202  -5.834 17.274 0.6423
## 
## $yield_per_teacher
##          diff     lwr   upr  p adj
## 12-11  0.6042 -12.740 13.95 1.0000
## 13-11  1.8199 -14.193 17.83 1.0000
## 14-11  1.4660 -12.329 15.26 1.0000
## 15-11 -2.8314 -16.626 10.96 0.9982
## 16-11  0.1175 -22.704 22.94 1.0000
## 17-11  3.4254 -27.583 34.43 1.0000
## 18-11 12.7719 -18.237 43.78 0.8816
## 20-11 19.2467 -11.762 50.26 0.4813
## 13-12  1.2157 -15.344 17.78 1.0000
## 14-12  0.8618 -13.564 15.29 1.0000
## 15-12 -3.4356 -17.862 10.99 0.9951
## 16-12 -0.4867 -23.695 22.72 1.0000
## 17-12  2.8212 -28.473 34.12 1.0000
## 18-12 12.1677 -19.127 43.46 0.9104
## 20-12 18.6425 -12.652 49.94 0.5331
## 14-13 -0.3539 -17.279 16.57 1.0000
## 15-13 -4.6513 -21.576 12.27 0.9875
## 16-13 -1.7024 -26.542 23.14 1.0000
## 17-13  1.6055 -30.917 34.13 1.0000
## 18-13 10.9520 -21.570 43.47 0.9581
## 20-13 17.4268 -15.095 49.95 0.6597
## 15-14 -4.2974 -19.142 10.55 0.9827
## 16-14 -1.3485 -24.819 22.12 1.0000
## 17-14  1.9594 -29.530 33.45 1.0000
## 18-14 11.3059 -20.184 42.80 0.9406
## 20-14 17.7807 -13.709 49.27 0.5989
## 16-15  2.9489 -20.522 26.42 1.0000
## 17-15  6.2568 -25.233 37.75 0.9986
## 18-15 15.6033 -15.886 47.09 0.7414
## 20-15 22.0781  -9.411 53.57 0.3298
## 17-16  3.3079 -33.053 39.67 1.0000
## 18-16 12.6543 -23.707 49.02 0.9498
## 20-16 19.1292 -17.232 55.49 0.6799
## 18-17  9.3464 -32.639 51.33 0.9969
## 20-17 15.8213 -26.165 57.81 0.9235
## 20-18  6.4748 -35.511 48.46 0.9998
## 
## $`year:yield_per_teacher`
##                      diff    lwr   upr  p adj
## 2009:11-2008:11   7.36167 -27.43 42.16 1.0000
## 2010:11-2008:11  -5.69598 -50.62 39.23 1.0000
## 2011:11-2008:11   8.75222 -19.66 37.16 1.0000
## 2012:11-2008:11        NA     NA    NA     NA
## 2013:11-2008:11        NA     NA    NA     NA
## 2008:12-2008:11 -10.62818 -55.55 34.29 1.0000
## 2009:12-2008:11  -9.93144 -54.85 34.99 1.0000
## 2010:12-2008:11   9.97320 -20.71 40.66 1.0000
## 2011:12-2008:11  11.41766 -33.50 56.34 1.0000
## 2012:12-2008:11  12.27531 -32.65 57.20 1.0000
## 2013:12-2008:11  13.19464 -21.60 47.99 0.9991
## 2008:13-2008:11   9.19900 -35.72 54.12 1.0000
## 2009:13-2008:11  16.49911 -28.42 61.42 0.9995
## 2010:13-2008:11        NA     NA    NA     NA
## 2011:13-2008:11        NA     NA    NA     NA
## 2012:13-2008:11  -7.52344 -42.32 27.27 1.0000
## 2013:13-2008:11  15.87005 -29.05 60.79 0.9998
## 2008:14-2008:11        NA     NA    NA     NA
## 2009:14-2008:11        NA     NA    NA     NA
## 2010:14-2008:11        NA     NA    NA     NA
## 2011:14-2008:11   4.05268 -26.63 34.74 1.0000
## 2012:14-2008:11   7.07326 -21.34 35.48 1.0000
## 2013:14-2008:11  14.74870 -30.17 59.67 0.9999
## 2008:15-2008:11        NA     NA    NA     NA
## 2009:15-2008:11        NA     NA    NA     NA
## 2010:15-2008:11        NA     NA    NA     NA
## 2011:15-2008:11        NA     NA    NA     NA
## 2012:15-2008:11  -5.62492 -40.42 29.17 1.0000
## 2013:15-2008:11   7.52014 -18.42 33.46 1.0000
## 2008:16-2008:11        NA     NA    NA     NA
## 2009:16-2008:11        NA     NA    NA     NA
## 2010:16-2008:11  18.22039 -26.70 63.14 0.9971
## 2011:16-2008:11        NA     NA    NA     NA
## 2012:16-2008:11        NA     NA    NA     NA
## 2013:16-2008:11  -1.85540 -46.78 43.07 1.0000
## 2008:17-2008:11        NA     NA    NA     NA
## 2009:17-2008:11        NA     NA    NA     NA
## 2010:17-2008:11        NA     NA    NA     NA
## 2011:17-2008:11        NA     NA    NA     NA
## 2012:17-2008:11        NA     NA    NA     NA
## 2013:17-2008:11  11.92074 -33.00 56.84 1.0000
## 2008:18-2008:11        NA     NA    NA     NA
## 2009:18-2008:11        NA     NA    NA     NA
## 2010:18-2008:11        NA     NA    NA     NA
## 2011:18-2008:11  20.73045 -24.19 65.65 0.9817
## 2012:18-2008:11        NA     NA    NA     NA
## 2013:18-2008:11        NA     NA    NA     NA
## 2008:20-2008:11        NA     NA    NA     NA
## 2009:20-2008:11        NA     NA    NA     NA
## 2010:20-2008:11        NA     NA    NA     NA
## 2011:20-2008:11        NA     NA    NA     NA
## 2012:20-2008:11  22.02185 -22.90 66.94 0.9623
## 2013:20-2008:11        NA     NA    NA     NA
## 2010:11-2009:11 -13.05765 -62.27 36.15 1.0000
## 2011:11-2009:11   1.39055 -33.41 36.19 1.0000
## 2012:11-2009:11        NA     NA    NA     NA
## 2013:11-2009:11        NA     NA    NA     NA
## 2008:12-2009:11 -17.98985 -67.20 31.22 0.9995
## 2009:12-2009:11 -17.29311 -66.50 31.92 0.9998
## 2010:12-2009:11   2.61153 -34.07 39.29 1.0000
## 2011:12-2009:11   4.05599 -45.15 53.26 1.0000
## 2012:12-2009:11   4.91364 -44.30 54.12 1.0000
## 2013:12-2009:11   5.83297 -34.35 46.01 1.0000
## 2008:13-2009:11   1.83733 -47.37 51.05 1.0000
## 2009:13-2009:11   9.13744 -40.07 58.35 1.0000
## 2010:13-2009:11        NA     NA    NA     NA
## 2011:13-2009:11        NA     NA    NA     NA
## 2012:13-2009:11 -14.88511 -55.06 25.29 0.9994
## 2013:13-2009:11   8.50838 -40.70 57.72 1.0000
## 2008:14-2009:11        NA     NA    NA     NA
## 2009:14-2009:11        NA     NA    NA     NA
## 2010:14-2009:11        NA     NA    NA     NA
## 2011:14-2009:11  -3.30899 -39.99 33.37 1.0000
## 2012:14-2009:11  -0.28841 -35.08 34.51 1.0000
## 2013:14-2009:11   7.38703 -41.82 56.60 1.0000
## 2008:15-2009:11        NA     NA    NA     NA
## 2009:15-2009:11        NA     NA    NA     NA
## 2010:15-2009:11        NA     NA    NA     NA
## 2011:15-2009:11        NA     NA    NA     NA
## 2012:15-2009:11 -12.98660 -53.17 27.19 1.0000
## 2013:15-2009:11   0.15847 -32.65 32.96 1.0000
## 2008:16-2009:11        NA     NA    NA     NA
## 2009:16-2009:11        NA     NA    NA     NA
## 2010:16-2009:11  10.85872 -38.35 60.07 1.0000
## 2011:16-2009:11        NA     NA    NA     NA
## 2012:16-2009:11        NA     NA    NA     NA
## 2013:16-2009:11  -9.21707 -58.43 39.99 1.0000
## 2008:17-2009:11        NA     NA    NA     NA
## 2009:17-2009:11        NA     NA    NA     NA
## 2010:17-2009:11        NA     NA    NA     NA
## 2011:17-2009:11        NA     NA    NA     NA
## 2012:17-2009:11        NA     NA    NA     NA
## 2013:17-2009:11   4.55907 -44.65 53.77 1.0000
## 2008:18-2009:11        NA     NA    NA     NA
## 2009:18-2009:11        NA     NA    NA     NA
## 2010:18-2009:11        NA     NA    NA     NA
## 2011:18-2009:11  13.36878 -35.84 62.58 1.0000
## 2012:18-2009:11        NA     NA    NA     NA
## 2013:18-2009:11        NA     NA    NA     NA
## 2008:20-2009:11        NA     NA    NA     NA
## 2009:20-2009:11        NA     NA    NA     NA
## 2010:20-2009:11        NA     NA    NA     NA
## 2011:20-2009:11        NA     NA    NA     NA
## 2012:20-2009:11  14.66018 -34.55 63.87 1.0000
## 2013:20-2009:11        NA     NA    NA     NA
## 2011:11-2010:11  14.44820 -30.47 59.37 1.0000
## 2012:11-2010:11        NA     NA    NA     NA
## 2013:11-2010:11        NA     NA    NA     NA
## 2008:12-2010:11  -4.93220 -61.75 51.89 1.0000
## 2009:12-2010:11  -4.23546 -61.06 52.59 1.0000
## 2010:12-2010:11  15.66918 -30.73 62.06 0.9999
## 2011:12-2010:11  17.11365 -39.71 73.94 1.0000
## 2012:12-2010:11  17.97129 -38.85 74.79 1.0000
## 2013:12-2010:11  18.89062 -30.32 68.10 0.9989
## 2008:13-2010:11  14.89498 -41.93 71.72 1.0000
## 2009:13-2010:11  22.19509 -34.63 79.02 0.9985
## 2010:13-2010:11        NA     NA    NA     NA
## 2011:13-2010:11        NA     NA    NA     NA
## 2012:13-2010:11  -1.82746 -51.04 47.38 1.0000
## 2013:13-2010:11  21.56603 -35.26 78.39 0.9991
## 2008:14-2010:11        NA     NA    NA     NA
## 2009:14-2010:11        NA     NA    NA     NA
## 2010:14-2010:11        NA     NA    NA     NA
## 2011:14-2010:11   9.74866 -36.65 56.14 1.0000
## 2012:14-2010:11  12.76924 -32.15 57.69 1.0000
## 2013:14-2010:11  20.44468 -36.38 77.27 0.9997
## 2008:15-2010:11        NA     NA    NA     NA
## 2009:15-2010:11        NA     NA    NA     NA
## 2010:15-2010:11        NA     NA    NA     NA
## 2011:15-2010:11        NA     NA    NA     NA
## 2012:15-2010:11   0.07106 -49.14 49.28 1.0000
## 2013:15-2010:11  13.21612 -30.18 56.61 1.0000
## 2008:16-2010:11        NA     NA    NA     NA
## 2009:16-2010:11        NA     NA    NA     NA
## 2010:16-2010:11  23.91637 -32.91 80.74 0.9949
## 2011:16-2010:11        NA     NA    NA     NA
## 2012:16-2010:11        NA     NA    NA     NA
## 2013:16-2010:11   3.84058 -52.98 60.66 1.0000
## 2008:17-2010:11        NA     NA    NA     NA
## 2009:17-2010:11        NA     NA    NA     NA
## 2010:17-2010:11        NA     NA    NA     NA
## 2011:17-2010:11        NA     NA    NA     NA
## 2012:17-2010:11        NA     NA    NA     NA
## 2013:17-2010:11  17.61672 -39.20 74.44 1.0000
## 2008:18-2010:11        NA     NA    NA     NA
## 2009:18-2010:11        NA     NA    NA     NA
## 2010:18-2010:11        NA     NA    NA     NA
## 2011:18-2010:11  26.42643 -30.40 83.25 0.9798
## 2012:18-2010:11        NA     NA    NA     NA
## 2013:18-2010:11        NA     NA    NA     NA
## 2008:20-2010:11        NA     NA    NA     NA
## 2009:20-2010:11        NA     NA    NA     NA
## 2010:20-2010:11        NA     NA    NA     NA
## 2011:20-2010:11        NA     NA    NA     NA
## 2012:20-2010:11  27.71784 -29.10 84.54 0.9644
## 2013:20-2010:11        NA     NA    NA     NA
## 2012:11-2011:11        NA     NA    NA     NA
## 2013:11-2011:11        NA     NA    NA     NA
## 2008:12-2011:11 -19.38040 -64.30 25.54 0.9927
## 2009:12-2011:11 -18.68366 -63.61 26.24 0.9958
## 2010:12-2011:11   1.22098 -29.47 31.91 1.0000
## 2011:12-2011:11   2.66544 -42.26 47.59 1.0000
## 2012:12-2011:11   3.52309 -41.40 48.44 1.0000
## 2013:12-2011:11   4.44241 -30.35 39.24 1.0000
## 2008:13-2011:11   0.44678 -44.47 45.37 1.0000
## 2009:13-2011:11   7.74689 -37.17 52.67 1.0000
## 2010:13-2011:11        NA     NA    NA     NA
## 2011:13-2011:11        NA     NA    NA     NA
## 2012:13-2011:11 -16.27566 -51.07 18.52 0.9783
## 2013:13-2011:11   7.11783 -37.80 52.04 1.0000
## 2008:14-2011:11        NA     NA    NA     NA
## 2009:14-2011:11        NA     NA    NA     NA
## 2010:14-2011:11        NA     NA    NA     NA
## 2011:14-2011:11  -4.69954 -35.39 25.99 1.0000
## 2012:14-2011:11  -1.67896 -30.09 26.73 1.0000
## 2013:14-2011:11   5.99648 -38.92 50.92 1.0000
## 2008:15-2011:11        NA     NA    NA     NA
## 2009:15-2011:11        NA     NA    NA     NA
## 2010:15-2011:11        NA     NA    NA     NA
## 2011:15-2011:11        NA     NA    NA     NA
## 2012:15-2011:11 -14.37715 -49.17 20.42 0.9962
## 2013:15-2011:11  -1.23208 -27.17 24.70 1.0000
## 2008:16-2011:11        NA     NA    NA     NA
## 2009:16-2011:11        NA     NA    NA     NA
## 2010:16-2011:11   9.46816 -35.45 54.39 1.0000
## 2011:16-2011:11        NA     NA    NA     NA
## 2012:16-2011:11        NA     NA    NA     NA
## 2013:16-2011:11 -10.60763 -55.53 34.31 1.0000
## 2008:17-2011:11        NA     NA    NA     NA
## 2009:17-2011:11        NA     NA    NA     NA
## 2010:17-2011:11        NA     NA    NA     NA
## 2011:17-2011:11        NA     NA    NA     NA
## 2012:17-2011:11        NA     NA    NA     NA
## 2013:17-2011:11   3.16852 -41.75 48.09 1.0000
## 2008:18-2011:11        NA     NA    NA     NA
## 2009:18-2011:11        NA     NA    NA     NA
## 2010:18-2011:11        NA     NA    NA     NA
## 2011:18-2011:11  11.97823 -32.94 56.90 1.0000
## 2012:18-2011:11        NA     NA    NA     NA
## 2013:18-2011:11        NA     NA    NA     NA
## 2008:20-2011:11        NA     NA    NA     NA
## 2009:20-2011:11        NA     NA    NA     NA
## 2010:20-2011:11        NA     NA    NA     NA
## 2011:20-2011:11        NA     NA    NA     NA
## 2012:20-2011:11  13.26963 -31.65 58.19 1.0000
## 2013:20-2011:11        NA     NA    NA     NA
## 2013:11-2012:11        NA     NA    NA     NA
## 2008:12-2012:11        NA     NA    NA     NA
## 2009:12-2012:11        NA     NA    NA     NA
## 2010:12-2012:11        NA     NA    NA     NA
## 2011:12-2012:11        NA     NA    NA     NA
## 2012:12-2012:11        NA     NA    NA     NA
## 2013:12-2012:11        NA     NA    NA     NA
## 2008:13-2012:11        NA     NA    NA     NA
## 2009:13-2012:11        NA     NA    NA     NA
## 2010:13-2012:11        NA     NA    NA     NA
## 2011:13-2012:11        NA     NA    NA     NA
## 2012:13-2012:11        NA     NA    NA     NA
## 2013:13-2012:11        NA     NA    NA     NA
## 2008:14-2012:11        NA     NA    NA     NA
## 2009:14-2012:11        NA     NA    NA     NA
## 2010:14-2012:11        NA     NA    NA     NA
## 2011:14-2012:11        NA     NA    NA     NA
## 2012:14-2012:11        NA     NA    NA     NA
## 2013:14-2012:11        NA     NA    NA     NA
## 2008:15-2012:11        NA     NA    NA     NA
## 2009:15-2012:11        NA     NA    NA     NA
## 2010:15-2012:11        NA     NA    NA     NA
## 2011:15-2012:11        NA     NA    NA     NA
## 2012:15-2012:11        NA     NA    NA     NA
## 2013:15-2012:11        NA     NA    NA     NA
## 2008:16-2012:11        NA     NA    NA     NA
## 2009:16-2012:11        NA     NA    NA     NA
## 2010:16-2012:11        NA     NA    NA     NA
## 2011:16-2012:11        NA     NA    NA     NA
## 2012:16-2012:11        NA     NA    NA     NA
## 2013:16-2012:11        NA     NA    NA     NA
## 2008:17-2012:11        NA     NA    NA     NA
## 2009:17-2012:11        NA     NA    NA     NA
## 2010:17-2012:11        NA     NA    NA     NA
## 2011:17-2012:11        NA     NA    NA     NA
## 2012:17-2012:11        NA     NA    NA     NA
## 2013:17-2012:11        NA     NA    NA     NA
## 2008:18-2012:11        NA     NA    NA     NA
## 2009:18-2012:11        NA     NA    NA     NA
## 2010:18-2012:11        NA     NA    NA     NA
## 2011:18-2012:11        NA     NA    NA     NA
## 2012:18-2012:11        NA     NA    NA     NA
## 2013:18-2012:11        NA     NA    NA     NA
## 2008:20-2012:11        NA     NA    NA     NA
## 2009:20-2012:11        NA     NA    NA     NA
## 2010:20-2012:11        NA     NA    NA     NA
## 2011:20-2012:11        NA     NA    NA     NA
## 2012:20-2012:11        NA     NA    NA     NA
## 2013:20-2012:11        NA     NA    NA     NA
## 2008:12-2013:11        NA     NA    NA     NA
## 2009:12-2013:11        NA     NA    NA     NA
## 2010:12-2013:11        NA     NA    NA     NA
## 2011:12-2013:11        NA     NA    NA     NA
## 2012:12-2013:11        NA     NA    NA     NA
## 2013:12-2013:11        NA     NA    NA     NA
## 2008:13-2013:11        NA     NA    NA     NA
## 2009:13-2013:11        NA     NA    NA     NA
## 2010:13-2013:11        NA     NA    NA     NA
## 2011:13-2013:11        NA     NA    NA     NA
## 2012:13-2013:11        NA     NA    NA     NA
## 2013:13-2013:11        NA     NA    NA     NA
## 2008:14-2013:11        NA     NA    NA     NA
## 2009:14-2013:11        NA     NA    NA     NA
## 2010:14-2013:11        NA     NA    NA     NA
## 2011:14-2013:11        NA     NA    NA     NA
## 2012:14-2013:11        NA     NA    NA     NA
## 2013:14-2013:11        NA     NA    NA     NA
## 2008:15-2013:11        NA     NA    NA     NA
## 2009:15-2013:11        NA     NA    NA     NA
## 2010:15-2013:11        NA     NA    NA     NA
## 2011:15-2013:11        NA     NA    NA     NA
## 2012:15-2013:11        NA     NA    NA     NA
## 2013:15-2013:11        NA     NA    NA     NA
## 2008:16-2013:11        NA     NA    NA     NA
## 2009:16-2013:11        NA     NA    NA     NA
## 2010:16-2013:11        NA     NA    NA     NA
## 2011:16-2013:11        NA     NA    NA     NA
## 2012:16-2013:11        NA     NA    NA     NA
## 2013:16-2013:11        NA     NA    NA     NA
## 2008:17-2013:11        NA     NA    NA     NA
## 2009:17-2013:11        NA     NA    NA     NA
## 2010:17-2013:11        NA     NA    NA     NA
## 2011:17-2013:11        NA     NA    NA     NA
## 2012:17-2013:11        NA     NA    NA     NA
## 2013:17-2013:11        NA     NA    NA     NA
## 2008:18-2013:11        NA     NA    NA     NA
## 2009:18-2013:11        NA     NA    NA     NA
## 2010:18-2013:11        NA     NA    NA     NA
## 2011:18-2013:11        NA     NA    NA     NA
## 2012:18-2013:11        NA     NA    NA     NA
## 2013:18-2013:11        NA     NA    NA     NA
## 2008:20-2013:11        NA     NA    NA     NA
## 2009:20-2013:11        NA     NA    NA     NA
## 2010:20-2013:11        NA     NA    NA     NA
## 2011:20-2013:11        NA     NA    NA     NA
## 2012:20-2013:11        NA     NA    NA     NA
## 2013:20-2013:11        NA     NA    NA     NA
## 2009:12-2008:12   0.69674 -56.12 57.52 1.0000
## 2010:12-2008:12  20.60138 -25.79 67.00 0.9890
## 2011:12-2008:12  22.04585 -34.78 78.87 0.9986
## 2012:12-2008:12  22.90349 -33.92 79.73 0.9974
## 2013:12-2008:12  23.82282 -25.39 73.03 0.9673
## 2008:13-2008:12  19.82718 -36.99 76.65 0.9998
## 2009:13-2008:12  27.12729 -29.69 83.95 0.9722
## 2010:13-2008:12        NA     NA    NA     NA
## 2011:13-2008:12        NA     NA    NA     NA
## 2012:13-2008:12   3.10474 -46.10 52.31 1.0000
## 2013:13-2008:12  26.49823 -30.32 83.32 0.9791
## 2008:14-2008:12        NA     NA    NA     NA
## 2009:14-2008:12        NA     NA    NA     NA
## 2010:14-2008:12        NA     NA    NA     NA
## 2011:14-2008:12  14.68086 -31.71 61.08 1.0000
## 2012:14-2008:12  17.70144 -27.22 62.62 0.9982
## 2013:14-2008:12  25.37688 -31.44 82.20 0.9881
## 2008:15-2008:12        NA     NA    NA     NA
## 2009:15-2008:12        NA     NA    NA     NA
## 2010:15-2008:12        NA     NA    NA     NA
## 2011:15-2008:12        NA     NA    NA     NA
## 2012:15-2008:12   5.00326 -44.21 54.21 1.0000
## 2013:15-2008:12  18.14832 -25.25 61.55 0.9954
## 2008:16-2008:12        NA     NA    NA     NA
## 2009:16-2008:12        NA     NA    NA     NA
## 2010:16-2008:12  28.84857 -27.97 85.67 0.9451
## 2011:16-2008:12        NA     NA    NA     NA
## 2012:16-2008:12        NA     NA    NA     NA
## 2013:16-2008:12   8.77278 -48.05 65.59 1.0000
## 2008:17-2008:12        NA     NA    NA     NA
## 2009:17-2008:12        NA     NA    NA     NA
## 2010:17-2008:12        NA     NA    NA     NA
## 2011:17-2008:12        NA     NA    NA     NA
## 2012:17-2008:12        NA     NA    NA     NA
## 2013:17-2008:12  22.54892 -34.27 79.37 0.9980
## 2008:18-2008:12        NA     NA    NA     NA
## 2009:18-2008:12        NA     NA    NA     NA
## 2010:18-2008:12        NA     NA    NA     NA
## 2011:18-2008:12  31.35863 -25.46 88.18 0.8803
## 2012:18-2008:12        NA     NA    NA     NA
## 2013:18-2008:12        NA     NA    NA     NA
## 2008:20-2008:12        NA     NA    NA     NA
## 2009:20-2008:12        NA     NA    NA     NA
## 2010:20-2008:12        NA     NA    NA     NA
## 2011:20-2008:12        NA     NA    NA     NA
## 2012:20-2008:12  32.65003 -24.17 89.47 0.8350
## 2013:20-2008:12        NA     NA    NA     NA
## 2010:12-2009:12  19.90464 -26.49 66.30 0.9932
## 2011:12-2009:12  21.34910 -35.47 78.17 0.9992
## 2012:12-2009:12  22.20675 -34.61 79.03 0.9985
## 2013:12-2009:12  23.12608 -26.08 72.33 0.9770
## 2008:13-2009:12  19.13044 -37.69 75.95 0.9999
## 2009:13-2009:12  26.43055 -30.39 83.25 0.9798
## 2010:13-2009:12        NA     NA    NA     NA
## 2011:13-2009:12        NA     NA    NA     NA
## 2012:13-2009:12   2.40800 -46.80 51.62 1.0000
## 2013:13-2009:12  25.80149 -31.02 82.62 0.9851
## 2008:14-2009:12        NA     NA    NA     NA
## 2009:14-2009:12        NA     NA    NA     NA
## 2010:14-2009:12        NA     NA    NA     NA
## 2011:14-2009:12  13.98412 -32.41 60.38 1.0000
## 2012:14-2009:12  17.00470 -27.92 61.93 0.9991
## 2013:14-2009:12  24.68014 -32.14 81.50 0.9919
## 2008:15-2009:12        NA     NA    NA     NA
## 2009:15-2009:12        NA     NA    NA     NA
## 2010:15-2009:12        NA     NA    NA     NA
## 2011:15-2009:12        NA     NA    NA     NA
## 2012:15-2009:12   4.30651 -44.90 53.52 1.0000
## 2013:15-2009:12  17.45158 -25.95 60.85 0.9975
## 2008:16-2009:12        NA     NA    NA     NA
## 2009:16-2009:12        NA     NA    NA     NA
## 2010:16-2009:12  28.15183 -28.67 84.97 0.9577
## 2011:16-2009:12        NA     NA    NA     NA
## 2012:16-2009:12        NA     NA    NA     NA
## 2013:16-2009:12   8.07604 -48.75 64.90 1.0000
## 2008:17-2009:12        NA     NA    NA     NA
## 2009:17-2009:12        NA     NA    NA     NA
## 2010:17-2009:12        NA     NA    NA     NA
## 2011:17-2009:12        NA     NA    NA     NA
## 2012:17-2009:12        NA     NA    NA     NA
## 2013:17-2009:12  21.85218 -34.97 78.67 0.9988
## 2008:18-2009:12        NA     NA    NA     NA
## 2009:18-2009:12        NA     NA    NA     NA
## 2010:18-2009:12        NA     NA    NA     NA
## 2011:18-2009:12  30.66189 -26.16 87.48 0.9014
## 2012:18-2009:12        NA     NA    NA     NA
## 2013:18-2009:12        NA     NA    NA     NA
## 2008:20-2009:12        NA     NA    NA     NA
## 2009:20-2009:12        NA     NA    NA     NA
## 2010:20-2009:12        NA     NA    NA     NA
## 2011:20-2009:12        NA     NA    NA     NA
## 2012:20-2009:12  31.95329 -24.87 88.77 0.8604
## 2013:20-2009:12        NA     NA    NA     NA
## 2011:12-2010:12   1.44446 -44.95 47.84 1.0000
## 2012:12-2010:12   2.30211 -44.09 48.70 1.0000
## 2013:12-2010:12   3.22144 -33.46 39.90 1.0000
## 2008:13-2010:12  -0.77420 -47.17 45.62 1.0000
## 2009:13-2010:12   6.52591 -39.87 52.92 1.0000
## 2010:13-2010:12        NA     NA    NA     NA
## 2011:13-2010:12        NA     NA    NA     NA
## 2012:13-2010:12 -17.49664 -54.17 19.18 0.9725
## 2013:13-2010:12   5.89685 -40.50 52.29 1.0000
## 2008:14-2010:12        NA     NA    NA     NA
## 2009:14-2010:12        NA     NA    NA     NA
## 2010:14-2010:12        NA     NA    NA     NA
## 2011:14-2010:12  -5.92052 -38.73 26.89 1.0000
## 2012:14-2010:12  -2.89994 -33.59 27.79 1.0000
## 2013:14-2010:12   4.77550 -41.62 51.17 1.0000
## 2008:15-2010:12        NA     NA    NA     NA
## 2009:15-2010:12        NA     NA    NA     NA
## 2010:15-2010:12        NA     NA    NA     NA
## 2011:15-2010:12        NA     NA    NA     NA
## 2012:15-2010:12 -15.59813 -52.28 21.08 0.9941
## 2013:15-2010:12  -2.45306 -30.86 25.96 1.0000
## 2008:16-2010:12        NA     NA    NA     NA
## 2009:16-2010:12        NA     NA    NA     NA
## 2010:16-2010:12   8.24718 -38.15 54.64 1.0000
## 2011:16-2010:12        NA     NA    NA     NA
## 2012:16-2010:12        NA     NA    NA     NA
## 2013:16-2010:12 -11.82860 -58.22 34.57 1.0000
## 2008:17-2010:12        NA     NA    NA     NA
## 2009:17-2010:12        NA     NA    NA     NA
## 2010:17-2010:12        NA     NA    NA     NA
## 2011:17-2010:12        NA     NA    NA     NA
## 2012:17-2010:12        NA     NA    NA     NA
## 2013:17-2010:12   1.94754 -44.45 48.34 1.0000
## 2008:18-2010:12        NA     NA    NA     NA
## 2009:18-2010:12        NA     NA    NA     NA
## 2010:18-2010:12        NA     NA    NA     NA
## 2011:18-2010:12  10.75725 -35.64 57.15 1.0000
## 2012:18-2010:12        NA     NA    NA     NA
## 2013:18-2010:12        NA     NA    NA     NA
## 2008:20-2010:12        NA     NA    NA     NA
## 2009:20-2010:12        NA     NA    NA     NA
## 2010:20-2010:12        NA     NA    NA     NA
## 2011:20-2010:12        NA     NA    NA     NA
## 2012:20-2010:12  12.04865 -34.35 58.44 1.0000
## 2013:20-2010:12        NA     NA    NA     NA
## 2012:12-2011:12   0.85764 -55.96 57.68 1.0000
## 2013:12-2011:12   1.77697 -47.43 50.99 1.0000
## 2008:13-2011:12  -2.21866 -59.04 54.60 1.0000
## 2009:13-2011:12   5.08145 -51.74 61.90 1.0000
## 2010:13-2011:12        NA     NA    NA     NA
## 2011:13-2011:12        NA     NA    NA     NA
## 2012:13-2011:12 -18.94110 -68.15 30.27 0.9988
## 2013:13-2011:12   4.45238 -52.37 61.27 1.0000
## 2008:14-2011:12        NA     NA    NA     NA
## 2009:14-2011:12        NA     NA    NA     NA
## 2010:14-2011:12        NA     NA    NA     NA
## 2011:14-2011:12  -7.36499 -53.76 39.03 1.0000
## 2012:14-2011:12  -4.34440 -49.27 40.58 1.0000
## 2013:14-2011:12   3.33104 -53.49 60.15 1.0000
## 2008:15-2011:12        NA     NA    NA     NA
## 2009:15-2011:12        NA     NA    NA     NA
## 2010:15-2011:12        NA     NA    NA     NA
## 2011:15-2011:12        NA     NA    NA     NA
## 2012:15-2011:12 -17.04259 -66.25 32.17 0.9998
## 2013:15-2011:12  -3.89752 -47.30 39.50 1.0000
## 2008:16-2011:12        NA     NA    NA     NA
## 2009:16-2011:12        NA     NA    NA     NA
## 2010:16-2011:12   6.80272 -50.02 63.62 1.0000
## 2011:16-2011:12        NA     NA    NA     NA
## 2012:16-2011:12        NA     NA    NA     NA
## 2013:16-2011:12 -13.27307 -70.09 43.55 1.0000
## 2008:17-2011:12        NA     NA    NA     NA
## 2009:17-2011:12        NA     NA    NA     NA
## 2010:17-2011:12        NA     NA    NA     NA
## 2011:17-2011:12        NA     NA    NA     NA
## 2012:17-2011:12        NA     NA    NA     NA
## 2013:17-2011:12   0.50308 -56.32 57.32 1.0000
## 2008:18-2011:12        NA     NA    NA     NA
## 2009:18-2011:12        NA     NA    NA     NA
## 2010:18-2011:12        NA     NA    NA     NA
## 2011:18-2011:12   9.31279 -47.51 66.13 1.0000
## 2012:18-2011:12        NA     NA    NA     NA
## 2013:18-2011:12        NA     NA    NA     NA
## 2008:20-2011:12        NA     NA    NA     NA
## 2009:20-2011:12        NA     NA    NA     NA
## 2010:20-2011:12        NA     NA    NA     NA
## 2011:20-2011:12        NA     NA    NA     NA
## 2012:20-2011:12  10.60419 -46.22 67.43 1.0000
## 2013:20-2011:12        NA     NA    NA     NA
## 2013:12-2012:12   0.91933 -48.29 50.13 1.0000
## 2008:13-2012:12  -3.07631 -59.90 53.75 1.0000
## 2009:13-2012:12   4.22380 -52.60 61.05 1.0000
## 2010:13-2012:12        NA     NA    NA     NA
## 2011:13-2012:12        NA     NA    NA     NA
## 2012:13-2012:12 -19.79875 -69.01 29.41 0.9975
## 2013:13-2012:12   3.59474 -53.23 60.42 1.0000
## 2008:14-2012:12        NA     NA    NA     NA
## 2009:14-2012:12        NA     NA    NA     NA
## 2010:14-2012:12        NA     NA    NA     NA
## 2011:14-2012:12  -8.22263 -54.62 38.17 1.0000
## 2012:14-2012:12  -5.20205 -50.12 39.72 1.0000
## 2013:14-2012:12   2.47339 -54.35 59.29 1.0000
## 2008:15-2012:12        NA     NA    NA     NA
## 2009:15-2012:12        NA     NA    NA     NA
## 2010:15-2012:12        NA     NA    NA     NA
## 2011:15-2012:12        NA     NA    NA     NA
## 2012:15-2012:12 -17.90023 -67.11 31.31 0.9996
## 2013:15-2012:12  -4.75517 -48.15 38.64 1.0000
## 2008:16-2012:12        NA     NA    NA     NA
## 2009:16-2012:12        NA     NA    NA     NA
## 2010:16-2012:12   5.94508 -50.88 62.77 1.0000
## 2011:16-2012:12        NA     NA    NA     NA
## 2012:16-2012:12        NA     NA    NA     NA
## 2013:16-2012:12 -14.13071 -70.95 42.69 1.0000
## 2008:17-2012:12        NA     NA    NA     NA
## 2009:17-2012:12        NA     NA    NA     NA
## 2010:17-2012:12        NA     NA    NA     NA
## 2011:17-2012:12        NA     NA    NA     NA
## 2012:17-2012:12        NA     NA    NA     NA
## 2013:17-2012:12  -0.35457 -57.18 56.47 1.0000
## 2008:18-2012:12        NA     NA    NA     NA
## 2009:18-2012:12        NA     NA    NA     NA
## 2010:18-2012:12        NA     NA    NA     NA
## 2011:18-2012:12   8.45514 -48.37 65.28 1.0000
## 2012:18-2012:12        NA     NA    NA     NA
## 2013:18-2012:12        NA     NA    NA     NA
## 2008:20-2012:12        NA     NA    NA     NA
## 2009:20-2012:12        NA     NA    NA     NA
## 2010:20-2012:12        NA     NA    NA     NA
## 2011:20-2012:12        NA     NA    NA     NA
## 2012:20-2012:12   9.74654 -47.07 66.57 1.0000
## 2013:20-2012:12        NA     NA    NA     NA
## 2008:13-2013:12  -3.99563 -53.20 45.21 1.0000
## 2009:13-2013:12   3.30447 -45.90 52.51 1.0000
## 2010:13-2013:12        NA     NA    NA     NA
## 2011:13-2013:12        NA     NA    NA     NA
## 2012:13-2013:12 -20.71808 -60.90 19.46 0.9358
## 2013:13-2013:12   2.67541 -46.53 51.88 1.0000
## 2008:14-2013:12        NA     NA    NA     NA
## 2009:14-2013:12        NA     NA    NA     NA
## 2010:14-2013:12        NA     NA    NA     NA
## 2011:14-2013:12  -9.14196 -45.82 27.54 1.0000
## 2012:14-2013:12  -6.12138 -40.92 28.67 1.0000
## 2013:14-2013:12   1.55406 -47.65 50.76 1.0000
## 2008:15-2013:12        NA     NA    NA     NA
## 2009:15-2013:12        NA     NA    NA     NA
## 2010:15-2013:12        NA     NA    NA     NA
## 2011:15-2013:12        NA     NA    NA     NA
## 2012:15-2013:12 -18.81956 -59.00 21.36 0.9779
## 2013:15-2013:12  -5.67449 -38.48 27.13 1.0000
## 2008:16-2013:12        NA     NA    NA     NA
## 2009:16-2013:12        NA     NA    NA     NA
## 2010:16-2013:12   5.02575 -44.18 54.23 1.0000
## 2011:16-2013:12        NA     NA    NA     NA
## 2012:16-2013:12        NA     NA    NA     NA
## 2013:16-2013:12 -15.05004 -64.26 34.16 1.0000
## 2008:17-2013:12        NA     NA    NA     NA
## 2009:17-2013:12        NA     NA    NA     NA
## 2010:17-2013:12        NA     NA    NA     NA
## 2011:17-2013:12        NA     NA    NA     NA
## 2012:17-2013:12        NA     NA    NA     NA
## 2013:17-2013:12  -1.27390 -50.48 47.93 1.0000
## 2008:18-2013:12        NA     NA    NA     NA
## 2009:18-2013:12        NA     NA    NA     NA
## 2010:18-2013:12        NA     NA    NA     NA
## 2011:18-2013:12   7.53581 -41.67 56.74 1.0000
## 2012:18-2013:12        NA     NA    NA     NA
## 2013:18-2013:12        NA     NA    NA     NA
## 2008:20-2013:12        NA     NA    NA     NA
## 2009:20-2013:12        NA     NA    NA     NA
## 2010:20-2013:12        NA     NA    NA     NA
## 2011:20-2013:12        NA     NA    NA     NA
## 2012:20-2013:12   8.82722 -40.38 58.04 1.0000
## 2013:20-2013:12        NA     NA    NA     NA
## 2009:13-2008:13   7.30011 -49.52 64.12 1.0000
## 2010:13-2008:13        NA     NA    NA     NA
## 2011:13-2008:13        NA     NA    NA     NA
## 2012:13-2008:13 -16.72244 -65.93 32.49 0.9999
## 2013:13-2008:13   6.67105 -50.15 63.49 1.0000
## 2008:14-2008:13        NA     NA    NA     NA
## 2009:14-2008:13        NA     NA    NA     NA
## 2010:14-2008:13        NA     NA    NA     NA
## 2011:14-2008:13  -5.14632 -51.54 41.25 1.0000
## 2012:14-2008:13  -2.12574 -47.05 42.80 1.0000
## 2013:14-2008:13   5.54970 -51.27 62.37 1.0000
## 2008:15-2008:13        NA     NA    NA     NA
## 2009:15-2008:13        NA     NA    NA     NA
## 2010:15-2008:13        NA     NA    NA     NA
## 2011:15-2008:13        NA     NA    NA     NA
## 2012:15-2008:13 -14.82393 -64.03 34.38 1.0000
## 2013:15-2008:13  -1.67886 -45.08 41.72 1.0000
## 2008:16-2008:13        NA     NA    NA     NA
## 2009:16-2008:13        NA     NA    NA     NA
## 2010:16-2008:13   9.02138 -47.80 65.84 1.0000
## 2011:16-2008:13        NA     NA    NA     NA
## 2012:16-2008:13        NA     NA    NA     NA
## 2013:16-2008:13 -11.05441 -67.88 45.77 1.0000
## 2008:17-2008:13        NA     NA    NA     NA
## 2009:17-2008:13        NA     NA    NA     NA
## 2010:17-2008:13        NA     NA    NA     NA
## 2011:17-2008:13        NA     NA    NA     NA
## 2012:17-2008:13        NA     NA    NA     NA
## 2013:17-2008:13   2.72174 -54.10 59.54 1.0000
## 2008:18-2008:13        NA     NA    NA     NA
## 2009:18-2008:13        NA     NA    NA     NA
## 2010:18-2008:13        NA     NA    NA     NA
## 2011:18-2008:13  11.53145 -45.29 68.35 1.0000
## 2012:18-2008:13        NA     NA    NA     NA
## 2013:18-2008:13        NA     NA    NA     NA
## 2008:20-2008:13        NA     NA    NA     NA
## 2009:20-2008:13        NA     NA    NA     NA
## 2010:20-2008:13        NA     NA    NA     NA
## 2011:20-2008:13        NA     NA    NA     NA
## 2012:20-2008:13  12.82285 -44.00 69.64 1.0000
## 2013:20-2008:13        NA     NA    NA     NA
## 2010:13-2009:13        NA     NA    NA     NA
## 2011:13-2009:13        NA     NA    NA     NA
## 2012:13-2009:13 -24.02255 -73.23 25.19 0.9641
## 2013:13-2009:13  -0.62906 -57.45 56.19 1.0000
## 2008:14-2009:13        NA     NA    NA     NA
## 2009:14-2009:13        NA     NA    NA     NA
## 2010:14-2009:13        NA     NA    NA     NA
## 2011:14-2009:13 -12.44643 -58.84 33.95 1.0000
## 2012:14-2009:13  -9.42585 -54.35 35.50 1.0000
## 2013:14-2009:13  -1.75041 -58.57 55.07 1.0000
## 2008:15-2009:13        NA     NA    NA     NA
## 2009:15-2009:13        NA     NA    NA     NA
## 2010:15-2009:13        NA     NA    NA     NA
## 2011:15-2009:13        NA     NA    NA     NA
## 2012:15-2009:13 -22.12403 -71.33 27.08 0.9870
## 2013:15-2009:13  -8.97897 -52.38 34.42 1.0000
## 2008:16-2009:13        NA     NA    NA     NA
## 2009:16-2009:13        NA     NA    NA     NA
## 2010:16-2009:13   1.72128 -55.10 58.54 1.0000
## 2011:16-2009:13        NA     NA    NA     NA
## 2012:16-2009:13        NA     NA    NA     NA
## 2013:16-2009:13 -18.35451 -75.18 38.47 1.0000
## 2008:17-2009:13        NA     NA    NA     NA
## 2009:17-2009:13        NA     NA    NA     NA
## 2010:17-2009:13        NA     NA    NA     NA
## 2011:17-2009:13        NA     NA    NA     NA
## 2012:17-2009:13        NA     NA    NA     NA
## 2013:17-2009:13  -4.57837 -61.40 52.24 1.0000
## 2008:18-2009:13        NA     NA    NA     NA
## 2009:18-2009:13        NA     NA    NA     NA
## 2010:18-2009:13        NA     NA    NA     NA
## 2011:18-2009:13   4.23134 -52.59 61.05 1.0000
## 2012:18-2009:13        NA     NA    NA     NA
## 2013:18-2009:13        NA     NA    NA     NA
## 2008:20-2009:13        NA     NA    NA     NA
## 2009:20-2009:13        NA     NA    NA     NA
## 2010:20-2009:13        NA     NA    NA     NA
## 2011:20-2009:13        NA     NA    NA     NA
## 2012:20-2009:13   5.52274 -51.30 62.34 1.0000
## 2013:20-2009:13        NA     NA    NA     NA
## 2011:13-2010:13        NA     NA    NA     NA
## 2012:13-2010:13        NA     NA    NA     NA
## 2013:13-2010:13        NA     NA    NA     NA
## 2008:14-2010:13        NA     NA    NA     NA
## 2009:14-2010:13        NA     NA    NA     NA
## 2010:14-2010:13        NA     NA    NA     NA
## 2011:14-2010:13        NA     NA    NA     NA
## 2012:14-2010:13        NA     NA    NA     NA
## 2013:14-2010:13        NA     NA    NA     NA
## 2008:15-2010:13        NA     NA    NA     NA
## 2009:15-2010:13        NA     NA    NA     NA
## 2010:15-2010:13        NA     NA    NA     NA
## 2011:15-2010:13        NA     NA    NA     NA
## 2012:15-2010:13        NA     NA    NA     NA
## 2013:15-2010:13        NA     NA    NA     NA
## 2008:16-2010:13        NA     NA    NA     NA
## 2009:16-2010:13        NA     NA    NA     NA
## 2010:16-2010:13        NA     NA    NA     NA
## 2011:16-2010:13        NA     NA    NA     NA
## 2012:16-2010:13        NA     NA    NA     NA
## 2013:16-2010:13        NA     NA    NA     NA
## 2008:17-2010:13        NA     NA    NA     NA
## 2009:17-2010:13        NA     NA    NA     NA
## 2010:17-2010:13        NA     NA    NA     NA
## 2011:17-2010:13        NA     NA    NA     NA
## 2012:17-2010:13        NA     NA    NA     NA
## 2013:17-2010:13        NA     NA    NA     NA
## 2008:18-2010:13        NA     NA    NA     NA
## 2009:18-2010:13        NA     NA    NA     NA
## 2010:18-2010:13        NA     NA    NA     NA
## 2011:18-2010:13        NA     NA    NA     NA
## 2012:18-2010:13        NA     NA    NA     NA
## 2013:18-2010:13        NA     NA    NA     NA
## 2008:20-2010:13        NA     NA    NA     NA
## 2009:20-2010:13        NA     NA    NA     NA
## 2010:20-2010:13        NA     NA    NA     NA
## 2011:20-2010:13        NA     NA    NA     NA
## 2012:20-2010:13        NA     NA    NA     NA
## 2013:20-2010:13        NA     NA    NA     NA
## 2012:13-2011:13        NA     NA    NA     NA
## 2013:13-2011:13        NA     NA    NA     NA
## 2008:14-2011:13        NA     NA    NA     NA
## 2009:14-2011:13        NA     NA    NA     NA
## 2010:14-2011:13        NA     NA    NA     NA
## 2011:14-2011:13        NA     NA    NA     NA
## 2012:14-2011:13        NA     NA    NA     NA
## 2013:14-2011:13        NA     NA    NA     NA
## 2008:15-2011:13        NA     NA    NA     NA
## 2009:15-2011:13        NA     NA    NA     NA
## 2010:15-2011:13        NA     NA    NA     NA
## 2011:15-2011:13        NA     NA    NA     NA
## 2012:15-2011:13        NA     NA    NA     NA
## 2013:15-2011:13        NA     NA    NA     NA
## 2008:16-2011:13        NA     NA    NA     NA
## 2009:16-2011:13        NA     NA    NA     NA
## 2010:16-2011:13        NA     NA    NA     NA
## 2011:16-2011:13        NA     NA    NA     NA
## 2012:16-2011:13        NA     NA    NA     NA
## 2013:16-2011:13        NA     NA    NA     NA
## 2008:17-2011:13        NA     NA    NA     NA
## 2009:17-2011:13        NA     NA    NA     NA
## 2010:17-2011:13        NA     NA    NA     NA
## 2011:17-2011:13        NA     NA    NA     NA
## 2012:17-2011:13        NA     NA    NA     NA
## 2013:17-2011:13        NA     NA    NA     NA
## 2008:18-2011:13        NA     NA    NA     NA
## 2009:18-2011:13        NA     NA    NA     NA
## 2010:18-2011:13        NA     NA    NA     NA
## 2011:18-2011:13        NA     NA    NA     NA
## 2012:18-2011:13        NA     NA    NA     NA
## 2013:18-2011:13        NA     NA    NA     NA
## 2008:20-2011:13        NA     NA    NA     NA
## 2009:20-2011:13        NA     NA    NA     NA
## 2010:20-2011:13        NA     NA    NA     NA
## 2011:20-2011:13        NA     NA    NA     NA
## 2012:20-2011:13        NA     NA    NA     NA
## 2013:20-2011:13        NA     NA    NA     NA
## 2013:13-2012:13  23.39349 -25.82 72.60 0.9736
## 2008:14-2012:13        NA     NA    NA     NA
## 2009:14-2012:13        NA     NA    NA     NA
## 2010:14-2012:13        NA     NA    NA     NA
## 2011:14-2012:13  11.57612 -25.10 48.25 1.0000
## 2012:14-2012:13  14.59670 -20.20 49.39 0.9952
## 2013:14-2012:13  22.27214 -26.94 71.48 0.9858
## 2008:15-2012:13        NA     NA    NA     NA
## 2009:15-2012:13        NA     NA    NA     NA
## 2010:15-2012:13        NA     NA    NA     NA
## 2011:15-2012:13        NA     NA    NA     NA
## 2012:15-2012:13   1.89851 -38.28 42.08 1.0000
## 2013:15-2012:13  15.04358 -17.76 47.85 0.9831
## 2008:16-2012:13        NA     NA    NA     NA
## 2009:16-2012:13        NA     NA    NA     NA
## 2010:16-2012:13  25.74382 -23.47 74.95 0.9260
## 2011:16-2012:13        NA     NA    NA     NA
## 2012:16-2012:13        NA     NA    NA     NA
## 2013:16-2012:13   5.66804 -43.54 54.88 1.0000
## 2008:17-2012:13        NA     NA    NA     NA
## 2009:17-2012:13        NA     NA    NA     NA
## 2010:17-2012:13        NA     NA    NA     NA
## 2011:17-2012:13        NA     NA    NA     NA
## 2012:17-2012:13        NA     NA    NA     NA
## 2013:17-2012:13  19.44418 -29.76 68.65 0.9981
## 2008:18-2012:13        NA     NA    NA     NA
## 2009:18-2012:13        NA     NA    NA     NA
## 2010:18-2012:13        NA     NA    NA     NA
## 2011:18-2012:13  28.25389 -20.96 77.46 0.8359
## 2012:18-2012:13        NA     NA    NA     NA
## 2013:18-2012:13        NA     NA    NA     NA
## 2008:20-2012:13        NA     NA    NA     NA
## 2009:20-2012:13        NA     NA    NA     NA
## 2010:20-2012:13        NA     NA    NA     NA
## 2011:20-2012:13        NA     NA    NA     NA
## 2012:20-2012:13  29.54529 -19.66 78.75 0.7750
## 2013:20-2012:13        NA     NA    NA     NA
## 2008:14-2013:13        NA     NA    NA     NA
## 2009:14-2013:13        NA     NA    NA     NA
## 2010:14-2013:13        NA     NA    NA     NA
## 2011:14-2013:13 -11.81737 -58.21 34.58 1.0000
## 2012:14-2013:13  -8.79679 -53.72 36.12 1.0000
## 2013:14-2013:13  -1.12135 -57.94 55.70 1.0000
## 2008:15-2013:13        NA     NA    NA     NA
## 2009:15-2013:13        NA     NA    NA     NA
## 2010:15-2013:13        NA     NA    NA     NA
## 2011:15-2013:13        NA     NA    NA     NA
## 2012:15-2013:13 -21.49497 -70.70 27.71 0.9912
## 2013:15-2013:13  -8.34991 -51.75 35.05 1.0000
## 2008:16-2013:13        NA     NA    NA     NA
## 2009:16-2013:13        NA     NA    NA     NA
## 2010:16-2013:13   2.35034 -54.47 59.17 1.0000
## 2011:16-2013:13        NA     NA    NA     NA
## 2012:16-2013:13        NA     NA    NA     NA
## 2013:16-2013:13 -17.72545 -74.55 39.10 1.0000
## 2008:17-2013:13        NA     NA    NA     NA
## 2009:17-2013:13        NA     NA    NA     NA
## 2010:17-2013:13        NA     NA    NA     NA
## 2011:17-2013:13        NA     NA    NA     NA
## 2012:17-2013:13        NA     NA    NA     NA
## 2013:17-2013:13  -3.94931 -60.77 52.87 1.0000
## 2008:18-2013:13        NA     NA    NA     NA
## 2009:18-2013:13        NA     NA    NA     NA
## 2010:18-2013:13        NA     NA    NA     NA
## 2011:18-2013:13   4.86040 -51.96 61.68 1.0000
## 2012:18-2013:13        NA     NA    NA     NA
## 2013:18-2013:13        NA     NA    NA     NA
## 2008:20-2013:13        NA     NA    NA     NA
## 2009:20-2013:13        NA     NA    NA     NA
## 2010:20-2013:13        NA     NA    NA     NA
## 2011:20-2013:13        NA     NA    NA     NA
## 2012:20-2013:13   6.15180 -50.67 62.97 1.0000
## 2013:20-2013:13        NA     NA    NA     NA
## 2009:14-2008:14        NA     NA    NA     NA
## 2010:14-2008:14        NA     NA    NA     NA
## 2011:14-2008:14        NA     NA    NA     NA
## 2012:14-2008:14        NA     NA    NA     NA
## 2013:14-2008:14        NA     NA    NA     NA
## 2008:15-2008:14        NA     NA    NA     NA
## 2009:15-2008:14        NA     NA    NA     NA
## 2010:15-2008:14        NA     NA    NA     NA
## 2011:15-2008:14        NA     NA    NA     NA
## 2012:15-2008:14        NA     NA    NA     NA
## 2013:15-2008:14        NA     NA    NA     NA
## 2008:16-2008:14        NA     NA    NA     NA
## 2009:16-2008:14        NA     NA    NA     NA
## 2010:16-2008:14        NA     NA    NA     NA
## 2011:16-2008:14        NA     NA    NA     NA
## 2012:16-2008:14        NA     NA    NA     NA
## 2013:16-2008:14        NA     NA    NA     NA
## 2008:17-2008:14        NA     NA    NA     NA
## 2009:17-2008:14        NA     NA    NA     NA
## 2010:17-2008:14        NA     NA    NA     NA
## 2011:17-2008:14        NA     NA    NA     NA
## 2012:17-2008:14        NA     NA    NA     NA
## 2013:17-2008:14        NA     NA    NA     NA
## 2008:18-2008:14        NA     NA    NA     NA
## 2009:18-2008:14        NA     NA    NA     NA
## 2010:18-2008:14        NA     NA    NA     NA
## 2011:18-2008:14        NA     NA    NA     NA
## 2012:18-2008:14        NA     NA    NA     NA
## 2013:18-2008:14        NA     NA    NA     NA
## 2008:20-2008:14        NA     NA    NA     NA
## 2009:20-2008:14        NA     NA    NA     NA
## 2010:20-2008:14        NA     NA    NA     NA
## 2011:20-2008:14        NA     NA    NA     NA
## 2012:20-2008:14        NA     NA    NA     NA
## 2013:20-2008:14        NA     NA    NA     NA
## 2010:14-2009:14        NA     NA    NA     NA
## 2011:14-2009:14        NA     NA    NA     NA
## 2012:14-2009:14        NA     NA    NA     NA
## 2013:14-2009:14        NA     NA    NA     NA
## 2008:15-2009:14        NA     NA    NA     NA
## 2009:15-2009:14        NA     NA    NA     NA
## 2010:15-2009:14        NA     NA    NA     NA
## 2011:15-2009:14        NA     NA    NA     NA
## 2012:15-2009:14        NA     NA    NA     NA
## 2013:15-2009:14        NA     NA    NA     NA
## 2008:16-2009:14        NA     NA    NA     NA
## 2009:16-2009:14        NA     NA    NA     NA
## 2010:16-2009:14        NA     NA    NA     NA
## 2011:16-2009:14        NA     NA    NA     NA
## 2012:16-2009:14        NA     NA    NA     NA
## 2013:16-2009:14        NA     NA    NA     NA
## 2008:17-2009:14        NA     NA    NA     NA
## 2009:17-2009:14        NA     NA    NA     NA
## 2010:17-2009:14        NA     NA    NA     NA
## 2011:17-2009:14        NA     NA    NA     NA
## 2012:17-2009:14        NA     NA    NA     NA
## 2013:17-2009:14        NA     NA    NA     NA
## 2008:18-2009:14        NA     NA    NA     NA
## 2009:18-2009:14        NA     NA    NA     NA
## 2010:18-2009:14        NA     NA    NA     NA
## 2011:18-2009:14        NA     NA    NA     NA
## 2012:18-2009:14        NA     NA    NA     NA
## 2013:18-2009:14        NA     NA    NA     NA
## 2008:20-2009:14        NA     NA    NA     NA
## 2009:20-2009:14        NA     NA    NA     NA
## 2010:20-2009:14        NA     NA    NA     NA
## 2011:20-2009:14        NA     NA    NA     NA
## 2012:20-2009:14        NA     NA    NA     NA
## 2013:20-2009:14        NA     NA    NA     NA
## 2011:14-2010:14        NA     NA    NA     NA
## 2012:14-2010:14        NA     NA    NA     NA
## 2013:14-2010:14        NA     NA    NA     NA
## 2008:15-2010:14        NA     NA    NA     NA
## 2009:15-2010:14        NA     NA    NA     NA
## 2010:15-2010:14        NA     NA    NA     NA
## 2011:15-2010:14        NA     NA    NA     NA
## 2012:15-2010:14        NA     NA    NA     NA
## 2013:15-2010:14        NA     NA    NA     NA
## 2008:16-2010:14        NA     NA    NA     NA
## 2009:16-2010:14        NA     NA    NA     NA
## 2010:16-2010:14        NA     NA    NA     NA
## 2011:16-2010:14        NA     NA    NA     NA
## 2012:16-2010:14        NA     NA    NA     NA
## 2013:16-2010:14        NA     NA    NA     NA
## 2008:17-2010:14        NA     NA    NA     NA
## 2009:17-2010:14        NA     NA    NA     NA
## 2010:17-2010:14        NA     NA    NA     NA
## 2011:17-2010:14        NA     NA    NA     NA
## 2012:17-2010:14        NA     NA    NA     NA
## 2013:17-2010:14        NA     NA    NA     NA
## 2008:18-2010:14        NA     NA    NA     NA
## 2009:18-2010:14        NA     NA    NA     NA
## 2010:18-2010:14        NA     NA    NA     NA
## 2011:18-2010:14        NA     NA    NA     NA
## 2012:18-2010:14        NA     NA    NA     NA
## 2013:18-2010:14        NA     NA    NA     NA
## 2008:20-2010:14        NA     NA    NA     NA
## 2009:20-2010:14        NA     NA    NA     NA
## 2010:20-2010:14        NA     NA    NA     NA
## 2011:20-2010:14        NA     NA    NA     NA
## 2012:20-2010:14        NA     NA    NA     NA
## 2013:20-2010:14        NA     NA    NA     NA
## 2012:14-2011:14   3.02058 -27.67 33.71 1.0000
## 2013:14-2011:14  10.69602 -35.70 57.09 1.0000
## 2008:15-2011:14        NA     NA    NA     NA
## 2009:15-2011:14        NA     NA    NA     NA
## 2010:15-2011:14        NA     NA    NA     NA
## 2011:15-2011:14        NA     NA    NA     NA
## 2012:15-2011:14  -9.67760 -46.36 27.00 1.0000
## 2013:15-2011:14   3.46746 -24.94 31.88 1.0000
## 2008:16-2011:14        NA     NA    NA     NA
## 2009:16-2011:14        NA     NA    NA     NA
## 2010:16-2011:14  14.16771 -32.23 60.56 1.0000
## 2011:16-2011:14        NA     NA    NA     NA
## 2012:16-2011:14        NA     NA    NA     NA
## 2013:16-2011:14  -5.90808 -52.30 40.49 1.0000
## 2008:17-2011:14        NA     NA    NA     NA
## 2009:17-2011:14        NA     NA    NA     NA
## 2010:17-2011:14        NA     NA    NA     NA
## 2011:17-2011:14        NA     NA    NA     NA
## 2012:17-2011:14        NA     NA    NA     NA
## 2013:17-2011:14   7.86806 -38.53 54.26 1.0000
## 2008:18-2011:14        NA     NA    NA     NA
## 2009:18-2011:14        NA     NA    NA     NA
## 2010:18-2011:14        NA     NA    NA     NA
## 2011:18-2011:14  16.67777 -29.72 63.07 0.9997
## 2012:18-2011:14        NA     NA    NA     NA
## 2013:18-2011:14        NA     NA    NA     NA
## 2008:20-2011:14        NA     NA    NA     NA
## 2009:20-2011:14        NA     NA    NA     NA
## 2010:20-2011:14        NA     NA    NA     NA
## 2011:20-2011:14        NA     NA    NA     NA
## 2012:20-2011:14  17.96917 -28.43 64.36 0.9987
## 2013:20-2011:14        NA     NA    NA     NA
## 2013:14-2012:14   7.67544 -37.25 52.60 1.0000
## 2008:15-2012:14        NA     NA    NA     NA
## 2009:15-2012:14        NA     NA    NA     NA
## 2010:15-2012:14        NA     NA    NA     NA
## 2011:15-2012:14        NA     NA    NA     NA
## 2012:15-2012:14 -12.69819 -47.49 22.10 0.9996
## 2013:15-2012:14   0.44688 -25.49 26.38 1.0000
## 2008:16-2012:14        NA     NA    NA     NA
## 2009:16-2012:14        NA     NA    NA     NA
## 2010:16-2012:14  11.14712 -33.77 56.07 1.0000
## 2011:16-2012:14        NA     NA    NA     NA
## 2012:16-2012:14        NA     NA    NA     NA
## 2013:16-2012:14  -8.92866 -53.85 35.99 1.0000
## 2008:17-2012:14        NA     NA    NA     NA
## 2009:17-2012:14        NA     NA    NA     NA
## 2010:17-2012:14        NA     NA    NA     NA
## 2011:17-2012:14        NA     NA    NA     NA
## 2012:17-2012:14        NA     NA    NA     NA
## 2013:17-2012:14   4.84748 -40.07 49.77 1.0000
## 2008:18-2012:14        NA     NA    NA     NA
## 2009:18-2012:14        NA     NA    NA     NA
## 2010:18-2012:14        NA     NA    NA     NA
## 2011:18-2012:14  13.65719 -31.26 58.58 1.0000
## 2012:18-2012:14        NA     NA    NA     NA
## 2013:18-2012:14        NA     NA    NA     NA
## 2008:20-2012:14        NA     NA    NA     NA
## 2009:20-2012:14        NA     NA    NA     NA
## 2010:20-2012:14        NA     NA    NA     NA
## 2011:20-2012:14        NA     NA    NA     NA
## 2012:20-2012:14  14.94859 -29.97 59.87 0.9999
## 2013:20-2012:14        NA     NA    NA     NA
## 2008:15-2013:14        NA     NA    NA     NA
## 2009:15-2013:14        NA     NA    NA     NA
## 2010:15-2013:14        NA     NA    NA     NA
## 2011:15-2013:14        NA     NA    NA     NA
## 2012:15-2013:14 -20.37363 -69.58 28.84 0.9960
## 2013:15-2013:14  -7.22856 -50.63 36.17 1.0000
## 2008:16-2013:14        NA     NA    NA     NA
## 2009:16-2013:14        NA     NA    NA     NA
## 2010:16-2013:14   3.47168 -53.35 60.29 1.0000
## 2011:16-2013:14        NA     NA    NA     NA
## 2012:16-2013:14        NA     NA    NA     NA
## 2013:16-2013:14 -16.60410 -73.43 40.22 1.0000
## 2008:17-2013:14        NA     NA    NA     NA
## 2009:17-2013:14        NA     NA    NA     NA
## 2010:17-2013:14        NA     NA    NA     NA
## 2011:17-2013:14        NA     NA    NA     NA
## 2012:17-2013:14        NA     NA    NA     NA
## 2013:17-2013:14  -2.82796 -59.65 53.99 1.0000
## 2008:18-2013:14        NA     NA    NA     NA
## 2009:18-2013:14        NA     NA    NA     NA
## 2010:18-2013:14        NA     NA    NA     NA
## 2011:18-2013:14   5.98175 -50.84 62.80 1.0000
## 2012:18-2013:14        NA     NA    NA     NA
## 2013:18-2013:14        NA     NA    NA     NA
## 2008:20-2013:14        NA     NA    NA     NA
## 2009:20-2013:14        NA     NA    NA     NA
## 2010:20-2013:14        NA     NA    NA     NA
## 2011:20-2013:14        NA     NA    NA     NA
## 2012:20-2013:14   7.27315 -49.55 64.09 1.0000
## 2013:20-2013:14        NA     NA    NA     NA
## 2009:15-2008:15        NA     NA    NA     NA
## 2010:15-2008:15        NA     NA    NA     NA
## 2011:15-2008:15        NA     NA    NA     NA
## 2012:15-2008:15        NA     NA    NA     NA
## 2013:15-2008:15        NA     NA    NA     NA
## 2008:16-2008:15        NA     NA    NA     NA
## 2009:16-2008:15        NA     NA    NA     NA
## 2010:16-2008:15        NA     NA    NA     NA
## 2011:16-2008:15        NA     NA    NA     NA
## 2012:16-2008:15        NA     NA    NA     NA
## 2013:16-2008:15        NA     NA    NA     NA
## 2008:17-2008:15        NA     NA    NA     NA
## 2009:17-2008:15        NA     NA    NA     NA
## 2010:17-2008:15        NA     NA    NA     NA
## 2011:17-2008:15        NA     NA    NA     NA
## 2012:17-2008:15        NA     NA    NA     NA
## 2013:17-2008:15        NA     NA    NA     NA
## 2008:18-2008:15        NA     NA    NA     NA
## 2009:18-2008:15        NA     NA    NA     NA
## 2010:18-2008:15        NA     NA    NA     NA
## 2011:18-2008:15        NA     NA    NA     NA
## 2012:18-2008:15        NA     NA    NA     NA
## 2013:18-2008:15        NA     NA    NA     NA
## 2008:20-2008:15        NA     NA    NA     NA
## 2009:20-2008:15        NA     NA    NA     NA
## 2010:20-2008:15        NA     NA    NA     NA
## 2011:20-2008:15        NA     NA    NA     NA
## 2012:20-2008:15        NA     NA    NA     NA
## 2013:20-2008:15        NA     NA    NA     NA
## 2010:15-2009:15        NA     NA    NA     NA
## 2011:15-2009:15        NA     NA    NA     NA
## 2012:15-2009:15        NA     NA    NA     NA
## 2013:15-2009:15        NA     NA    NA     NA
## 2008:16-2009:15        NA     NA    NA     NA
## 2009:16-2009:15        NA     NA    NA     NA
## 2010:16-2009:15        NA     NA    NA     NA
## 2011:16-2009:15        NA     NA    NA     NA
## 2012:16-2009:15        NA     NA    NA     NA
## 2013:16-2009:15        NA     NA    NA     NA
## 2008:17-2009:15        NA     NA    NA     NA
## 2009:17-2009:15        NA     NA    NA     NA
## 2010:17-2009:15        NA     NA    NA     NA
## 2011:17-2009:15        NA     NA    NA     NA
## 2012:17-2009:15        NA     NA    NA     NA
## 2013:17-2009:15        NA     NA    NA     NA
## 2008:18-2009:15        NA     NA    NA     NA
## 2009:18-2009:15        NA     NA    NA     NA
## 2010:18-2009:15        NA     NA    NA     NA
## 2011:18-2009:15        NA     NA    NA     NA
## 2012:18-2009:15        NA     NA    NA     NA
## 2013:18-2009:15        NA     NA    NA     NA
## 2008:20-2009:15        NA     NA    NA     NA
## 2009:20-2009:15        NA     NA    NA     NA
## 2010:20-2009:15        NA     NA    NA     NA
## 2011:20-2009:15        NA     NA    NA     NA
## 2012:20-2009:15        NA     NA    NA     NA
## 2013:20-2009:15        NA     NA    NA     NA
## 2011:15-2010:15        NA     NA    NA     NA
## 2012:15-2010:15        NA     NA    NA     NA
## 2013:15-2010:15        NA     NA    NA     NA
## 2008:16-2010:15        NA     NA    NA     NA
## 2009:16-2010:15        NA     NA    NA     NA
## 2010:16-2010:15        NA     NA    NA     NA
## 2011:16-2010:15        NA     NA    NA     NA
## 2012:16-2010:15        NA     NA    NA     NA
## 2013:16-2010:15        NA     NA    NA     NA
## 2008:17-2010:15        NA     NA    NA     NA
## 2009:17-2010:15        NA     NA    NA     NA
## 2010:17-2010:15        NA     NA    NA     NA
## 2011:17-2010:15        NA     NA    NA     NA
## 2012:17-2010:15        NA     NA    NA     NA
## 2013:17-2010:15        NA     NA    NA     NA
## 2008:18-2010:15        NA     NA    NA     NA
## 2009:18-2010:15        NA     NA    NA     NA
## 2010:18-2010:15        NA     NA    NA     NA
## 2011:18-2010:15        NA     NA    NA     NA
## 2012:18-2010:15        NA     NA    NA     NA
## 2013:18-2010:15        NA     NA    NA     NA
## 2008:20-2010:15        NA     NA    NA     NA
## 2009:20-2010:15        NA     NA    NA     NA
## 2010:20-2010:15        NA     NA    NA     NA
## 2011:20-2010:15        NA     NA    NA     NA
## 2012:20-2010:15        NA     NA    NA     NA
## 2013:20-2010:15        NA     NA    NA     NA
## 2012:15-2011:15        NA     NA    NA     NA
## 2013:15-2011:15        NA     NA    NA     NA
## 2008:16-2011:15        NA     NA    NA     NA
## 2009:16-2011:15        NA     NA    NA     NA
## 2010:16-2011:15        NA     NA    NA     NA
## 2011:16-2011:15        NA     NA    NA     NA
## 2012:16-2011:15        NA     NA    NA     NA
## 2013:16-2011:15        NA     NA    NA     NA
## 2008:17-2011:15        NA     NA    NA     NA
## 2009:17-2011:15        NA     NA    NA     NA
## 2010:17-2011:15        NA     NA    NA     NA
## 2011:17-2011:15        NA     NA    NA     NA
## 2012:17-2011:15        NA     NA    NA     NA
## 2013:17-2011:15        NA     NA    NA     NA
## 2008:18-2011:15        NA     NA    NA     NA
## 2009:18-2011:15        NA     NA    NA     NA
## 2010:18-2011:15        NA     NA    NA     NA
## 2011:18-2011:15        NA     NA    NA     NA
## 2012:18-2011:15        NA     NA    NA     NA
## 2013:18-2011:15        NA     NA    NA     NA
## 2008:20-2011:15        NA     NA    NA     NA
## 2009:20-2011:15        NA     NA    NA     NA
## 2010:20-2011:15        NA     NA    NA     NA
## 2011:20-2011:15        NA     NA    NA     NA
## 2012:20-2011:15        NA     NA    NA     NA
## 2013:20-2011:15        NA     NA    NA     NA
## 2013:15-2012:15  13.14507 -19.66 45.95 0.9977
## 2008:16-2012:15        NA     NA    NA     NA
## 2009:16-2012:15        NA     NA    NA     NA
## 2010:16-2012:15  23.84531 -25.36 73.05 0.9670
## 2011:16-2012:15        NA     NA    NA     NA
## 2012:16-2012:15        NA     NA    NA     NA
## 2013:16-2012:15   3.76952 -45.44 52.98 1.0000
## 2008:17-2012:15        NA     NA    NA     NA
## 2009:17-2012:15        NA     NA    NA     NA
## 2010:17-2012:15        NA     NA    NA     NA
## 2011:17-2012:15        NA     NA    NA     NA
## 2012:17-2012:15        NA     NA    NA     NA
## 2013:17-2012:15  17.54567 -31.66 66.75 0.9997
## 2008:18-2012:15        NA     NA    NA     NA
## 2009:18-2012:15        NA     NA    NA     NA
## 2010:18-2012:15        NA     NA    NA     NA
## 2011:18-2012:15  26.35538 -22.85 75.56 0.9078
## 2012:18-2012:15        NA     NA    NA     NA
## 2013:18-2012:15        NA     NA    NA     NA
## 2008:20-2012:15        NA     NA    NA     NA
## 2009:20-2012:15        NA     NA    NA     NA
## 2010:20-2012:15        NA     NA    NA     NA
## 2011:20-2012:15        NA     NA    NA     NA
## 2012:20-2012:15  27.64678 -21.56 76.86 0.8614
## 2013:20-2012:15        NA     NA    NA     NA
## 2008:16-2013:15        NA     NA    NA     NA
## 2009:16-2013:15        NA     NA    NA     NA
## 2010:16-2013:15  10.70024 -32.70 54.10 1.0000
## 2011:16-2013:15        NA     NA    NA     NA
## 2012:16-2013:15        NA     NA    NA     NA
## 2013:16-2013:15  -9.37555 -52.77 34.02 1.0000
## 2008:17-2013:15        NA     NA    NA     NA
## 2009:17-2013:15        NA     NA    NA     NA
## 2010:17-2013:15        NA     NA    NA     NA
## 2011:17-2013:15        NA     NA    NA     NA
## 2012:17-2013:15        NA     NA    NA     NA
## 2013:17-2013:15   4.40060 -39.00 47.80 1.0000
## 2008:18-2013:15        NA     NA    NA     NA
## 2009:18-2013:15        NA     NA    NA     NA
## 2010:18-2013:15        NA     NA    NA     NA
## 2011:18-2013:15  13.21031 -30.19 56.61 1.0000
## 2012:18-2013:15        NA     NA    NA     NA
## 2013:18-2013:15        NA     NA    NA     NA
## 2008:20-2013:15        NA     NA    NA     NA
## 2009:20-2013:15        NA     NA    NA     NA
## 2010:20-2013:15        NA     NA    NA     NA
## 2011:20-2013:15        NA     NA    NA     NA
## 2012:20-2013:15  14.50171 -28.90 57.90 0.9999
## 2013:20-2013:15        NA     NA    NA     NA
## 2009:16-2008:16        NA     NA    NA     NA
## 2010:16-2008:16        NA     NA    NA     NA
## 2011:16-2008:16        NA     NA    NA     NA
## 2012:16-2008:16        NA     NA    NA     NA
## 2013:16-2008:16        NA     NA    NA     NA
## 2008:17-2008:16        NA     NA    NA     NA
## 2009:17-2008:16        NA     NA    NA     NA
## 2010:17-2008:16        NA     NA    NA     NA
## 2011:17-2008:16        NA     NA    NA     NA
## 2012:17-2008:16        NA     NA    NA     NA
## 2013:17-2008:16        NA     NA    NA     NA
## 2008:18-2008:16        NA     NA    NA     NA
## 2009:18-2008:16        NA     NA    NA     NA
## 2010:18-2008:16        NA     NA    NA     NA
## 2011:18-2008:16        NA     NA    NA     NA
## 2012:18-2008:16        NA     NA    NA     NA
## 2013:18-2008:16        NA     NA    NA     NA
## 2008:20-2008:16        NA     NA    NA     NA
## 2009:20-2008:16        NA     NA    NA     NA
## 2010:20-2008:16        NA     NA    NA     NA
## 2011:20-2008:16        NA     NA    NA     NA
## 2012:20-2008:16        NA     NA    NA     NA
## 2013:20-2008:16        NA     NA    NA     NA
## 2010:16-2009:16        NA     NA    NA     NA
## 2011:16-2009:16        NA     NA    NA     NA
## 2012:16-2009:16        NA     NA    NA     NA
## 2013:16-2009:16        NA     NA    NA     NA
## 2008:17-2009:16        NA     NA    NA     NA
## 2009:17-2009:16        NA     NA    NA     NA
## 2010:17-2009:16        NA     NA    NA     NA
## 2011:17-2009:16        NA     NA    NA     NA
## 2012:17-2009:16        NA     NA    NA     NA
## 2013:17-2009:16        NA     NA    NA     NA
## 2008:18-2009:16        NA     NA    NA     NA
## 2009:18-2009:16        NA     NA    NA     NA
## 2010:18-2009:16        NA     NA    NA     NA
## 2011:18-2009:16        NA     NA    NA     NA
## 2012:18-2009:16        NA     NA    NA     NA
## 2013:18-2009:16        NA     NA    NA     NA
## 2008:20-2009:16        NA     NA    NA     NA
## 2009:20-2009:16        NA     NA    NA     NA
## 2010:20-2009:16        NA     NA    NA     NA
## 2011:20-2009:16        NA     NA    NA     NA
## 2012:20-2009:16        NA     NA    NA     NA
## 2013:20-2009:16        NA     NA    NA     NA
## 2011:16-2010:16        NA     NA    NA     NA
## 2012:16-2010:16        NA     NA    NA     NA
## 2013:16-2010:16 -20.07579 -76.90 36.75 0.9998
## 2008:17-2010:16        NA     NA    NA     NA
## 2009:17-2010:16        NA     NA    NA     NA
## 2010:17-2010:16        NA     NA    NA     NA
## 2011:17-2010:16        NA     NA    NA     NA
## 2012:17-2010:16        NA     NA    NA     NA
## 2013:17-2010:16  -6.29965 -63.12 50.52 1.0000
## 2008:18-2010:16        NA     NA    NA     NA
## 2009:18-2010:16        NA     NA    NA     NA
## 2010:18-2010:16        NA     NA    NA     NA
## 2011:18-2010:16   2.51006 -54.31 59.33 1.0000
## 2012:18-2010:16        NA     NA    NA     NA
## 2013:18-2010:16        NA     NA    NA     NA
## 2008:20-2010:16        NA     NA    NA     NA
## 2009:20-2010:16        NA     NA    NA     NA
## 2010:20-2010:16        NA     NA    NA     NA
## 2011:20-2010:16        NA     NA    NA     NA
## 2012:20-2010:16   3.80147 -53.02 60.62 1.0000
## 2013:20-2010:16        NA     NA    NA     NA
## 2012:16-2011:16        NA     NA    NA     NA
## 2013:16-2011:16        NA     NA    NA     NA
## 2008:17-2011:16        NA     NA    NA     NA
## 2009:17-2011:16        NA     NA    NA     NA
## 2010:17-2011:16        NA     NA    NA     NA
## 2011:17-2011:16        NA     NA    NA     NA
## 2012:17-2011:16        NA     NA    NA     NA
## 2013:17-2011:16        NA     NA    NA     NA
## 2008:18-2011:16        NA     NA    NA     NA
## 2009:18-2011:16        NA     NA    NA     NA
## 2010:18-2011:16        NA     NA    NA     NA
## 2011:18-2011:16        NA     NA    NA     NA
## 2012:18-2011:16        NA     NA    NA     NA
## 2013:18-2011:16        NA     NA    NA     NA
## 2008:20-2011:16        NA     NA    NA     NA
## 2009:20-2011:16        NA     NA    NA     NA
## 2010:20-2011:16        NA     NA    NA     NA
## 2011:20-2011:16        NA     NA    NA     NA
## 2012:20-2011:16        NA     NA    NA     NA
## 2013:20-2011:16        NA     NA    NA     NA
## 2013:16-2012:16        NA     NA    NA     NA
## 2008:17-2012:16        NA     NA    NA     NA
## 2009:17-2012:16        NA     NA    NA     NA
## 2010:17-2012:16        NA     NA    NA     NA
## 2011:17-2012:16        NA     NA    NA     NA
## 2012:17-2012:16        NA     NA    NA     NA
## 2013:17-2012:16        NA     NA    NA     NA
## 2008:18-2012:16        NA     NA    NA     NA
## 2009:18-2012:16        NA     NA    NA     NA
## 2010:18-2012:16        NA     NA    NA     NA
## 2011:18-2012:16        NA     NA    NA     NA
## 2012:18-2012:16        NA     NA    NA     NA
## 2013:18-2012:16        NA     NA    NA     NA
## 2008:20-2012:16        NA     NA    NA     NA
## 2009:20-2012:16        NA     NA    NA     NA
## 2010:20-2012:16        NA     NA    NA     NA
## 2011:20-2012:16        NA     NA    NA     NA
## 2012:20-2012:16        NA     NA    NA     NA
## 2013:20-2012:16        NA     NA    NA     NA
## 2008:17-2013:16        NA     NA    NA     NA
## 2009:17-2013:16        NA     NA    NA     NA
## 2010:17-2013:16        NA     NA    NA     NA
## 2011:17-2013:16        NA     NA    NA     NA
## 2012:17-2013:16        NA     NA    NA     NA
## 2013:17-2013:16  13.77614 -43.05 70.60 1.0000
## 2008:18-2013:16        NA     NA    NA     NA
## 2009:18-2013:16        NA     NA    NA     NA
## 2010:18-2013:16        NA     NA    NA     NA
## 2011:18-2013:16  22.58585 -34.24 79.41 0.9979
## 2012:18-2013:16        NA     NA    NA     NA
## 2013:18-2013:16        NA     NA    NA     NA
## 2008:20-2013:16        NA     NA    NA     NA
## 2009:20-2013:16        NA     NA    NA     NA
## 2010:20-2013:16        NA     NA    NA     NA
## 2011:20-2013:16        NA     NA    NA     NA
## 2012:20-2013:16  23.87726 -32.94 80.70 0.9950
## 2013:20-2013:16        NA     NA    NA     NA
## 2009:17-2008:17        NA     NA    NA     NA
## 2010:17-2008:17        NA     NA    NA     NA
## 2011:17-2008:17        NA     NA    NA     NA
## 2012:17-2008:17        NA     NA    NA     NA
## 2013:17-2008:17        NA     NA    NA     NA
## 2008:18-2008:17        NA     NA    NA     NA
## 2009:18-2008:17        NA     NA    NA     NA
## 2010:18-2008:17        NA     NA    NA     NA
## 2011:18-2008:17        NA     NA    NA     NA
## 2012:18-2008:17        NA     NA    NA     NA
## 2013:18-2008:17        NA     NA    NA     NA
## 2008:20-2008:17        NA     NA    NA     NA
## 2009:20-2008:17        NA     NA    NA     NA
## 2010:20-2008:17        NA     NA    NA     NA
## 2011:20-2008:17        NA     NA    NA     NA
## 2012:20-2008:17        NA     NA    NA     NA
## 2013:20-2008:17        NA     NA    NA     NA
## 2010:17-2009:17        NA     NA    NA     NA
## 2011:17-2009:17        NA     NA    NA     NA
## 2012:17-2009:17        NA     NA    NA     NA
## 2013:17-2009:17        NA     NA    NA     NA
## 2008:18-2009:17        NA     NA    NA     NA
## 2009:18-2009:17        NA     NA    NA     NA
## 2010:18-2009:17        NA     NA    NA     NA
## 2011:18-2009:17        NA     NA    NA     NA
## 2012:18-2009:17        NA     NA    NA     NA
## 2013:18-2009:17        NA     NA    NA     NA
## 2008:20-2009:17        NA     NA    NA     NA
## 2009:20-2009:17        NA     NA    NA     NA
## 2010:20-2009:17        NA     NA    NA     NA
## 2011:20-2009:17        NA     NA    NA     NA
## 2012:20-2009:17        NA     NA    NA     NA
## 2013:20-2009:17        NA     NA    NA     NA
## 2011:17-2010:17        NA     NA    NA     NA
## 2012:17-2010:17        NA     NA    NA     NA
## 2013:17-2010:17        NA     NA    NA     NA
## 2008:18-2010:17        NA     NA    NA     NA
## 2009:18-2010:17        NA     NA    NA     NA
## 2010:18-2010:17        NA     NA    NA     NA
## 2011:18-2010:17        NA     NA    NA     NA
## 2012:18-2010:17        NA     NA    NA     NA
## 2013:18-2010:17        NA     NA    NA     NA
## 2008:20-2010:17        NA     NA    NA     NA
## 2009:20-2010:17        NA     NA    NA     NA
## 2010:20-2010:17        NA     NA    NA     NA
## 2011:20-2010:17        NA     NA    NA     NA
## 2012:20-2010:17        NA     NA    NA     NA
## 2013:20-2010:17        NA     NA    NA     NA
## 2012:17-2011:17        NA     NA    NA     NA
## 2013:17-2011:17        NA     NA    NA     NA
## 2008:18-2011:17        NA     NA    NA     NA
## 2009:18-2011:17        NA     NA    NA     NA
## 2010:18-2011:17        NA     NA    NA     NA
## 2011:18-2011:17        NA     NA    NA     NA
## 2012:18-2011:17        NA     NA    NA     NA
## 2013:18-2011:17        NA     NA    NA     NA
## 2008:20-2011:17        NA     NA    NA     NA
## 2009:20-2011:17        NA     NA    NA     NA
## 2010:20-2011:17        NA     NA    NA     NA
## 2011:20-2011:17        NA     NA    NA     NA
## 2012:20-2011:17        NA     NA    NA     NA
## 2013:20-2011:17        NA     NA    NA     NA
## 2013:17-2012:17        NA     NA    NA     NA
## 2008:18-2012:17        NA     NA    NA     NA
## 2009:18-2012:17        NA     NA    NA     NA
## 2010:18-2012:17        NA     NA    NA     NA
## 2011:18-2012:17        NA     NA    NA     NA
## 2012:18-2012:17        NA     NA    NA     NA
## 2013:18-2012:17        NA     NA    NA     NA
## 2008:20-2012:17        NA     NA    NA     NA
## 2009:20-2012:17        NA     NA    NA     NA
## 2010:20-2012:17        NA     NA    NA     NA
## 2011:20-2012:17        NA     NA    NA     NA
## 2012:20-2012:17        NA     NA    NA     NA
## 2013:20-2012:17        NA     NA    NA     NA
## 2008:18-2013:17        NA     NA    NA     NA
## 2009:18-2013:17        NA     NA    NA     NA
## 2010:18-2013:17        NA     NA    NA     NA
## 2011:18-2013:17   8.80971 -48.01 65.63 1.0000
## 2012:18-2013:17        NA     NA    NA     NA
## 2013:18-2013:17        NA     NA    NA     NA
## 2008:20-2013:17        NA     NA    NA     NA
## 2009:20-2013:17        NA     NA    NA     NA
## 2010:20-2013:17        NA     NA    NA     NA
## 2011:20-2013:17        NA     NA    NA     NA
## 2012:20-2013:17  10.10111 -46.72 66.92 1.0000
## 2013:20-2013:17        NA     NA    NA     NA
## 2009:18-2008:18        NA     NA    NA     NA
## 2010:18-2008:18        NA     NA    NA     NA
## 2011:18-2008:18        NA     NA    NA     NA
## 2012:18-2008:18        NA     NA    NA     NA
## 2013:18-2008:18        NA     NA    NA     NA
## 2008:20-2008:18        NA     NA    NA     NA
## 2009:20-2008:18        NA     NA    NA     NA
## 2010:20-2008:18        NA     NA    NA     NA
## 2011:20-2008:18        NA     NA    NA     NA
## 2012:20-2008:18        NA     NA    NA     NA
## 2013:20-2008:18        NA     NA    NA     NA
## 2010:18-2009:18        NA     NA    NA     NA
## 2011:18-2009:18        NA     NA    NA     NA
## 2012:18-2009:18        NA     NA    NA     NA
## 2013:18-2009:18        NA     NA    NA     NA
## 2008:20-2009:18        NA     NA    NA     NA
## 2009:20-2009:18        NA     NA    NA     NA
## 2010:20-2009:18        NA     NA    NA     NA
## 2011:20-2009:18        NA     NA    NA     NA
## 2012:20-2009:18        NA     NA    NA     NA
## 2013:20-2009:18        NA     NA    NA     NA
## 2011:18-2010:18        NA     NA    NA     NA
## 2012:18-2010:18        NA     NA    NA     NA
## 2013:18-2010:18        NA     NA    NA     NA
## 2008:20-2010:18        NA     NA    NA     NA
## 2009:20-2010:18        NA     NA    NA     NA
## 2010:20-2010:18        NA     NA    NA     NA
## 2011:20-2010:18        NA     NA    NA     NA
## 2012:20-2010:18        NA     NA    NA     NA
## 2013:20-2010:18        NA     NA    NA     NA
## 2012:18-2011:18        NA     NA    NA     NA
## 2013:18-2011:18        NA     NA    NA     NA
## 2008:20-2011:18        NA     NA    NA     NA
## 2009:20-2011:18        NA     NA    NA     NA
## 2010:20-2011:18        NA     NA    NA     NA
## 2011:20-2011:18        NA     NA    NA     NA
## 2012:20-2011:18   1.29140 -55.53 58.11 1.0000
## 2013:20-2011:18        NA     NA    NA     NA
## 2013:18-2012:18        NA     NA    NA     NA
## 2008:20-2012:18        NA     NA    NA     NA
## 2009:20-2012:18        NA     NA    NA     NA
## 2010:20-2012:18        NA     NA    NA     NA
## 2011:20-2012:18        NA     NA    NA     NA
## 2012:20-2012:18        NA     NA    NA     NA
## 2013:20-2012:18        NA     NA    NA     NA
## 2008:20-2013:18        NA     NA    NA     NA
## 2009:20-2013:18        NA     NA    NA     NA
## 2010:20-2013:18        NA     NA    NA     NA
## 2011:20-2013:18        NA     NA    NA     NA
## 2012:20-2013:18        NA     NA    NA     NA
## 2013:20-2013:18        NA     NA    NA     NA
## 2009:20-2008:20        NA     NA    NA     NA
## 2010:20-2008:20        NA     NA    NA     NA
## 2011:20-2008:20        NA     NA    NA     NA
## 2012:20-2008:20        NA     NA    NA     NA
## 2013:20-2008:20        NA     NA    NA     NA
## 2010:20-2009:20        NA     NA    NA     NA
## 2011:20-2009:20        NA     NA    NA     NA
## 2012:20-2009:20        NA     NA    NA     NA
## 2013:20-2009:20        NA     NA    NA     NA
## 2011:20-2010:20        NA     NA    NA     NA
## 2012:20-2010:20        NA     NA    NA     NA
## 2013:20-2010:20        NA     NA    NA     NA
## 2012:20-2011:20        NA     NA    NA     NA
## 2013:20-2011:20        NA     NA    NA     NA
## 2013:20-2012:20        NA     NA    NA     NA

References

Data was compiled by Barbara Ericson (ericson@cc.gatech.edu) from data from the College Board for each year- http://research.collegeboard.org/programs/ap/data/participation/2013
State population taken from 2011 data at http://www.infoplease.com/ipa/A0004986.html
% black population see http://en.wikipedia.org/wiki/List_of_U.S._states_by_African-American_population (Georgia is 30% and Maryland is 29.44%) - based on 2010 census data
% hispanic/latino from http://www.hacu.net/images/hacu/OPAI/2012_Virtual_Binder/2010%20census%20brief%20-%20hispanic%20population.pdf