KNN Lab Week 9
Connor Nickol
4/7/2020
Loading libraries and installing packages
## ── Attaching packages ────────────────────────────────────────────────────── tidyverse 1.3.0 ──## ✓ ggplot2 3.3.2 ✓ purrr 0.3.4
## ✓ tibble 3.0.3 ✓ dplyr 1.0.2
## ✓ tidyr 1.1.2 ✓ stringr 1.4.0
## ✓ readr 1.3.1 ✓ forcats 0.5.0## ── Conflicts ───────────────────────────────────────────────────────── tidyverse_conflicts() ──
## x dplyr::filter() masks stats::filter()
## x dplyr::lag() masks stats::lag()## Loading required package: lattice##
## Attaching package: 'caret'## The following object is masked from 'package:purrr':
##
## liftYou left your job as a tracking unstructured text as you wanting to expand your skills into predictive models. Luckily you landed a job in advertising! Unfortunately have a demanding and totally clueless boss. Clueless meaning that he doesn’t understand data science, but he knows he wants it to be used to fix all the company’s problems and you are just the data scientist to do it!
Your company, Marketing Enterprises of Halifax or “MEH” is being beat out by the competition and wants a new way to determine the quality of its commercials. Your boss, Mr. Ed Rooney, would like the company’s commercials to seem more like actual TV shows. So he wants you to develop a “machine learning thing” using the company’s internal data to classify when something is a commercial and when it is not. Mr. Rooney believes the company will be able to make more convincing commercials that hold audiences attention if they are more like tv shows and as a result customers will pay more attention, thus buy more of the terrible products “MEH” is supporting (it’s a terrible plan, but you have to make a living).
Given that MEH is producing commercials more or less continuously you know there will be a need to update the model quite frequently, also being a newish data scientist and having a clueless boss you decide to use a accessible approach that you might be able to explain to Mr. Rooney, (given several months of dedicated one on one time), that approach is k-nearest neighbor.
You’ll also need to document your work extensively, because Mr. Rooney doesn’t know he’s clueless so he will ask lots of “insightful” questions and require lots of detail that he won’t understand, so you’ll need to have an easy to use reference document. Before you get started you hearken back to the excellent education you received at UVA and using this knowledge outline roughly 15 steps that need to be completed to build this algo for MEH and Ed, they are documented below…good luck. As always, the most important part is translating your work to actionable insights, so please make sure to be verbose in the explanation required for step 15. Think about this questions carefully, what are you really delivering to Mr. Rooney?
As with the clustering lab, please be prepared to present a five minute overview of your findings.
Load in the data and perform some cleaning
Finding the split between commercial and non-commercial then calculating the base rate
## c.Commercial...comm...Non.Commercial....not_comm.
## Commercial.1 0.6392105
## Non-Commercial.-1 0.3607895Removing redundant columns
Checking the correlation between variables
Generating train and test sets
## [1] 16605 6927 9657 14313 21870 21278## [1] 0.8## [1] 18036## [1] 4509## 'data.frame': 18036 obs. of 10 variables:
## $ shot_length : int 28 94 82 32 84 25 32 99 146 46 ...
## $ frame_diff_dist_mn : num 10.92 17.29 35.01 42.72 3.74 ...
## $ short_time_energy_mn: num 0.01558 0.00886 0.02437 0.00638 0.02455 ...
## $ zcr_mn : num 0.1137 0.1228 0.0736 0.0817 0.098 ...
## $ spectral_centroid_mn: num 3426 3746 3764 3424 3807 ...
## $ spectral_roll_off_mn: num 6638 7404 7450 6830 7409 ...
## $ spectral_flux_mn : num 966 426 1908 184 1898 ...
## $ fundamental_freq_mn : num 110.7 133.6 125.5 96.3 117.8 ...
## $ motion_dist_mn : num 0.519 0.32 0.153 0.301 0.852 ...
## $ label : int 1 1 1 1 1 -1 1 -1 -1 1 ...Training the classifier with k = 3
## Factor w/ 2 levels "-1","1": 2 2 2 2 2 2 2 2 2 2 ...
## - attr(*, "prob")= num [1:4509] 1 1 1 1 0.667 ...## [1] 4509## cnn_comm_3NN
## -1 1
## 1318 3191## $levels
## [1] "-1" "1"
##
## $class
## [1] "factor"
##
## $prob
## [1] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.5000000 0.6666667
## [8] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [15] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [22] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [29] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [36] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [43] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [50] 0.7500000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [57] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [64] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [71] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [78] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [85] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [92] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [99] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [106] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [113] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [120] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [127] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [134] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [141] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [148] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [155] 0.6666667 0.7500000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [162] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [169] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [176] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [183] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [190] 0.5000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [197] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [204] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [211] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [218] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [225] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [232] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [239] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [246] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [253] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [260] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [267] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [274] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [281] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [288] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [295] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [302] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [309] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [316] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [323] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [330] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [337] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [344] 1.0000000 0.7500000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [351] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [358] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [365] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [372] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [379] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [386] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [393] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [400] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [407] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [414] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [421] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [428] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [435] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [442] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [449] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [456] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [463] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [470] 1.0000000 0.7500000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [477] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [484] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [491] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [498] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [505] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [512] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [519] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [526] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [533] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [540] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [547] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [554] 1.0000000 0.5000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [561] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [568] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [575] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [582] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [589] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [596] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [603] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [610] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [617] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [624] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [631] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [638] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [645] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [652] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [659] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [666] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [673] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [680] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [687] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [694] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [701] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [708] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [715] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [722] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [729] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [736] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [743] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [750] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [757] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [764] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [771] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [778] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [785] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [792] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [799] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [806] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [813] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [820] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [827] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [834] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [841] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [848] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [855] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [862] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [869] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [876] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [883] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [890] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [897] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [904] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [911] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [918] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [925] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [932] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [939] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [946] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [953] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [960] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [967] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [974] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [981] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [988] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [995] 0.5000000 1.0000000 0.6666667 1.0000000 1.0000000 0.7500000 1.0000000
## [1002] 1.0000000 0.6666667 0.6666667 0.5000000 1.0000000 0.6666667 1.0000000
## [1009] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [1016] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [1023] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [1030] 1.0000000 0.6666667 0.6666667 0.5000000 1.0000000 0.6666667 1.0000000
## [1037] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [1044] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [1051] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [1058] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [1065] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [1072] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [1079] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [1086] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [1093] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [1100] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [1107] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [1114] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [1121] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [1128] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [1135] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [1142] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [1149] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [1156] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [1163] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [1170] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [1177] 1.0000000 0.6666667 0.7500000 1.0000000 1.0000000 0.6666667 0.6666667
## [1184] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [1191] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [1198] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [1205] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [1212] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1219] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [1226] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [1233] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [1240] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [1247] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1254] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [1261] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1268] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [1275] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [1282] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [1289] 1.0000000 1.0000000 0.5000000 0.6666667 1.0000000 0.6666667 1.0000000
## [1296] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [1303] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1310] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [1317] 1.0000000 1.0000000 0.6666667 0.6666667 0.7500000 1.0000000 1.0000000
## [1324] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [1331] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [1338] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [1345] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [1352] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [1359] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [1366] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [1373] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [1380] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.5000000
## [1387] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [1394] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [1401] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [1408] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [1415] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [1422] 0.6666667 1.0000000 0.7500000 0.6666667 1.0000000 0.6666667 0.6666667
## [1429] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [1436] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [1443] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [1450] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [1457] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [1464] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [1471] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1478] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.5000000
## [1485] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [1492] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [1499] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [1506] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [1513] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [1520] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [1527] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [1534] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [1541] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [1548] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [1555] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [1562] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [1569] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [1576] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [1583] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [1590] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [1597] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [1604] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [1611] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1618] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [1625] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [1632] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [1639] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1646] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [1653] 0.6666667 1.0000000 0.7500000 0.6666667 1.0000000 0.6666667 0.6666667
## [1660] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [1667] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.7500000
## [1674] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [1681] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [1688] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [1695] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [1702] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [1709] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [1716] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [1723] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [1730] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [1737] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [1744] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [1751] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [1758] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [1765] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [1772] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [1779] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [1786] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [1793] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [1800] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [1807] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [1814] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [1821] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [1828] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [1835] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [1842] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [1849] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [1856] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [1863] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [1870] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [1877] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [1884] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [1891] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [1898] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [1905] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [1912] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [1919] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [1926] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [1933] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [1940] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [1947] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [1954] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [1961] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [1968] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [1975] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [1982] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [1989] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [1996] 0.6666667 1.0000000 0.6666667 0.6666667 0.7500000 1.0000000 0.6666667
## [2003] 0.6666667 0.7500000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [2010] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [2017] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2024] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [2031] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [2038] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [2045] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [2052] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [2059] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [2066] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [2073] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [2080] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [2087] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.7500000 1.0000000
## [2094] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [2101] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [2108] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [2115] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [2122] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [2129] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [2136] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [2143] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [2150] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2157] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [2164] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [2171] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [2178] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [2185] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [2192] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [2199] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [2206] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [2213] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [2220] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [2227] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [2234] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [2241] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [2248] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [2255] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [2262] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [2269] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [2276] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [2283] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [2290] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [2297] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [2304] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [2311] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2318] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [2325] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [2332] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [2339] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [2346] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [2353] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [2360] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [2367] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [2374] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2381] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [2388] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [2395] 0.5000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [2402] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [2409] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [2416] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [2423] 0.7500000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [2430] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [2437] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [2444] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [2451] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [2458] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [2465] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2472] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [2479] 0.6666667 1.0000000 0.7500000 0.6666667 1.0000000 0.6666667 0.6666667
## [2486] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [2493] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [2500] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [2507] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [2514] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [2521] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [2528] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [2535] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [2542] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [2549] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [2556] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [2563] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [2570] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [2577] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [2584] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [2591] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [2598] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [2605] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [2612] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [2619] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2626] 1.0000000 1.0000000 0.6666667 1.0000000 0.7500000 0.6666667 1.0000000
## [2633] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [2640] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [2647] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [2654] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [2661] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2668] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [2675] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [2682] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [2689] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [2696] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [2703] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [2710] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [2717] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [2724] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [2731] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [2738] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [2745] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [2752] 1.0000000 0.5000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [2759] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [2766] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [2773] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [2780] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [2787] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [2794] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [2801] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [2808] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [2815] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [2822] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [2829] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [2836] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [2843] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [2850] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [2857] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [2864] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [2871] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [2878] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [2885] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [2892] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [2899] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [2906] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [2913] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [2920] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.7500000 0.6666667
## [2927] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [2934] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [2941] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [2948] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [2955] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [2962] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [2969] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [2976] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [2983] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [2990] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [2997] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [3004] 0.7500000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [3011] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [3018] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [3025] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [3032] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [3039] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [3046] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [3053] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [3060] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [3067] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [3074] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [3081] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [3088] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3095] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [3102] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [3109] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [3116] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [3123] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [3130] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [3137] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [3144] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3151] 0.6666667 0.6666667 0.7500000 0.7500000 1.0000000 1.0000000 0.6666667
## [3158] 0.6666667 1.0000000 0.6666667 1.0000000 0.7500000 0.6666667 0.6666667
## [3165] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [3172] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [3179] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3186] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [3193] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [3200] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [3207] 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [3214] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [3221] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [3228] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [3235] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [3242] 1.0000000 0.6666667 1.0000000 0.7500000 1.0000000 1.0000000 0.6666667
## [3249] 1.0000000 0.6666667 0.6666667 0.6666667 0.5000000 0.6666667 1.0000000
## [3256] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [3263] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [3270] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [3277] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [3284] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [3291] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [3298] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3305] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [3312] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000
## [3319] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [3326] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [3333] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [3340] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3347] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [3354] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [3361] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [3368] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [3375] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [3382] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [3389] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [3396] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [3403] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [3410] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [3417] 0.6666667 1.0000000 0.6666667 1.0000000 0.7500000 0.6666667 0.6666667
## [3424] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [3431] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [3438] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [3445] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [3452] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [3459] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [3466] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [3473] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [3480] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [3487] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [3494] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [3501] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [3508] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [3515] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [3522] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [3529] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [3536] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [3543] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [3550] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [3557] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [3564] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [3571] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3578] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [3585] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [3592] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [3599] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [3606] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [3613] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [3620] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [3627] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [3634] 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [3641] 0.6666667 1.0000000 0.6666667 0.7500000 0.6666667 1.0000000 1.0000000
## [3648] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [3655] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [3662] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [3669] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [3676] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [3683] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [3690] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [3697] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [3704] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [3711] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [3718] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [3725] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [3732] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [3739] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [3746] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [3753] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [3760] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [3767] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [3774] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [3781] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [3788] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [3795] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [3802] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [3809] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [3816] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [3823] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [3830] 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [3837] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [3844] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [3851] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [3858] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [3865] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [3872] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [3879] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [3886] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [3893] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [3900] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3907] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [3914] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [3921] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [3928] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000
## [3935] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [3942] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [3949] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [3956] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [3963] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [3970] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [3977] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [3984] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [3991] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [3998] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [4005] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [4012] 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [4019] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [4026] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [4033] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [4040] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000
## [4047] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [4054] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [4061] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667
## [4068] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [4075] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [4082] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [4089] 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [4096] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.5000000
## [4103] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667
## [4110] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [4117] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [4124] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [4131] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [4138] 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [4145] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [4152] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [4159] 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000
## [4166] 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [4173] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [4180] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [4187] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [4194] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [4201] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667
## [4208] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [4215] 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667
## [4222] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [4229] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [4236] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667
## [4243] 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [4250] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000
## [4257] 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000
## [4264] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [4271] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000
## [4278] 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [4285] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000
## [4292] 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [4299] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [4306] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [4313] 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [4320] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667
## [4327] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667
## [4334] 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [4341] 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [4348] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 0.6666667
## [4355] 1.0000000 0.6666667 0.6666667 0.6666667 1.0000000 0.7500000 1.0000000
## [4362] 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [4369] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000
## [4376] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 0.6666667
## [4383] 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [4390] 0.6666667 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000
## [4397] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000
## [4404] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [4411] 1.0000000 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [4418] 0.6666667 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667
## [4425] 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000 1.0000000 0.7500000
## [4432] 0.6666667 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667
## [4439] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6666667
## [4446] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 1.0000000
## [4453] 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000
## [4460] 0.6666667 0.7500000 0.6666667 0.6666667 0.6666667 0.6666667 1.0000000
## [4467] 1.0000000 1.0000000 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667
## [4474] 0.6666667 0.6666667 0.6666667 1.0000000 0.6666667 1.0000000 1.0000000
## [4481] 0.6666667 1.0000000 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667
## [4488] 0.6666667 1.0000000 1.0000000 0.6666667 1.0000000 0.6666667 0.6666667
## [4495] 0.6666667 0.6666667 0.6666667 1.0000000 1.0000000 1.0000000 1.0000000
## [4502] 1.0000000 1.0000000 1.0000000 0.6666667 0.6666667 0.6666667 0.6666667
## [4509] 1.0000000Create the initial confusion matrix
##
## cnn_comm_3NN -1 1
## -1 846 472
## 1 776 2415## [1] 846 2415Running the confusion matrix function
## [1] 0.8365085## [1] 0.7232202## Confusion Matrix and Statistics
##
## Actual
## Prediction -1 1
## -1 846 472
## 1 776 2415
##
## Accuracy : 0.7232
## 95% CI : (0.7099, 0.7362)
## No Information Rate : 0.6403
## P-Value [Acc > NIR] : < 2.2e-16
##
## Kappa : 0.3734
##
## Mcnemar's Test P-Value : < 2.2e-16
##
## Sensitivity : 0.8365
## Specificity : 0.5216
## Pos Pred Value : 0.7568
## Neg Pred Value : 0.6419
## Prevalence : 0.6403
## Detection Rate : 0.5356
## Detection Prevalence : 0.7077
## Balanced Accuracy : 0.6790
##
## 'Positive' Class : 1
## We have a 72% accuracy rate with a 83% sensitivity which I think is decent because it is a better rate than just trying to guess since the split is 64 vs 36 percent.
Running the choose K function to find the optimal K
Visualizing the difference in accuracy based on K
## num [1:2, 1:11] 1 0.698 3 0.724 5 ...## [1] "matrix" "array"## [,1] [,2] [,3] [,4] [,5] [,6] [,7]
## [1,] 1.0000000 3.0000000 5.0000000 7.0000000 9.000000 11.0000000 13.0000000
## [2,] 0.6977157 0.7236638 0.7391883 0.7418496 0.746507 0.7502772 0.7491683
## [,8] [,9] [,10] [,11]
## [1,] 15.000000 17.0000000 19.0000000 21.0000000
## [2,] 0.750499 0.7516079 0.7553781 0.7569306Using ggplot to look the graph to select the optimal K
About 10 seems to be ideal because it tails off really quickly after 10
Rerunning the model with K = 10 instead
## Factor w/ 2 levels "-1","1": 2 2 2 2 2 2 2 2 2 2 ...
## - attr(*, "prob")= num [1:4509] 0.6 0.9 0.6 1 0.7 0.6 0.9 0.6 0.8 0.7 ...## [1] 4509## cnn_comm_10NN
## -1 1
## 1084 3425## $levels
## [1] "-1" "1"
##
## $class
## [1] "factor"
##
## $prob
## [1] 0.6000000 0.9000000 0.6000000 1.0000000 0.7000000 0.6000000 0.9000000
## [8] 0.6000000 0.8000000 0.7000000 0.8000000 0.6000000 0.9000000 0.6000000
## [15] 0.5000000 0.7000000 0.9000000 0.7000000 0.6000000 0.9000000 0.7000000
## [22] 0.5000000 0.8000000 1.0000000 0.8000000 0.8000000 1.0000000 0.9000000
## [29] 0.9000000 0.7000000 0.7000000 0.8000000 0.7000000 0.7000000 0.6000000
## [36] 1.0000000 0.9000000 0.9000000 0.8000000 1.0000000 0.9000000 0.9000000
## [43] 0.9000000 0.8000000 0.6000000 0.7000000 0.6000000 0.6000000 0.6000000
## [50] 0.7000000 0.8000000 0.9000000 0.9000000 0.9000000 1.0000000 0.8000000
## [57] 0.8000000 0.8000000 0.8000000 0.8000000 1.0000000 1.0000000 0.9000000
## [64] 0.7000000 0.8000000 0.7000000 0.6000000 0.9000000 0.9000000 0.7000000
## [71] 0.8000000 0.9000000 0.8000000 0.7000000 0.7000000 0.9090909 0.6000000
## [78] 0.7000000 0.7000000 0.7000000 0.8000000 1.0000000 0.9000000 0.9090909
## [85] 0.8000000 0.7000000 1.0000000 0.9000000 0.7000000 0.7272727 1.0000000
## [92] 0.7000000 0.6000000 0.7000000 0.6000000 0.9000000 0.8000000 0.9000000
## [99] 0.8000000 0.6000000 0.8000000 0.9000000 0.9000000 0.6000000 0.8000000
## [106] 0.9000000 0.9000000 0.7000000 0.9000000 1.0000000 0.6000000 1.0000000
## [113] 0.9000000 0.8000000 0.6000000 0.8000000 0.7000000 1.0000000 0.9000000
## [120] 0.9000000 1.0000000 0.9000000 0.9000000 0.8000000 0.8000000 1.0000000
## [127] 0.7000000 0.7000000 0.7000000 0.8000000 0.5000000 0.7000000 0.8000000
## [134] 0.7000000 0.6000000 0.9000000 0.7000000 0.8000000 1.0000000 0.9000000
## [141] 0.8000000 0.9000000 0.9000000 0.9000000 0.9000000 0.7000000 0.9000000
## [148] 0.9000000 0.9000000 1.0000000 0.7000000 0.6000000 0.8000000 0.6000000
## [155] 0.8000000 0.7000000 0.8000000 0.5000000 0.8000000 1.0000000 0.5000000
## [162] 0.7000000 0.6000000 1.0000000 0.6000000 1.0000000 0.9000000 0.9000000
## [169] 1.0000000 1.0000000 0.5000000 0.7000000 0.9000000 0.9000000 0.6000000
## [176] 0.7000000 0.6000000 0.7000000 1.0000000 0.5000000 0.7000000 0.9000000
## [183] 0.5000000 0.9000000 1.0000000 0.7000000 0.8000000 0.8000000 0.7000000
## [190] 0.6000000 0.6000000 0.7000000 0.9000000 0.8000000 0.6000000 0.6000000
## [197] 0.5000000 0.5000000 0.9000000 1.0000000 0.9000000 1.0000000 0.8000000
## [204] 0.6000000 0.7000000 0.8000000 0.7000000 0.6000000 0.8000000 0.7000000
## [211] 0.8000000 0.9000000 0.6000000 0.8000000 0.5000000 1.0000000 0.6000000
## [218] 0.8000000 0.5000000 0.8000000 0.6000000 0.8000000 0.6000000 0.5000000
## [225] 0.7000000 0.9000000 0.6000000 1.0000000 1.0000000 0.8000000 0.9000000
## [232] 0.8000000 0.6000000 0.7000000 0.8000000 0.6000000 0.7000000 1.0000000
## [239] 0.6000000 1.0000000 1.0000000 1.0000000 0.9000000 1.0000000 1.0000000
## [246] 0.8000000 0.7000000 0.9000000 0.8000000 1.0000000 0.8000000 0.9000000
## [253] 0.8000000 0.7000000 0.9000000 0.9000000 0.8000000 0.8000000 1.0000000
## [260] 0.9000000 0.9000000 0.7000000 0.8000000 0.5000000 0.7000000 0.9000000
## [267] 0.7000000 0.9000000 0.8000000 0.9000000 0.8000000 0.9000000 1.0000000
## [274] 0.7000000 0.8000000 1.0000000 0.8000000 0.7000000 0.6000000 1.0000000
## [281] 0.7000000 0.6000000 1.0000000 0.7000000 0.8000000 0.9000000 0.6000000
## [288] 0.8000000 0.5000000 0.8000000 0.5000000 0.8000000 0.8000000 1.0000000
## [295] 1.0000000 0.6000000 0.9000000 0.8000000 0.9000000 0.5000000 0.7000000
## [302] 1.0000000 0.6000000 1.0000000 1.0000000 0.7272727 0.8000000 0.6000000
## [309] 1.0000000 0.7000000 0.7000000 1.0000000 0.7000000 0.5000000 1.0000000
## [316] 1.0000000 0.5000000 0.9000000 0.7000000 0.8000000 0.7000000 0.8000000
## [323] 0.9000000 0.9000000 0.6000000 0.7000000 0.8000000 0.8000000 0.9000000
## [330] 0.9000000 0.9000000 0.6000000 0.6000000 0.7000000 1.0000000 0.8000000
## [337] 0.8000000 0.9000000 0.7000000 0.8000000 0.6000000 1.0000000 0.9000000
## [344] 0.6363636 0.7000000 0.6363636 0.5000000 0.8000000 0.8000000 0.9000000
## [351] 0.7000000 0.9000000 0.8000000 0.6000000 0.5000000 0.8000000 0.9000000
## [358] 1.0000000 0.9000000 0.8000000 0.6000000 0.9000000 0.8000000 0.7000000
## [365] 0.6000000 0.9000000 0.8000000 0.5000000 1.0000000 0.8000000 1.0000000
## [372] 0.8000000 0.6000000 0.9000000 0.6000000 0.7000000 1.0000000 0.9000000
## [379] 0.6000000 0.9000000 0.8000000 1.0000000 0.7000000 0.8000000 0.5000000
## [386] 0.8000000 0.6000000 0.9000000 0.8000000 1.0000000 0.9000000 0.8000000
## [393] 0.6000000 0.7000000 0.9000000 0.9000000 0.6000000 1.0000000 1.0000000
## [400] 1.0000000 1.0000000 0.9000000 0.9000000 0.7000000 0.7000000 0.7000000
## [407] 0.8000000 1.0000000 0.7000000 0.7000000 0.9000000 0.8000000 0.6000000
## [414] 0.5000000 0.6000000 0.8000000 0.7272727 0.9000000 0.9000000 0.8000000
## [421] 0.9000000 0.6000000 0.9000000 0.5000000 0.9000000 1.0000000 0.7000000
## [428] 0.8000000 0.9000000 1.0000000 0.6000000 0.9000000 0.6000000 0.7000000
## [435] 0.8000000 0.5000000 0.9000000 0.8000000 0.5000000 0.8000000 1.0000000
## [442] 0.9000000 1.0000000 0.7000000 0.8000000 0.8000000 0.7000000 0.6000000
## [449] 0.7000000 0.7000000 0.9000000 0.8181818 0.7000000 0.8000000 0.9000000
## [456] 0.7000000 0.5000000 1.0000000 0.7000000 0.5000000 1.0000000 0.7000000
## [463] 0.8000000 0.9000000 0.6000000 0.6000000 0.7000000 0.9000000 0.7272727
## [470] 0.9000000 0.8000000 1.0000000 0.9000000 0.8000000 0.7000000 1.0000000
## [477] 0.9000000 0.6000000 0.5000000 0.8000000 0.5000000 0.8000000 0.5000000
## [484] 0.9000000 1.0000000 0.9000000 0.7000000 0.8000000 0.6000000 0.9000000
## [491] 0.8000000 0.6000000 0.7000000 0.7000000 0.7000000 0.7000000 0.7000000
## [498] 1.0000000 0.9090909 1.0000000 0.8000000 0.9000000 0.9000000 0.5000000
## [505] 0.5000000 0.9000000 0.9000000 0.7000000 1.0000000 0.6000000 0.7000000
## [512] 0.8000000 0.8000000 0.6000000 0.8000000 0.7000000 0.6000000 0.8000000
## [519] 0.7000000 0.9000000 0.5000000 0.9000000 0.6000000 1.0000000 1.0000000
## [526] 0.9000000 0.8000000 0.8000000 0.6000000 0.9000000 0.7000000 0.6000000
## [533] 0.6000000 0.7000000 0.5000000 1.0000000 0.7000000 0.9090909 0.7000000
## [540] 0.6000000 0.8000000 0.6363636 0.8000000 0.6000000 0.8000000 0.7000000
## [547] 0.6000000 0.7000000 0.7000000 0.6000000 0.7000000 0.9000000 0.7000000
## [554] 1.0000000 0.5000000 0.9000000 0.7000000 0.8000000 0.8000000 0.7000000
## [561] 1.0000000 0.9000000 0.8000000 1.0000000 1.0000000 1.0000000 0.8000000
## [568] 1.0000000 0.8000000 0.7000000 1.0000000 0.9000000 0.7000000 1.0000000
## [575] 1.0000000 0.9000000 0.5000000 0.9000000 0.8000000 0.7000000 0.5000000
## [582] 0.9000000 1.0000000 0.9000000 0.9000000 0.6000000 0.8000000 0.8000000
## [589] 0.9000000 0.7000000 0.8000000 0.8000000 0.8000000 0.9000000 0.7000000
## [596] 0.7000000 1.0000000 0.8000000 0.6000000 0.6000000 0.7000000 0.8000000
## [603] 0.9000000 0.7000000 0.6000000 0.6000000 1.0000000 0.7000000 0.8000000
## [610] 0.7000000 0.8000000 0.5000000 0.9000000 1.0000000 0.7000000 0.9000000
## [617] 0.8000000 0.6000000 0.8000000 0.7000000 0.6000000 0.8000000 0.9000000
## [624] 0.8000000 0.8000000 0.6000000 0.7000000 0.9000000 0.6000000 0.9000000
## [631] 0.9000000 0.5000000 0.6000000 0.9000000 0.7000000 0.7000000 0.9000000
## [638] 0.7000000 0.9000000 0.9000000 0.7000000 0.5000000 0.9000000 0.6000000
## [645] 0.8000000 0.9000000 0.7000000 0.8000000 0.9000000 0.7000000 0.7000000
## [652] 0.7000000 0.7000000 0.8000000 1.0000000 0.6000000 0.7000000 0.9000000
## [659] 0.6000000 0.8000000 1.0000000 0.6000000 0.9000000 0.6000000 0.9000000
## [666] 0.9000000 1.0000000 0.9000000 0.7000000 0.7000000 0.9000000 0.8000000
## [673] 0.8000000 0.7000000 0.9000000 0.7000000 0.9000000 0.6000000 1.0000000
## [680] 0.8000000 0.7000000 0.8000000 0.9000000 0.7000000 0.5000000 0.6000000
## [687] 0.7000000 0.9000000 0.5000000 0.5000000 0.9000000 0.9000000 0.9000000
## [694] 1.0000000 0.7000000 0.5000000 0.5000000 0.9000000 0.8000000 0.8000000
## [701] 0.6000000 0.6000000 0.9000000 0.8000000 0.8000000 0.7000000 0.8000000
## [708] 0.6000000 0.8000000 0.6000000 0.6000000 0.6000000 0.9000000 1.0000000
## [715] 0.7000000 0.7000000 0.7000000 0.9000000 0.7000000 0.9000000 0.9000000
## [722] 0.6000000 0.8000000 0.8000000 0.9000000 1.0000000 0.5000000 0.8000000
## [729] 1.0000000 0.6000000 0.7000000 0.7000000 0.8000000 0.5000000 0.5000000
## [736] 0.5000000 0.8000000 0.6000000 0.7000000 1.0000000 0.7000000 1.0000000
## [743] 0.8000000 0.9000000 0.8000000 0.6000000 0.7000000 0.9000000 0.6000000
## [750] 0.8000000 0.7000000 0.5000000 1.0000000 1.0000000 0.7000000 0.8000000
## [757] 1.0000000 0.6000000 1.0000000 0.8000000 0.8000000 0.8000000 0.9000000
## [764] 1.0000000 0.7000000 0.8000000 1.0000000 0.9000000 0.7000000 0.9000000
## [771] 0.9000000 0.8000000 0.8000000 0.9000000 0.7000000 1.0000000 0.9000000
## [778] 0.5000000 0.9000000 0.6000000 0.6000000 0.6000000 0.7000000 0.8000000
## [785] 0.8000000 0.7000000 0.9000000 0.9000000 0.5000000 1.0000000 0.7000000
## [792] 0.7000000 1.0000000 0.9000000 0.9000000 0.9000000 0.9000000 1.0000000
## [799] 0.6000000 0.7000000 0.7000000 0.6000000 0.9000000 0.6000000 0.8000000
## [806] 0.8000000 0.8000000 0.6000000 0.8000000 0.6000000 1.0000000 0.7000000
## [813] 0.9000000 1.0000000 0.9000000 0.7000000 0.8000000 0.8000000 0.8000000
## [820] 0.8000000 1.0000000 0.5000000 0.6000000 0.5000000 0.7000000 0.7000000
## [827] 0.8000000 0.6000000 0.5000000 0.7000000 0.8000000 0.8000000 0.7000000
## [834] 0.7000000 0.8000000 0.7000000 0.9000000 1.0000000 0.7000000 1.0000000
## [841] 0.7000000 0.7000000 0.9000000 0.5000000 1.0000000 0.8000000 0.9000000
## [848] 0.9000000 0.7000000 0.8000000 1.0000000 1.0000000 0.5000000 0.7000000
## [855] 0.9000000 1.0000000 0.5000000 0.8000000 0.7000000 0.7000000 0.7000000
## [862] 0.7000000 0.9000000 1.0000000 0.6000000 0.7000000 0.7000000 1.0000000
## [869] 1.0000000 0.5000000 0.8000000 0.9000000 0.6000000 0.9000000 0.7000000
## [876] 0.9000000 0.6000000 0.9000000 0.6000000 0.5000000 0.9000000 0.7000000
## [883] 0.8000000 0.5000000 0.7000000 0.9000000 0.9000000 0.8000000 0.7000000
## [890] 0.7000000 1.0000000 1.0000000 0.8000000 0.7000000 0.8000000 0.6000000
## [897] 0.6000000 0.8000000 0.9000000 0.6000000 0.7000000 0.9000000 0.8000000
## [904] 1.0000000 0.5000000 1.0000000 1.0000000 0.6000000 0.9000000 0.8000000
## [911] 0.8000000 0.9000000 0.9000000 1.0000000 1.0000000 1.0000000 1.0000000
## [918] 0.8000000 0.8000000 0.8000000 0.5000000 0.6000000 0.7000000 0.7000000
## [925] 0.6363636 0.6000000 1.0000000 0.9000000 0.7000000 1.0000000 0.9000000
## [932] 0.7000000 0.9000000 0.7000000 0.9000000 0.9000000 0.9000000 0.7000000
## [939] 0.9000000 1.0000000 0.7000000 0.6000000 0.7000000 0.7000000 0.9000000
## [946] 0.7000000 0.7000000 0.7000000 0.6000000 0.6000000 0.8000000 0.7000000
## [953] 0.6000000 0.8000000 0.5000000 0.6000000 0.8000000 0.6000000 0.6000000
## [960] 0.8000000 0.8000000 0.8000000 0.7000000 1.0000000 0.8000000 0.9000000
## [967] 0.9000000 0.5000000 1.0000000 0.9000000 0.7000000 0.5454545 0.6000000
## [974] 0.9000000 0.8000000 1.0000000 1.0000000 0.7000000 1.0000000 0.7000000
## [981] 0.7000000 0.9000000 1.0000000 0.9000000 0.8000000 0.7000000 0.7000000
## [988] 0.6000000 0.8000000 0.7000000 0.7000000 0.8000000 0.8000000 0.6000000
## [995] 0.6000000 0.8000000 0.8000000 0.9000000 1.0000000 0.9000000 0.9000000
## [1002] 0.8000000 0.8000000 0.7272727 0.6000000 0.8000000 0.6000000 0.6000000
## [1009] 0.9000000 0.7000000 0.6000000 0.6000000 0.7000000 0.6000000 0.6000000
## [1016] 0.7000000 0.9000000 0.9000000 0.7000000 1.0000000 0.9000000 1.0000000
## [1023] 0.9000000 0.6000000 0.8000000 0.8000000 0.9000000 0.8000000 0.9000000
## [1030] 1.0000000 0.5000000 0.7000000 0.7000000 0.7000000 0.5000000 0.6000000
## [1037] 0.7000000 0.8000000 0.6000000 0.8000000 0.5000000 0.6000000 0.6000000
## [1044] 0.6000000 0.6000000 1.0000000 0.5000000 0.8000000 0.7000000 0.5000000
## [1051] 0.8000000 0.6000000 0.9000000 0.8000000 0.6000000 0.9000000 0.8000000
## [1058] 0.7000000 0.9000000 0.8000000 0.7000000 0.8000000 0.6000000 0.9000000
## [1065] 0.7272727 0.6000000 0.5000000 0.9000000 0.7000000 0.7000000 0.9000000
## [1072] 0.9000000 0.6000000 1.0000000 0.6000000 0.8000000 0.7000000 0.5000000
## [1079] 0.8000000 0.7000000 0.8000000 0.9000000 0.9000000 0.9000000 0.6000000
## [1086] 0.5000000 0.8000000 0.5000000 0.7000000 0.8000000 1.0000000 1.0000000
## [1093] 1.0000000 0.9000000 1.0000000 0.9000000 0.6000000 0.7000000 0.9000000
## [1100] 0.5000000 0.6000000 0.7000000 0.8000000 0.6000000 0.5000000 0.9000000
## [1107] 0.8000000 0.9000000 0.7000000 0.9000000 1.0000000 0.5000000 0.8000000
## [1114] 0.5000000 0.9000000 0.8000000 0.8000000 0.7000000 0.5000000 0.7000000
## [1121] 0.8000000 1.0000000 0.9000000 1.0000000 0.7000000 0.9000000 0.7000000
## [1128] 0.5000000 0.6000000 0.6000000 0.6000000 0.9000000 0.7000000 0.9000000
## [1135] 1.0000000 0.8000000 0.9000000 1.0000000 0.8000000 0.8000000 0.8000000
## [1142] 0.8000000 1.0000000 0.5000000 0.7000000 1.0000000 0.9000000 0.8000000
## [1149] 0.8000000 1.0000000 0.8000000 0.8000000 0.6000000 0.5000000 1.0000000
## [1156] 0.7000000 1.0000000 0.8000000 0.9000000 1.0000000 1.0000000 0.9000000
## [1163] 0.8000000 1.0000000 0.7000000 0.7000000 0.9000000 1.0000000 0.9000000
## [1170] 1.0000000 0.5000000 0.8000000 0.7000000 0.8000000 0.8000000 0.9000000
## [1177] 1.0000000 0.8000000 0.8000000 0.7000000 1.0000000 0.9000000 0.5000000
## [1184] 0.8000000 0.9000000 0.6000000 1.0000000 1.0000000 0.9000000 1.0000000
## [1191] 1.0000000 0.6000000 0.8000000 0.7000000 0.7000000 0.9000000 0.9000000
## [1198] 0.6000000 1.0000000 0.6000000 0.9000000 0.8000000 0.7000000 0.9000000
## [1205] 0.8000000 1.0000000 0.9000000 0.6000000 0.7000000 0.7000000 0.9000000
## [1212] 0.9000000 0.9000000 0.9000000 0.9000000 0.6000000 0.9090909 1.0000000
## [1219] 1.0000000 0.7000000 0.9000000 1.0000000 0.8181818 0.8000000 0.9000000
## [1226] 0.8000000 1.0000000 0.9000000 0.9000000 0.7000000 0.9000000 0.9000000
## [1233] 0.8000000 0.5000000 0.7000000 0.9000000 0.5000000 1.0000000 0.8000000
## [1240] 1.0000000 0.6000000 1.0000000 0.9000000 1.0000000 0.9000000 1.0000000
## [1247] 0.9000000 0.6000000 1.0000000 0.5000000 0.6000000 0.8181818 0.9000000
## [1254] 0.7000000 0.5000000 1.0000000 0.9000000 0.9000000 0.9000000 0.6000000
## [1261] 0.9000000 0.7000000 0.7000000 0.6000000 0.7000000 0.8000000 0.9090909
## [1268] 1.0000000 0.7000000 0.7000000 0.5000000 0.6000000 0.6000000 0.7000000
## [1275] 1.0000000 1.0000000 0.8000000 1.0000000 0.7000000 0.6000000 0.9000000
## [1282] 0.7000000 0.7000000 0.8000000 0.8000000 0.7000000 0.9000000 0.9000000
## [1289] 1.0000000 1.0000000 0.5000000 0.5000000 0.6000000 0.8000000 0.8000000
## [1296] 0.8000000 0.9000000 0.8181818 0.8181818 0.7000000 0.9000000 0.8181818
## [1303] 0.9000000 0.6000000 0.8000000 0.6000000 0.6000000 0.9000000 0.6000000
## [1310] 0.8000000 0.9000000 0.6000000 1.0000000 0.9000000 0.7000000 0.6000000
## [1317] 0.9000000 0.8000000 0.6000000 0.7000000 0.9090909 0.8000000 0.8000000
## [1324] 0.8000000 0.8000000 0.7000000 0.9000000 0.6000000 0.6000000 0.5000000
## [1331] 0.7000000 0.8000000 0.9000000 0.9000000 0.7000000 0.7000000 0.9000000
## [1338] 0.8000000 1.0000000 0.5000000 0.5000000 1.0000000 0.5000000 0.8000000
## [1345] 0.6000000 0.6000000 0.7000000 0.6000000 0.8000000 0.9000000 0.8000000
## [1352] 0.8000000 0.7000000 0.9000000 0.6000000 0.7000000 0.6000000 0.7000000
## [1359] 0.8000000 0.9000000 1.0000000 0.5454545 0.7000000 0.9000000 0.8000000
## [1366] 0.6000000 1.0000000 0.8000000 0.5000000 0.8000000 1.0000000 0.9000000
## [1373] 0.7000000 0.8000000 0.7000000 0.7000000 0.8000000 0.6000000 0.8000000
## [1380] 0.9000000 0.8000000 0.9000000 0.9000000 0.7000000 1.0000000 0.5000000
## [1387] 0.7000000 0.7000000 0.5000000 0.7000000 0.9000000 0.8000000 1.0000000
## [1394] 0.9000000 1.0000000 0.6000000 1.0000000 1.0000000 0.6000000 0.7000000
## [1401] 1.0000000 0.8000000 0.8000000 0.8000000 0.6000000 0.7000000 0.6000000
## [1408] 0.9000000 1.0000000 0.8000000 1.0000000 0.6000000 0.7000000 0.8000000
## [1415] 0.8000000 0.7000000 0.6000000 0.6000000 0.8000000 0.9000000 0.8000000
## [1422] 0.5000000 0.9000000 0.6000000 0.7000000 0.9000000 0.7000000 0.7000000
## [1429] 0.9000000 0.9000000 0.9000000 0.9000000 0.8000000 0.7000000 0.9000000
## [1436] 0.9000000 0.9000000 0.5000000 0.8000000 0.6000000 0.5000000 0.9000000
## [1443] 0.5000000 0.7000000 0.7000000 1.0000000 0.7000000 0.8000000 0.7000000
## [1450] 0.6000000 0.9000000 1.0000000 0.9000000 0.8000000 0.5000000 0.6000000
## [1457] 0.7000000 0.6000000 0.9000000 0.9000000 1.0000000 1.0000000 0.6000000
## [1464] 0.9000000 0.7000000 0.7000000 0.6000000 0.8000000 0.6000000 0.6000000
## [1471] 0.8000000 0.6000000 0.7000000 0.9000000 0.6000000 1.0000000 1.0000000
## [1478] 0.8000000 0.8000000 0.8000000 0.8000000 1.0000000 1.0000000 0.6000000
## [1485] 0.7000000 0.9000000 0.5000000 1.0000000 0.9000000 0.7000000 0.8000000
## [1492] 0.6000000 0.7000000 0.8000000 0.9000000 0.6000000 0.6000000 0.8000000
## [1499] 0.7000000 0.9000000 0.9000000 0.7000000 0.9000000 0.6000000 1.0000000
## [1506] 0.9000000 0.7000000 0.6000000 0.9000000 0.7000000 0.6000000 0.7000000
## [1513] 0.7000000 0.9000000 0.7000000 0.5000000 0.6000000 0.6000000 0.7000000
## [1520] 0.5000000 0.9000000 0.5000000 0.7000000 0.5000000 0.7000000 0.9090909
## [1527] 0.5000000 0.6000000 0.9000000 0.8000000 1.0000000 0.9000000 0.8000000
## [1534] 0.7000000 0.6000000 0.8000000 0.8000000 0.8000000 1.0000000 0.8000000
## [1541] 0.8000000 0.6000000 0.9000000 0.6000000 0.8000000 0.9000000 0.9000000
## [1548] 0.9000000 0.7000000 0.8000000 1.0000000 1.0000000 0.7000000 0.9090909
## [1555] 0.8000000 0.7000000 0.8000000 0.8000000 1.0000000 0.6000000 0.6000000
## [1562] 0.5000000 0.9000000 1.0000000 0.8000000 0.6000000 0.5000000 0.8000000
## [1569] 0.8000000 1.0000000 0.5000000 0.9000000 0.9000000 0.5000000 0.7000000
## [1576] 1.0000000 0.7000000 0.7000000 0.6000000 0.8000000 0.6000000 0.9000000
## [1583] 0.9000000 0.9000000 0.5000000 0.5000000 0.5454545 0.7000000 0.9000000
## [1590] 0.7000000 0.6000000 0.6000000 0.6000000 0.8000000 0.6000000 0.8000000
## [1597] 0.9000000 0.6000000 0.5000000 0.6000000 0.7000000 0.8000000 0.6000000
## [1604] 0.7000000 0.6000000 0.6000000 0.6000000 0.8000000 0.7000000 0.5000000
## [1611] 0.8000000 0.5000000 0.9000000 0.9000000 0.6000000 0.8000000 0.8000000
## [1618] 1.0000000 0.5000000 0.9000000 1.0000000 0.8000000 0.8000000 0.7000000
## [1625] 1.0000000 1.0000000 0.7000000 0.7000000 1.0000000 0.9000000 0.6000000
## [1632] 0.9000000 0.9000000 0.7000000 0.6000000 0.9000000 0.5000000 0.7000000
## [1639] 0.7000000 0.7000000 0.7000000 0.6000000 0.5000000 0.9000000 0.9000000
## [1646] 1.0000000 0.5000000 0.6000000 0.9000000 0.7000000 1.0000000 0.9000000
## [1653] 0.7000000 1.0000000 0.9000000 0.7000000 0.9000000 0.8000000 0.9000000
## [1660] 0.7000000 1.0000000 0.6000000 0.6000000 0.9000000 0.9000000 1.0000000
## [1667] 0.8000000 0.7000000 0.7000000 0.7000000 0.7000000 0.8000000 0.8000000
## [1674] 0.6000000 0.7000000 0.6000000 0.8000000 1.0000000 0.8000000 0.7000000
## [1681] 1.0000000 0.8000000 1.0000000 0.8000000 0.8000000 0.7000000 0.9000000
## [1688] 0.9000000 0.7000000 1.0000000 0.5000000 0.6000000 0.5454545 1.0000000
## [1695] 1.0000000 0.6000000 0.7000000 0.8000000 0.9000000 0.6000000 0.7000000
## [1702] 1.0000000 0.7000000 1.0000000 1.0000000 0.8000000 1.0000000 0.7000000
## [1709] 0.8000000 0.7000000 0.5000000 0.6000000 0.8000000 0.9000000 0.6000000
## [1716] 0.8000000 0.5000000 0.8000000 0.6000000 0.8000000 0.6000000 0.7000000
## [1723] 0.9000000 0.9000000 0.7000000 0.8000000 0.9000000 0.6000000 0.8000000
## [1730] 1.0000000 0.7000000 0.9000000 0.7272727 0.6000000 0.9000000 0.8000000
## [1737] 0.9000000 0.9000000 0.5000000 0.9000000 0.6000000 0.9000000 0.9000000
## [1744] 0.7000000 0.8000000 0.9000000 0.9000000 0.8000000 0.6000000 0.6000000
## [1751] 0.5000000 0.8000000 0.8000000 0.9000000 0.9000000 0.6000000 0.7000000
## [1758] 0.6000000 0.9000000 0.6000000 0.5000000 0.6000000 0.8000000 0.8000000
## [1765] 0.9000000 0.7000000 0.9000000 0.7000000 0.5000000 1.0000000 0.9000000
## [1772] 1.0000000 1.0000000 0.8000000 0.5000000 0.8000000 0.8000000 0.7000000
## [1779] 0.6000000 0.8000000 0.6000000 0.5000000 0.7000000 0.8000000 0.7000000
## [1786] 0.9000000 0.8000000 0.7000000 0.7000000 0.8000000 0.9000000 0.5000000
## [1793] 1.0000000 0.8000000 0.9000000 0.5000000 0.5000000 0.8000000 0.6000000
## [1800] 1.0000000 0.8000000 0.6000000 0.9000000 0.9000000 0.8000000 1.0000000
## [1807] 0.7000000 0.9000000 0.9000000 1.0000000 0.9000000 0.5000000 0.6000000
## [1814] 0.7000000 0.6000000 1.0000000 0.7000000 0.6000000 0.8000000 0.5000000
## [1821] 0.6000000 0.7000000 0.6000000 0.5000000 0.7000000 0.5000000 0.9000000
## [1828] 0.9000000 1.0000000 0.6000000 0.6000000 0.6000000 1.0000000 0.7000000
## [1835] 0.9000000 0.7000000 0.8000000 0.8000000 0.9000000 0.6000000 0.7000000
## [1842] 0.7000000 0.8000000 0.6000000 0.9000000 0.8000000 0.8000000 0.7000000
## [1849] 0.9000000 0.9000000 0.6000000 0.6000000 1.0000000 0.7000000 0.6000000
## [1856] 0.5000000 0.9000000 0.6000000 0.6000000 0.8000000 1.0000000 0.9000000
## [1863] 0.6000000 0.9000000 0.5000000 0.8000000 0.9000000 0.7000000 0.8000000
## [1870] 0.6363636 0.9000000 0.8000000 0.9000000 1.0000000 0.9000000 0.6000000
## [1877] 1.0000000 0.9000000 0.8000000 0.8000000 0.8000000 0.9000000 0.8000000
## [1884] 0.8000000 1.0000000 0.7000000 0.6000000 0.5000000 0.8000000 0.6000000
## [1891] 0.9000000 0.8000000 0.9000000 0.8000000 0.6000000 0.5000000 0.9090909
## [1898] 0.5000000 0.8000000 0.5000000 0.7000000 0.7000000 1.0000000 1.0000000
## [1905] 1.0000000 0.6000000 1.0000000 0.7000000 0.8000000 0.5000000 0.5000000
## [1912] 0.8000000 0.6000000 0.6000000 0.8000000 0.7000000 0.9000000 0.8000000
## [1919] 0.6000000 0.6000000 0.9000000 0.6000000 0.6000000 0.9000000 0.7000000
## [1926] 0.6000000 0.9000000 0.6000000 0.9000000 0.7000000 0.7000000 0.8000000
## [1933] 0.5000000 0.5000000 0.7272727 0.6000000 0.9000000 0.6000000 0.6000000
## [1940] 0.7000000 0.7000000 0.7000000 0.8000000 0.7000000 0.8000000 0.8000000
## [1947] 0.6000000 1.0000000 0.6000000 0.6363636 0.6000000 0.7000000 0.6000000
## [1954] 0.7000000 0.6000000 0.6000000 0.5000000 0.9000000 0.6000000 0.8000000
## [1961] 0.9000000 0.8000000 1.0000000 0.7000000 0.8000000 1.0000000 0.6000000
## [1968] 0.8000000 0.6000000 0.6000000 0.9000000 0.8000000 0.7000000 1.0000000
## [1975] 0.6000000 0.8000000 0.6000000 0.8000000 1.0000000 0.6000000 1.0000000
## [1982] 0.9000000 0.9000000 1.0000000 0.6000000 1.0000000 0.9000000 0.8000000
## [1989] 0.9000000 1.0000000 0.9000000 0.8000000 0.7000000 0.9000000 1.0000000
## [1996] 0.7000000 0.9000000 0.9000000 0.7000000 0.8000000 0.8000000 0.5000000
## [2003] 0.7000000 0.8000000 0.9000000 0.6000000 0.9000000 1.0000000 0.6000000
## [2010] 1.0000000 0.8000000 0.9000000 0.9000000 0.5000000 0.9000000 0.9000000
## [2017] 1.0000000 0.8000000 0.7000000 0.8000000 0.8000000 0.9000000 0.6000000
## [2024] 0.9000000 0.6000000 1.0000000 0.7000000 0.6000000 0.8000000 0.6000000
## [2031] 0.9000000 0.9000000 0.7000000 0.7000000 0.5000000 0.8000000 0.9000000
## [2038] 0.8000000 1.0000000 1.0000000 0.8181818 0.9000000 0.9000000 0.9000000
## [2045] 0.8000000 0.7000000 0.6000000 0.7000000 0.7000000 0.8000000 0.6000000
## [2052] 1.0000000 0.9000000 0.7000000 1.0000000 0.7000000 0.8000000 1.0000000
## [2059] 0.9000000 0.8000000 0.8000000 0.6363636 1.0000000 0.5000000 1.0000000
## [2066] 0.8000000 0.7000000 0.8000000 1.0000000 0.8000000 0.6000000 0.6000000
## [2073] 0.6000000 0.8000000 0.7000000 0.9000000 0.9000000 0.9000000 0.9000000
## [2080] 0.5000000 0.9000000 0.5000000 1.0000000 0.8000000 0.8000000 0.9000000
## [2087] 1.0000000 0.7000000 0.7000000 0.9000000 0.7000000 0.5000000 0.8000000
## [2094] 0.7000000 0.9000000 0.6000000 1.0000000 0.8000000 0.7000000 0.9000000
## [2101] 1.0000000 0.9000000 0.8000000 1.0000000 0.9000000 0.8000000 1.0000000
## [2108] 1.0000000 0.9000000 0.9000000 1.0000000 0.8000000 0.8000000 0.8000000
## [2115] 0.7000000 1.0000000 0.8000000 0.7000000 0.7000000 0.7000000 0.6000000
## [2122] 0.8000000 0.7000000 0.7000000 0.9000000 0.7000000 0.6000000 0.7000000
## [2129] 0.5000000 0.6363636 0.6000000 0.8000000 0.8000000 0.8000000 0.5000000
## [2136] 0.9000000 0.7000000 0.8000000 0.7000000 1.0000000 0.8000000 0.7000000
## [2143] 0.9000000 0.8000000 0.7000000 0.8000000 0.8000000 0.5000000 0.9000000
## [2150] 1.0000000 0.7000000 0.9000000 1.0000000 1.0000000 0.8000000 0.8000000
## [2157] 0.7000000 0.9000000 1.0000000 0.5000000 0.6000000 0.9000000 1.0000000
## [2164] 0.8000000 0.5000000 0.6000000 0.5000000 0.7000000 0.9000000 0.7000000
## [2171] 0.5000000 0.6000000 0.9000000 0.9000000 0.8000000 0.6000000 0.5000000
## [2178] 0.7000000 0.9000000 0.5000000 0.9000000 0.6000000 0.7000000 0.9000000
## [2185] 0.9000000 0.7000000 0.7000000 0.8000000 0.6000000 1.0000000 0.9000000
## [2192] 0.9000000 0.7272727 0.8000000 0.7000000 0.9000000 1.0000000 0.8000000
## [2199] 0.6000000 0.7000000 1.0000000 0.8000000 1.0000000 0.7000000 0.9000000
## [2206] 0.8000000 1.0000000 1.0000000 0.6000000 0.9000000 0.9000000 0.8000000
## [2213] 0.6000000 0.6000000 1.0000000 0.9000000 0.5000000 0.6000000 0.5000000
## [2220] 0.6000000 0.9000000 1.0000000 0.6000000 0.8000000 1.0000000 0.9000000
## [2227] 0.7000000 1.0000000 1.0000000 0.6000000 0.5000000 0.7000000 1.0000000
## [2234] 1.0000000 0.8000000 0.7000000 0.8000000 0.8000000 0.8000000 0.6000000
## [2241] 0.9000000 0.9000000 0.6000000 0.8000000 1.0000000 0.8000000 0.8000000
## [2248] 1.0000000 1.0000000 1.0000000 0.9000000 0.8000000 0.8000000 0.9000000
## [2255] 0.6000000 0.8000000 0.7000000 0.6000000 0.7000000 0.9000000 0.7000000
## [2262] 0.5000000 0.6000000 0.7000000 0.7000000 1.0000000 0.9000000 0.8000000
## [2269] 0.8000000 0.8000000 1.0000000 0.9000000 0.9000000 0.8000000 0.5000000
## [2276] 0.8000000 1.0000000 0.9000000 0.8000000 0.8000000 0.5000000 0.5000000
## [2283] 0.9000000 1.0000000 1.0000000 0.9000000 0.8000000 0.6000000 0.7000000
## [2290] 0.6000000 0.7000000 0.8000000 0.8000000 0.8000000 0.7000000 0.9000000
## [2297] 0.9000000 1.0000000 0.5000000 1.0000000 0.9000000 0.9000000 0.7000000
## [2304] 0.8000000 0.9000000 0.9000000 0.9000000 0.8000000 0.9000000 0.6000000
## [2311] 0.6000000 1.0000000 0.9000000 0.8000000 0.9000000 0.9000000 0.8000000
## [2318] 1.0000000 1.0000000 0.8000000 1.0000000 0.7000000 0.8000000 0.6000000
## [2325] 0.5000000 0.7000000 1.0000000 0.9000000 0.9000000 0.6000000 0.8000000
## [2332] 0.9000000 0.9000000 0.8000000 1.0000000 0.7000000 0.9000000 0.9000000
## [2339] 0.9000000 1.0000000 0.9000000 0.7000000 0.5000000 1.0000000 0.6000000
## [2346] 0.9000000 0.7000000 0.8000000 0.9090909 0.6000000 0.8000000 0.9000000
## [2353] 0.7000000 0.9000000 0.6000000 0.7000000 0.6000000 0.8000000 0.6000000
## [2360] 0.8000000 0.8000000 0.8000000 0.9000000 0.8000000 0.9000000 0.9000000
## [2367] 0.9000000 0.9000000 0.8000000 1.0000000 0.6000000 1.0000000 0.9000000
## [2374] 0.9000000 0.9090909 0.8000000 1.0000000 0.9000000 0.8000000 0.7000000
## [2381] 0.9000000 0.6000000 0.5000000 0.5000000 0.9000000 0.7000000 0.6000000
## [2388] 0.7000000 0.7000000 0.7000000 0.7000000 0.5000000 0.7000000 0.7000000
## [2395] 0.6000000 1.0000000 0.6000000 0.9000000 0.9000000 0.7000000 0.5000000
## [2402] 0.5000000 0.6000000 0.7000000 0.5000000 0.5000000 0.7000000 0.8000000
## [2409] 0.6000000 0.6000000 0.8000000 0.8000000 0.6000000 1.0000000 0.8000000
## [2416] 0.9090909 1.0000000 0.8000000 0.6000000 0.7000000 0.6000000 0.7000000
## [2423] 0.9000000 0.7000000 0.8000000 0.8000000 1.0000000 1.0000000 1.0000000
## [2430] 0.9000000 0.9000000 0.7000000 0.6000000 0.5000000 0.7000000 0.8000000
## [2437] 0.6000000 0.8000000 0.7000000 0.9000000 0.9000000 0.8000000 0.9000000
## [2444] 0.7000000 0.6000000 0.6000000 0.7000000 0.6000000 0.8000000 0.9000000
## [2451] 0.8000000 0.8000000 0.7000000 0.8000000 0.9000000 0.8000000 0.8000000
## [2458] 0.9000000 0.9000000 1.0000000 0.7000000 0.6000000 0.8000000 0.8000000
## [2465] 0.8000000 0.8000000 0.8000000 1.0000000 0.9000000 0.9000000 0.9000000
## [2472] 0.9000000 0.9000000 0.8000000 0.8000000 0.7000000 0.8000000 0.6000000
## [2479] 0.8000000 0.9000000 0.7000000 0.7000000 0.8000000 0.7000000 0.7000000
## [2486] 0.7000000 0.9000000 0.7000000 0.9000000 0.9000000 0.9000000 0.7000000
## [2493] 0.8000000 0.6000000 0.8000000 0.7000000 1.0000000 1.0000000 0.9000000
## [2500] 0.8000000 0.7000000 0.7000000 0.8000000 0.7000000 0.5000000 0.7000000
## [2507] 0.8000000 0.5000000 0.6000000 0.8000000 0.7000000 1.0000000 0.6000000
## [2514] 0.8000000 0.8000000 0.6000000 0.8000000 0.6000000 0.5000000 0.9000000
## [2521] 0.7272727 0.6000000 0.9000000 0.7000000 0.8000000 0.8000000 0.7000000
## [2528] 0.6000000 0.8000000 0.7000000 0.8000000 0.7000000 0.5000000 0.5000000
## [2535] 0.9000000 0.7000000 0.7000000 0.9000000 1.0000000 1.0000000 0.8000000
## [2542] 0.9000000 0.8000000 1.0000000 0.6000000 0.9000000 1.0000000 0.9000000
## [2549] 0.6000000 1.0000000 0.8000000 0.7000000 1.0000000 0.8000000 0.6000000
## [2556] 0.5000000 0.7000000 0.9000000 0.7000000 0.8181818 0.8000000 0.5000000
## [2563] 0.9000000 0.5000000 0.7000000 1.0000000 0.8000000 0.7000000 0.9000000
## [2570] 0.9000000 0.7000000 0.8000000 0.6000000 0.8000000 1.0000000 0.6000000
## [2577] 1.0000000 0.8000000 0.6000000 0.8000000 0.7000000 0.8000000 0.8000000
## [2584] 0.7000000 1.0000000 0.7000000 0.8000000 0.9000000 0.9000000 0.6000000
## [2591] 0.7000000 0.6000000 0.7000000 0.8181818 0.8000000 0.7000000 0.9000000
## [2598] 0.8000000 0.8000000 0.8000000 0.6000000 0.6000000 0.7000000 0.5000000
## [2605] 0.7000000 0.5000000 0.6000000 0.6000000 0.5000000 0.9000000 0.6000000
## [2612] 0.6000000 0.9000000 0.5000000 1.0000000 0.9000000 1.0000000 1.0000000
## [2619] 0.8000000 0.7000000 1.0000000 0.5454545 0.6000000 1.0000000 0.6000000
## [2626] 1.0000000 0.9000000 0.7000000 0.8000000 0.6000000 0.9000000 0.9000000
## [2633] 0.6000000 0.7000000 0.5000000 1.0000000 1.0000000 0.7000000 0.6000000
## [2640] 0.8000000 0.8000000 0.7000000 0.6000000 0.6000000 0.8000000 0.9000000
## [2647] 0.7000000 0.7000000 0.7000000 0.7000000 0.8000000 0.5000000 0.7000000
## [2654] 0.6000000 0.5000000 0.8000000 0.8000000 0.9000000 0.8000000 0.8000000
## [2661] 0.5000000 1.0000000 1.0000000 0.7000000 0.9000000 0.9000000 0.7000000
## [2668] 0.8000000 0.9000000 0.5000000 0.5000000 0.5000000 0.6000000 0.8000000
## [2675] 0.8000000 0.8000000 0.8000000 0.6000000 0.6000000 0.6000000 0.8000000
## [2682] 1.0000000 0.9000000 0.8000000 0.8181818 0.8000000 0.7000000 0.7000000
## [2689] 0.6000000 0.5000000 0.8000000 0.7000000 0.9090909 0.5000000 0.6000000
## [2696] 0.7000000 0.9000000 0.8000000 0.6000000 0.7000000 0.9000000 0.5000000
## [2703] 0.6000000 0.8000000 0.7000000 0.9000000 0.9000000 0.6000000 0.7000000
## [2710] 0.9000000 0.9000000 0.9000000 0.9000000 0.6000000 0.9000000 0.6000000
## [2717] 0.8000000 0.7000000 1.0000000 0.5000000 0.5000000 0.9000000 0.9000000
## [2724] 0.8000000 0.8000000 0.9000000 0.6000000 0.7000000 0.5000000 0.7000000
## [2731] 0.6000000 0.8000000 0.8000000 0.7000000 0.7000000 0.6000000 0.6000000
## [2738] 0.7000000 0.6000000 0.9000000 0.7000000 0.8000000 0.8000000 0.6000000
## [2745] 0.8000000 0.7000000 0.8000000 0.9000000 0.8181818 0.6000000 0.6000000
## [2752] 0.6000000 0.5000000 0.7000000 0.8000000 0.7000000 0.8000000 0.9000000
## [2759] 0.6000000 0.7000000 0.8000000 0.6000000 0.8000000 0.8000000 0.9000000
## [2766] 0.7000000 0.6363636 0.7000000 0.7000000 0.5000000 0.9090909 0.7000000
## [2773] 0.8000000 0.7000000 0.8000000 0.8000000 0.7000000 0.6000000 1.0000000
## [2780] 0.8000000 0.5000000 0.5000000 1.0000000 0.9000000 0.8000000 0.5000000
## [2787] 0.8000000 0.6000000 0.9000000 0.8000000 0.6000000 0.7000000 0.6000000
## [2794] 0.6000000 0.9000000 0.6000000 0.6000000 0.7000000 0.5000000 0.5000000
## [2801] 0.5000000 0.9000000 0.5000000 0.6000000 0.9000000 0.9000000 0.8000000
## [2808] 0.9000000 1.0000000 1.0000000 0.8000000 0.7000000 0.6000000 0.8000000
## [2815] 0.8000000 0.7000000 0.7000000 0.6363636 0.7272727 0.8000000 0.7000000
## [2822] 0.8000000 0.7000000 0.8000000 0.8000000 0.8000000 0.8000000 0.8000000
## [2829] 0.5000000 0.8000000 0.7000000 0.6000000 0.7000000 0.7000000 0.7000000
## [2836] 0.7000000 0.5000000 0.9000000 0.7000000 0.7000000 0.7000000 0.9000000
## [2843] 0.8000000 0.8000000 0.7000000 0.9000000 0.8000000 0.8000000 1.0000000
## [2850] 0.8000000 0.8000000 0.6000000 1.0000000 0.6000000 0.6000000 0.7000000
## [2857] 1.0000000 0.5000000 0.9000000 1.0000000 1.0000000 0.8000000 0.9000000
## [2864] 0.9000000 0.8000000 0.6000000 0.8000000 0.8000000 0.7000000 1.0000000
## [2871] 0.8000000 0.5000000 0.8000000 0.7000000 0.9000000 0.9000000 0.6000000
## [2878] 0.8181818 0.7000000 0.6000000 0.6000000 0.6000000 0.7000000 0.7000000
## [2885] 0.7000000 0.7000000 0.7000000 0.5000000 0.8000000 0.7000000 0.6000000
## [2892] 0.7000000 0.9000000 0.9000000 0.8000000 0.7000000 0.9000000 0.9000000
## [2899] 0.6000000 0.7000000 1.0000000 0.7000000 0.8000000 0.6000000 0.6000000
## [2906] 0.7000000 0.9000000 0.5000000 0.6000000 0.5000000 0.7000000 0.7000000
## [2913] 0.8000000 0.8000000 0.7000000 0.7000000 0.6000000 0.8000000 0.8000000
## [2920] 0.7000000 0.8000000 0.9000000 0.9000000 0.6000000 0.8000000 0.7272727
## [2927] 0.6000000 0.9090909 0.8000000 0.8000000 0.9000000 1.0000000 0.6000000
## [2934] 0.7000000 0.7000000 0.8000000 0.5000000 0.7000000 0.7000000 0.6000000
## [2941] 0.7000000 0.8000000 0.7000000 0.9000000 0.8000000 1.0000000 1.0000000
## [2948] 0.7000000 1.0000000 0.9000000 0.8000000 1.0000000 0.9000000 0.7000000
## [2955] 0.9000000 0.8000000 0.8000000 0.9000000 0.9000000 0.8000000 0.8000000
## [2962] 0.8000000 1.0000000 0.6000000 0.9000000 0.7000000 0.5000000 0.7000000
## [2969] 0.6000000 0.8000000 0.5000000 0.8000000 0.7000000 0.6000000 0.6000000
## [2976] 0.6000000 0.6000000 0.5000000 0.5000000 0.6000000 0.8000000 0.6000000
## [2983] 0.6000000 0.6000000 0.7000000 0.9000000 0.6000000 0.8000000 0.8000000
## [2990] 1.0000000 0.8000000 0.6000000 0.5000000 0.9000000 0.6000000 1.0000000
## [2997] 1.0000000 0.7000000 0.6000000 0.9000000 1.0000000 0.6000000 0.8000000
## [3004] 0.9090909 0.7000000 0.8000000 0.8000000 0.7000000 0.5000000 0.9000000
## [3011] 0.9090909 0.6000000 0.6000000 0.8000000 0.7000000 0.8000000 0.9000000
## [3018] 1.0000000 1.0000000 0.7000000 0.6000000 1.0000000 0.9000000 0.7000000
## [3025] 0.7000000 0.7000000 0.6000000 1.0000000 0.7000000 0.6000000 0.6000000
## [3032] 0.8000000 0.8000000 0.8000000 0.7000000 0.5000000 0.9000000 0.7000000
## [3039] 0.7000000 0.8000000 0.8000000 0.8000000 1.0000000 0.8000000 0.7000000
## [3046] 0.7000000 0.9000000 1.0000000 0.9000000 0.6000000 0.6000000 0.8000000
## [3053] 0.7000000 0.9000000 0.9000000 0.8000000 0.7000000 0.8000000 0.8000000
## [3060] 1.0000000 0.8000000 1.0000000 1.0000000 0.8000000 0.8000000 0.6000000
## [3067] 1.0000000 0.8000000 0.6000000 0.9000000 1.0000000 0.7000000 0.7000000
## [3074] 0.9000000 0.6000000 1.0000000 0.7000000 0.6000000 0.8000000 0.8000000
## [3081] 1.0000000 1.0000000 0.7000000 0.9000000 0.8000000 0.6000000 0.9000000
## [3088] 0.9000000 0.7000000 0.7000000 0.5000000 0.7000000 0.7000000 0.7000000
## [3095] 1.0000000 0.6000000 0.5000000 0.6000000 0.6000000 0.9000000 0.7000000
## [3102] 0.9000000 0.8000000 0.6000000 0.7000000 0.9000000 0.5000000 0.6000000
## [3109] 1.0000000 0.8000000 0.5000000 1.0000000 0.7000000 0.9000000 0.9000000
## [3116] 0.7000000 0.7000000 0.9000000 0.5454545 0.7000000 0.8000000 0.8000000
## [3123] 0.6000000 0.6000000 0.8000000 0.6000000 0.8000000 0.6000000 0.7000000
## [3130] 1.0000000 0.6000000 0.6000000 1.0000000 0.6000000 0.8000000 0.7000000
## [3137] 0.8000000 1.0000000 0.9090909 0.8000000 0.7000000 0.8000000 0.8000000
## [3144] 0.7000000 0.8000000 0.5000000 0.7000000 0.5000000 0.6000000 0.7000000
## [3151] 0.8000000 0.7000000 0.7000000 0.7000000 0.8000000 1.0000000 0.7000000
## [3158] 0.8000000 0.8000000 0.6000000 0.9000000 0.7000000 0.7000000 0.5000000
## [3165] 0.8000000 0.7000000 0.8000000 0.9000000 0.8000000 0.9000000 0.8000000
## [3172] 0.8000000 0.8000000 0.5000000 0.9090909 0.9000000 0.6000000 0.6000000
## [3179] 0.9000000 0.8000000 0.6000000 0.8000000 0.6000000 0.5000000 0.8000000
## [3186] 0.7000000 0.8000000 0.8000000 0.9000000 0.9000000 0.7000000 0.8000000
## [3193] 0.8000000 1.0000000 0.7000000 0.9000000 0.9000000 0.8000000 0.7000000
## [3200] 0.8000000 1.0000000 0.9000000 1.0000000 0.7000000 1.0000000 0.7000000
## [3207] 0.9000000 0.9000000 0.9000000 0.8000000 0.7000000 0.9000000 0.8000000
## [3214] 0.7000000 0.9000000 0.8181818 1.0000000 0.9000000 0.7000000 0.8000000
## [3221] 0.8000000 0.7000000 0.8000000 0.6000000 0.9000000 0.8000000 0.6000000
## [3228] 0.8000000 0.8000000 0.9000000 0.5000000 0.9000000 0.8000000 0.6000000
## [3235] 0.9000000 0.8000000 0.8000000 0.7000000 0.6000000 0.9000000 1.0000000
## [3242] 0.5000000 0.6000000 0.9000000 0.8000000 0.9000000 0.7000000 0.9000000
## [3249] 0.8000000 0.7000000 0.5000000 0.7000000 0.6000000 0.7000000 0.8000000
## [3256] 0.7000000 0.5000000 0.6000000 0.6000000 0.8000000 0.7000000 0.7000000
## [3263] 0.9000000 0.8000000 0.8000000 0.8000000 0.7000000 1.0000000 0.7000000
## [3270] 0.7000000 0.9000000 0.7000000 0.7000000 0.6000000 0.8000000 0.6000000
## [3277] 0.8000000 0.8000000 0.7000000 0.9000000 0.8000000 0.8000000 0.8000000
## [3284] 0.9000000 1.0000000 0.5000000 0.7000000 0.7000000 0.5000000 0.7000000
## [3291] 1.0000000 0.9000000 1.0000000 0.7000000 0.6000000 0.6000000 0.9000000
## [3298] 0.8000000 0.9000000 0.6000000 1.0000000 0.7000000 0.5000000 1.0000000
## [3305] 0.9000000 0.5000000 0.6000000 0.9000000 0.5000000 0.9000000 0.6363636
## [3312] 0.9000000 1.0000000 0.8000000 0.7000000 0.9000000 0.9000000 0.6000000
## [3319] 0.9000000 1.0000000 0.5000000 0.6000000 0.9000000 0.9000000 0.9000000
## [3326] 0.7000000 0.8000000 0.9000000 1.0000000 1.0000000 1.0000000 0.9000000
## [3333] 0.7000000 0.7000000 0.7000000 0.6000000 1.0000000 1.0000000 1.0000000
## [3340] 0.5000000 0.7000000 0.7000000 0.9000000 0.9000000 0.5000000 0.9000000
## [3347] 0.8000000 0.9000000 0.6363636 0.6000000 1.0000000 1.0000000 0.9000000
## [3354] 0.9000000 0.6000000 0.9000000 0.7000000 0.7000000 0.7000000 0.9000000
## [3361] 1.0000000 0.8000000 0.9000000 0.6000000 0.9000000 0.7000000 0.7000000
## [3368] 1.0000000 0.9000000 0.8000000 0.9000000 0.8000000 0.9000000 0.9000000
## [3375] 0.6000000 0.8000000 0.5000000 1.0000000 0.8000000 0.7000000 0.6000000
## [3382] 0.5000000 0.6000000 0.7000000 0.5000000 0.8000000 0.9000000 0.8000000
## [3389] 0.7000000 0.7000000 0.8000000 0.5000000 1.0000000 1.0000000 1.0000000
## [3396] 0.6000000 0.7000000 0.5000000 0.8000000 1.0000000 0.8000000 0.9000000
## [3403] 0.7000000 0.8000000 0.9000000 0.8000000 0.7000000 0.7000000 0.8000000
## [3410] 0.6000000 0.5000000 1.0000000 0.7000000 0.5000000 0.8000000 0.8000000
## [3417] 0.6000000 1.0000000 0.8000000 0.6000000 0.8000000 0.6000000 0.7000000
## [3424] 0.7000000 0.5000000 0.8000000 0.6000000 0.7000000 0.9000000 0.5454545
## [3431] 0.6000000 0.8000000 0.8000000 0.8000000 0.8000000 0.7000000 0.8000000
## [3438] 0.7000000 0.9000000 0.6000000 0.5000000 0.6000000 0.6000000 0.6000000
## [3445] 0.6000000 0.7000000 0.9000000 0.7000000 0.5000000 0.6000000 0.6000000
## [3452] 0.5000000 0.7000000 1.0000000 0.8000000 0.6363636 1.0000000 0.6000000
## [3459] 0.6363636 0.5000000 0.7000000 1.0000000 0.8000000 1.0000000 0.7000000
## [3466] 0.6000000 0.7000000 0.9000000 0.8000000 0.6000000 0.9000000 0.8000000
## [3473] 0.8000000 0.8000000 0.7000000 0.9000000 0.8181818 0.6000000 0.8000000
## [3480] 0.7000000 0.8000000 0.7000000 0.6000000 0.6000000 0.5000000 0.7000000
## [3487] 0.6000000 0.6000000 0.6000000 0.5000000 0.9000000 0.9000000 0.5000000
## [3494] 0.6000000 0.6000000 0.9000000 0.9000000 0.6363636 0.6000000 0.6000000
## [3501] 0.6000000 0.8000000 0.9000000 0.8000000 0.8000000 0.6000000 0.8000000
## [3508] 0.5000000 0.8000000 0.6000000 0.8000000 0.9000000 0.9000000 0.7000000
## [3515] 0.7000000 0.6000000 0.6000000 0.6000000 0.7000000 0.7000000 1.0000000
## [3522] 0.7000000 0.9090909 0.8000000 0.6000000 0.6000000 0.6000000 0.8000000
## [3529] 0.7000000 0.6000000 0.9000000 0.7000000 0.7000000 0.9000000 0.8000000
## [3536] 1.0000000 0.7000000 0.7000000 0.8000000 0.7000000 1.0000000 1.0000000
## [3543] 1.0000000 0.7000000 1.0000000 0.9000000 0.7000000 0.6000000 0.6000000
## [3550] 0.5000000 0.9000000 0.7000000 0.8000000 0.9000000 0.7000000 0.8000000
## [3557] 0.8000000 0.9000000 1.0000000 1.0000000 0.7000000 1.0000000 0.6000000
## [3564] 0.7000000 0.7000000 0.5000000 0.6000000 0.5000000 0.9000000 0.7272727
## [3571] 0.7000000 0.7000000 0.6000000 0.5000000 0.6000000 0.5000000 0.9000000
## [3578] 0.8000000 0.6000000 1.0000000 0.8000000 1.0000000 0.9000000 0.9000000
## [3585] 1.0000000 1.0000000 1.0000000 1.0000000 1.0000000 0.6000000 0.6000000
## [3592] 0.6000000 1.0000000 0.9000000 1.0000000 0.9000000 0.9000000 0.8000000
## [3599] 0.8000000 1.0000000 0.8000000 0.8000000 0.8000000 0.5000000 0.6000000
## [3606] 0.8000000 0.6000000 0.8181818 0.6000000 0.5000000 0.7000000 0.9000000
## [3613] 0.7000000 1.0000000 1.0000000 0.7000000 0.8000000 1.0000000 1.0000000
## [3620] 1.0000000 0.7000000 0.7000000 0.9000000 0.8000000 0.9000000 0.9000000
## [3627] 0.8000000 1.0000000 0.8000000 0.7000000 0.8000000 0.8000000 0.7000000
## [3634] 0.7000000 0.9000000 0.8000000 0.8000000 0.6000000 0.9090909 0.9000000
## [3641] 0.8000000 0.9000000 0.7000000 0.7000000 0.7000000 0.9000000 0.9000000
## [3648] 0.9000000 1.0000000 0.8000000 0.5000000 0.9000000 0.9000000 0.8000000
## [3655] 1.0000000 0.8000000 0.6000000 0.5000000 1.0000000 0.7000000 0.8000000
## [3662] 1.0000000 0.6000000 0.9000000 0.7000000 0.6000000 0.9000000 1.0000000
## [3669] 0.8000000 1.0000000 0.9000000 0.6000000 0.7000000 1.0000000 0.5000000
## [3676] 0.7000000 0.9000000 0.8181818 0.7000000 1.0000000 1.0000000 0.5000000
## [3683] 0.7000000 0.7000000 0.7000000 0.6000000 0.8000000 0.8000000 1.0000000
## [3690] 1.0000000 0.9000000 0.7000000 1.0000000 0.6000000 0.6000000 0.7000000
## [3697] 0.7000000 0.8000000 0.8000000 0.7000000 0.7000000 0.9000000 1.0000000
## [3704] 1.0000000 1.0000000 1.0000000 1.0000000 0.8000000 0.8000000 0.6000000
## [3711] 0.6000000 0.8000000 0.8000000 0.8000000 0.6000000 0.9000000 0.9000000
## [3718] 0.6000000 0.5000000 0.6000000 0.9000000 1.0000000 0.8000000 0.6000000
## [3725] 0.6000000 0.6000000 0.9000000 0.8000000 1.0000000 0.9000000 0.8000000
## [3732] 0.9000000 0.8000000 0.7000000 0.5000000 0.6000000 0.9090909 0.6000000
## [3739] 0.6000000 0.9000000 1.0000000 1.0000000 0.9000000 1.0000000 0.9000000
## [3746] 0.9000000 0.8000000 0.9000000 0.6000000 0.6000000 0.7000000 0.7272727
## [3753] 0.6000000 0.8000000 1.0000000 0.8000000 0.7000000 0.5000000 0.6000000
## [3760] 0.8000000 0.8000000 0.9000000 0.9000000 0.9000000 0.6000000 0.9000000
## [3767] 0.8000000 0.9090909 0.7000000 0.6000000 0.8000000 0.9000000 0.6000000
## [3774] 0.6000000 0.6000000 1.0000000 0.6000000 0.8000000 0.6000000 0.8000000
## [3781] 0.5000000 1.0000000 0.6000000 0.9000000 1.0000000 0.9000000 0.6000000
## [3788] 1.0000000 1.0000000 0.7000000 0.7000000 0.6000000 0.9000000 0.8000000
## [3795] 0.7000000 0.6000000 0.9000000 0.5000000 0.8000000 0.8000000 0.8000000
## [3802] 0.8000000 0.7000000 0.7000000 0.7000000 0.9000000 1.0000000 0.6000000
## [3809] 0.9000000 0.7000000 0.7000000 0.6000000 0.8000000 0.8000000 0.8000000
## [3816] 0.9000000 0.9000000 0.9000000 0.8000000 0.7000000 0.7000000 0.7000000
## [3823] 0.7000000 0.9000000 0.9000000 1.0000000 0.8000000 0.6000000 0.7000000
## [3830] 0.8000000 0.9000000 0.7000000 0.9000000 0.7000000 0.7000000 0.7000000
## [3837] 0.5000000 0.5000000 0.7000000 0.8000000 0.8000000 0.8000000 0.9000000
## [3844] 0.9000000 0.9000000 0.9000000 0.7000000 0.7000000 0.8000000 0.9000000
## [3851] 0.6000000 0.8000000 1.0000000 0.8000000 0.8000000 0.5000000 0.5000000
## [3858] 0.7000000 0.8000000 0.8000000 0.7000000 0.7000000 0.7000000 0.9000000
## [3865] 0.6000000 0.7272727 0.9000000 0.7000000 0.8000000 0.7000000 0.9000000
## [3872] 0.6000000 0.6000000 0.8000000 0.7000000 0.7000000 1.0000000 0.5000000
## [3879] 0.8000000 0.6000000 0.5000000 0.6000000 1.0000000 0.7000000 0.8000000
## [3886] 0.9000000 0.8000000 0.6000000 0.7000000 0.6000000 0.6000000 0.8000000
## [3893] 0.8000000 0.8000000 0.9000000 0.6000000 0.9000000 0.8000000 0.5000000
## [3900] 0.6000000 0.7000000 0.5000000 1.0000000 0.9000000 0.6000000 0.9000000
## [3907] 0.7000000 0.6000000 0.8000000 0.6000000 0.7000000 0.9000000 0.9000000
## [3914] 0.6000000 0.9000000 0.5000000 0.6000000 0.8000000 0.7000000 0.7000000
## [3921] 0.7000000 0.9000000 0.9000000 0.9000000 0.8000000 0.9000000 0.7000000
## [3928] 0.8000000 0.8000000 0.8000000 1.0000000 0.6000000 0.5000000 0.7000000
## [3935] 0.7000000 0.7000000 0.6000000 1.0000000 0.9000000 0.8000000 0.9000000
## [3942] 0.6000000 0.8000000 0.7000000 0.6000000 0.8000000 0.6000000 1.0000000
## [3949] 0.7000000 1.0000000 1.0000000 0.7000000 0.5000000 0.7000000 0.6000000
## [3956] 0.8000000 1.0000000 0.6000000 0.5000000 0.5000000 0.8000000 1.0000000
## [3963] 0.8000000 1.0000000 0.5000000 0.9000000 0.8000000 0.7000000 0.8000000
## [3970] 0.9000000 0.8000000 0.8000000 1.0000000 0.8000000 0.8000000 0.7000000
## [3977] 0.5000000 0.5000000 0.7000000 0.7000000 1.0000000 0.6000000 0.8000000
## [3984] 0.6000000 0.8000000 0.6000000 0.8000000 0.7000000 0.6000000 0.8000000
## [3991] 0.9000000 0.7000000 1.0000000 0.8000000 0.8000000 0.7000000 0.7000000
## [3998] 0.7000000 0.8000000 1.0000000 0.8000000 0.8000000 0.7000000 0.9000000
## [4005] 0.8000000 0.5000000 0.6000000 0.8000000 0.6000000 0.6000000 0.7000000
## [4012] 0.9000000 0.6000000 0.9000000 0.5000000 0.7000000 0.6000000 0.7000000
## [4019] 0.8000000 0.5000000 0.6000000 0.8000000 0.9000000 0.7000000 0.9000000
## [4026] 0.7000000 0.9000000 0.5000000 0.9000000 1.0000000 0.8000000 0.9000000
## [4033] 0.8000000 0.7000000 0.9000000 0.7000000 0.8000000 0.5000000 0.5000000
## [4040] 0.7000000 0.8000000 0.8000000 0.9000000 1.0000000 0.9000000 0.9000000
## [4047] 1.0000000 0.9000000 0.6000000 0.5000000 0.7000000 0.7000000 1.0000000
## [4054] 0.7000000 0.6000000 0.6000000 0.6000000 0.8000000 0.5000000 0.5000000
## [4061] 0.9000000 0.8000000 0.5000000 0.7272727 0.7000000 0.9000000 0.9000000
## [4068] 0.7000000 0.9000000 0.5000000 0.8000000 0.6000000 0.6000000 0.8000000
## [4075] 1.0000000 0.9000000 0.6000000 0.9000000 0.8000000 0.6000000 0.9000000
## [4082] 0.6000000 0.9000000 0.5000000 1.0000000 1.0000000 0.8000000 1.0000000
## [4089] 0.9000000 1.0000000 1.0000000 0.6000000 0.5000000 0.8000000 0.5000000
## [4096] 0.8000000 0.5000000 0.7000000 0.6000000 0.8000000 0.6000000 0.7000000
## [4103] 0.7000000 0.9000000 1.0000000 0.6000000 0.9000000 1.0000000 0.6000000
## [4110] 0.8000000 0.8000000 0.9000000 0.8000000 0.9000000 0.6000000 0.5000000
## [4117] 0.9000000 0.7000000 0.9000000 0.9000000 1.0000000 0.9000000 0.7000000
## [4124] 0.8000000 1.0000000 0.8000000 0.8000000 0.6000000 0.8000000 0.8000000
## [4131] 0.6000000 0.6000000 0.9000000 0.6000000 0.6000000 0.7000000 0.9000000
## [4138] 0.7000000 0.5000000 1.0000000 1.0000000 0.8000000 0.6000000 1.0000000
## [4145] 0.8000000 0.8000000 0.6000000 0.6000000 0.8000000 0.6000000 0.7000000
## [4152] 0.9000000 0.6000000 0.6000000 1.0000000 0.6000000 0.9000000 0.8000000
## [4159] 0.8000000 0.9000000 0.7000000 0.8000000 0.5000000 1.0000000 0.9000000
## [4166] 1.0000000 0.6000000 0.8000000 0.5000000 0.9000000 0.5000000 0.8000000
## [4173] 0.7000000 0.9000000 0.9000000 0.8000000 0.8000000 0.5000000 0.6000000
## [4180] 0.7000000 1.0000000 0.8000000 0.8000000 0.9000000 0.7000000 0.6000000
## [4187] 0.6000000 0.7000000 0.7000000 0.9000000 0.6000000 0.6000000 0.9000000
## [4194] 0.8000000 0.8000000 0.8000000 0.6000000 0.9000000 0.8000000 0.7000000
## [4201] 0.7000000 0.6000000 0.7272727 0.7000000 0.9000000 0.5000000 0.9000000
## [4208] 1.0000000 1.0000000 0.7000000 0.6000000 0.9000000 0.7000000 0.9000000
## [4215] 0.7000000 0.8000000 0.6000000 0.9000000 0.9000000 0.8000000 0.6000000
## [4222] 0.8181818 0.9000000 0.7000000 1.0000000 1.0000000 0.9000000 0.8000000
## [4229] 0.9000000 0.8000000 0.8000000 1.0000000 0.6000000 0.8000000 0.7000000
## [4236] 0.8000000 0.9000000 0.8000000 0.7000000 0.6000000 0.5000000 0.7000000
## [4243] 0.6000000 0.8000000 0.7000000 1.0000000 0.8000000 0.9000000 1.0000000
## [4250] 1.0000000 0.9000000 0.9000000 0.6000000 0.5000000 0.8000000 1.0000000
## [4257] 0.8000000 0.7000000 1.0000000 0.6000000 0.6000000 0.9000000 0.8000000
## [4264] 0.7000000 0.8000000 0.6000000 0.7000000 0.8000000 0.6000000 0.8000000
## [4271] 0.6000000 0.8000000 0.8000000 0.6000000 1.0000000 0.7000000 0.9000000
## [4278] 1.0000000 0.9000000 0.9000000 0.9090909 0.9000000 0.7000000 0.7000000
## [4285] 1.0000000 0.9000000 0.6000000 0.5000000 0.5000000 0.6000000 0.6000000
## [4292] 0.8000000 0.9090909 0.8000000 1.0000000 0.7000000 0.6000000 0.6000000
## [4299] 1.0000000 0.6000000 0.6000000 0.6000000 0.7000000 0.9000000 0.8000000
## [4306] 0.7000000 0.9000000 0.6000000 0.7000000 0.6363636 0.5000000 0.9000000
## [4313] 0.7000000 0.9000000 0.8000000 0.7000000 0.6000000 0.9000000 0.8000000
## [4320] 0.6000000 0.9000000 0.9000000 0.8000000 0.7000000 0.9000000 0.6000000
## [4327] 0.8000000 0.7000000 0.7000000 1.0000000 0.7000000 0.6000000 0.7000000
## [4334] 0.8000000 0.7000000 0.8000000 0.9000000 0.7000000 0.9000000 0.8000000
## [4341] 0.7000000 0.8000000 0.6000000 0.9000000 0.6000000 0.7000000 0.6000000
## [4348] 0.6000000 0.7000000 0.6000000 0.6000000 1.0000000 0.7000000 0.5000000
## [4355] 0.9000000 0.6000000 0.8000000 0.6000000 0.7000000 0.6000000 0.6000000
## [4362] 1.0000000 0.7000000 0.6363636 0.8000000 0.9000000 0.8000000 0.5000000
## [4369] 0.5000000 0.9000000 0.8000000 0.8000000 0.9000000 0.9000000 0.9000000
## [4376] 0.8000000 0.7000000 0.7000000 0.8000000 0.9000000 0.8000000 0.7000000
## [4383] 0.7000000 0.6000000 0.5000000 0.6000000 0.5000000 0.7000000 0.9000000
## [4390] 0.7500000 1.0000000 0.9000000 0.8000000 0.8000000 0.9000000 0.8000000
## [4397] 0.9000000 1.0000000 0.5000000 0.6000000 0.6000000 0.6000000 0.9000000
## [4404] 0.6000000 0.8000000 0.6000000 0.5000000 0.6000000 0.7000000 0.6000000
## [4411] 0.5000000 0.6000000 0.7000000 0.8000000 0.5000000 0.8000000 0.8000000
## [4418] 0.8181818 0.9000000 0.6000000 0.6000000 0.6000000 0.9000000 0.6000000
## [4425] 0.8181818 0.9000000 0.5000000 0.7000000 1.0000000 0.8000000 0.7000000
## [4432] 0.6000000 0.6000000 0.7000000 0.7000000 0.7000000 0.8000000 0.8000000
## [4439] 1.0000000 0.8000000 0.7000000 1.0000000 1.0000000 0.9000000 0.8000000
## [4446] 0.5000000 1.0000000 0.8000000 0.9000000 0.7000000 0.7000000 0.6000000
## [4453] 0.8000000 0.6000000 0.7000000 0.7000000 0.8000000 0.8000000 1.0000000
## [4460] 0.7000000 0.8000000 0.7000000 0.7000000 0.8000000 0.7000000 0.7000000
## [4467] 1.0000000 0.9000000 0.6000000 1.0000000 0.7000000 0.9000000 0.7000000
## [4474] 0.6000000 0.5000000 0.7000000 1.0000000 0.5000000 0.9000000 0.8000000
## [4481] 0.5000000 0.6000000 0.9000000 0.9000000 0.9000000 0.9000000 0.5000000
## [4488] 0.6000000 0.9000000 0.8000000 0.8000000 0.7000000 0.7000000 0.5000000
## [4495] 0.6000000 0.5000000 0.6000000 1.0000000 1.0000000 0.8000000 0.7000000
## [4502] 0.9000000 0.6000000 0.8000000 0.9000000 0.7000000 0.7000000 0.9000000
## [4509] 0.9000000Looking at the new confusion matrix
## Confusion Matrix and Statistics
##
## Actual
## Prediction -1 1
## -1 786 298
## 1 836 2589
##
## Accuracy : 0.7485
## 95% CI : (0.7356, 0.7611)
## No Information Rate : 0.6403
## P-Value [Acc > NIR] : < 2.2e-16
##
## Kappa : 0.4113
##
## Mcnemar's Test P-Value : < 2.2e-16
##
## Sensitivity : 0.8968
## Specificity : 0.4846
## Pos Pred Value : 0.7559
## Neg Pred Value : 0.7251
## Prevalence : 0.6403
## Detection Rate : 0.5742
## Detection Prevalence : 0.7596
## Balanced Accuracy : 0.6907
##
## 'Positive' Class : 1
## Summary of results
Not using a model and instead just guessing should result in us being correct about 64% of the time. Using the optimal model we created should result in an 74% accuracy rate. One thing to note is that both the original model and optimal model have poor specificity or rate of true negatives. The optimal model has a specificity of 48% meaning that we are only classifying 48% of our observations as a non-commercial if it is a non-commercial. One way to know our marketing campaign is working as planned would be if we see an increase in the false negative rate, so that is something concrete we can present to Mr. Rooney on how to see results.