Last active
January 15, 2017 22:37
-
-
Save satulovsky/e5fa35269629b0b2cbbd9683d47fd7f2 to your computer and use it in GitHub Desktop.
ToT Scoring notes
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
| // INPUT for ToT Planing score (Insights) | |
| [ | |
| { | |
| "namespace": "com.lumosity.insights.tot.planning.score", | |
| "name": "userRecords", | |
| "type": "record", | |
| "doc": "Set of ToT gameplay records associated to a user", | |
| "fields": [ | |
| { "name": "userId", "type": "long" }, | |
| { "name": "UserGameplayRecordArray", | |
| "type":{ "type": "array", "items": "com.lumosity.insights.tot.planning.score.UserGameplayRecords" }} | |
| ] | |
| }, | |
| { | |
| "namespace": "com.lumosity.insights.tot.planning.score", | |
| "name": "userGameplayRecords", | |
| "type": "record", | |
| "doc": "Information of a ToT gamplay used to calculate a TP (Train of Thought Planning) Score", | |
| "fields": [ | |
| { "name": "gameId", "type": "int" }, | |
| { "name": "gameResultId", "type": "long" }, | |
| { "name": "selectedLevel", "type": "int" }, // userLevel is messed up in a few users, selectedLevel seems fine | |
| { "name": "diagram", "type": "string" }, | |
| { "name": "timestamp", "type": "int", "logicalType": "date"}, // client timestamp | |
| { "name": "trialsCsv", "type": { "type": "array", "items": "com.lumosity.insights.tot.planning.score.trainRecords" }}, | |
| { "name": "switchCsv", "type": { "type": "array", "items": "com.lumosity.insights.tot.planning.score.switchRecords" }} | |
| ] | |
| }, | |
| { | |
| "namespace": "com.lumosity.insights.tot.planning.score", | |
| "name": "trainRecords", | |
| "type": "record", | |
| "doc": "Events associated to Spawnning trains and train station arrivals", | |
| "fields": [ | |
| { "name": "correct", "type": "boolean" }, | |
| { "name": "destination", "type": "int" }, | |
| { "name": "spawnTimeOffset", "type": "long" } | |
| ] | |
| }, | |
| { | |
| "namespace": "com.lumosity.insights.tot.planning.score", | |
| "name": "switchRecords", | |
| "type": "record", | |
| "doc": "Switch event information", | |
| "fields": [ | |
| { "name": "address", "type": "int" }, | |
| { "name": "timeOffset", "type": "long" } | |
| ] | |
| } | |
| ] | |
| // OUTPUT of ToT Planing score (Insights) | |
| [ | |
| { | |
| "namespace": "com.lumosity.insights.tot.planning.score", | |
| "name": "planningScore", | |
| "type": "record", | |
| "doc": "Planning score associated to a Train of Thought user", | |
| "fields": [ | |
| { "name": "userId", "type": "long" }, | |
| { "name": "planningScores", "type": { "type": "array", "items": "int" }}, // [1, 2, ... , 8], where 1 | |
| { "name": "ageGroupPlanningScores", "type": { "type": "array", "items": "int" }}, // [1, 2, ... , 8] | |
| { "name": "gameLevel", "type": "int" }, // [3, ... , 14] | |
| { "name": "numberGameplaysUsed", "type": "int" }, | |
| { "name": "timestamp", "type": "int", "logicalType": "date"} // client timestamp | |
| ] | |
| } | |
| ] |
Cool!
OK! I think we are close to something. I analyzed 1K records and I turned them into the Dataset shown below (showing only the results of the first 90 records). As I mentioned before, the population table used to calculate the percentiles (the output scores) is read from s3. If these results sounds reasonable, I will do minor refactoring to my code so it's more readable.
root
|-- userId: integer (nullable = true)
|-- ageGroup: integer (nullable = true)
|-- ageGroupPlanningScore: integer (nullable = true)
|-- gameLevel: integer (nullable = true)
|-- numberGameplaysUsed: integer (nullable = true)
|-- planningScore: integer (nullable = true)
|-- timestamp: long (nullable = true)
+--------+--------+---------------------+---------+-------------------+-------------+-------------+
| userId|ageGroup|ageGroupPlanningScore|gameLevel|numberGameplaysUsed|planningScore| timestamp|
+--------+--------+---------------------+---------+-------------------+-------------+-------------+
|85373299| 10| 48| 5| 1| 14|1470020793000|
|85373299| 20| 46| 5| 1| 12|1470020793000|
|85373299| 30| 47| 5| 1| 15|1470020793000|
|85373299| 40| 47| 5| 1| 19|1470020793000|
|85373299| 50| 47| 5| 1| 20|1470020793000|
|85373299| 60| 48| 5| 1| 23|1470020793000|
|85373299| 70| 43| 5| 1| 29|1470020793000|
|85373299| 80| 44| 5| 1| 23|1470020793000|
|85373299| 0| 46| 5| 1| 21|1470020793000|
|85372948| 10| 46| 4| 1| 68|1470019761000|
|85372948| 20| 45| 4| 1| 66|1470019761000|
|85372948| 30| 45| 4| 1| 69|1470019761000|
|85372948| 40| 46| 4| 1| 72|1470019761000|
|85372948| 50| 42| 4| 1| 75|1470019761000|
|85372948| 60| 43| 4| 1| 80|1470019761000|
|85372948| 70| 45| 4| 1| 84|1470019761000|
|85372948| 80| 43| 4| 1| 81|1470019761000|
|85372948| 0| 43| 4| 1| 75|1470019761000|
|85372118| 10| 50| 7| 1| 27|1470016161000|
|85372118| 20| 49| 7| 1| 24|1470016161000|
|85372118| 30| 49| 7| 1| 26|1470016161000|
|85372118| 40| 50| 7| 1| 26|1470016161000|
|85372118| 50| 49| 7| 1| 30|1470016161000|
|85372118| 60| 48| 7| 1| 36|1470016161000|
|85372118| 70| 49| 7| 1| 39|1470016161000|
|85372118| 80| 51| 7| 1| 41|1470016161000|
|85372118| 0| 49| 7| 1| 33|1470016161000|
|85371911| 10| 50| 8| 2| 78|1470016185000|
|85371911| 20| 51| 8| 2| 74|1470016185000|
|85371911| 30| 51| 8| 2| 74|1470016185000|
|85371911| 40| 51| 8| 2| 77|1470016185000|
|85371911| 50| 51| 8| 2| 77|1470016185000|
|85371911| 60| 51| 8| 2| 78|1470016185000|
|85371911| 70| 51| 8| 2| 80|1470016185000|
|85371911| 80| 50| 8| 2| 84|1470016185000|
|85371911| 0| 51| 8| 2| 78|1470016185000|
|85371844| 10| 53| 11| 1| 70|1470016802000|
|85371844| 20| 51| 11| 1| 67|1470016802000|
|85371844| 30| 54| 11| 1| 67|1470016802000|
|85371844| 40| 53| 11| 1| 68|1470016802000|
|85371844| 50| 54| 11| 1| 68|1470016802000|
|85371844| 60| 54| 11| 1| 71|1470016802000|
|85371844| 70| 54| 11| 1| 73|1470016802000|
|85371844| 80| 55| 11| 1| 72|1470016802000|
|85371844| 0| 54| 11| 1| 70|1470016802000|
|85371795| 10| 42| 3| 1| 16|1470015581000|
|85371795| 20| 42| 3| 1| 14|1470015581000|
|85371795| 30| 41| 3| 1| 20|1470015581000|
|85371795| 40| 41| 3| 1| 26|1470015581000|
|85371795| 50| 39| 3| 1| 32|1470015581000|
|85371795| 60| 40| 3| 1| 45|1470015581000|
|85371795| 70| 41| 3| 1| 63|1470015581000|
|85371795| 80| 44| 3| 1| 72|1470015581000|
|85371795| 0| 39| 3| 1| 34|1470015581000|
|85371677| 10| 48| 6| 1| 55|1470015204000|
|85371677| 20| 48| 6| 1| 47|1470015204000|
|85371677| 30| 46| 6| 1| 52|1470015204000|
|85371677| 40| 47| 6| 1| 51|1470015204000|
|85371677| 50| 47| 6| 1| 53|1470015204000|
|85371677| 60| 47| 6| 1| 53|1470015204000|
|85371677| 70| 47| 6| 1| 56|1470015204000|
|85371677| 80| 45| 6| 1| 55|1470015204000|
|85371677| 0| 46| 6| 1| 53|1470015204000|
|85371536| 10| 42| 3| 1| 70|1470016562000|
|85371536| 20| 42| 3| 1| 67|1470016562000|
|85371536| 30| 41| 3| 1| 72|1470016562000|
|85371536| 40| 41| 3| 1| 78|1470016562000|
|85371536| 50| 39| 3| 1| 82|1470016562000|
|85371536| 60| 40| 3| 1| 89|1470016562000|
|85371536| 70| 41| 3| 1| 94|1470016562000|
|85371536| 80| 44| 3| 1| 96|1470016562000|
|85371536| 0| 39| 3| 1| 80|1470016562000|
|85371428| 10| 45| 3| 1| 41|1470013857000|
|85371428| 20| 45| 3| 1| 42|1470013857000|
|85371428| 30| 42| 3| 1| 49|1470013857000|
|85371428| 40| 42| 3| 1| 56|1470013857000|
|85371428| 50| 39| 3| 1| 63|1470013857000|
|85371428| 60| 38| 3| 1| 72|1470013857000|
|85371428| 70| 39| 3| 1| 81|1470013857000|
|85371428| 80| 42| 3| 1| 82|1470013857000|
|85371428| 0| 39| 3| 1| 54|1470013857000|
|85371171| 10| 53| 9| 1| 72|1470014251000|
|85371171| 20| 52| 9| 1| 71|1470014251000|
|85371171| 30| 53| 9| 1| 68|1470014251000|
|85371171| 40| 52| 9| 1| 74|1470014251000|
|85371171| 50| 55| 9| 1| 75|1470014251000|
|85371171| 60| 55| 9| 1| 77|1470014251000|
|85371171| 70| 55| 9| 1| 83|1470014251000|
|85371171| 80| 53| 9| 1| 82|1470014251000|
|85371171| 0| 54| 9| 1| 77|1470014251000|
|85370708| 10| 46| 4| 1| 60|1470015635000|
|85370708| 20| 45| 4| 1| 55|1470015635000|
|85370708| 30| 45| 4| 1| 61|1470015635000|
|85370708| 40| 46| 4| 1| 66|1470015635000|
|85370708| 50| 42| 4| 1| 68|1470015635000|
|85370708| 60| 43| 4| 1| 72|1470015635000|
|85370708| 70| 45| 4| 1| 79|1470015635000|
|85370708| 80| 43| 4| 1| 76|1470015635000|
|85370708| 0| 43| 4| 1| 68|1470015635000|
|85370673| 10| 48| 6| 1| 99|1470011239000|
|85370673| 20| 48| 6| 1| 99|1470011239000|
|85370673| 30| 46| 6| 1| 98|1470011239000|
|85370673| 40| 47| 6| 1| 99|1470011239000|
|85370673| 50| 47| 6| 1| 98|1470011239000|
|85370673| 60| 47| 6| 1| 98|1470011239000|
|85370673| 70| 47| 6| 1| 98|1470011239000|
|85370673| 80| 45| 6| 1| 98|1470011239000|
|85370673| 0| 46| 6| 1| 98|1470011239000|
|85369992| 10| 48| 5| 1| 30|1470014640000|
|85369992| 20| 46| 5| 1| 24|1470014640000|
|85369992| 30| 47| 5| 1| 29|1470014640000|
|85369992| 40| 47| 5| 1| 34|1470014640000|
|85369992| 50| 47| 5| 1| 35|1470014640000|
|85369992| 60| 48| 5| 1| 40|1470014640000|
|85369992| 70| 43| 5| 1| 45|1470014640000|
|85369992| 80| 44| 5| 1| 39|1470014640000|
|85369992| 0| 46| 5| 1| 36|1470014640000|
|85369960| 10| 42| 3| 1| 83|1470013973000|
|85369960| 20| 42| 3| 1| 80|1470013973000|
|85369960| 30| 41| 3| 1| 83|1470013973000|
|85369960| 40| 41| 3| 1| 88|1470013973000|
|85369960| 50| 39| 3| 1| 91|1470013973000|
|85369960| 60| 40| 3| 1| 94|1470013973000|
|85369960| 70| 41| 3| 1| 97|1470013973000|
|85369960| 80| 44| 3| 1| 98|1470013973000|
|85369960| 0| 39| 3| 1| 89|1470013973000|
|85368909| 10| 50| 8| 9| 45|1470013613000|
|85368909| 20| 51| 8| 9| 43|1470013613000|
|85368909| 30| 51| 8| 9| 42|1470013613000|
|85368909| 40| 51| 8| 9| 45|1470013613000|
|85368909| 50| 51| 8| 9| 46|1470013613000|
|85368909| 60| 51| 8| 9| 49|1470013613000|
|85368909| 70| 51| 8| 9| 53|1470013613000|
|85368909| 80| 50| 8| 9| 59|1470013613000|
|85368909| 0| 51| 8| 9| 49|1470013613000|
|85368334| 10| 53| 9| 1| 89|1470009886000|
|85368334| 20| 52| 9| 1| 89|1470009886000|
|85368334| 30| 53| 9| 1| 86|1470009886000|
|85368334| 40| 52| 9| 1| 88|1470009886000|
|85368334| 50| 55| 9| 1| 89|1470009886000|
|85368334| 60| 55| 9| 1| 89|1470009886000|
|85368334| 70| 55| 9| 1| 93|1470009886000|
|85368334| 80| 53| 9| 1| 90|1470009886000|
|85368334| 0| 54| 9| 1| 90|1470009886000|
|85367437| 10| 50| 12| 9| 45|1470011039000|
|85367437| 20| 52| 12| 9| 43|1470011039000|
|85367437| 30| 53| 12| 9| 42|1470011039000|
|85367437| 40| 52| 12| 9| 46|1470011039000|
|85367437| 50| 55| 12| 9| 44|1470011039000|
|85367437| 60| 55| 12| 9| 47|1470011039000|
|85367437| 70| 56| 12| 9| 48|1470011039000|
|85367437| 80| 54| 12| 9| 49|1470011039000|
|85367437| 0| 54| 12| 9| 46|1470011039000|
|85364365| 10| 53| 9| 2| 93|1470017664000|
|85364365| 20| 52| 9| 2| 94|1470017664000|
|85364365| 30| 53| 9| 2| 91|1470017664000|
|85364365| 40| 52| 9| 2| 92|1470017664000|
|85364365| 50| 55| 9| 2| 92|1470017664000|
|85364365| 60| 55| 9| 2| 92|1470017664000|
|85364365| 70| 55| 9| 2| 95|1470017664000|
|85364365| 80| 53| 9| 2| 93|1470017664000|
|85364365| 0| 54| 9| 2| 93|1470017664000|
|85363131| 10| 50| 8| 1| 10|1470016845000|
|85363131| 20| 51| 8| 1| 9|1470016845000|
|85363131| 30| 51| 8| 1| 10|1470016845000|
|85363131| 40| 51| 8| 1| 10|1470016845000|
|85363131| 50| 51| 8| 1| 11|1470016845000|
|85363131| 60| 51| 8| 1| 13|1470016845000|
|85363131| 70| 51| 8| 1| 16|1470016845000|
|85363131| 80| 50| 8| 1| 21|1470016845000|
|85363131| 0| 51| 8| 1| 13|1470016845000|
|85361201| 10| 50| 8| 2| 86|1470014800000|
|85361201| 20| 51| 8| 2| 84|1470014800000|
|85361201| 30| 51| 8| 2| 84|1470014800000|
|85361201| 40| 51| 8| 2| 86|1470014800000|
|85361201| 50| 51| 8| 2| 85|1470014800000|
|85361201| 60| 51| 8| 2| 86|1470014800000|
|85361201| 70| 51| 8| 2| 87|1470014800000|
|85361201| 80| 50| 8| 2| 89|1470014800000|
|85361201| 0| 51| 8| 2| 86|1470014800000|
|85359357| 10| 53| 11| 1| 40|1470014397000|
|85359357| 20| 51| 11| 1| 36|1470014397000|
|85359357| 30| 54| 11| 1| 39|1470014397000|
|85359357| 40| 53| 11| 1| 39|1470014397000|
|85359357| 50| 54| 11| 1| 40|1470014397000|
|85359357| 60| 54| 11| 1| 42|1470014397000|
|85359357| 70| 54| 11| 1| 45|1470014397000|
|85359357| 80| 55| 11| 1| 46|1470014397000|
|85359357| 0| 54| 11| 1| 42|1470014397000|
|85354522| 10| 53| 9| 2| 37|1470015212000|
|85354522| 20| 52| 9| 2| 31|1470015212000|
|85354522| 30| 53| 9| 2| 30|1470015212000|
|85354522| 40| 52| 9| 2| 41|1470015212000|
|85354522| 50| 55| 9| 2| 38|1470015212000|
|85354522| 60| 55| 9| 2| 44|1470015212000|
|85354522| 70| 55| 9| 2| 50|1470015212000|
|85354522| 80| 53| 9| 2| 56|1470015212000|
|85354522| 0| 54| 9| 2| 43|1470015212000|
|85350342| 10| 53| 9| 4| 36|1470014781000|
|85350342| 20| 52| 9| 4| 31|1470014781000|
|85350342| 30| 53| 9| 4| 29|1470014781000|
|85350342| 40| 52| 9| 4| 40|1470014781000|
|85350342| 50| 55| 9| 4| 37|1470014781000|
|85350342| 60| 55| 9| 4| 43|1470014781000|
|85350342| 70| 55| 9| 4| 49|1470014781000|
|85350342| 80| 53| 9| 4| 55|1470014781000|
|85350342| 0| 54| 9| 4| 42|1470014781000|
|85324171| 10| 42| 3| 1| 28|1470009690000|
|85324171| 20| 42| 3| 1| 26|1470009690000|
|85324171| 30| 41| 3| 1| 33|1470009690000|
|85324171| 40| 41| 3| 1| 40|1470009690000|
|85324171| 50| 39| 3| 1| 47|1470009690000|
|85324171| 60| 40| 3| 1| 60|1470009690000|
|85324171| 70| 41| 3| 1| 76|1470009690000|
|85324171| 80| 44| 3| 1| 83|1470009690000|
|85324171| 0| 39| 3| 1| 47|1470009690000|
|85309658| 10| 42| 3| 1| 28|1470014682000|
|85309658| 20| 42| 3| 1| 25|1470014682000|
|85309658| 30| 41| 3| 1| 32|1470014682000|
|85309658| 40| 41| 3| 1| 39|1470014682000|
|85309658| 50| 39| 3| 1| 46|1470014682000|
|85309658| 60| 40| 3| 1| 60|1470014682000|
|85309658| 70| 41| 3| 1| 76|1470014682000|
|85309658| 80| 44| 3| 1| 83|1470014682000|
|85309658| 0| 39| 3| 1| 46|1470014682000|
|85292080| 10| 53| 11| 2| 26|1470020162000|
|85292080| 20| 51| 11| 2| 25|1470020162000|
|85292080| 30| 54| 11| 2| 27|1470020162000|
|85292080| 40| 53| 11| 2| 27|1470020162000|
|85292080| 50| 54| 11| 2| 29|1470020162000|
|85292080| 60| 54| 11| 2| 30|1470020162000|
|85292080| 70| 54| 11| 2| 33|1470020162000|
|85292080| 80| 55| 11| 2| 35|1470020162000|
|85292080| 0| 54| 11| 2| 30|1470020162000|
|85288203| 10| 50| 8| 4| 37|1470015350000|
|85288203| 20| 51| 8| 4| 34|1470015350000|
|85288203| 30| 51| 8| 4| 35|1470015350000|
|85288203| 40| 51| 8| 4| 37|1470015350000|
|85288203| 50| 51| 8| 4| 38|1470015350000|
|85288203| 60| 51| 8| 4| 41|1470015350000|
|85288203| 70| 51| 8| 4| 45|1470015350000|
|85288203| 80| 50| 8| 4| 51|1470015350000|
|85288203| 0| 51| 8| 4| 41|1470015350000|
|85281886| 10| 48| 5| 1| 1|1470016951000|
|85281886| 20| 46| 5| 1| 1|1470016951000|
|85281886| 30| 47| 5| 1| 1|1470016951000|
|85281886| 40| 47| 5| 1| 2|1470016951000|
|85281886| 50| 47| 5| 1| 2|1470016951000|
|85281886| 60| 48| 5| 1| 2|1470016951000|
|85281886| 70| 43| 5| 1| 6|1470016951000|
|85281886| 80| 44| 5| 1| 4|1470016951000|
|85281886| 0| 46| 5| 1| 3|1470016951000|
|85278514| 10| 46| 4| 1| 88|1470014959000|
|85278514| 20| 44| 4| 1| 86|1470014959000|
|85278514| 30| 45| 4| 1| 89|1470014959000|
|85278514| 40| 46| 4| 1| 91|1470014959000|
|85278514| 50| 46| 4| 1| 89|1470014959000|
|85278514| 60| 45| 4| 1| 91|1470014959000|
|85278514| 70| 45| 4| 1| 92|1470014959000|
|85278514| 80| 45| 4| 1| 91|1470014959000|
|85278514| 0| 45| 4| 1| 89|1470014959000|
|85268360| 10| 50| 8| 3| 64|1470010964000|
|85268360| 20| 51| 8| 3| 63|1470010964000|
|85268360| 30| 51| 8| 3| 62|1470010964000|
|85268360| 40| 51| 8| 3| 65|1470010964000|
|85268360| 50| 51| 8| 3| 65|1470010964000|
|85268360| 60| 51| 8| 3| 68|1470010964000|
|85268360| 70| 51| 8| 3| 70|1470010964000|
|85268360| 80| 50| 8| 3| 75|1470010964000|
|85268360| 0| 51| 8| 3| 68|1470010964000|
|85247514| 10| 50| 8| 1| 93|1470013484000|
|85247514| 20| 51| 8| 1| 93|1470013484000|
|85247514| 30| 51| 8| 1| 93|1470013484000|
|85247514| 40| 51| 8| 1| 94|1470013484000|
|85247514| 50| 51| 8| 1| 93|1470013484000|
|85247514| 60| 51| 8| 1| 94|1470013484000|
|85247514| 70| 51| 8| 1| 95|1470013484000|
|85247514| 80| 50| 8| 1| 95|1470013484000|
|85247514| 0| 51| 8| 1| 94|1470013484000|
|85245627| 10| 50| 8| 1| 19|1470013222000|
|85245627| 20| 51| 8| 1| 17|1470013222000|
|85245627| 30| 51| 8| 1| 18|1470013222000|
|85245627| 40| 51| 8| 1| 19|1470013222000|
|85245627| 50| 51| 8| 1| 21|1470013222000|
|85245627| 60| 51| 8| 1| 23|1470013222000|
|85245627| 70| 51| 8| 1| 28|1470013222000|
|85245627| 80| 50| 8| 1| 34|1470013222000|
|85245627| 0| 51| 8| 1| 24|1470013222000|
|85235781| 10| 50| 7| 3| 37|1470012532000|
|85235781| 20| 49| 7| 3| 33|1470012532000|
|85235781| 30| 49| 7| 3| 35|1470012532000|
|85235781| 40| 50| 7| 3| 36|1470012532000|
|85235781| 50| 49| 7| 3| 40|1470012532000|
|85235781| 60| 48| 7| 3| 46|1470012532000|
|85235781| 70| 49| 7| 3| 49|1470012532000|
|85235781| 80| 51| 7| 3| 50|1470012532000|
|85235781| 0| 49| 7| 3| 43|1470012532000|
|85233702| 10| 50| 7| 1| 64|1470017100000|
|85233702| 20| 49| 7| 1| 61|1470017100000|
|85233702| 30| 49| 7| 1| 60|1470017100000|
|85233702| 40| 50| 7| 1| 61|1470017100000|
|85233702| 50| 49| 7| 1| 64|1470017100000|
|85233702| 60| 48| 7| 1| 69|1470017100000|
|85233702| 70| 49| 7| 1| 70|1470017100000|
|85233702| 80| 51| 7| 1| 68|1470017100000|
|85233702| 0| 49| 7| 1| 66|1470017100000|
|85214828| 10| 50| 7| 1| 71|1470012160000|
|85214828| 20| 49| 7| 1| 69|1470012160000|
|85214828| 30| 49| 7| 1| 67|1470012160000|
|85214828| 40| 50| 7| 1| 69|1470012160000|
|85214828| 50| 49| 7| 1| 72|1470012160000|
|85214828| 60| 48| 7| 1| 75|1470012160000|
|85214828| 70| 49| 7| 1| 76|1470012160000|
|85214828| 80| 51| 7| 1| 74|1470012160000|
|85214828| 0| 49| 7| 1| 73|1470012160000|
|85208585| 10| 50| 8| 5| 56|1470012646000|
|85208585| 20| 51| 8| 5| 54|1470012646000|
|85208585| 30| 51| 8| 5| 53|1470012646000|
|85208585| 40| 51| 8| 5| 56|1470012646000|
|85208585| 50| 51| 8| 5| 57|1470012646000|
|85208585| 60| 51| 8| 5| 60|1470012646000|
|85208585| 70| 51| 8| 5| 63|1470012646000|
|85208585| 80| 50| 8| 5| 68|1470012646000|
|85208585| 0| 51| 8| 5| 60|1470012646000|
|85205347| 10| 50| 7| 2| 77|1470015366000|
|85205347| 20| 49| 7| 2| 76|1470015366000|
|85205347| 30| 49| 7| 2| 75|1470015366000|
|85205347| 40| 50| 7| 2| 76|1470015366000|
|85205347| 50| 49| 7| 2| 78|1470015366000|
|85205347| 60| 48| 7| 2| 80|1470015366000|
|85205347| 70| 49| 7| 2| 81|1470015366000|
|85205347| 80| 51| 7| 2| 78|1470015366000|
|85205347| 0| 49| 7| 2| 79|1470015366000|
|85186827| 10| 51| 14| 7| 37|1470016803000|
|85186827| 20| 51| 14| 7| 36|1470016803000|
|85186827| 30| 49| 14| 7| 30|1470016803000|
|85186827| 40| 50| 14| 7| 26|1470016803000|
|85186827| 50| 50| 14| 7| 24|1470016803000|
|85186827| 60| 49| 14| 7| 26|1470016803000|
|85186827| 70| 50| 14| 7| 30|1470016803000|
|85186827| 80| 51| 14| 7| 49|1470016803000|
|85186827| 0| 50| 14| 7| 27|1470016803000|
|85163257| 10| 54| 13| 1| 3|1470015040000|
|85163257| 20| 53| 13| 1| 5|1470015040000|
|85163257| 30| 54| 13| 1| 5|1470015040000|
|85163257| 40| 55| 13| 1| 5|1470015040000|
|85163257| 50| 56| 13| 1| 5|1470015040000|
|85163257| 60| 57| 13| 1| 5|1470015040000|
|85163257| 70| 54| 13| 1| 5|1470015040000|
|85163257| 80| 54| 13| 1| 5|1470015040000|
|85163257| 0| 56| 13| 1| 5|1470015040000|
|85144196| 10| 42| 3| 1| 7|1470020565000|
|85144196| 20| 42| 3| 1| 6|1470020565000|
|85144196| 30| 41| 3| 1| 10|1470020565000|
|85144196| 40| 41| 3| 1| 14|1470020565000|
|85144196| 50| 39| 3| 1| 18|1470020565000|
|85144196| 60| 40| 3| 1| 28|1470020565000|
|85144196| 70| 41| 3| 1| 45|1470020565000|
|85144196| 80| 44| 3| 1| 57|1470020565000|
|85144196| 0| 39| 3| 1| 21|1470020565000|
|85141743| 10| 50| 12| 1| 27|1470020695000|
|85141743| 20| 52| 12| 1| 26|1470020695000|
|85141743| 30| 53| 12| 1| 27|1470020695000|
|85141743| 40| 52| 12| 1| 30|1470020695000|
|85141743| 50| 55| 12| 1| 28|1470020695000|
|85141743| 60| 55| 12| 1| 32|1470020695000|
|85141743| 70| 56| 12| 1| 33|1470020695000|
|85141743| 80| 54| 12| 1| 33|1470020695000|
|85141743| 0| 54| 12| 1| 30|1470020695000|
|85078363| 10| 50| 7| 3| 80|1470020230000|
|85078363| 20| 49| 7| 3| 78|1470020230000|
|85078363| 30| 49| 7| 3| 77|1470020230000|
|85078363| 40| 50| 7| 3| 78|1470020230000|
|85078363| 50| 49| 7| 3| 80|1470020230000|
|85078363| 60| 48| 7| 3| 82|1470020230000|
|85078363| 70| 49| 7| 3| 83|1470020230000|
|85078363| 80| 51| 7| 3| 80|1470020230000|
|85078363| 0| 49| 7| 3| 81|1470020230000|
|85057404| 10| 50| 7| 1| 26|1470011721000|
|85057404| 20| 49| 7| 1| 24|1470011721000|
|85057404| 30| 49| 7| 1| 26|1470011721000|
|85057404| 40| 50| 7| 1| 26|1470011721000|
|85057404| 50| 49| 7| 1| 30|1470011721000|
|85057404| 60| 48| 7| 1| 36|1470011721000|
|85057404| 70| 49| 7| 1| 39|1470011721000|
|85057404| 80| 51| 7| 1| 41|1470011721000|
|85057404| 0| 49| 7| 1| 33|1470011721000|
|85012900| 10| 50| 8| 1| 54|1470019928000|
|85012900| 20| 51| 8| 1| 52|1470019928000|
|85012900| 30| 51| 8| 1| 51|1470019928000|
|85012900| 40| 51| 8| 1| 54|1470019928000|
|85012900| 50| 51| 8| 1| 55|1470019928000|
|85012900| 60| 51| 8| 1| 58|1470019928000|
|85012900| 70| 51| 8| 1| 61|1470019928000|
|85012900| 80| 50| 8| 1| 66|1470019928000|
|85012900| 0| 51| 8| 1| 58|1470019928000|
|84988328| 10| 50| 12| 1| 15|1470012662000|
|84988328| 20| 52| 12| 1| 14|1470012662000|
|84988328| 30| 53| 12| 1| 15|1470012662000|
|84988328| 40| 52| 12| 1| 17|1470012662000|
|84988328| 50| 55| 12| 1| 15|1470012662000|
|84988328| 60| 55| 12| 1| 19|1470012662000|
|84988328| 70| 56| 12| 1| 18|1470012662000|
|84988328| 80| 54| 12| 1| 18|1470012662000|
|84988328| 0| 54| 12| 1| 17|1470012662000|
|84987244| 10| 50| 12| 19| 31|1470014183000|
|84987244| 20| 52| 12| 19| 29|1470014183000|
|84987244| 30| 53| 12| 19| 30|1470014183000|
|84987244| 40| 52| 12| 19| 34|1470014183000|
|84987244| 50| 55| 12| 19| 32|1470014183000|
|84987244| 60| 55| 12| 19| 35|1470014183000|
|84987244| 70| 56| 12| 19| 36|1470014183000|
|84987244| 80| 54| 12| 19| 36|1470014183000|
|84987244| 0| 54| 12| 19| 34|1470014183000|
|84943704| 10| 50| 7| 2| 56|1470013042000|
|84943704| 20| 49| 7| 2| 52|1470013042000|
|84943704| 30| 49| 7| 2| 53|1470013042000|
|84943704| 40| 50| 7| 2| 54|1470013042000|
|84943704| 50| 49| 7| 2| 57|1470013042000|
|84943704| 60| 48| 7| 2| 62|1470013042000|
|84943704| 70| 49| 7| 2| 64|1470013042000|
|84943704| 80| 51| 7| 2| 64|1470013042000|
|84943704| 0| 49| 7| 2| 60|1470013042000|
|84941717| 10| 51| 14| 1| 14|1470014917000|
|84941717| 20| 51| 14| 1| 13|1470014917000|
|84941717| 30| 49| 14| 1| 10|1470014917000|
|84941717| 40| 50| 14| 1| 10|1470014917000|
|84941717| 50| 50| 14| 1| 9|1470014917000|
|84941717| 60| 49| 14| 1| 10|1470014917000|
|84941717| 70| 50| 14| 1| 12|1470014917000|
|84941717| 80| 51| 14| 1| 23|1470014917000|
|84941717| 0| 50| 14| 1| 10|1470014917000|
|84941179| 10| 54| 13| 1| 8|1470017652000|
|84941179| 20| 53| 13| 1| 11|1470017652000|
|84941179| 30| 54| 13| 1| 11|1470017652000|
|84941179| 40| 55| 13| 1| 10|1470017652000|
|84941179| 50| 56| 13| 1| 10|1470017652000|
|84941179| 60| 57| 13| 1| 11|1470017652000|
|84941179| 70| 54| 13| 1| 11|1470017652000|
|84941179| 80| 54| 13| 1| 10|1470017652000|
|84941179| 0| 56| 13| 1| 11|1470017652000|
|84877700| 10| 50| 8| 1| 31|1470017733000|
|84877700| 20| 51| 8| 1| 28|1470017733000|
|84877700| 30| 51| 8| 1| 29|1470017733000|
|84877700| 40| 51| 8| 1| 30|1470017733000|
|84877700| 50| 51| 8| 1| 32|1470017733000|
|84877700| 60| 51| 8| 1| 35|1470017733000|
|84877700| 70| 51| 8| 1| 40|1470017733000|
|84877700| 80| 50| 8| 1| 46|1470017733000|
|84877700| 0| 51| 8| 1| 35|1470017733000|
|84832977| 10| 51| 14| 7| 7|1470014234000|
|84832977| 20| 51| 14| 7| 5|1470014234000|
|84832977| 30| 49| 14| 7| 4|1470014234000|
|84832977| 40| 50| 14| 7| 4|1470014234000|
|84832977| 50| 50| 14| 7| 4|1470014234000|
|84832977| 60| 49| 14| 7| 4|1470014234000|
|84832977| 70| 50| 14| 7| 6|1470014234000|
|84832977| 80| 51| 14| 7| 12|1470014234000|
|84832977| 0| 50| 14| 7| 5|1470014234000|
|84831732| 10| 48| 6| 1| 89|1470014274000|
|84831732| 20| 48| 6| 1| 85|1470014274000|
|84831732| 30| 46| 6| 1| 87|1470014274000|
|84831732| 40| 47| 6| 1| 86|1470014274000|
|84831732| 50| 47| 6| 1| 87|1470014274000|
|84831732| 60| 47| 6| 1| 84|1470014274000|
|84831732| 70| 47| 6| 1| 86|1470014274000|
|84831732| 80| 45| 6| 1| 84|1470014274000|
|84831732| 0| 46| 6| 1| 86|1470014274000|
|84759030| 10| 50| 7| 1| 24|1470013248000|
|84759030| 20| 49| 7| 1| 22|1470013248000|
|84759030| 30| 49| 7| 1| 24|1470013248000|
|84759030| 40| 50| 7| 1| 24|1470013248000|
|84759030| 50| 49| 7| 1| 27|1470013248000|
|84759030| 60| 48| 7| 1| 34|1470013248000|
|84759030| 70| 49| 7| 1| 37|1470013248000|
|84759030| 80| 51| 7| 1| 39|1470013248000|
|84759030| 0| 49| 7| 1| 31|1470013248000|
|84678168| 10| 51| 14| 6| 10|1470011080000|
|84678168| 20| 51| 14| 6| 9|1470011080000|
|84678168| 30| 49| 14| 6| 7|1470011080000|
|84678168| 40| 50| 14| 6| 7|1470011080000|
|84678168| 50| 50| 14| 6| 6|1470011080000|
|84678168| 60| 49| 14| 6| 7|1470011080000|
|84678168| 70| 50| 14| 6| 8|1470011080000|
|84678168| 80| 51| 14| 6| 17|1470011080000|
|84678168| 0| 50| 14| 6| 7|1470011080000|
|84615236| 10| 53| 9| 1| 67|1470015767000|
|84615236| 20| 52| 9| 1| 64|1470015767000|
|84615236| 30| 53| 9| 1| 61|1470015767000|
|84615236| 40| 52| 9| 1| 68|1470015767000|
|84615236| 50| 55| 9| 1| 69|1470015767000|
|84615236| 60| 55| 9| 1| 72|1470015767000|
|84615236| 70| 55| 9| 1| 79|1470015767000|
|84615236| 80| 53| 9| 1| 78|1470015767000|
|84615236| 0| 54| 9| 1| 72|1470015767000|
|84612695| 10| 51| 22| 3| 86|1470019412000|
|84612695| 20| 51| 22| 3| 81|1470019412000|
|84612695| 30| 49| 22| 3| 77|1470019412000|
|84612695| 40| 50| 22| 3| 66|1470019412000|
|84612695| 50| 50| 22| 3| 66|1470019412000|
|84612695| 60| 49| 22| 3| 69|1470019412000|
|84612695| 70| 50| 22| 3| 73|1470019412000|
|84612695| 80| 51| 22| 3| 87|1470019412000|
|84612695| 0| 50| 22| 3| 69|1470019412000|
|84607109| 10| 51| 16| 1| 86|1470015665000|
|84607109| 20| 51| 16| 1| 82|1470015665000|
|84607109| 30| 49| 16| 1| 78|1470015665000|
|84607109| 40| 50| 16| 1| 68|1470015665000|
|84607109| 50| 50| 16| 1| 67|1470015665000|
|84607109| 60| 49| 16| 1| 70|1470015665000|
|84607109| 70| 50| 16| 1| 74|1470015665000|
|84607109| 80| 51| 16| 1| 88|1470015665000|
|84607109| 0| 50| 16| 1| 71|1470015665000|
|84546295| 10| 53| 11| 1| 93|1470013538000|
|84546295| 20| 51| 11| 1| 91|1470013538000|
|84546295| 30| 54| 11| 1| 88|1470013538000|
|84546295| 40| 53| 11| 1| 90|1470013538000|
|84546295| 50| 54| 11| 1| 89|1470013538000|
|84546295| 60| 54| 11| 1| 90|1470013538000|
|84546295| 70| 54| 11| 1| 92|1470013538000|
|84546295| 80| 55| 11| 1| 89|1470013538000|
|84546295| 0| 54| 11| 1| 90|1470013538000|
|84504847| 10| 51| 14| 4| 20|1470013297000|
|84504847| 20| 51| 14| 4| 19|1470013297000|
|84504847| 30| 49| 14| 4| 15|1470013297000|
|84504847| 40| 50| 14| 4| 14|1470013297000|
|84504847| 50| 50| 14| 4| 13|1470013297000|
|84504847| 60| 49| 14| 4| 14|1470013297000|
|84504847| 70| 50| 14| 4| 17|1470013297000|
|84504847| 80| 51| 14| 4| 31|1470013297000|
|84504847| 0| 50| 14| 4| 15|1470013297000|
|84469821| 10| 54| 13| 1| 18|1470011276000|
|84469821| 20| 53| 13| 1| 22|1470011276000|
|84469821| 30| 54| 13| 1| 22|1470011276000|
|84469821| 40| 55| 13| 1| 22|1470011276000|
|84469821| 50| 56| 13| 1| 21|1470011276000|
|84469821| 60| 57| 13| 1| 23|1470011276000|
|84469821| 70| 54| 13| 1| 23|1470011276000|
|84469821| 80| 54| 13| 1| 23|1470011276000|
|84469821| 0| 56| 13| 1| 22|1470011276000|
|84465023| 10| 53| 10| 1| 45|1470009864000|
|84465023| 20| 53| 10| 1| 46|1470009864000|
|84465023| 30| 53| 10| 1| 45|1470009864000|
|84465023| 40| 54| 10| 1| 45|1470009864000|
|84465023| 50| 54| 10| 1| 46|1470009864000|
|84465023| 60| 54| 10| 1| 47|1470009864000|
|84465023| 70| 53| 10| 1| 53|1470009864000|
|84465023| 80| 53| 10| 1| 53|1470009864000|
|84465023| 0| 54| 10| 1| 47|1470009864000|
|84410011| 10| 49| 14| 2| 6|1470020997000|
|84410011| 20| 50| 14| 2| 6|1470020997000|
|84410011| 30| 50| 14| 2| 5|1470020997000|
|84410011| 40| 49| 14| 2| 5|1470020997000|
|84410011| 50| 50| 14| 2| 5|1470020997000|
|84410011| 60| 50| 14| 2| 6|1470020997000|
|84410011| 70| 51| 14| 2| 7|1470020997000|
|84410011| 80| 52| 14| 2| 8|1470020997000|
|84410011| 0| 50| 14| 2| 6|1470020997000|
|84378226| 10| 49| 14| 17| 6|1470017905000|
|84378226| 20| 50| 14| 17| 6|1470017905000|
|84378226| 30| 50| 14| 17| 5|1470017905000|
|84378226| 40| 49| 14| 17| 5|1470017905000|
|84378226| 50| 50| 14| 17| 5|1470017905000|
|84378226| 60| 50| 14| 17| 6|1470017905000|
|84378226| 70| 51| 14| 17| 7|1470017905000|
|84378226| 80| 52| 14| 17| 8|1470017905000|
|84378226| 0| 50| 14| 17| 6|1470017905000|
|84371094| 10| 50| 12| 17| 57|1470014990000|
|84371094| 20| 52| 12| 17| 57|1470014990000|
|84371094| 30| 53| 12| 17| 54|1470014990000|
|84371094| 40| 52| 12| 17| 59|1470014990000|
|84371094| 50| 55| 12| 17| 57|1470014990000|
|84371094| 60| 55| 12| 17| 59|1470014990000|
|84371094| 70| 56| 12| 17| 60|1470014990000|
|84371094| 80| 54| 12| 17| 61|1470014990000|
|84371094| 0| 54| 12| 17| 58|1470014990000|
|84363801| 10| 53| 11| 1| 16|1470014878000|
|84363801| 20| 51| 11| 1| 14|1470014878000|
|84363801| 30| 54| 11| 1| 16|1470014878000|
|84363801| 40| 53| 11| 1| 16|1470014878000|
|84363801| 50| 54| 11| 1| 18|1470014878000|
|84363801| 60| 54| 11| 1| 18|1470014878000|
|84363801| 70| 54| 11| 1| 21|1470014878000|
|84363801| 80| 55| 11| 1| 22|1470014878000|
|84363801| 0| 54| 11| 1| 18|1470014878000|
|84353187| 10| 50| 8| 2| 20|1470010637000|
|84353187| 20| 51| 8| 2| 18|1470010637000|
|84353187| 30| 51| 8| 2| 19|1470010637000|
|84353187| 40| 51| 8| 2| 20|1470010637000|
|84353187| 50| 51| 8| 2| 22|1470010637000|
|84353187| 60| 51| 8| 2| 25|1470010637000|
|84353187| 70| 51| 8| 2| 29|1470010637000|
|84353187| 80| 50| 8| 2| 35|1470010637000|
|84353187| 0| 51| 8| 2| 25|1470010637000|
|84312293| 10| 51| 14| 7| 65|1470014775000|
|84312293| 20| 51| 14| 7| 60|1470014775000|
|84312293| 30| 49| 14| 7| 53|1470014775000|
|84312293| 40| 50| 14| 7| 46|1470014775000|
|84312293| 50| 50| 14| 7| 44|1470014775000|
|84312293| 60| 49| 14| 7| 46|1470014775000|
|84312293| 70| 50| 14| 7| 52|1470014775000|
|84312293| 80| 51| 14| 7| 70|1470014775000|
|84312293| 0| 50| 14| 7| 48|1470014775000|
|84293029| 10| 50| 7| 1| 91|1470016779000|
|84293029| 20| 49| 7| 1| 90|1470016779000|
|84293029| 30| 49| 7| 1| 89|1470016779000|
|84293029| 40| 50| 7| 1| 90|1470016779000|
|84293029| 50| 49| 7| 1| 90|1470016779000|
|84293029| 60| 48| 7| 1| 92|1470016779000|
|84293029| 70| 49| 7| 1| 92|1470016779000|
|84293029| 80| 51| 7| 1| 88|1470016779000|
|84293029| 0| 49| 7| 1| 91|1470016779000|
|84182252| 10| 51| 8| 1| 20|1470012198000|
|84182252| 20| 50| 8| 1| 18|1470012198000|
|84182252| 30| 50| 8| 1| 19|1470012198000|
|84182252| 40| 50| 8| 1| 19|1470012198000|
|84182252| 50| 51| 8| 1| 19|1470012198000|
|84182252| 60| 52| 8| 1| 20|1470012198000|
|84182252| 70| 52| 8| 1| 25|1470012198000|
|84182252| 80| 50| 8| 1| 25|1470012198000|
|84182252| 0| 51| 8| 1| 20|1470012198000|
|84162227| 10| 53| 9| 1| 63|1470015123000|
|84162227| 20| 52| 9| 1| 59|1470015123000|
|84162227| 30| 53| 9| 1| 56|1470015123000|
|84162227| 40| 52| 9| 1| 64|1470015123000|
|84162227| 50| 55| 9| 1| 65|1470015123000|
|84162227| 60| 55| 9| 1| 68|1470015123000|
|84162227| 70| 55| 9| 1| 75|1470015123000|
|84162227| 80| 53| 9| 1| 75|1470015123000|
|84162227| 0| 54| 9| 1| 68|1470015123000|
|84070167| 10| 51| 14| 1| 52|1470015650000|
|84070167| 20| 51| 14| 1| 48|1470015650000|
|84070167| 30| 49| 14| 1| 41|1470015650000|
|84070167| 40| 50| 14| 1| 36|1470015650000|
|84070167| 50| 50| 14| 1| 34|1470015650000|
|84070167| 60| 49| 14| 1| 36|1470015650000|
|84070167| 70| 50| 14| 1| 41|1470015650000|
|84070167| 80| 51| 14| 1| 60|1470015650000|
|84070167| 0| 50| 14| 1| 3
👍 Looks great!
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
Seq[TrainOfThoughtPlanningScore]