use repo deltacodec for recipe and files

this should not only be more efficient in space but also in time

drop old Commit and Restore tests that do not use compression

1 files changed, 0 insertions, 88 deletions

diff --git a/repo/testdata/repo_8k/00000/chunks/000000000000009 b/repo/testdata/repo_8k/00000/chunks/000000000000009
deleted file mode 100644
index 8a0d0af..0000000
--- a/repo/testdata/repo_8k/00000/chunks/000000000000009
+++ /dev/null
@@ -1,88 +0,0 @@
-Dic@5ae50ce6 (Table.java:338)
-2019-06-05T23:02 [INFO][MEMORY] IndexTreeDic.flushOnDisk 158,194 (IndexTreeDic.java:517)
-2019-06-05T23:02 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@6f96c77 (Table.java:338)
-2019-06-05T23:02 [INFO][MEMORY] IndexTreeDic.flushOnDisk 158,194 (IndexTreeDic.java:517)
-2019-06-05T23:02 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@be64738 (Table.java:338)
-2019-06-05T23:02 [INFO][MEMORY] IndexTreeDic.flushOnDisk 158,194 (IndexTreeDic.java:517)
-2019-06-05T23:02 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@3ba9ad43 (Table.java:338)
-2019-06-05T23:02 [INFO][MEMORY] IndexTreeDic.flushOnDisk 158,194 (IndexTreeDic.java:517)
-2019-06-05T23:02 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@49d904ec (Table.java:338)
-2019-06-05T23:02 [INFO][MEMORY] IndexTreeDic.flushOnDisk 158,194 (IndexTreeDic.java:517)
-2019-06-05T23:02 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@48e4374 (Table.java:338)
-2019-06-05T23:02 [INFO][MEMORY] IndexTreeDic.flushOnDisk 158,194 (IndexTreeDic.java:517)
-2019-06-05T23:02 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@3d680b5a (Table.java:338)
-2019-06-05T23:02 [INFO][MEMORY] IndexTreeDic.flushOnDisk 158,194 (IndexTreeDic.java:517)
-2019-06-05T23:02 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@4b5d6a01 (Table.java:338)
-2019-06-05T23:02 [ERROR] SerialStructure.writeStructure :  impossible de sauvegarder la structure du disque. (SerialStructure.java:56)
-2019-06-05T23:02 [ERROR] java.nio.HeapByteBuffer (SerialStructure.java:57)
-2019-06-05T23:02 [ERROR] SerialStructure.loadStructure :  impossible de charger la structure du disque. (SerialStructure.java:73)
-2019-06-05T23:02 [ERROR] null (SerialStructure.java:74)
-2019-06-05T23:02 [INFO] Lancé (IndexTreeMessyTest.java:366)
-2019-06-05T23:02 [INFO][TIMER] tempsPrisPourRecherchesSurFichiers: 43 millis (IndexTreeDic.java:1164)
-2019-06-05T23:02 [INFO][TIMER] Temps total recherche: 0.051 s (IndexTreeMessyTest.java:408)
-2019-06-05T23:02 [INFO][TIMER] Temps parcours des résultats: 0.73 millis (IndexTreeMessyTest.java:416)
-2019-06-05T23:02 [INFO] Nombre de résultats = 3116 (IndexTreeMessyTest.java:417)
-2019-06-05T23:02 [INFO][TIMER] tempsPrisPourRecherchesSurFichiers: 6 millis (IndexTreeDic.java:1164)
-2019-06-05T23:02 [INFO][TIMER] Temps total recherche: 6.60 millis (IndexTreeMessyTest.java:425)
-2019-06-05T23:02 [INFO][TIMER] 1Temps d'acquisition des résultats (chargement du disque de tous les champs): 0.096 s (IndexTreeMessyTest.java:439)
-2019-06-05T23:02 [INFO][TIMER] 2Temps d'acquisition des résultats certains champs seulement: 0.069 s (IndexTreeMessyTest.java:449)
-2019-06-05T23:02 [INFO] Nombre de résultats = 700 (IndexTreeMessyTest.java:450)
-2019-06-05T23:02 [INFO][TIMER] tempsPrisPourRecherchesSurFichiers: 10 millis (IndexTreeDic.java:1164)
-2019-06-05T23:02 [INFO] Nombre de résultats (pour 18 exact) = 116 (IndexTreeMessyTest.java:456)
-2019-06-05T23:02 [INFO] 40 (HashMapTests.java:27)
-2019-06-05T23:02 [INFO][MEMORY] Mem usage  début -  88,284 (ParallelLoaderTest.java:56)
-2019-06-05T23:02 [INFO] Parsing de csvName = testdata/SMALL_100_000_yellow_tripdata_2015-04.csv (ParallelLoaderTest.java:65)
-2019-06-05T23:02 [INFO] PARSE : memusage init =  (ParallelLoader.java:112)
-2019-06-05T23:02 [INFO][MEMORY] 90,332 (ParallelLoader.java:114)
-2019-06-05T23:02 [INFO] Loader : nombre de résultats (total) lus = 300000   temps écoulé = 0.051 sactiveThreadNb = 0 (ParallelLoader.java:150)
-2019-06-05T23:02 [WARNING] Fail to save entry number 0: incorrect data (ParallelLoaderRunnable.java:287)
-2019-06-05T23:02 [INFO] Parsing terminé !! temps écoulé = 1.11 s (ParallelLoader.java:217)
-2019-06-05T23:02 [INFO] PARSE : Nombre de lignes (local) = 100000 (ParallelLoader.java:218)
-2019-06-05T23:02 [INFO] Parsing de csvName = testdata/SMALL_100_000_yellow_tripdata_2015-04.csv (ParallelLoaderTest.java:65)
-2019-06-05T23:02 [INFO] PARSE : memusage init =  (ParallelLoader.java:112)
-2019-06-05T23:02 [INFO][MEMORY] 275,258 (ParallelLoader.java:114)
-2019-06-05T23:02 [INFO] Loader : nombre de résultats (total) lus = 400000   temps écoulé = 0.076 sactiveThreadNb = 0 (ParallelLoader.java:150)
-2019-06-05T23:02 [WARNING] Fail to save entry number 0: incorrect data (ParallelLoaderRunnable.java:287)
-2019-06-05T23:02 [INFO] Parsing terminé !! temps écoulé = 0.696 s (ParallelLoader.java:217)
-2019-06-05T23:02 [INFO] PARSE : Nombre de lignes (local) = 100000 (ParallelLoader.java:218)
-2019-06-05T23:02 [INFO][MEMORY] Mem usage  fin -  189,551 (ParallelLoaderTest.java:114)
-2019-06-05T23:02 [INFO][TIMER] TEMPS TOTAL PRIS PAR TOUS LES PARSINGS: 1.87 s (ParallelLoaderTest.java:115)
-2019-06-10T20:19 [ERROR] config.json (No such file or directory) (Database.java:33)
-2019-06-10T20:19 [INFO] setUpBeforeAll (IndexTreeMessyTest.java:73)
-2019-06-10T20:19 [INFO] Nombre de résultats/entrées parsés INIT : 0 (IndexTreeMessyTest.java:186)
-2019-06-10T20:19 [WARNING] Fail to save entry number 0: incorrect data (Loader.java:107)
-2019-06-10T20:19 [WARNING] Fail to save entry number 0: incorrect data (Loader.java:107)
-2019-06-10T20:19 [INFO] Loader : nombre de résultats (local) parsés = 0   temps écoulé = 1.37 millis (Loader.java:116)
-2019-06-10T20:19 [WARNING] Fail to save entry number 0: incorrect data (Loader.java:107)
-2019-06-10T20:19 [INFO] Loader : nombre de résultats (local) parsés = 0   temps écoulé = 2.93 millis (Loader.java:116)
-2019-06-10T20:19 [WARNING] Fail to save entry number 0: incorrect data (Loader.java:107)
-2019-06-10T20:19 [INFO] Loader : nombre de résultats (local) parsés = 0   temps écoulé = 2.37 millis (Loader.java:116)
-2019-06-10T20:19 [INFO][MEMORY] 10,178 (Loader.java:117)
-2019-06-10T20:19 [INFO] Loader : nombre de résultats (local) parsés = 0   temps écoulé = 0.010 s (Loader.java:116)
-2019-06-10T20:19 [INFO][MEMORY] 10,178 (Loader.java:117)
-2019-06-10T20:19 [INFO][MEMORY] 19,394 (Loader.java:117)
-2019-06-10T20:19 [INFO][MEMORY] 19,394 (Loader.java:117)
-2019-06-10T20:19 [INFO] PARSE : FINAL USAGE (Loader.java:136)
-2019-06-10T20:19 [INFO][MEMORY] 150,062 (Loader.java:138)
-2019-06-10T20:19 [INFO] PARSE : FINAL USAGE (Loader.java:136)
-2019-06-10T20:19 [INFO][MEMORY] 150,767 (Loader.java:138)
-2019-06-10T20:19 [INFO] PARSE : FINAL USAGE (Loader.java:136)
-2019-06-10T20:19 [INFO][MEMORY] 150,245 (Loader.java:138)
-2019-06-10T20:19 [INFO] PARSE : FINAL USAGE (Loader.java:136)
-2019-06-10T20:19 [INFO][MEMORY] 150,333 (Loader.java:138)
-2019-06-10T20:19 [INFO][TIMER] TEMPS TOTAL pris par le parsing: 5.79 s (IndexTreeMessyTest.java:314)
-2019-06-10T20:19 [INFO] setUpBeforeAll OK (IndexTreeMessyTest.java:322)
-2019-06-10T20:19 [DEBUG] TableHandler.flushAllIndexOnDisk : size = 15 (Table.java:334)
-2019-06-10T20:19 [INFO][MEMORY] IndexTreeDic.flushOnDisk 151,359 (IndexTreeDic.java:517)
-2019-06-10T20:19 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@1b083826 (Table.java:338)
-2019-06-10T20:19 [INFO][MEMORY] IndexTreeDic.flushOnDisk 151,871 (IndexTreeDic.java:517)
-2019-06-10T20:19 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@105fece7 (Table.java:338)
-2019-06-10T20:19 [INFO][MEMORY] IndexTreeDic.flushOnDisk 151,871 (IndexTreeDic.java:517)
-2019-06-10T20:19 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@3ec300f1 (Table.java:338)
-2019-06-10T20:19 [INFO][MEMORY] IndexTreeDic.flushOnDisk 152,381 (IndexTreeDic.java:517)
-2019-06-10T20:19 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@482cd91f (Table.java:338)
-2019-06-10T20:19 [INFO][MEMORY] IndexTreeDic.flushOnDisk 152,381 (IndexTreeDic.java:517)
-2019-06-10T20:19 [INFO] Table.flushAllIndexOnDisk : flush de l'arbre !index.indexTree.IndexTreeDic@123f1134 (Table.java:338)
-2019-06-10T20:34 [ERROR] config.json (No such file or directory) (Database.java:33)
-2019-06-10T20:34 [INFO] setUpBeforeAll (IndexTreeMessyTest.java:73)
-2019-06-10T20:34 [INFO] Nombre de résultats/
\ No newline at end of file