Revision as of 06:26, 17 May 2023

Import

Import
edit
state
url	https://wiki.bitplan.com/index.php/Wikidata_Import_2023-05-03
target	blazegraph
start	2023-05-03
end
days
os	Ubuntu 20.04.6 LTS
cpu	Intel(R) Xeon(R) CPU E5-2670 v2 @ 2.50GHz
ram	128
triples	14.7
comment

Setup

Same as for Wikidata_Import_2023-04-26

progress on sun

1.161.686.984 Triples 2023-05-03T09:37:00Z
1.323.000.000 Triples 2023-05-03T10:53:07Z
1.837.000.000 Triples 2023-05-03T16:15:56Z
2.789.000.000 Triples 2023-05-04T05:48:24Z
3.934.000.000 Triples 2023-05-05T04:44:32Z
4.857.000.000 Triples 2023-05-06T05:16:44Z
2023-05-07T05:49:52Z: 5554000000
2023-05-08T03:18:15Z: 6164000000
2023-05-09T04:05:46Z: 6808000000
2023-05-11T03:54:34Z: 7890000000
2023-05-12T05:13:27Z: 8434000000
2023-05-13T05:42:54Z: 8876000000
2023-05-14T07:07:21Z: 9417148900 
2023-05-15T05:31:51Z: 9864790434
2023-05-16T04:52:30Z:10322580267
avg 87872 triples/s - 4377 triples/sec recently
ETA: 10.7 d, total 24.8 d

stats

./stats 
   #: load s  total s  avg s   ETA h
   2:    415      415    208     61.0
...
 100:    548    38774    388    103.2
...
 200:    718   109303    547    130.3
...
 300:   1151   202650    676    142.2
...
 400:   2676   362219    906    165.5
...
 500:   3059   559655   1119    173.5
...
 600:   1879   790443   1317    167.6
...
 700:   5353  1012090   1446    143.8
...
 768:   3678  1217321   1585    127.7

@@ Line 38: / Line 38: @@
 ETA: 10.7 d, total 24.8 d
 </pre>
+==== stats ====
 <source lang='bash'>
 ./stats
--05-03T10:53:07Z
     #: load s  total s  avg s   ETA h
 :    415      415    208     61.0
-:    389      804    268     78.6
-:    397     1202    301     88.0
-:    328     1531    306     89.6
-:    299     1831    305     89.2
-:    303     2134    305     89.0
-:    315     2449    306     89.3
-:    314     2764    307     89.5
-:    237     3001    300     87.4
-:    192     3194    290     84.5
-:    207     3401    283     82.4
-:    241     3643    280     81.4
-:    216     3860    276     80.0
-:    203     4063    271     78.5
-:    168     4232    265     76.6
-:    296     4529    266     77.0
-:    302     4831    268     77.5
-:    303     5135    270     78.0
-:    269     5404    270     77.9
-:    206     5610    267     77.0
-:    211     5822    265     76.2
-:    213     6036    262     75.5
-:    215     6251    260     74.8
-:    263     6514    261     74.8
-:    194     6709    258     74.0
-:    201     6911    256     73.3
-:    298     7209    257     73.7
-:    187     7396    255     72.9
-:    158     7555    252     71.9
-:    341     7897    255     72.7
-:    400     8297    259     73.9
-:    362     8660    262     74.7
-:    263     8924    262     74.7
-:    394     9318    266     75.7
-:    207     9525    265     75.1
-:    139     9665    261     74.1
-:    306     9971    262     74.3
-:    599    10570    271     76.7
-:    582    11153    279     78.8
-:    578    11732    286     80.8
-:    766    12498    298     84.0
-:   1134    13633    317     89.4
-:    657    14290    325     91.5
-:    753    15044    334     94.1
-:    663    15708    341     96.0
-:    614    16323    347     97.5
-:    587    16910    352     98.8
-:    727    17637    360    100.9
-:    573    18211    364    102.0
-:    534    18745    368    102.8
-:    541    19287    371    103.6
-:    390    19677    371    103.6
-:    618    20295    376    104.8
-:    694    20990    382    106.3
-:    706    21696    387    107.8
-:    475    22172    389    108.2
-:    338    22511    388    107.8
-:    593    23105    392    108.7
-:    560    23665    394    109.3
-:    549    24215    397    109.9
-:    564    24779    400    110.6
-:    539    25318    402    111.1
-:    489    25808    403    111.3
-:    379    26188    403    111.1
-:    505    26693    404    111.4
-:    417    27111    405    111.4
-:    422    27533    405    111.4
-:    334    27868    404    111.0
-:    349    28217    403    110.6
-:    306    28524    402    110.1
-:    269    28794    400    109.5
-:    207    29002    397    108.7
-:    373    29376    397    108.5
-:    306    29682    396    108.1
-:    181    29864    393    107.2
-:    255    30119    391    106.6
-:    327    30447    390    106.3
-:    305    30752    389    105.9
-:    283    31036    388    105.4
-:    288    31324    387    105.0
-:    295    31620    386    104.5
-:    301    31921    385    104.2
-:    296    32218    384    103.8
-:    332    32550    383    103.5
-:    326    32876    382    103.2
-:    295    33172    381    102.8
-:    227    33399    380    102.3
-:    304    33704    379    101.9
-:    406    34110    379    101.9
 ...
-:    211    53161    403    103.6
+:    548    38774    388    103.2
 ...
-:   1033   101484    531    128.0
+:    718   109303    547    130.3
 ...
-:   1090   184652    652    140.5
+:   1151   202650    676    142.2
 ...
-:   2604   213418    697    145.7
+:   2676   362219    906    165.5
 ...
-:   1186   272667    795    157.9
+:   3059   559655   1119    173.5
 ...
-:   2919   359542    901    165.0
+:   1879   790443   1317    167.6
 ...
-:   3198   436133    989    169.5
+:   5353  1012090   1446    143.8
 ...
-:   2495   526447   1081    171.5
+:   3678  1217321   1585    127.7
-...
-:    822   791266   1317    167.1
-...
-:   1072   970182   1423    148.6
-...
-:   3689  1050778   1484    144.3
-...
-:   1517  1134449   1533    135.4
 </source>

Difference between revisions of "Wikidata Import 2023-05-03"

Revision as of 06:26, 17 May 2023

Contents

Import

Setup

progress on sun

stats

Navigation menu

Search