Wikidata Import 2023-05-14: Difference between revisions

From BITPlan Wiki
Jump to navigation Jump to search
No edit summary
No edit summary
 
(8 intermediate revisions by the same user not shown)
Line 1: Line 1:
{{PageSequence|prev=Wikidata Import 2023-05-10|next=|category=Wikidata|categoryIcon=cloud-download}}
{{PageSequence|prev=Wikidata Import 2023-05-10|next=Wikidata Import 2023-05-15|category=Wikidata|categoryIcon=cloud-download}}
 
=Import=
=Import=


{{Import
{{Import
|state=❌
|url=https://wiki.bitplan.com/index.php/Wikidata_Import_2023-05-14
|url=https://wiki.bitplan.com/index.php/Wikidata_Import_2023-05-14
|target=blazegraph
|target=blazegraph
|start=2023-05-14
|start=2023-05-14
|os=Ubuntu 22.04.2 LTS
|cpu=Intel(R) Core(TM) i5-3570K CPU @ 3.40GHz
|cpu=Intel(R) Core(TM) i5-3570K CPU @ 3.40GHz
|ram=32
|comment=blazegraph server failure at wikidump-000000579.ttl.gz
|storemode=property
|storemode=property
}}
}}
= stats =
= stats =
<pre>
<pre>
./stats  
./stats  
2023-05-14T19:41:02Z:578758519
2023-05-14T19:41:02Z: 578758519
2023-05-15T05:29:52Z: 1599742264
2023-05-16T05:00:17Z: 3197332463
2023-05-17T04:26:16Z: 4435472679
2023-05-20T09:23:04Z: 7884618636
   #: load s  total s  avg s  ETA h
   #: load s  total s  avg s  ETA h
   1:    407      407    408    119.7
   1:    407      407    408    119.7
  2:    323      730    365    107.2
...
  3:    294    1025    342    100.1
100:    613   38942   389   103.6
  4:    301    1326    332    97.1
...
   5:   255    1581   316    92.5
200:    759   115137   576   137.2
  6:    228    1810    302    88.2
...
  7:    233    2044    292    85.3
3001262   192255   641   134.9
  8:    239    2283    285    83.3
...
  9:    240    2524    280    81.7
4001821   301017   753   137.5
  10:    176    2701    270    78.6
...
   11:   147    2848   259    75.3
5001840   414604   829   128.5
  12:    160    3009    251    72.9
...
  13:    191    3200    246    71.5
5702486   490135   860   116.6
  14:    165    3366    240    69.7
...
  15:   159    3525    235    68.1
   5782253   510645   883   117.8
   16:    153    3679    230    66.6
  7.885 bill triples  16087 triples/s 11205 triples recently
   17:   252    3932   231    66.9
ETA 7.1 total 13 days
  18:    247    4179    232    67.1
  19:    250    4429    233    67.3
  20:   223    4652    233    67.1
   21:    172    4825    230    66.2
   22:   185    5010   228    65.5
  23:    199    5210    227    65.1
  24:    192    5402    225    64.7
  25:   239    5642    226    64.8
   26:    170    5813    224    64.1
   27:   176    5989   222    63.5
  28:    267    6257    223    63.9
  29:    179    6436    222    63.4
  30:    149    6586    220    62.7
  31:    310    6897    222    63.5
  32:    372    7270    227    64.7
  33:   319    7589    230    65.5
   34:    242    7831    230    65.5
   35:   352    8184   234    66.5
  36:    178    8363    232    66.0
  37:    138    8502    230    65.2
  38:    301    8804    232    65.6
   39:   515    9319    239    67.6
   40:    502    9822    246    69.4
   41:   490   10312    252    71.1
  0.579 bill triples  56122 triples/s
</pre>
</pre>

Latest revision as of 05:35, 19 February 2024

Import

Import
edit
state  ❌
url  https://wiki.bitplan.com/index.php/Wikidata_Import_2023-05-14
target  blazegraph
start  2023-05-14
end  
days  
os  Ubuntu 22.04.2 LTS
cpu  Intel(R) Core(TM) i5-3570K CPU @ 3.40GHz
ram  32
triples  
comment  blazegraph server failure at wikidump-000000579.ttl.gz


stats

./stats 
2023-05-14T19:41:02Z:  578758519
2023-05-15T05:29:52Z: 1599742264
2023-05-16T05:00:17Z: 3197332463
2023-05-17T04:26:16Z: 4435472679
2023-05-20T09:23:04Z: 7884618636
   #: load s  total s  avg s   ETA h
   1:    407      407    408    119.7
...
 100:    613    38942    389    103.6
...
 200:    759   115137    576    137.2
...
 300:   1262   192255    641    134.9
...
 400:   1821   301017    753    137.5
...
 500:   1840   414604    829    128.5
...
 570:   2486   490135    860    116.6
...
  578:   2253   510645    883    117.8
 7.885 bill triples  16087 triples/s 11205 triples recently
ETA 7.1 total 13 days