use blktrace for disk io debug

在工作中经常会遇到磁盘的IO很高的情况,一方面需要定位到底是那些程序在频繁的访问磁盘,另外一方面需要指导这些访问磁盘的程序究竟在访问那些文件,经过一轮调查,可以考虑使用blktrace来对块设备进行分析排查。具体如下

  1. 利用blktrace 分析块设备的io情况,blktrace 默认情况下会对每个cpu上对块设备的访问做记录,每个cpu对应一个文件

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    57
    58
    59
    60
    61
    62
    63
    64
    65
    66
    67
    68
    69
    70
    71
    72
    73
    74
    75
    76
    77
    78
    79
    80
    81
    82
    83
    84
    85
    86
    87
    88
    89
    90
    91
    92
    93
    94
    95
    96
    97
    98
    99
    100
    101
    102
    103
    104
    105
    106
    107
    108
    109
    110
    111
    112
    113
    114
    115
    116
    117
    118
    119
    120
    121
    122
    123
    124
    125
    126
    127
    128
    129
    130
    131
    132
    133
    134
    135
    136
    137
    138
    139
    140
    141
    142
    143
    144
    145
    146
    147
    148
    149
    150
    151
    152
    153
    154
    155
    156
    157
    158
    159
    160
    161
    162
    163
    164
    165
    166
    167
    168
    169
    170
    171
    172
    173
    174
    175
    176
    177
    178
    179
    180
    181
    182
    183
    184
    185
    186
    187
    188
    189
    190
    191
    192
    193
    194
    195
    196
    197
    198
    199
    200
    201
    202
    203
    204
    205
    206
    207
    208
    209
    210
    211
    212
    213
    214
    215
    216
    217
    218
    219
    220
    221
    222
    223
    224
    225
    226
    227
    228
    229
    230
    231
    232
    233
    234
    235
    236
    237
    238
    239
    240
    241
    242
    243
    244
    245
    246
    247
    248
    249
    250
    251
    252
    253
    254
    255
    256
    257
    258
    259
    260
    261
    262
    263
    264
    265
    266
    267
    268
    269
    270
    271
    272
    273
    274
    275
    276
    277
    278
    279
    280
    281
    282
    283
    284
    285
    286
    287
    288
    289
    290
    291
    292
    293
    294
    295
    296
    297
    298
    299
    300
    301
    302
    303
    304
    305
    306
    307
    308
    309
    310
    311
    312
    313
    314
    315
    316
    317
    318
    319
    320
    321
    322
    323
    324
    325
    326
    327
    328
    329
    330
    331
    332
    333
    334
    335
    336
    337
    338
    339
    340
    341
    342
    343
    344
    345
    346
    347
    348
    349
    350
    351
    352
    353
    354
    355
    356
    357
    358
    359
    360
    361
    362
    363
    364
    365
    366
    367
    368
    369
    370
    371
    372
    373
    374
    375
    376
    377
    378
    379
    380
    381
    382
    383
    384
    385
    386
    387
    388
    389
    390
    391
    392
    393
    394
    395
    396
    397
    398
    399
    400
    401
    402
    403
    404
    405
    406
    407
    408
    409
    410
    411
    412
    413
    414
    415
    416
    417
    418
    419
    420
    421
    422
    423
    424
    425
    426
    427
    428
    429
    430
    431
    432
    433
    434
    435
    436
    437
    438
    439
    440
    441
    442
    443
    444
    445
    446
    447
    448
    449
    450
    451
    452
    453
    454
    455
    456
    457
    458
    459
    460
    461
    462
    463
    464
    465
    466
    467
    468
    469
    470
    471
    472
    473
    474
    475
    476
    477
    478
    479
    480
    481
    482
    483
    484
    485
    486
    487
    488
    489
    490
    491
    492
    493
    494
    495
    496
    497
    498
    499
    500
    501
    502
    503
    504
    505
    506
    507
    508
    509
    510
    511
    512
    513
    514
    515
    516
    517
    518
    519
    520
    521
    522
    523
    524
    525
    526
    527
    528
    529
    530
    531
    532
    533
    534
    535
    536
    537
    538
    539
    540
    541
    542
    543
    544
    545
    546
    547
    548
    549
    550
    551
    552
    553
    554
    555
    556
    557
    558
    559
    560
    561
    562
    563
    564
    565
    566
    567
    568
    569
    570
    571
    572
    573
    574
    575
    576
    577
    578
    579
    580
    581
    582
    583
    584
    585
    586
    587
    588
    589
    590
    591
    592
    593
    594
    595
    596
    597
    598
    599
    600
    601
    602
    603
    604
    605
    606
    607
    608
    609
    610
    611
    612
    613
    614
    615
    616
    617
    618
    619
    620
    621
    622
    623
    624
    625
    626
    627
    628
    629
    630
    631
    632
    633
    634
    635
    636
    637
    638
    639
    640
    641
    642
    643
    644
    645
    646
    647
    648
    649
    650
    651
    652
    653
    654
    655
    656
    657
    658
    659
    660
    661
    662
    663
    664
    665
    666
    667
    668
    669
    670
    671
    672
    673
    674
    675
    676
    677
    678
    679
    680
    681
    682
    683
    684
    685
    686
    687
    688
    689
    690
    691
    692
    693
    694
    695
    696
    697
    698
    699
    700
    701
    702
    703
    704
    705
    706
    707
    708
    709
    710
    711
    712
    713
    714
    715
    716
    717
    718
    719
    720
    721
    722
    723
    724
    725
    726
    727
    728
    729
    730
    731
    732
    733
    734
    735
    736
    737
    738
    739
    740
    741
    742
    743
    744
    745
    746
    747
    748
    749
    750
    751
    752
    753
    754
    755
    756
    757
    758
    759
    760
    761
    762
    763
    764
    765
    766
    767
    768
    769
    770
    771
    772
    773
    774
    775
    776
    777
    778
    779
    780
    781
    782
    783
    784
    785
    786
    787
    788
    789
    790
    791
    792
    793
    794
    795
    796
    797
    798
    799
    800
    801
    802
    803
    804
    805
    806
    807
    808
    809
    810
    811
    812
    813
    814
    815
    816
    817
    818
    819
    820
    821
    822
    823
    824
    825
    826
    827
    828
    829
    830
    831
    832
    833
    834
    835
    836
    837
    838
    839
    840
    841
    842
    843
    844
    845
    846
    847
    848
    849
    850
    851
    852
    853
    854
    855
    856
    857
    858
    859
    860
    861
    862
    863
    864
    865
    866
    867
    868
    869
    870
    871
    872
    873
    874
    875
    876
    877
    878
    root@ss20231017:~# df -h
    Filesystem Size Used Avail Use% Mounted on
    udev 1.9G 0 1.9G 0% /dev
    tmpfs 378M 1.5M 377M 1% /run
    /dev/vda1 40G 19G 19G 50% /
    tmpfs 1.9G 0 1.9G 0% /dev/shm
    tmpfs 5.0M 0 5.0M 0% /run/lock
    tmpfs 1.9G 0 1.9G 0% /sys/fs/cgroup
    tmpfs 378M 72K 378M 1% /run/user/0
    root@ss20231017:~# blktrace -d /dev/vda1
    ^C=== vda1 ===
    CPU 0: 293 events, 14 KiB data
    CPU 1: 604 events, 29 KiB data
    Total: 897 events (dropped 0), 43 KiB data
    root@ss20231017:~#

    root@ss20231017:~# ll -rth vda1.blktrace.*
    -rw-r--r-- 1 root root 29K Dec 13 10:48 vda1.blktrace.1
    -rw-r--r-- 1 root root 14K Dec 13 10:48 vda1.blktrace.0
    root@ss20231017:~# blkparse -i vda1.blktrace.1
    Input file vda1.blktrace.0 added
    Input file vda1.blktrace.1 added
    252,0 0 1 0.000000000 335376 A RA 30411776 + 256 <- (252,1) 30409728
    252,1 0 2 0.000001671 335376 Q RA 30411776 + 256 [pool-tracker-mi]
    252,1 0 3 0.000004117 335376 X RA 30411776 / 30411904 [pool-tracker-mi]
    252,1 0 4 0.000007585 335376 G RA 30411776 + 128 [pool-tracker-mi]
    252,1 0 5 0.000008697 335376 P N [pool-tracker-mi]
    252,1 0 6 0.000010940 335376 G RA 30411904 + 128 [pool-tracker-mi]
    252,1 0 7 0.000011802 335376 U N [pool-tracker-mi] 2
    252,1 0 8 0.000012947 335376 I RA 30411776 + 128 [pool-tracker-mi]
    252,1 0 9 0.000013171 335376 I RA 30411904 + 128 [pool-tracker-mi]
    252,1 0 10 0.000016615 335376 D RA 30411776 + 128 [pool-tracker-mi]
    252,1 0 11 0.000037167 335376 D RA 30411904 + 128 [pool-tracker-mi]
    252,1 1 1 0.000927685 0 C RA 30411904 + 128 [0]
    252,1 1 2 0.001046773 0 C RA 30411776 + 128 [0]
    252,0 1 3 0.004083981 335379 A RA 7195144 + 136 <- (252,1) 7193096
    252,1 1 4 0.004084907 335379 Q RA 7195144 + 136 [tracker-store]
    252,1 1 5 0.004086886 335379 X RA 7195144 / 7195272 [tracker-store]
    252,1 1 6 0.004089606 335379 G RA 7195144 + 128 [tracker-store]
    252,1 1 7 0.004090272 335379 P N [tracker-store]
    252,1 1 8 0.004091427 335379 G RA 7195272 + 8 [tracker-store]
    252,1 1 9 0.004092066 335379 U N [tracker-store] 2
    252,1 1 10 0.004092655 335379 I RA 7195144 + 128 [tracker-store]
    252,1 1 11 0.004092870 335379 I RA 7195272 + 8 [tracker-store]
    252,1 1 12 0.004094761 335379 D RA 7195144 + 128 [tracker-store]
    252,1 1 13 0.004112213 335379 D RA 7195272 + 8 [tracker-store]
    252,1 1 14 0.004508483 0 C RA 7195272 + 8 [0]
    252,1 1 15 0.004694224 0 C RA 7195144 + 128 [0]
    252,0 1 16 0.004792525 335379 A RA 13058232 + 136 <- (252,1) 13056184
    252,1 1 17 0.004792818 335379 Q RA 13058232 + 136 [tracker-store]
    252,1 1 18 0.004794157 335379 X RA 13058232 / 13058360 [tracker-store]
    252,1 1 19 0.004795129 335379 G RA 13058232 + 128 [tracker-store]
    252,1 1 20 0.004795658 335379 P N [tracker-store]
    252,1 1 21 0.004796444 335379 G RA 13058360 + 8 [tracker-store]
    252,1 1 22 0.004796938 335379 U N [tracker-store] 2
    252,1 1 23 0.004797247 335379 I RA 13058232 + 128 [tracker-store]
    252,1 1 24 0.004797415 335379 I RA 13058360 + 8 [tracker-store]
    252,1 1 25 0.004798422 335379 D RA 13058232 + 128 [tracker-store]
    252,1 1 26 0.004807380 335379 D RA 13058360 + 8 [tracker-store]
    252,1 1 27 0.005184718 0 C RA 13058360 + 8 [0]
    252,1 1 28 0.005358042 0 C RA 13058232 + 128 [0]
    252,0 1 29 0.005450484 335379 A RA 13055632 + 136 <- (252,1) 13053584
    252,1 1 30 0.005450843 335379 Q RA 13055632 + 136 [tracker-store]
    252,1 1 31 0.005451668 335379 X RA 13055632 / 13055760 [tracker-store]
    252,1 1 32 0.005452451 335379 G RA 13055632 + 128 [tracker-store]
    252,1 1 33 0.005452788 335379 P N [tracker-store]
    252,1 1 34 0.005453617 335379 G RA 13055760 + 8 [tracker-store]
    252,1 1 35 0.005454002 335379 U N [tracker-store] 2
    252,1 1 36 0.005454293 335379 I RA 13055632 + 128 [tracker-store]
    252,1 1 37 0.005454456 335379 I RA 13055760 + 8 [tracker-store]
    252,1 1 38 0.005455521 335379 D RA 13055632 + 128 [tracker-store]
    252,1 1 39 0.005463405 335379 D RA 13055760 + 8 [tracker-store]
    252,1 1 40 0.005877345 0 C RA 13055760 + 8 [0]
    252,1 1 41 0.006113177 0 C RA 13055632 + 128 [0]
    252,0 1 42 0.006170078 335379 A RA 13052296 + 136 <- (252,1) 13050248
    252,1 1 43 0.006170414 335379 Q RA 13052296 + 136 [tracker-store]
    252,1 1 44 0.006171140 335379 X RA 13052296 / 13052424 [tracker-store]
    252,1 1 45 0.006171922 335379 G RA 13052296 + 128 [tracker-store]
    252,1 1 46 0.006172357 335379 P N [tracker-store]
    252,1 1 47 0.006173045 335379 G RA 13052424 + 8 [tracker-store]
    252,1 1 48 0.006173414 335379 U N [tracker-store] 2
    252,1 1 49 0.006173599 335379 I RA 13052296 + 128 [tracker-store]
    252,1 1 50 0.006173734 335379 I RA 13052424 + 8 [tracker-store]
    252,1 1 51 0.006174461 335379 D RA 13052296 + 128 [tracker-store]
    252,1 1 52 0.006181397 335379 D RA 13052424 + 8 [tracker-store]
    252,1 1 53 0.006605262 0 C RA 13052424 + 8 [0]
    252,1 1 54 0.006669004 0 C RA 13052296 + 128 [0]
    252,0 1 55 0.006850040 335379 A RA 2712320 + 80 <- (252,1) 2710272
    252,1 1 56 0.006850413 335379 Q RA 2712320 + 80 [tracker-store]
    252,1 1 57 0.006853076 335379 G RA 2712320 + 80 [tracker-store]
    252,1 1 58 0.006853485 335379 P N [tracker-store]
    252,1 1 59 0.006854431 335379 U N [tracker-store] 1
    252,1 1 60 0.006855207 335379 I RA 2712320 + 80 [tracker-store]
    252,1 1 61 0.006857246 335379 D RA 2712320 + 80 [tracker-store]
    252,1 1 62 0.007444466 0 C RA 2712320 + 80 [0]
    252,0 1 63 0.007576230 335379 A RA 2708560 + 136 <- (252,1) 2706512
    252,1 1 64 0.007576707 335379 Q RA 2708560 + 136 [tracker-store]
    252,1 1 65 0.007578255 335379 X RA 2708560 / 2708688 [tracker-store]
    252,1 1 66 0.007580284 335379 G RA 2708560 + 128 [tracker-store]
    252,1 1 67 0.007580705 335379 P N [tracker-store]
    252,1 1 68 0.007581832 335379 G RA 2708688 + 8 [tracker-store]
    252,1 1 69 0.007582494 335379 U N [tracker-store] 2
    252,1 1 70 0.007582987 335379 I RA 2708560 + 128 [tracker-store]
    252,1 1 71 0.007583221 335379 I RA 2708688 + 8 [tracker-store]
    252,1 1 72 0.007585006 335379 D RA 2708560 + 128 [tracker-store]
    252,1 1 73 0.007601697 335379 D RA 2708688 + 8 [tracker-store]
    252,1 1 74 0.008045826 54659 C RA 2708688 + 8 [0]
    252,1 1 75 0.008255681 54659 C RA 2708560 + 128 [0]
    252,0 1 76 0.008492953 335379 A RA 13063472 + 144 <- (252,1) 13061424
    252,1 1 77 0.008493417 335379 Q RA 13063472 + 144 [tracker-store]
    252,1 1 78 0.008494679 335379 X RA 13063472 / 13063600 [tracker-store]
    252,1 1 79 0.008496571 335379 G RA 13063472 + 128 [tracker-store]
    252,1 1 80 0.008497003 335379 P N [tracker-store]
    252,1 1 81 0.008498295 335379 G RA 13063600 + 16 [tracker-store]
    252,1 1 82 0.008498803 335379 U N [tracker-store] 2
    252,1 1 83 0.008499350 335379 I RA 13063472 + 128 [tracker-store]
    252,1 1 84 0.008499554 335379 I RA 13063600 + 16 [tracker-store]
    252,1 1 85 0.008501104 335379 D RA 13063472 + 128 [tracker-store]
    252,1 1 86 0.008518871 335379 D RA 13063600 + 16 [tracker-store]
    252,1 1 87 0.008861743 54798 C RA 13063600 + 16 [0]
    252,1 1 88 0.008986316 0 C RA 13063472 + 128 [0]
    252,0 1 89 0.009793984 335379 A RA 13049208 + 136 <- (252,1) 13047160
    252,1 1 90 0.009794510 335379 Q RA 13049208 + 136 [tracker-store]
    252,1 1 91 0.009795930 335379 X RA 13049208 / 13049336 [tracker-store]
    252,1 1 92 0.009797650 335379 G RA 13049208 + 128 [tracker-store]
    252,1 1 93 0.009798110 335379 P N [tracker-store]
    252,1 1 94 0.009799503 335379 G RA 13049336 + 8 [tracker-store]
    252,1 1 95 0.009800087 335379 U N [tracker-store] 2
    252,1 1 96 0.009800632 335379 I RA 13049208 + 128 [tracker-store]
    252,1 1 97 0.009800894 335379 I RA 13049336 + 8 [tracker-store]
    252,1 1 98 0.009802625 335379 D RA 13049208 + 128 [tracker-store]
    252,1 1 99 0.009823255 335379 D RA 13049336 + 8 [tracker-store]
    252,1 1 100 0.010167434 54805 C RA 13049336 + 8 [0]
    252,1 1 101 0.010415114 54805 C RA 13049208 + 128 [0]
    252,0 1 102 0.010802776 335379 A RA 5095200 + 112 <- (252,1) 5093152
    252,1 1 103 0.010803248 335379 Q RA 5095200 + 112 [tracker-store]
    252,1 1 104 0.010805528 335379 G RA 5095200 + 112 [tracker-store]
    252,1 1 105 0.010806095 335379 P N [tracker-store]
    252,1 1 106 0.010806709 335379 U N [tracker-store] 1
    252,1 1 107 0.010807480 335379 I RA 5095200 + 112 [tracker-store]
    252,1 1 108 0.010809362 335379 D RA 5095200 + 112 [tracker-store]
    252,0 0 12 0.010819573 239 A RA 39791792 + 8 <- (252,1) 39789744
    252,1 0 13 0.010819893 239 Q RA 39791792 + 8 [systemd-journal]
    252,1 0 14 0.010821833 239 G RA 39791792 + 8 [systemd-journal]
    252,1 0 15 0.010822168 239 P N [systemd-journal]
    252,1 0 16 0.010822534 239 U N [systemd-journal] 1
    252,1 0 17 0.010822880 239 I RA 39791792 + 8 [systemd-journal]
    252,1 0 18 0.010823969 239 D RA 39791792 + 8 [systemd-journal]
    252,0 0 19 0.010884855 239 A RA 39791864 + 8 <- (252,1) 39789816
    252,1 0 20 0.010885359 239 Q RA 39791864 + 8 [systemd-journal]
    252,1 0 21 0.010886376 239 G RA 39791864 + 8 [systemd-journal]
    252,1 0 22 0.010886788 239 P N [systemd-journal]
    252,1 0 23 0.010887086 239 U N [systemd-journal] 1
    252,1 0 24 0.010887430 239 I RA 39791864 + 8 [systemd-journal]
    252,1 0 25 0.010888339 239 D RA 39791864 + 8 [systemd-journal]
    252,0 0 26 0.010902032 239 A RA 39791888 + 24 <- (252,1) 39789840
    252,1 0 27 0.010902375 239 Q RA 39791888 + 24 [systemd-journal]
    252,1 0 28 0.010903100 239 G RA 39791888 + 24 [systemd-journal]
    252,1 0 29 0.010903320 239 P N [systemd-journal]
    252,1 0 30 0.010903533 239 U N [systemd-journal] 1
    252,1 0 31 0.010903720 239 I RA 39791888 + 24 [systemd-journal]
    252,1 0 32 0.010904381 239 D RA 39791888 + 24 [systemd-journal]
    252,1 1 109 0.011269675 54702 C RA 39791864 + 8 [0]
    252,1 1 110 0.011271813 54702 C RA 39791792 + 8 [0]
    252,1 1 111 0.011343454 54702 C RA 5095200 + 112 [0]
    252,1 1 112 0.011392775 54702 C RA 39791888 + 24 [0]
    252,0 1 113 0.011851464 335379 A RA 29702296 + 32 <- (252,1) 29700248
    252,1 1 114 0.011851913 335379 Q RA 29702296 + 32 [tracker-store]
    252,1 1 115 0.011854129 335379 G RA 29702296 + 32 [tracker-store]
    252,1 1 116 0.011854716 335379 P N [tracker-store]
    252,1 1 117 0.011855230 335379 U N [tracker-store] 1
    252,1 1 118 0.011855807 335379 I RA 29702296 + 32 [tracker-store]
    252,1 1 119 0.011857956 335379 D RA 29702296 + 32 [tracker-store]
    252,0 0 33 0.012208442 239 A RA 57253576 + 40 <- (252,1) 57251528
    252,1 0 34 0.012208818 239 Q RA 57253576 + 40 [systemd-journal]
    252,1 0 35 0.012210343 239 G RA 57253576 + 40 [systemd-journal]
    252,1 0 36 0.012210738 239 P N [systemd-journal]
    252,1 0 37 0.012211189 239 U N [systemd-journal] 1
    252,1 0 38 0.012211582 239 I RA 57253576 + 40 [systemd-journal]
    252,1 0 39 0.012212908 239 D RA 57253576 + 40 [systemd-journal]
    252,0 0 40 0.012229734 239 A RA 57253624 + 16 <- (252,1) 57251576
    252,1 0 41 0.012230095 239 Q RA 57253624 + 16 [systemd-journal]
    252,1 0 42 0.012230834 239 G RA 57253624 + 16 [systemd-journal]
    252,1 0 43 0.012231113 239 P N [systemd-journal]
    252,1 0 44 0.012231411 239 U N [systemd-journal] 1
    252,1 0 45 0.012231731 239 I RA 57253624 + 16 [systemd-journal]
    252,1 0 46 0.012232512 239 D RA 57253624 + 16 [systemd-journal]
    252,0 0 47 0.012244856 239 A RA 57253648 + 16 <- (252,1) 57251600
    252,1 0 48 0.012245105 239 Q RA 57253648 + 16 [systemd-journal]
    252,1 0 49 0.012245745 239 G RA 57253648 + 16 [systemd-journal]
    252,1 0 50 0.012245954 239 P N [systemd-journal]
    252,1 0 51 0.012246151 239 U N [systemd-journal] 1
    252,1 0 52 0.012246366 239 I RA 57253648 + 16 [systemd-journal]
    252,1 0 53 0.012246950 239 D RA 57253648 + 16 [systemd-journal]
    252,0 0 54 0.012254768 239 A RA 57253672 + 16 <- (252,1) 57251624
    252,1 0 55 0.012255035 239 Q RA 57253672 + 16 [systemd-journal]
    252,1 0 56 0.012255986 239 G RA 57253672 + 16 [systemd-journal]
    252,1 0 57 0.012256164 239 P N [systemd-journal]
    252,1 0 58 0.012256440 239 U N [systemd-journal] 1
    252,1 0 59 0.012256761 239 I RA 57253672 + 16 [systemd-journal]
    252,1 0 60 0.012257347 239 D RA 57253672 + 16 [systemd-journal]
    252,1 1 120 0.012352265 640 C RA 29702296 + 32 [0]
    252,0 1 121 0.013102155 335379 A RA 6133384 + 136 <- (252,1) 6131336
    252,1 1 122 0.013102659 335379 Q RA 6133384 + 136 [tracker-store]
    252,1 1 123 0.013104036 335379 X RA 6133384 / 6133512 [tracker-store]
    252,1 1 124 0.013105942 335379 G RA 6133384 + 128 [tracker-store]
    252,1 1 125 0.013106409 335379 P N [tracker-store]
    252,1 1 126 0.013107628 335379 G RA 6133512 + 8 [tracker-store]
    252,1 1 127 0.013108248 335379 U N [tracker-store] 2
    252,1 1 128 0.013108760 335379 I RA 6133384 + 128 [tracker-store]
    252,1 1 129 0.013109016 335379 I RA 6133512 + 8 [tracker-store]
    252,1 1 130 0.013110606 335379 D RA 6133384 + 128 [tracker-store]
    252,1 1 131 0.013165201 335379 D RA 6133512 + 8 [tracker-store]
    252,1 1 132 0.016269125 0 C RA 6133512 + 8 [0]
    252,1 1 133 0.016270506 0 C RA 57253624 + 16 [0]
    252,1 1 134 0.016330203 0 C RA 6133384 + 128 [0]
    252,1 1 135 0.016335697 0 C RA 57253576 + 40 [0]
    252,1 1 136 0.017488988 335379 C RA 57253672 + 16 [0]
    252,1 1 137 0.017490939 335379 C RA 57253648 + 16 [0]
    252,0 1 138 0.019138447 335379 A RA 13055488 + 144 <- (252,1) 13053440
    252,1 1 139 0.019138839 335379 Q RA 13055488 + 144 [tracker-store]
    252,1 1 140 0.019140023 335379 X RA 13055488 / 13055616 [tracker-store]
    252,1 1 141 0.019141532 335379 G RA 13055488 + 128 [tracker-store]
    252,1 1 142 0.019141963 335379 P N [tracker-store]
    252,1 1 143 0.019142837 335379 G RA 13055616 + 16 [tracker-store]
    252,1 1 144 0.019143473 335379 U N [tracker-store] 2
    252,1 1 145 0.019143850 335379 I RA 13055488 + 128 [tracker-store]
    252,1 1 146 0.019144053 335379 I RA 13055616 + 16 [tracker-store]
    252,1 1 147 0.019145334 335379 D RA 13055488 + 128 [tracker-store]
    252,1 1 148 0.019158543 335379 D RA 13055616 + 16 [tracker-store]
    252,1 1 149 0.019600039 0 C RA 13055616 + 16 [0]
    252,1 1 150 0.019748532 0 C RA 13055488 + 128 [0]
    252,0 1 151 0.021428387 335379 A RA 7195040 + 104 <- (252,1) 7192992
    252,1 1 152 0.021428796 335379 Q RA 7195040 + 104 [tracker-store]
    252,1 1 153 0.021430840 335379 G RA 7195040 + 104 [tracker-store]
    252,1 1 154 0.021431302 335379 P N [tracker-store]
    252,1 1 155 0.021431728 335379 U N [tracker-store] 1
    252,1 1 156 0.021432052 335379 I RA 7195040 + 104 [tracker-store]
    252,1 1 157 0.021433398 335379 D RA 7195040 + 104 [tracker-store]
    252,1 1 158 0.022015706 0 C RA 7195040 + 104 [0]
    252,0 1 159 0.030710101 193 A WS 17286096 + 8 <- (252,1) 17284048
    252,1 1 160 0.030710806 193 Q WS 17286096 + 8 [jbd2/vda1-8]
    252,1 1 161 0.030714456 193 G WS 17286096 + 8 [jbd2/vda1-8]
    252,1 1 162 0.030715004 193 P N [jbd2/vda1-8]
    252,0 1 163 0.030715664 193 A WS 17286104 + 8 <- (252,1) 17284056
    252,1 1 164 0.030715907 193 Q WS 17286104 + 8 [jbd2/vda1-8]
    252,1 1 165 0.030717080 193 M WS 17286104 + 8 [jbd2/vda1-8]
    252,0 1 166 0.030717978 193 A WS 17286112 + 8 <- (252,1) 17284064
    252,1 1 167 0.030718222 193 Q WS 17286112 + 8 [jbd2/vda1-8]
    252,1 1 168 0.030718513 193 M WS 17286112 + 8 [jbd2/vda1-8]
    252,0 1 169 0.030719401 193 A WS 17286120 + 8 <- (252,1) 17284072
    252,1 1 170 0.030719635 193 Q WS 17286120 + 8 [jbd2/vda1-8]
    252,1 1 171 0.030719857 193 M WS 17286120 + 8 [jbd2/vda1-8]
    252,0 1 172 0.030720499 193 A WS 17286128 + 8 <- (252,1) 17284080
    252,1 1 173 0.030720836 193 Q WS 17286128 + 8 [jbd2/vda1-8]
    252,1 1 174 0.030721061 193 M WS 17286128 + 8 [jbd2/vda1-8]
    252,0 1 175 0.030721629 193 A WS 17286136 + 8 <- (252,1) 17284088
    252,1 1 176 0.030721834 193 Q WS 17286136 + 8 [jbd2/vda1-8]
    252,1 1 177 0.030722035 193 M WS 17286136 + 8 [jbd2/vda1-8]
    252,0 1 178 0.030722613 193 A WS 17286144 + 8 <- (252,1) 17284096
    252,1 1 179 0.030722940 193 Q WS 17286144 + 8 [jbd2/vda1-8]
    252,1 1 180 0.030723184 193 M WS 17286144 + 8 [jbd2/vda1-8]
    252,0 1 181 0.030723863 193 A WS 17286152 + 8 <- (252,1) 17284104
    252,1 1 182 0.030724159 193 Q WS 17286152 + 8 [jbd2/vda1-8]
    252,1 1 183 0.030724414 193 M WS 17286152 + 8 [jbd2/vda1-8]
    252,0 1 184 0.030725212 193 A WS 17286160 + 8 <- (252,1) 17284112
    252,1 1 185 0.030725487 193 Q WS 17286160 + 8 [jbd2/vda1-8]
    252,1 1 186 0.030725753 193 M WS 17286160 + 8 [jbd2/vda1-8]
    252,0 1 187 0.030726541 193 A WS 17286168 + 8 <- (252,1) 17284120
    252,1 1 188 0.030726799 193 Q WS 17286168 + 8 [jbd2/vda1-8]
    252,1 1 189 0.030727054 193 M WS 17286168 + 8 [jbd2/vda1-8]
    252,0 1 190 0.030727661 193 A WS 17286176 + 8 <- (252,1) 17284128
    252,1 1 191 0.030727845 193 Q WS 17286176 + 8 [jbd2/vda1-8]
    252,1 1 192 0.030728286 193 M WS 17286176 + 8 [jbd2/vda1-8]
    252,0 1 193 0.030728746 193 A WS 17286184 + 8 <- (252,1) 17284136
    252,1 1 194 0.030728949 193 Q WS 17286184 + 8 [jbd2/vda1-8]
    252,1 1 195 0.030729213 193 M WS 17286184 + 8 [jbd2/vda1-8]
    252,1 1 196 0.030730066 193 U N [jbd2/vda1-8] 1
    252,1 1 197 0.030730606 193 I WS 17286096 + 96 [jbd2/vda1-8]
    252,1 1 198 0.030732770 193 D WS 17286096 + 96 [jbd2/vda1-8]
    252,1 1 199 0.031574716 0 C WS 17286096 + 96 [0]
    252,0 1 200 0.031603889 193 A FWFS 17286192 + 8 <- (252,1) 17284144
    252,1 1 201 0.031604547 193 Q FWFS 17286192 + 8 [jbd2/vda1-8]
    252,1 1 202 0.031606132 193 G FWFS 17286192 + 8 [jbd2/vda1-8]
    252,1 1 203 0.031615875 191 D FN [kworker/1:1H]
    252,1 1 204 0.031669698 0 C FN 0 [0]
    252,1 1 205 0.031673098 191 D WS 17286192 + 8 [kworker/1:1H]
    252,1 1 206 0.032037731 0 C WS 17286192 + 8 [0]
    252,1 1 207 0.032041851 191 D FN [kworker/1:1H]
    252,1 1 208 0.032078046 0 C FN 0 [0]
    252,1 1 209 0.032078555 0 C WS 17286192 [0]
    252,0 1 210 0.083754773 335386 A RA 30685920 + 8 <- (252,1) 30683872
    252,1 1 211 0.083756422 335386 Q RA 30685920 + 8 [pool-tracker-st]
    252,1 1 212 0.083763340 335386 G RA 30685920 + 8 [pool-tracker-st]
    252,1 1 213 0.083764650 335386 P N [pool-tracker-st]
    252,1 1 214 0.083765372 335386 U N [pool-tracker-st] 1
    252,1 1 215 0.083766462 335386 I RA 30685920 + 8 [pool-tracker-st]
    252,1 1 216 0.083770680 335386 D RA 30685920 + 8 [pool-tracker-st]
    252,1 1 217 0.084170997 0 C RA 30685920 + 8 [0]
    252,0 1 218 0.084200249 335386 A RA 9077248 + 8 <- (252,1) 9075200
    252,1 1 219 0.084201028 335386 Q RA 9077248 + 8 [pool-tracker-st]
    252,1 1 220 0.084202643 335386 G RA 9077248 + 8 [pool-tracker-st]
    252,1 1 221 0.084203243 335386 P N [pool-tracker-st]
    252,1 1 222 0.084203820 335386 U N [pool-tracker-st] 1
    252,1 1 223 0.084204327 335386 I RA 9077248 + 8 [pool-tracker-st]
    252,1 1 224 0.084205270 335386 D RA 9077248 + 8 [pool-tracker-st]
    252,1 1 225 0.084473667 0 C RA 9077248 + 8 [0]
    252,0 1 226 0.084500844 335386 A RA 9077112 + 16 <- (252,1) 9075064
    252,1 1 227 0.084501141 335386 Q RA 9077112 + 16 [pool-tracker-st]
    252,1 1 228 0.084502020 335386 G RA 9077112 + 16 [pool-tracker-st]
    252,1 1 229 0.084502278 335386 P N [pool-tracker-st]
    252,1 1 230 0.084502636 335386 U N [pool-tracker-st] 1
    252,1 1 231 0.084502836 335386 I RA 9077112 + 16 [pool-tracker-st]
    252,1 1 232 0.084503515 335386 D RA 9077112 + 16 [pool-tracker-st]
    252,1 1 233 0.084827739 0 C RA 9077112 + 16 [0]
    252,0 1 234 0.084883581 335386 A RA 9075984 + 16 <- (252,1) 9073936
    252,1 1 235 0.084884122 335386 Q RA 9075984 + 16 [pool-tracker-st]
    252,1 1 236 0.084884873 335386 G RA 9075984 + 16 [pool-tracker-st]
    252,1 1 237 0.084885099 335386 P N [pool-tracker-st]
    252,1 1 238 0.084885389 335386 U N [pool-tracker-st] 1
    252,1 1 239 0.084885610 335386 I RA 9075984 + 16 [pool-tracker-st]
    252,1 1 240 0.084886252 335386 D RA 9075984 + 16 [pool-tracker-st]
    252,1 1 241 0.086379902 0 C RA 9075984 + 16 [0]
    252,0 1 242 0.086460306 335386 A RA 30722480 + 16 <- (252,1) 30720432
    252,1 1 243 0.086460929 335386 Q RA 30722480 + 16 [pool-tracker-st]
    252,1 1 244 0.086461950 335386 G RA 30722480 + 16 [pool-tracker-st]
    252,1 1 245 0.086462195 335386 P N [pool-tracker-st]
    252,1 1 246 0.086462759 335386 U N [pool-tracker-st] 1
    252,1 1 247 0.086463132 335386 I RA 30722480 + 16 [pool-tracker-st]
    252,1 1 248 0.086464061 335386 D RA 30722480 + 16 [pool-tracker-st]
    252,1 1 249 0.086850170 0 C RA 30722480 + 16 [0]
    252,0 1 250 0.086874983 335386 A RA 9077424 + 8 <- (252,1) 9075376
    252,1 1 251 0.086875633 335386 Q RA 9077424 + 8 [pool-tracker-st]
    252,1 1 252 0.086876869 335386 G RA 9077424 + 8 [pool-tracker-st]
    252,1 1 253 0.086877353 335386 P N [pool-tracker-st]
    252,1 1 254 0.086877963 335386 U N [pool-tracker-st] 1
    252,1 1 255 0.086878295 335386 I RA 9077424 + 8 [pool-tracker-st]
    252,1 1 256 0.086879227 335386 D RA 9077424 + 8 [pool-tracker-st]
    252,1 1 257 0.087164331 0 C RA 9077424 + 8 [0]
    252,0 1 258 0.087176028 335386 A RA 9077384 + 8 <- (252,1) 9075336
    252,1 1 259 0.087176311 335386 Q RA 9077384 + 8 [pool-tracker-st]
    252,1 1 260 0.087177430 335386 G RA 9077384 + 8 [pool-tracker-st]
    252,1 1 261 0.087177644 335386 P N [pool-tracker-st]
    252,1 1 262 0.087177901 335386 U N [pool-tracker-st] 1
    252,1 1 263 0.087178084 335386 I RA 9077384 + 8 [pool-tracker-st]
    252,1 1 264 0.087178712 335386 D RA 9077384 + 8 [pool-tracker-st]
    252,1 1 265 0.087470780 0 C RA 9077384 + 8 [0]
    252,0 1 266 0.087571318 335386 A RA 30685248 + 8 <- (252,1) 30683200
    252,1 1 267 0.087571744 335386 Q RA 30685248 + 8 [pool-tracker-st]
    252,1 1 268 0.087573164 335386 G RA 30685248 + 8 [pool-tracker-st]
    252,1 1 269 0.087573431 335386 P N [pool-tracker-st]
    252,1 1 270 0.087573771 335386 U N [pool-tracker-st] 1
    252,1 1 271 0.087574050 335386 I RA 30685248 + 8 [pool-tracker-st]
    252,1 1 272 0.087574954 335386 D RA 30685248 + 8 [pool-tracker-st]
    252,1 1 273 0.087906624 0 C RA 30685248 + 8 [0]
    252,0 1 274 0.087922636 335386 A RA 9077224 + 16 <- (252,1) 9075176
    252,1 1 275 0.087922921 335386 Q RA 9077224 + 16 [pool-tracker-st]
    252,1 1 276 0.087923806 335386 G RA 9077224 + 16 [pool-tracker-st]
    252,1 1 277 0.087924058 335386 P N [pool-tracker-st]
    252,1 1 278 0.087924323 335386 U N [pool-tracker-st] 1
    252,1 1 279 0.087924573 335386 I RA 9077224 + 16 [pool-tracker-st]
    252,1 1 280 0.087925212 335386 D RA 9077224 + 16 [pool-tracker-st]
    252,1 1 281 0.088158841 0 C RA 9077224 + 16 [0]
    252,0 1 282 0.088177184 335386 A RA 30685256 + 32 <- (252,1) 30683208
    252,1 1 283 0.088177416 335386 Q RA 30685256 + 32 [pool-tracker-st]
    252,1 1 284 0.088178416 335386 G RA 30685256 + 32 [pool-tracker-st]
    252,1 1 285 0.088178634 335386 P N [pool-tracker-st]
    252,1 1 286 0.088178863 335386 U N [pool-tracker-st] 1
    252,1 1 287 0.088179054 335386 I RA 30685256 + 32 [pool-tracker-st]
    252,1 1 288 0.088179669 335386 D RA 30685256 + 32 [pool-tracker-st]
    252,1 1 289 0.088495243 0 C RA 30685256 + 32 [0]
    252,0 1 290 0.088585779 335386 A RA 30685632 + 8 <- (252,1) 30683584
    252,1 1 291 0.088586097 335386 Q RA 30685632 + 8 [pool-tracker-st]
    252,1 1 292 0.088587016 335386 G RA 30685632 + 8 [pool-tracker-st]
    252,1 1 293 0.088587278 335386 P N [pool-tracker-st]
    252,1 1 294 0.088587542 335386 U N [pool-tracker-st] 1
    252,1 1 295 0.088587779 335386 I RA 30685632 + 8 [pool-tracker-st]
    252,1 1 296 0.088588598 335386 D RA 30685632 + 8 [pool-tracker-st]
    252,1 1 297 0.088795169 0 C RA 30685632 + 8 [0]
    252,0 1 298 0.088809437 335386 A RA 9077216 + 8 <- (252,1) 9075168
    252,1 1 299 0.088809708 335386 Q RA 9077216 + 8 [pool-tracker-st]
    252,1 1 300 0.088810732 335386 G RA 9077216 + 8 [pool-tracker-st]
    252,1 1 301 0.088810938 335386 P N [pool-tracker-st]
    252,1 1 302 0.088811181 335386 U N [pool-tracker-st] 1
    252,1 1 303 0.088811374 335386 I RA 9077216 + 8 [pool-tracker-st]
    252,1 1 304 0.088812013 335386 D RA 9077216 + 8 [pool-tracker-st]
    252,1 1 305 0.089039990 0 C RA 9077216 + 8 [0]
    252,0 1 306 0.089056349 335386 A RA 30685648 + 8 <- (252,1) 30683600
    252,1 1 307 0.089056634 335386 Q RA 30685648 + 8 [pool-tracker-st]
    252,1 1 308 0.089057394 335386 G RA 30685648 + 8 [pool-tracker-st]
    252,1 1 309 0.089057610 335386 P N [pool-tracker-st]
    252,1 1 310 0.089057850 335386 U N [pool-tracker-st] 1
    252,1 1 311 0.089058309 335386 I RA 30685648 + 8 [pool-tracker-st]
    252,1 1 312 0.089058940 335386 D RA 30685648 + 8 [pool-tracker-st]
    252,0 1 313 0.089067135 335386 A RA 30685664 + 8 <- (252,1) 30683616
    252,1 1 314 0.089067465 335386 Q RA 30685664 + 8 [pool-tracker-st]
    252,1 1 315 0.089068279 335386 G RA 30685664 + 8 [pool-tracker-st]
    252,1 1 316 0.089068599 335386 P N [pool-tracker-st]
    252,1 1 317 0.089068865 335386 U N [pool-tracker-st] 1
    252,1 1 318 0.089069160 335386 I RA 30685664 + 8 [pool-tracker-st]
    252,1 1 319 0.089069987 335386 D RA 30685664 + 8 [pool-tracker-st]
    252,1 1 320 0.089288749 0 C RA 30685648 + 8 [0]
    252,0 1 321 0.089302222 335386 A RA 9077208 + 8 <- (252,1) 9075160
    252,1 1 322 0.089302447 335386 Q RA 9077208 + 8 [pool-tracker-st]
    252,1 1 323 0.089303088 335386 G RA 9077208 + 8 [pool-tracker-st]
    252,1 1 324 0.089303355 335386 P N [pool-tracker-st]
    252,1 1 325 0.089303543 335386 U N [pool-tracker-st] 1
    252,1 1 326 0.089303740 335386 I RA 9077208 + 8 [pool-tracker-st]
    252,1 1 327 0.089304500 335386 D RA 9077208 + 8 [pool-tracker-st]
    252,1 1 328 0.089552588 0 C RA 9077208 + 8 [0]
    252,0 1 329 0.089629161 335386 A RA 30685216 + 8 <- (252,1) 30683168
    252,1 1 330 0.089629920 335386 Q RA 30685216 + 8 [pool-tracker-st]
    252,1 1 331 0.089630812 335386 G RA 30685216 + 8 [pool-tracker-st]
    252,1 1 332 0.089631046 335386 P N [pool-tracker-st]
    252,1 1 333 0.089631302 335386 U N [pool-tracker-st] 1
    252,1 1 334 0.089631552 335386 I RA 30685216 + 8 [pool-tracker-st]
    252,1 1 335 0.089632432 335386 D RA 30685216 + 8 [pool-tracker-st]
    252,1 1 336 0.089665620 0 C RA 30685664 + 8 [0]
    252,1 1 337 0.089850734 0 C RA 30685216 + 8 [0]
    252,0 1 338 0.089863575 335386 A RA 9077328 + 16 <- (252,1) 9075280
    252,1 1 339 0.089863866 335386 Q RA 9077328 + 16 [pool-tracker-st]
    252,1 1 340 0.089864792 335386 G RA 9077328 + 16 [pool-tracker-st]
    252,1 1 341 0.089865052 335386 P N [pool-tracker-st]
    252,1 1 342 0.089865268 335386 U N [pool-tracker-st] 1
    252,1 1 343 0.089865476 335386 I RA 9077328 + 16 [pool-tracker-st]
    252,1 1 344 0.089866175 335386 D RA 9077328 + 16 [pool-tracker-st]
    252,1 1 345 0.090142573 0 C RA 9077328 + 16 [0]
    252,0 1 346 0.090153404 335386 A RA 9077320 + 8 <- (252,1) 9075272
    252,1 1 347 0.090153651 335386 Q RA 9077320 + 8 [pool-tracker-st]
    252,1 1 348 0.090154925 335386 G RA 9077320 + 8 [pool-tracker-st]
    252,1 1 349 0.090155158 335386 P N [pool-tracker-st]
    252,1 1 350 0.090155349 335386 U N [pool-tracker-st] 1
    252,1 1 351 0.090155589 335386 I RA 9077320 + 8 [pool-tracker-st]
    252,1 1 352 0.090156218 335386 D RA 9077320 + 8 [pool-tracker-st]
    252,1 1 353 0.090414132 0 C RA 9077320 + 8 [0]
    252,0 1 354 0.090437155 335386 A RA 9077296 + 24 <- (252,1) 9075248
    252,1 1 355 0.090437438 335386 Q RA 9077296 + 24 [pool-tracker-st]
    252,1 1 356 0.090438288 335386 G RA 9077296 + 24 [pool-tracker-st]
    252,1 1 357 0.090438578 335386 P N [pool-tracker-st]
    252,1 1 358 0.090438815 335386 U N [pool-tracker-st] 1
    252,1 1 359 0.090438999 335386 I RA 9077296 + 24 [pool-tracker-st]
    252,1 1 360 0.090439623 335386 D RA 9077296 + 24 [pool-tracker-st]
    252,0 1 361 0.090449256 335386 A RA 9077344 + 16 <- (252,1) 9075296
    252,1 1 362 0.090449535 335386 Q RA 9077344 + 16 [pool-tracker-st]
    252,1 1 363 0.090450331 335386 G RA 9077344 + 16 [pool-tracker-st]
    252,1 1 364 0.090450522 335386 P N [pool-tracker-st]
    252,1 1 365 0.090450759 335386 U N [pool-tracker-st] 1
    252,1 1 366 0.090451223 335386 I RA 9077344 + 16 [pool-tracker-st]
    252,1 1 367 0.090451755 335386 D RA 9077344 + 16 [pool-tracker-st]
    252,1 1 368 0.090846962 0 C RA 9077296 + 24 [0]
    252,1 1 369 0.090851839 0 C RA 9077344 + 16 [0]
    252,0 1 370 0.090865658 335386 A RA 9077240 + 8 <- (252,1) 9075192
    252,1 1 371 0.090865954 335386 Q RA 9077240 + 8 [pool-tracker-st]
    252,1 1 372 0.090867183 335386 G RA 9077240 + 8 [pool-tracker-st]
    252,1 1 373 0.090867395 335386 P N [pool-tracker-st]
    252,1 1 374 0.090867616 335386 U N [pool-tracker-st] 1
    252,1 1 375 0.090867842 335386 I RA 9077240 + 8 [pool-tracker-st]
    252,1 1 376 0.090868523 335386 D RA 9077240 + 8 [pool-tracker-st]
    252,1 1 377 0.091093143 0 C RA 9077240 + 8 [0]
    252,0 1 378 0.091225414 335386 A RA 30727072 + 16 <- (252,1) 30725024
    252,1 1 379 0.091225812 335386 Q RA 30727072 + 16 [pool-tracker-st]
    252,1 1 380 0.091226814 335386 G RA 30727072 + 16 [pool-tracker-st]
    252,1 1 381 0.091227029 335386 P N [pool-tracker-st]
    252,1 1 382 0.091227321 335386 U N [pool-tracker-st] 1
    252,1 1 383 0.091227546 335386 I RA 30727072 + 16 [pool-tracker-st]
    252,1 1 384 0.091228387 335386 D RA 30727072 + 16 [pool-tracker-st]
    252,1 1 385 0.091602269 0 C RA 30727072 + 16 [0]
    252,0 1 386 0.091613733 335386 A RA 9077376 + 8 <- (252,1) 9075328
    252,1 1 387 0.091613993 335386 Q RA 9077376 + 8 [pool-tracker-st]
    252,1 1 388 0.091614746 335386 G RA 9077376 + 8 [pool-tracker-st]
    252,1 1 389 0.091614956 335386 P N [pool-tracker-st]
    252,1 1 390 0.091615179 335386 U N [pool-tracker-st] 1
    252,1 1 391 0.091615505 335386 I RA 9077376 + 8 [pool-tracker-st]
    252,1 1 392 0.091616094 335386 D RA 9077376 + 8 [pool-tracker-st]
    252,1 1 393 0.091699594 0 C RA 9077376 + 8 [0]
    252,0 1 394 0.091710394 335386 A RA 30686760 + 8 <- (252,1) 30684712
    252,1 1 395 0.091710639 335386 Q RA 30686760 + 8 [pool-tracker-st]
    252,1 1 396 0.091711422 335386 G RA 30686760 + 8 [pool-tracker-st]
    252,1 1 397 0.091711650 335386 P N [pool-tracker-st]
    252,1 1 398 0.091711857 335386 U N [pool-tracker-st] 1
    252,1 1 399 0.091712043 335386 I RA 30686760 + 8 [pool-tracker-st]
    252,1 1 400 0.091712665 335386 D RA 30686760 + 8 [pool-tracker-st]
    252,1 1 401 0.092004079 0 C RA 30686760 + 8 [0]
    252,0 1 402 0.092039631 335386 A RA 9077128 + 24 <- (252,1) 9075080
    252,1 1 403 0.092039899 335386 Q RA 9077128 + 24 [pool-tracker-st]
    252,1 1 404 0.092040821 335386 G RA 9077128 + 24 [pool-tracker-st]
    252,1 1 405 0.092041065 335386 P N [pool-tracker-st]
    252,1 1 406 0.092041299 335386 U N [pool-tracker-st] 1
    252,1 1 407 0.092041501 335386 I RA 9077128 + 24 [pool-tracker-st]
    252,1 1 408 0.092042182 335386 D RA 9077128 + 24 [pool-tracker-st]
    252,1 1 409 0.092325985 0 C RA 9077128 + 24 [0]
    252,0 1 410 0.092387859 335386 A RA 9077096 + 16 <- (252,1) 9075048
    252,1 1 411 0.092388187 335386 Q RA 9077096 + 16 [pool-tracker-st]
    252,1 1 412 0.092389176 335386 G RA 9077096 + 16 [pool-tracker-st]
    252,1 1 413 0.092389403 335386 P N [pool-tracker-st]
    252,1 1 414 0.092389688 335386 U N [pool-tracker-st] 1
    252,1 1 415 0.092389924 335386 I RA 9077096 + 16 [pool-tracker-st]
    252,1 1 416 0.092390697 335386 D RA 9077096 + 16 [pool-tracker-st]
    252,1 1 417 0.092698164 0 C RA 9077096 + 16 [0]
    252,0 1 418 0.092747720 335386 A RA 30722496 + 16 <- (252,1) 30720448
    252,1 1 419 0.092748019 335386 Q RA 30722496 + 16 [pool-tracker-st]
    252,1 1 420 0.092748905 335386 G RA 30722496 + 16 [pool-tracker-st]
    252,1 1 421 0.092749380 335386 P N [pool-tracker-st]
    252,1 1 422 0.092749621 335386 U N [pool-tracker-st] 1
    252,1 1 423 0.092749853 335386 I RA 30722496 + 16 [pool-tracker-st]
    252,1 1 424 0.092750600 335386 D RA 30722496 + 16 [pool-tracker-st]
    252,1 1 425 0.093101776 0 C RA 30722496 + 16 [0]
    252,0 1 426 0.093149397 335386 A RA 13057560 + 8 <- (252,1) 13055512
    252,1 1 427 0.093149704 335386 Q RA 13057560 + 8 [pool-tracker-st]
    252,1 1 428 0.093150585 335386 G RA 13057560 + 8 [pool-tracker-st]
    252,1 1 429 0.093150996 335386 P N [pool-tracker-st]
    252,1 1 430 0.093151750 335386 U N [pool-tracker-st] 1
    252,1 1 431 0.093151989 335386 I RA 13057560 + 8 [pool-tracker-st]
    252,1 1 432 0.093152814 335386 D RA 13057560 + 8 [pool-tracker-st]
    252,0 1 433 0.093214557 335386 A RA 13057576 + 240 <- (252,1) 13055528
    252,1 1 434 0.093214876 335386 Q RA 13057576 + 240 [pool-tracker-st]
    252,1 1 435 0.093216495 335386 X RA 13057576 / 13057704 [pool-tracker-st]
    252,1 1 436 0.093217129 335386 G RA 13057576 + 128 [pool-tracker-st]
    252,1 1 437 0.093217281 335386 P N [pool-tracker-st]
    252,1 1 438 0.093218022 335386 G RA 13057704 + 112 [pool-tracker-st]
    252,1 1 439 0.093218422 335386 U N [pool-tracker-st] 2
    252,1 1 440 0.093218650 335386 I RA 13057576 + 128 [pool-tracker-st]
    252,1 1 441 0.093218805 335386 I RA 13057704 + 112 [pool-tracker-st]
    252,1 1 442 0.093219423 335386 D RA 13057576 + 128 [pool-tracker-st]
    252,1 1 443 0.093226300 335386 D RA 13057704 + 112 [pool-tracker-st]
    252,1 1 444 0.093430328 0 C RA 13057560 + 8 [0]
    252,1 1 445 0.093853974 0 C RA 13057576 + 128 [0]
    252,1 1 446 0.093984094 0 C RA 13057704 + 112 [0]
    252,0 1 447 0.094137667 335386 A RA 9075824 + 16 <- (252,1) 9073776
    252,1 1 448 0.094138072 335386 Q RA 9075824 + 16 [pool-tracker-st]
    252,1 1 449 0.094139480 335386 G RA 9075824 + 16 [pool-tracker-st]
    252,1 1 450 0.094139844 335386 P N [pool-tracker-st]
    252,1 1 451 0.094140173 335386 U N [pool-tracker-st] 1
    252,1 1 452 0.094140582 335386 I RA 9075824 + 16 [pool-tracker-st]
    252,1 1 453 0.094141985 335386 D RA 9075824 + 16 [pool-tracker-st]
    252,1 1 454 0.094551486 0 C RA 9075824 + 16 [0]
    252,0 1 455 0.094565937 335386 A RA 9077200 + 8 <- (252,1) 9075152
    252,1 1 456 0.094566204 335386 Q RA 9077200 + 8 [pool-tracker-st]
    252,1 1 457 0.094567059 335386 G RA 9077200 + 8 [pool-tracker-st]
    252,1 1 458 0.094567314 335386 P N [pool-tracker-st]
    252,1 1 459 0.094567583 335386 U N [pool-tracker-st] 1
    252,1 1 460 0.094567811 335386 I RA 9077200 + 8 [pool-tracker-st]
    252,1 1 461 0.094568486 335386 D RA 9077200 + 8 [pool-tracker-st]
    252,1 1 462 0.094821980 0 C RA 9077200 + 8 [0]
    252,0 1 463 0.094856811 335386 A RA 30719856 + 8 <- (252,1) 30717808
    252,1 1 464 0.094857100 335386 Q RA 30719856 + 8 [pool-tracker-st]
    252,1 1 465 0.094858019 335386 G RA 30719856 + 8 [pool-tracker-st]
    252,1 1 466 0.094858320 335386 P N [pool-tracker-st]
    252,1 1 467 0.094858608 335386 U N [pool-tracker-st] 1
    252,1 1 468 0.094858825 335386 I RA 30719856 + 8 [pool-tracker-st]
    252,1 1 469 0.094859565 335386 D RA 30719856 + 8 [pool-tracker-st]
    252,1 1 470 0.096602795 0 C RA 30719856 + 8 [0]
    252,0 1 471 0.096666027 335386 A RA 13052808 + 8 <- (252,1) 13050760
    252,1 1 472 0.096666379 335386 Q RA 13052808 + 8 [pool-tracker-st]
    252,1 1 473 0.096667461 335386 G RA 13052808 + 8 [pool-tracker-st]
    252,1 1 474 0.096667729 335386 P N [pool-tracker-st]
    252,1 1 475 0.096668088 335386 U N [pool-tracker-st] 1
    252,1 1 476 0.096668341 335386 I RA 13052808 + 8 [pool-tracker-st]
    252,1 1 477 0.096669089 335386 D RA 13052808 + 8 [pool-tracker-st]
    252,0 1 478 0.096707427 335386 A RA 13052840 + 136 <- (252,1) 13050792
    252,1 1 479 0.096707703 335386 Q RA 13052840 + 136 [pool-tracker-st]
    252,1 1 480 0.096709370 335386 X RA 13052840 / 13052968 [pool-tracker-st]
    252,1 1 481 0.096710010 335386 G RA 13052840 + 128 [pool-tracker-st]
    252,1 1 482 0.096710186 335386 P N [pool-tracker-st]
    252,1 1 483 0.096711050 335386 G RA 13052968 + 8 [pool-tracker-st]
    252,1 1 484 0.096711507 335386 U N [pool-tracker-st] 2
    252,1 1 485 0.096711669 335386 I RA 13052840 + 128 [pool-tracker-st]
    252,1 1 486 0.096711798 335386 I RA 13052968 + 8 [pool-tracker-st]
    252,1 1 487 0.096712444 335386 D RA 13052840 + 128 [pool-tracker-st]
    252,1 1 488 0.096718147 335386 D RA 13052968 + 8 [pool-tracker-st]
    252,1 1 489 0.096999481 0 C RA 13052808 + 8 [0]
    252,1 1 490 0.097245987 0 C RA 13052840 + 128 [0]
    252,1 1 491 0.097438786 0 C RA 13052968 + 8 [0]
    252,0 1 492 0.097538130 335386 A RA 12573592 + 256 <- (252,1) 12571544
    252,1 1 493 0.097538448 335386 Q RA 12573592 + 256 [pool-tracker-st]
    252,1 1 494 0.097539379 335386 X RA 12573592 / 12573720 [pool-tracker-st]
    252,1 1 495 0.097540373 335386 G RA 12573592 + 128 [pool-tracker-st]
    252,1 1 496 0.097540684 335386 P N [pool-tracker-st]
    252,1 1 497 0.097541555 335386 G RA 12573720 + 128 [pool-tracker-st]
    252,1 1 498 0.097541985 335386 U N [pool-tracker-st] 2
    252,1 1 499 0.097542212 335386 I RA 12573592 + 128 [pool-tracker-st]
    252,1 1 500 0.097542389 335386 I RA 12573720 + 128 [pool-tracker-st]
    252,1 1 501 0.097543180 335386 D RA 12573592 + 128 [pool-tracker-st]
    252,1 1 502 0.097550781 335386 D RA 12573720 + 128 [pool-tracker-st]
    252,1 1 503 0.098294225 0 C RA 12573592 + 128 [0]
    252,1 1 504 0.098435142 0 C RA 12573720 + 128 [0]
    252,0 1 505 0.098505928 335386 A RA 12575224 + 256 <- (252,1) 12573176
    252,1 1 506 0.098506440 335386 Q RA 12575224 + 256 [pool-tracker-st]
    252,1 1 507 0.098507168 335386 X RA 12575224 / 12575352 [pool-tracker-st]
    252,1 1 508 0.098507879 335386 G RA 12575224 + 128 [pool-tracker-st]
    252,1 1 509 0.098508159 335386 P N [pool-tracker-st]
    252,1 1 510 0.098508999 335386 G RA 12575352 + 128 [pool-tracker-st]
    252,1 1 511 0.098509425 335386 U N [pool-tracker-st] 2
    252,1 1 512 0.098509659 335386 I RA 12575224 + 128 [pool-tracker-st]
    252,1 1 513 0.098509812 335386 I RA 12575352 + 128 [pool-tracker-st]
    252,1 1 514 0.098510515 335386 D RA 12575224 + 128 [pool-tracker-st]
    252,1 1 515 0.098517291 335386 D RA 12575352 + 128 [pool-tracker-st]
    252,1 1 516 0.099046420 0 C RA 12575224 + 128 [0]
    252,1 1 517 0.099209326 224894 C RA 12575352 + 128 [0]
    252,0 0 61 0.099301780 335386 A RA 12575656 + 256 <- (252,1) 12573608
    252,1 0 62 0.099302112 335386 Q RA 12575656 + 256 [pool-tracker-st]
    252,1 0 63 0.099303316 335386 X RA 12575656 / 12575784 [pool-tracker-st]
    252,1 0 64 0.099304815 335386 G RA 12575656 + 128 [pool-tracker-st]
    252,1 0 65 0.099305141 335386 P N [pool-tracker-st]
    252,1 0 66 0.099306082 335386 G RA 12575784 + 128 [pool-tracker-st]
    252,1 0 67 0.099306504 335386 U N [pool-tracker-st] 2
    252,1 0 68 0.099306811 335386 I RA 12575656 + 128 [pool-tracker-st]
    252,1 0 69 0.099306991 335386 I RA 12575784 + 128 [pool-tracker-st]
    252,1 0 70 0.099308001 335386 D RA 12575656 + 128 [pool-tracker-st]
    252,1 0 71 0.099318744 335386 D RA 12575784 + 128 [pool-tracker-st]
    252,1 1 518 0.099824847 0 C RA 12575656 + 128 [0]
    252,1 1 519 0.099999170 0 C RA 12575784 + 128 [0]
    252,0 0 72 0.100068780 335386 A RA 13054216 + 184 <- (252,1) 13052168
    252,1 0 73 0.100069126 335386 Q RA 13054216 + 184 [pool-tracker-st]
    252,1 0 74 0.100070181 335386 X RA 13054216 / 13054344 [pool-tracker-st]
    252,1 0 75 0.100071214 335386 G RA 13054216 + 128 [pool-tracker-st]
    252,1 0 76 0.100071614 335386 P N [pool-tracker-st]
    252,1 0 77 0.100072400 335386 G RA 13054344 + 56 [pool-tracker-st]
    252,1 0 78 0.100072850 335386 U N [pool-tracker-st] 2
    252,1 0 79 0.100073074 335386 I RA 13054216 + 128 [pool-tracker-st]
    252,1 0 80 0.100073225 335386 I RA 13054344 + 56 [pool-tracker-st]
    252,1 0 81 0.100074000 335386 D RA 13054216 + 128 [pool-tracker-st]
    252,1 0 82 0.100081670 335386 D RA 13054344 + 56 [pool-tracker-st]
    252,1 1 520 0.100646779 0 C RA 13054216 + 128 [0]
    252,1 1 521 0.100741974 0 C RA 13054344 + 56 [0]
    252,0 0 83 0.100776327 335386 A RA 13054400 + 56 <- (252,1) 13052352
    252,1 0 84 0.100776637 335386 Q RA 13054400 + 56 [pool-tracker-st]
    252,1 0 85 0.100777551 335386 G RA 13054400 + 56 [pool-tracker-st]
    252,1 0 86 0.100777832 335386 P N [pool-tracker-st]
    252,1 0 87 0.100778142 335386 U N [pool-tracker-st] 1
    252,1 0 88 0.100778410 335386 I RA 13054400 + 56 [pool-tracker-st]
    252,1 0 89 0.100779078 335386 D RA 13054400 + 56 [pool-tracker-st]
    252,0 0 90 0.100789088 335386 A RA 13054648 + 8 <- (252,1) 13052600
    252,1 0 91 0.100789390 335386 Q RA 13054648 + 8 [pool-tracker-st]
    252,1 0 92 0.100790122 335386 G RA 13054648 + 8 [pool-tracker-st]
    252,1 0 93 0.100790359 335386 P N [pool-tracker-st]
    252,1 0 94 0.100790595 335386 U N [pool-tracker-st] 1
    252,1 0 95 0.100790849 335386 I RA 13054648 + 8 [pool-tracker-st]
    252,1 0 96 0.100791519 335386 D RA 13054648 + 8 [pool-tracker-st]
    252,1 1 522 0.101163420 0 C RA 13054400 + 56 [0]
    252,1 1 523 0.101169890 0 C RA 13054648 + 8 [0]
    252,0 0 97 0.101241523 335386 A RA 13054728 + 256 <- (252,1) 13052680
    252,1 0 98 0.101241749 335386 Q RA 13054728 + 256 [pool-tracker-st]
    252,1 0 99 0.101242757 335386 X RA 13054728 / 13054856 [pool-tracker-st]
    252,1 0 100 0.101243464 335386 G RA 13054728 + 128 [pool-tracker-st]
    252,1 0 101 0.101243749 335386 P N [pool-tracker-st]
    252,1 0 102 0.101244992 335386 G RA 13054856 + 128 [pool-tracker-st]
    252,1 0 103 0.101245337 335386 U N [pool-tracker-st] 2
    252,1 0 104 0.101245553 335386 I RA 13054728 + 128 [pool-tracker-st]
    252,1 0 105 0.101245688 335386 I RA 13054856 + 128 [pool-tracker-st]
    252,1 0 106 0.101246368 335386 D RA 13054728 + 128 [pool-tracker-st]
    252,1 0 107 0.101254092 335386 D RA 13054856 + 128 [pool-tracker-st]
    252,1 1 524 0.101639615 0 C RA 13054728 + 128 [0]
    252,1 1 525 0.101754092 0 C RA 13054856 + 128 [0]
    252,0 0 108 0.101819489 335386 A RA 30719848 + 8 <- (252,1) 30717800
    252,1 0 109 0.101819824 335386 Q RA 30719848 + 8 [pool-tracker-st]
    252,1 0 110 0.101821035 335386 G RA 30719848 + 8 [pool-tracker-st]
    252,1 0 111 0.101821335 335386 P N [pool-tracker-st]
    252,1 0 112 0.101821682 335386 U N [pool-tracker-st] 1
    252,1 0 113 0.101821986 335386 I RA 30719848 + 8 [pool-tracker-st]
    252,1 0 114 0.101822827 335386 D RA 30719848 + 8 [pool-tracker-st]
    252,1 1 526 0.102084657 0 C RA 30719848 + 8 [0]
    252,0 1 527 0.102317399 335386 A RA 9077192 + 8 <- (252,1) 9075144
    252,1 1 528 0.102317754 335386 Q RA 9077192 + 8 [pool-tracker-st]
    252,1 1 529 0.102319535 335386 G RA 9077192 + 8 [pool-tracker-st]
    252,1 1 530 0.102319872 335386 P N [pool-tracker-st]
    252,1 1 531 0.102320196 335386 U N [pool-tracker-st] 1
    252,1 1 532 0.102320583 335386 I RA 9077192 + 8 [pool-tracker-st]
    252,1 1 533 0.102321615 335386 D RA 9077192 + 8 [pool-tracker-st]
    252,1 1 534 0.102633332 0 C RA 9077192 + 8 [0]
    252,0 0 115 0.104878062 51121 A RA 30719960 + 16 <- (252,1) 30717912
    252,1 0 116 0.104878667 51121 Q RA 30719960 + 16 [tracker-miner-f]
    252,1 0 117 0.104881893 51121 G RA 30719960 + 16 [tracker-miner-f]
    252,1 0 118 0.104882597 51121 P N [tracker-miner-f]
    252,1 0 119 0.104883106 51121 U N [tracker-miner-f] 1
    252,1 0 120 0.104883842 51121 I RA 30719960 + 16 [tracker-miner-f]
    252,1 0 121 0.104885772 51121 D RA 30719960 + 16 [tracker-miner-f]
    252,0 0 122 0.104952257 51121 A RA 30720048 + 8 <- (252,1) 30718000
    252,1 0 123 0.104952649 51121 Q RA 30720048 + 8 [tracker-miner-f]
    252,1 0 124 0.104953796 51121 G RA 30720048 + 8 [tracker-miner-f]
    252,1 0 125 0.104954208 51121 P N [tracker-miner-f]
    252,1 0 126 0.104954519 51121 U N [tracker-miner-f] 1
    252,1 0 127 0.104954873 51121 I RA 30720048 + 8 [tracker-miner-f]
    252,1 0 128 0.104955870 51121 D RA 30720048 + 8 [tracker-miner-f]
    252,1 1 535 0.105243011 335387 C RA 30719960 + 16 [0]
    252,1 1 536 0.105263214 335387 C RA 30720048 + 8 [0]
    252,0 0 129 0.105413719 51121 A RA 30720144 + 8 <- (252,1) 30718096
    252,1 0 130 0.105414336 51121 Q RA 30720144 + 8 [tracker-miner-f]
    252,1 0 131 0.105416020 51121 G RA 30720144 + 8 [tracker-miner-f]
    252,1 0 132 0.105416395 51121 P N [tracker-miner-f]
    252,1 0 133 0.105416798 51121 U N [tracker-miner-f] 1
    252,1 0 134 0.105417204 51121 I RA 30720144 + 8 [tracker-miner-f]
    252,1 0 135 0.105418510 51121 D RA 30720144 + 8 [tracker-miner-f]
    252,0 0 136 0.105455025 51121 A RA 30720224 + 8 <- (252,1) 30718176
    252,1 0 137 0.105455479 51121 Q RA 30720224 + 8 [tracker-miner-f]
    252,1 0 138 0.105456536 51121 G RA 30720224 + 8 [tracker-miner-f]
    252,1 0 139 0.105456866 51121 P N [tracker-miner-f]
    252,1 0 140 0.105457181 51121 U N [tracker-miner-f] 1
    252,1 0 141 0.105457511 51121 I RA 30720224 + 8 [tracker-miner-f]
    252,1 0 142 0.105458477 51121 D RA 30720224 + 8 [tracker-miner-f]
    252,0 0 143 0.105486784 51121 A RA 30720296 + 8 <- (252,1) 30718248
    252,1 0 144 0.105487122 51121 Q RA 30720296 + 8 [tracker-miner-f]
    252,1 0 145 0.105488097 51121 G RA 30720296 + 8 [tracker-miner-f]
    252,1 0 146 0.105488699 51121 P N [tracker-miner-f]
    252,1 0 147 0.105488916 51121 U N [tracker-miner-f] 1
    252,1 0 148 0.105489211 51121 I RA 30720296 + 8 [tracker-miner-f]
    252,1 0 149 0.105490027 51121 D RA 30720296 + 8 [tracker-miner-f]
    252,0 0 150 0.105523197 51121 A RA 30720320 + 8 <- (252,1) 30718272
    252,1 0 151 0.105523531 51121 Q RA 30720320 + 8 [tracker-miner-f]
    252,1 0 152 0.105525082 51121 G RA 30720320 + 8 [tracker-miner-f]
    252,1 0 153 0.105525586 51121 P N [tracker-miner-f]
    252,1 0 154 0.105525842 51121 U N [tracker-miner-f] 1
    252,1 0 155 0.105526182 51121 I RA 30720320 + 8 [tracker-miner-f]
    252,1 0 156 0.105527027 51121 D RA 30720320 + 8 [tracker-miner-f]
    252,0 0 157 0.105556447 51121 A RA 30720392 + 8 <- (252,1) 30718344
    252,1 0 158 0.105556815 51121 Q RA 30720392 + 8 [tracker-miner-f]
    252,1 0 159 0.105557770 51121 G RA 30720392 + 8 [tracker-miner-f]
    252,1 0 160 0.105558057 51121 P N [tracker-miner-f]
    252,1 0 161 0.105558364 51121 U N [tracker-miner-f] 1
    252,1 0 162 0.105558596 51121 I RA 30720392 + 8 [tracker-miner-f]
    252,1 0 163 0.105559356 51121 D RA 30720392 + 8 [tracker-miner-f]
    252,1 1 537 0.105720819 335387 C RA 30720144 + 8 [0]
    252,1 1 538 0.105830280 335387 C RA 30720224 + 8 [0]
    252,1 1 539 0.105838880 335387 C RA 30720296 + 8 [0]
    252,1 1 540 0.105839726 335387 C RA 30720320 + 8 [0]
    252,0 0 164 0.105925031 51121 A RA 30720400 + 8 <- (252,1) 30718352
    252,1 0 165 0.105925522 51121 Q RA 30720400 + 8 [tracker-miner-f]
    252,1 0 166 0.105926971 51121 G RA 30720400 + 8 [tracker-miner-f]
    252,1 0 167 0.105927327 51121 P N [tracker-miner-f]
    252,1 0 168 0.105927665 51121 U N [tracker-miner-f] 1
    252,1 0 169 0.105928003 51121 I RA 30720400 + 8 [tracker-miner-f]
    252,1 0 170 0.105929161 51121 D RA 30720400 + 8 [tracker-miner-f]
    252,0 0 171 0.105960835 51121 A RA 30720424 + 8 <- (252,1) 30718376
    252,1 0 172 0.105961161 51121 Q RA 30720424 + 8 [tracker-miner-f]
    252,1 0 173 0.105962054 51121 G RA 30720424 + 8 [tracker-miner-f]
    252,1 0 174 0.105962331 51121 P N [tracker-miner-f]
    252,1 0 175 0.105962597 51121 U N [tracker-miner-f] 1
    252,1 0 176 0.105962920 51121 I RA 30720424 + 8 [tracker-miner-f]
    252,1 0 177 0.105963763 51121 D RA 30720424 + 8 [tracker-miner-f]
    252,0 0 178 0.106046246 51121 A RA 30720440 + 152 <- (252,1) 30718392
    252,1 0 179 0.106046596 51121 Q RA 30720440 + 152 [tracker-miner-f]
    252,1 0 180 0.106048061 51121 X RA 30720440 / 30720568 [tracker-miner-f]
    252,1 0 181 0.106049182 51121 G RA 30720440 + 128 [tracker-miner-f]
    252,1 0 182 0.106049463 51121 P N [tracker-miner-f]
    252,1 0 183 0.106050507 51121 G RA 30720568 + 24 [tracker-miner-f]
    252,0 0 184 0.106051843 51121 A RA 30682072 + 16 <- (252,1) 30680024
    252,1 0 185 0.106052201 51121 Q RA 30682072 + 16 [tracker-miner-f]
    252,1 0 186 0.106053636 51121 G RA 30682072 + 16 [tracker-miner-f]
    252,1 0 187 0.106054069 51121 U N [tracker-miner-f] 3
    252,1 0 188 0.106054327 51121 I RA 30720440 + 128 [tracker-miner-f]
    252,1 0 189 0.106054478 51121 I RA 30720568 + 24 [tracker-miner-f]
    252,1 0 190 0.106055247 51121 I RA 30682072 + 16 [tracker-miner-f]
    252,1 0 191 0.106056498 51121 D RA 30720440 + 128 [tracker-miner-f]
    252,1 1 541 0.106095501 335387 C RA 30720400 + 8 [0]
    252,1 1 542 0.106096818 335387 C RA 30720392 + 8 [0]
    252,1 1 543 0.106102144 335387 C RA 30720424 + 8 [0]
    252,1 0 192 0.106110789 51121 D RA 30720568 + 24 [tracker-miner-f]
    252,1 0 193 0.106137004 51121 D RA 30682072 + 16 [tracker-miner-f]
    252,0 0 194 0.106169387 51121 A RA 30682096 + 32 <- (252,1) 30680048
    252,1 0 195 0.106169682 51121 Q RA 30682096 + 32 [tracker-miner-f]
    252,1 0 196 0.106170687 51121 G RA 30682096 + 32 [tracker-miner-f]
    252,1 0 197 0.106171010 51121 P N [tracker-miner-f]
    252,1 0 198 0.106171438 51121 U N [tracker-miner-f] 1
    252,1 0 199 0.106171756 51121 I RA 30682096 + 32 [tracker-miner-f]
    252,1 0 200 0.106172543 51121 D RA 30682096 + 32 [tracker-miner-f]
    252,1 1 544 0.106303158 335387 C RA 30720440 + 128 [0]
    252,1 1 545 0.106426017 335387 C RA 30682072 + 16 [0]
    252,0 0 201 0.106467249 51121 A RA 30725704 + 8 <- (252,1) 30723656
    252,1 0 202 0.106467679 51121 Q RA 30725704 + 8 [tracker-miner-f]
    252,1 0 203 0.106469116 51121 G RA 30725704 + 8 [tracker-miner-f]
    252,1 0 204 0.106469545 51121 P N [tracker-miner-f]
    252,1 0 205 0.106469967 51121 U N [tracker-miner-f] 1
    252,1 0 206 0.106470376 51121 I RA 30725704 + 8 [tracker-miner-f]
    252,1 0 207 0.106471680 51121 D RA 30725704 + 8 [tracker-miner-f]
    252,1 1 546 0.106612019 335387 C RA 30682096 + 32 [0]
    252,1 1 547 0.106775068 335387 C RA 30720568 + 24 [0]
    252,1 1 548 0.106777703 335387 C RA 30725704 + 8 [0]
    252,0 0 208 0.106891450 51121 A RA 30729664 + 8 <- (252,1) 30727616
    252,1 0 209 0.106891897 51121 Q RA 30729664 + 8 [tracker-miner-f]
    252,1 0 210 0.106893837 51121 G RA 30729664 + 8 [tracker-miner-f]
    252,1 0 211 0.106894320 51121 P N [tracker-miner-f]
    252,1 0 212 0.106894723 51121 U N [tracker-miner-f] 1
    252,1 0 213 0.106895183 51121 I RA 30729664 + 8 [tracker-miner-f]
    252,1 0 214 0.106896452 51121 D RA 30729664 + 8 [tracker-miner-f]
    252,1 1 549 0.107186578 335387 C RA 30729664 + 8 [0]
    252,0 0 215 0.107560251 51121 A RA 30728424 + 16 <- (252,1) 30726376
    252,1 0 216 0.107560705 51121 Q RA 30728424 + 16 [tracker-miner-f]
    252,1 0 217 0.107562268 51121 G RA 30728424 + 16 [tracker-miner-f]
    252,1 0 218 0.107562674 51121 P N [tracker-miner-f]
    252,1 0 219 0.107563101 51121 U N [tracker-miner-f] 1
    252,1 0 220 0.107563502 51121 I RA 30728424 + 16 [tracker-miner-f]
    252,1 0 221 0.107565002 51121 D RA 30728424 + 16 [tracker-miner-f]
    252,1 1 550 0.107866575 335387 C RA 30728424 + 16 [0]
    252,0 0 222 0.107965042 51121 A RA 30728448 + 16 <- (252,1) 30726400
    252,1 0 223 0.107965558 51121 Q RA 30728448 + 16 [tracker-miner-f]
    252,1 0 224 0.107967054 51121 G RA 30728448 + 16 [tracker-miner-f]
    252,1 0 225 0.107967471 51121 P N [tracker-miner-f]
    252,1 0 226 0.107967838 51121 U N [tracker-miner-f] 1
    252,1 0 227 0.107968207 51121 I RA 30728448 + 16 [tracker-miner-f]
    252,1 0 228 0.107969557 51121 D RA 30728448 + 16 [tracker-miner-f]
    252,1 1 551 0.108282312 335387 C RA 30728448 + 16 [0]
    252,0 0 229 0.108566384 51121 A RA 30682248 + 8 <- (252,1) 30680200
    252,1 0 230 0.108566884 51121 Q RA 30682248 + 8 [tracker-miner-f]
    252,1 0 231 0.108568490 51121 G RA 30682248 + 8 [tracker-miner-f]
    252,1 0 232 0.108568884 51121 P N [tracker-miner-f]
    252,1 0 233 0.108569267 51121 U N [tracker-miner-f] 1
    252,1 0 234 0.108569654 51121 I RA 30682248 + 8 [tracker-miner-f]
    252,1 0 235 0.108570857 51121 D RA 30682248 + 8 [tracker-miner-f]
    252,1 1 552 0.108866431 335387 C RA 30682248 + 8 [0]
    252,0 0 236 0.109000946 51121 A RA 30682312 + 8 <- (252,1) 30680264
    252,1 0 237 0.109001373 51121 Q RA 30682312 + 8 [tracker-miner-f]
    252,1 0 238 0.109003114 51121 G RA 30682312 + 8 [tracker-miner-f]
    252,1 0 239 0.109003639 51121 P N [tracker-miner-f]
    252,1 0 240 0.109004024 51121 U N [tracker-miner-f] 1
    252,1 0 241 0.109004436 51121 I RA 30682312 + 8 [tracker-miner-f]
    252,1 0 242 0.109005587 51121 D RA 30682312 + 8 [tracker-miner-f]
    252,1 1 553 0.109243425 335387 C RA 30682312 + 8 [0]
    252,0 0 243 0.109569715 51121 A RA 30729792 + 16 <- (252,1) 30727744
    252,1 0 244 0.109570138 51121 Q RA 30729792 + 16 [tracker-miner-f]
    252,1 0 245 0.109571592 51121 G RA 30729792 + 16 [tracker-miner-f]
    252,1 0 246 0.109572007 51121 P N [tracker-miner-f]
    252,1 0 247 0.109572468 51121 U N [tracker-miner-f] 1
    252,1 0 248 0.109572845 51121 I RA 30729792 + 16 [tracker-miner-f]
    252,1 0 249 0.109574196 51121 D RA 30729792 + 16 [tracker-miner-f]
    252,1 1 554 0.109882560 335387 C RA 30729792 + 16 [0]
    252,0 0 250 0.110035260 51121 A RA 30728552 + 16 <- (252,1) 30726504
    252,1 0 251 0.110035724 51121 Q RA 30728552 + 16 [tracker-miner-f]
    252,1 0 252 0.110037200 51121 G RA 30728552 + 16 [tracker-miner-f]
    252,1 0 253 0.110037637 51121 P N [tracker-miner-f]
    252,1 0 254 0.110038088 51121 U N [tracker-miner-f] 1
    252,1 0 255 0.110038475 51121 I RA 30728552 + 16 [tracker-miner-f]
    252,1 0 256 0.110039910 51121 D RA 30728552 + 16 [tracker-miner-f]
    252,1 1 555 0.110149035 335387 C RA 30728552 + 16 [0]
    252,0 0 257 0.110327858 51121 A RA 30722208 + 16 <- (252,1) 30720160
    252,1 0 258 0.110328274 51121 Q RA 30722208 + 16 [tracker-miner-f]
    252,1 0 259 0.110329452 51121 G RA 30722208 + 16 [tracker-miner-f]
    252,1 0 260 0.110329872 51121 P N [tracker-miner-f]
    252,1 0 261 0.110330226 51121 U N [tracker-miner-f] 1
    252,1 0 262 0.110330635 51121 I RA 30722208 + 16 [tracker-miner-f]
    252,1 0 263 0.110331872 51121 D RA 30722208 + 16 [tracker-miner-f]
    252,1 1 556 0.110648658 335387 C RA 30722208 + 16 [0]
    252,0 0 264 0.110914023 51121 A RA 30682672 + 8 <- (252,1) 30680624
    252,1 0 265 0.110914645 51121 Q RA 30682672 + 8 [tracker-miner-f]
    252,1 0 266 0.110916188 51121 G RA 30682672 + 8 [tracker-miner-f]
    252,1 0 267 0.110916674 51121 P N [tracker-miner-f]
    252,1 0 268 0.110917122 51121 U N [tracker-miner-f] 1
    252,1 0 269 0.110917510 51121 I RA 30682672 + 8 [tracker-miner-f]
    252,1 0 270 0.110918823 51121 D RA 30682672 + 8 [tracker-miner-f]
    252,1 1 557 0.111227337 335387 C RA 30682672 + 8 [0]
    CPU0 (vda1):
    Reads Queued: 36, 776KiB Writes Queued: 0, 0KiB
    Read Dispatches: 41, 776KiB Write Dispatches: 0, 0KiB
    Reads Requeued: 0 Writes Requeued: 0
    Reads Completed: 0, 0KiB Writes Completed: 0, 0KiB
    Read Merges: 0, 0KiB Write Merges: 0, 0KiB
    Read depth: 6 Write depth: 1
    IO unplugs: 35 Timer unplugs: 0
    CPU1 (vda1):
    Reads Queued: 50, 1428KiB Writes Queued: 13, 52KiB
    Read Dispatches: 65, 1428KiB Write Dispatches: 2, 52KiB
    Reads Requeued: 0 Writes Requeued: 0
    Reads Completed: 106, 2204KiB Writes Completed: 3, 52KiB
    Read Merges: 0, 0KiB Write Merges: 11, 44KiB
    Read depth: 6 Write depth: 1
    IO unplugs: 51 Timer unplugs: 0

    Total (vda1):
    Reads Queued: 86, 2204KiB Writes Queued: 13, 52KiB
    Read Dispatches: 106, 2204KiB Write Dispatches: 2, 52KiB
    Reads Requeued: 0 Writes Requeued: 0
    Reads Completed: 106, 2204KiB Writes Completed: 3, 52KiB
    Read Merges: 0, 0KiB Write Merges: 11, 44KiB
    IO unplugs: 86 Timer unplugs: 0

    Throughput (R/W): 19855KiB/s / 468KiB/s
    Events (vda1): 827 entries
    Skips: 0 forward (0 - 0.0%)
    root@ss20231017:~#
  2. 使用debugfs 定位具体操作的块设备所在的文件地址, 需要将块设备的扇区编号转换成块编号(一个扇区512B,一个块4096B),转换的公式为: blockNum = sectorNum * 512 / 4096, 根据块信息拿到inodenumber,通过ncheck获取对应的文件路径

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21

252,1 0 244 0.109570138 51121 Q RA 30729792 + 16 [tracker-miner-f]
252,1 0 251 0.110035724 51121 Q RA 30728552 + 16 [tracker-miner-f]
252,1 0 258 0.110328274 51121 Q RA 30722208 + 16 [tracker-miner-f]
252,1 0 265 0.110914645 51121 Q RA 30682672 + 8 [tracker-miner-f]


root@ss20231017:~# debugfs /dev/vda
vda vda1
root@ss20231017:~# debugfs /dev/vda1
debugfs 1.45.5 (07-Jan-2020)
debugfs: icheck 3835281
Block Inode number
3835281 961950
debugfs: ncheck 961950
Inode Pathname
961950 /root/.rustup/toolchains/stable-x86_64-unknown-linux-gnu/share/doc/rust/html/core/arch/x86/fn._mm256_inserti128_si256.html
debugfs: