[Date Prev][Date Next] [Thread Prev][Thread Next] [Date Index] [Thread Index]

Kernel memory leak on bullseye-backports kernel



Hi all,

After using the bullseye-backports kernel, my vps ran out of memory after a period of time.

![Memory Basic1](https://img.bgme.bid/media_attachments/files/109/765/807/240/058/094/original/4797799a06a1f6a0.png) ![Memory Detail1](https://img.bgme.bid/media_attachments/files/109/765/733/452/620/356/original/ac80f53c417e8987.png) ![Memory Slab1](https://img.bgme.bid/media_attachments/files/109/765/600/897/375/029/original/fc19cd690d31b7c3.png)

The memory usage graph. But unfortunately, it was restarted directly at that time, and no log was kept.

After rebooting, the memory used by kernel is rising steadily again.

![Memory Basic2](https://img.bgme.bid/media_attachments/files/109/765/807/190/011/489/original/401e2ee717e5dca3.png) ![Memory Detail2](https://img.bgme.bid/media_attachments/files/109/765/733/524/793/685/original/7d214338eae16804.png) ![Memory Slab2](https://img.bgme.bid/media_attachments/files/109/765/583/138/820/548/original/53d7818ce55eab9c.png)

Some info :

```
# lsb_release  -a
No LSB modules are available.
Distributor ID: Debian
Description:    Debian GNU/Linux 11 (bullseye)
Release:        11
Codename:       bullseye
```

```
# uname -a
Linux git 6.0.0-0.deb11.6-amd64 #1 SMP PREEMPT_DYNAMIC Debian 6.0.12-1~bpo11+1 (2022-12-19) x86_64 GNU/Linux
```

```
# free -h
               total        used        free      shared buff/cache   available
Mem:            15Gi       6.4Gi       268Mi       1.0Gi 8.6Gi       7.5Gi
Swap:           15Gi       3.4Gi        12Gi
```

```
# smem -tw
Area                           Used      Cache   Noncache
firmware/hardware                 0          0          0
kernel image                      0          0          0
kernel dynamic memory      10540648    7228024    3312624
userspace memory            4880104    1316400    3563704
free memory                  582536     582536          0
----------------------------------------------------------
                           16003288    9126960    6876328
```

```
# cat /proc/meminfo
MemTotal:       16003288 kB
MemFree:          359100 kB
MemAvailable:    7302416 kB
Buffers:               8 kB
Cached:          8232860 kB
SwapCached:      1052540 kB
Active:          5892304 kB
Inactive:        6280600 kB
Active(anon):    2667552 kB
Inactive(anon):  2371940 kB
Active(file):    3224752 kB
Inactive(file):  3908660 kB
Unevictable:           0 kB
Mlocked:               0 kB
SwapTotal:      16776184 kB
SwapFree:       13276388 kB
Zswap:           1581384 kB
Zswapped:        3437856 kB
Dirty:             42120 kB
Writeback:             0 kB
AnonPages:       3853124 kB
Mapped:          1305832 kB
Shmem:           1099400 kB
KReclaimable:     258080 kB
Slab:            1371656 kB
SReclaimable:     258080 kB
SUnreclaim:      1113576 kB
KernelStack:       20384 kB
PageTables:       384020 kB
NFS_Unstable:          0 kB
Bounce:                0 kB
WritebackTmp:          0 kB
CommitLimit:    24777828 kB
Committed_AS:   14045920 kB
VmallocTotal:   34359738367 kB
VmallocUsed:       64152 kB
VmallocChunk:          0 kB
Percpu:             7392 kB
HardwareCorrupted:     0 kB
AnonHugePages:    163840 kB
ShmemHugePages:        0 kB
ShmemPmdMapped:        0 kB
FileHugePages:         0 kB
FilePmdMapped:         0 kB
HugePages_Total:       0
HugePages_Free:        0
HugePages_Rsvd:        0
HugePages_Surp:        0
Hugepagesize:       2048 kB
Hugetlb:               0 kB
DirectMap4k:      272240 kB
DirectMap2M:    15063040 kB
DirectMap1G:     1048576 kB
```

```
# cat /proc/slabinfo
slabinfo - version: 2.1
# name            <active_objs> <num_objs> <objsize> <objperslab> <pagesperslab> : tunables <limit> <batchcount> <sharedfactor> : slabdata <active_slabs> <num_slabs> <sharedavail> SCTPv6               168    168   1536   21    8 : tunables 0    0    0 : slabdata      8      8      0 SCTP                  69     69   1408   23    8 : tunables 0    0    0 : slabdata      3      3      0 wg_peer               21     21   1552   21    8 : tunables 0    0    0 : slabdata      1      1      0 ovl_inode           1952   3828    728   22    4 : tunables 0    0    0 : slabdata    174    174      0 nf_conntrack        5292  12608    256   32    2 : tunables 0    0    0 : slabdata    394    394      0 fat_inode_cache       20     20    792   20    4 : tunables 0    0    0 : slabdata      1      1      0 fat_cache              0      0     40  102    1 : tunables 0    0    0 : slabdata      0      0      0 fuse_request           0      0    152   26    1 : tunables 0    0    0 : slabdata      0      0      0 fuse_inode             0      0    832   39    8 : tunables 0    0    0 : slabdata      0      0      0 btrfs_ordered_extent    666    777    440   37    4 : tunables 0    0    0 : slabdata     21     21      0 btrfs_extent_map  1004104 1232168    144   28    1 : tunables 0    0    0 : slabdata  44006  44006      0 bio-344              588    609    384   21    2 : tunables 0    0    0 : slabdata     29     29      0 bio-224               32     32    256   32    2 : tunables 0    0    0 : slabdata      1      1      0 btrfs_free_space   27302  32994    104   39    1 : tunables 0    0    0 : slabdata    846    846      0 btrfs_inode        39102  40431   1200   27    8 : tunables 0    0    0 : slabdata   2437   2437      0 scsi_sense_cache     544    544    128   32    1 : tunables 0    0    0 : slabdata     17     17      0 bio-128              459    567    192   21    1 : tunables 0    0    0 : slabdata     27     27      0 fsverity_info          0      0    256   32    2 : tunables 0    0    0 : slabdata      0      0      0 fscrypt_info           0      0    128   32    1 : tunables 0    0    0 : slabdata      0      0      0 MPTCPv6                0      0   2048   16    8 : tunables 0    0    0 : slabdata      0      0      0 ip6-frags            264    264    184   22    1 : tunables 0    0    0 : slabdata     12     12      0 PINGv6                 0      0   1216   26    8 : tunables 0    0    0 : slabdata      0      0      0 RAWv6                234    234   1216   26    8 : tunables 0    0    0 : slabdata      9      9      0 UDPv6                360    360   1344   24    8 : tunables 0    0    0 : slabdata     15     15      0 tw_sock_TCPv6        957   1089    248   33    2 : tunables 0    0    0 : slabdata     33     33      0 request_sock_TCPv6    598    702    312   26    2 : tunables 0    0    0 : slabdata     27     27      0 TCPv6                985   1105   2432   13    8 : tunables 0    0    0 : slabdata     85     85      0 mqueue_inode_cache    272    272    960   34    8 : tunables 0    0    0 : slabdata      8      8      0 kioctx                28     28    576   28    4 : tunables 0    0    0 : slabdata      1      1      0 userfaultfd_ctx_cache      0      0    192   21    1 : tunables 0    0    0 : slabdata      0      0      0 dnotify_struct         0      0     32  128    1 : tunables 0    0    0 : slabdata      0      0      0 pid_namespace        240    240    136   30    1 : tunables 0    0    0 : slabdata      8      8      0 ip4-frags            140    140    200   20    1 : tunables 0    0    0 : slabdata      7      7      0 MPTCP                  0      0   1920   17    8 : tunables 0    0    0 : slabdata      0      0      0 request_sock_subflow      0      0    384   21    2 : tunables 0    0    0 : slabdata      0      0      0 xfrm_dst_cache      9128  14000    320   25    2 : tunables 0    0    0 : slabdata    560    560      0 xfrm_state             0      0    768   21    4 : tunables 0    0    0 : slabdata      0      0      0 ip_fib_trie          680    680     48   85    1 : tunables 0    0    0 : slabdata      8      8      0 ip_fib_alias         584    584     56   73    1 : tunables 0    0    0 : slabdata      8      8      0 PING                 624    672   1024   32    8 : tunables 0    0    0 : slabdata     21     21      0 RAW                   96     96   1024   32    8 : tunables 0    0    0 : slabdata      3      3      0 tw_sock_TCP         1452   1452    248   33    2 : tunables 0    0    0 : slabdata     44     44      0 request_sock_TCP     676    676    312   26    2 : tunables 0    0    0 : slabdata     26     26      0 TCP                 2064   2828   2240   14    8 : tunables 0    0    0 : slabdata    202    202      0 hugetlbfs_inode_cache     72     72    664   24    4 : tunables 0    0    0 : slabdata      3      3      0 dquot                  0      0    256   32    2 : tunables 0    0    0 : slabdata      0      0      0 bio-256               75     75    320   25    2 : tunables 0    0    0 : slabdata      3      3      0 ep_head             4551   8960     16  256    1 : tunables 0    0    0 : slabdata     35     35      0 dax_cache             39     39    832   39    8 : tunables 0    0    0 : slabdata      1      1      0 request_queue_srcu      0      0   1328   24    8 : tunables 0    0    0 : slabdata      0      0      0 request_queue        175    350    936   35    8 : tunables 0    0    0 : slabdata     10     10      0 bio-192              896    896    256   32    2 : tunables 0    0    0 : slabdata     28     28      0 biovec-max           854    984   4096    8    8 : tunables 0    0    0 : slabdata    123    123      0 biovec-128           384    384   2048   16    8 : tunables 0    0    0 : slabdata     24     24      0 biovec-64            546    672   1024   32    8 : tunables 0    0    0 : slabdata     21     21      0 khugepaged_mm_slot   1660   2088    112   36    1 : tunables 0    0    0 : slabdata     58     58      0 user_namespace        78     78    624   26    4 : tunables 0    0    0 : slabdata      3      3      0 dmaengine-unmap-256     15     15   2112   15    8 : tunables 0    0    0 : slabdata      1      1      0 dmaengine-unmap-128     30     30   1088   30    8 : tunables 0    0    0 : slabdata      1      1      0 sock_inode_cache    3536   5655    832   39    8 : tunables 0    0    0 : slabdata    145    145      0 skbuff_ext_cache    1525   1659    192   21    1 : tunables 0    0    0 : slabdata     79     79      0 skbuff_fclone_cache    758   1088    512   32    4 : tunables 0    0    0 : slabdata     34     34      0 skbuff_head_cache    922   1216    256   32    2 : tunables 0    0    0 : slabdata     38     38      0 file_lock_cache      296    296    216   37    2 : tunables 0    0    0 : slabdata      8      8      0 buffer_head         1365   1521    104   39    1 : tunables 0    0    0 : slabdata     39     39      0 taskstats            312    312    416   39    4 : tunables 0    0    0 : slabdata      8      8      0 proc_dir_entry      1827   1827    192   21    1 : tunables 0    0    0 : slabdata     87     87      0 pde_opener           816    816     40  102    1 : tunables 0    0    0 : slabdata      8      8      0 proc_inode_cache    3065   3864    712   23    4 : tunables 0    0    0 : slabdata    168    168      0 seq_file             272    272    120   34    1 : tunables 0    0    0 : slabdata      8      8      0 sigqueue             867    867     80   51    1 : tunables 0    0    0 : slabdata     17     17      0 bdev_cache            60     60   1600   20    8 : tunables 0    0    0 : slabdata      3      3      0 shmem_inode_cache   2093   2120    784   20    4 : tunables 0    0    0 : slabdata    106    106      0 kernfs_node_cache  41300  43136    128   32    1 : tunables 0    0    0 : slabdata   1348   1348      0 mnt_cache           2102   2300    320   25    2 : tunables 0    0    0 : slabdata     92     92      0 filp               47201  52832    256   32    2 : tunables 0    0    0 : slabdata   1651   1651      0 inode_cache        13104  14875    640   25    4 : tunables 0    0    0 : slabdata    595    595      0 dentry             55285  81039    192   21    1 : tunables 0    0    0 : slabdata   3859   3859      0 names_cache          130    146   4096    8    8 : tunables 0    0    0 : slabdata     20     20      0 net_namespace         56     56   4352    7    8 : tunables 0    0    0 : slabdata      8      8      0 iint_cache             0      0    120   34    1 : tunables 0    0    0 : slabdata      0      0      0 lsm_inode_cache    63560 167680     32  128    1 : tunables 0    0    0 : slabdata   1310   1310      0 lsm_file_cache     47430  61540     24  170    1 : tunables 0    0    0 : slabdata    362    362      0 uts_namespace        296    296    432   37    4 : tunables 0    0    0 : slabdata      8      8      0 nsproxy              448    448     72   56    1 : tunables 0    0    0 : slabdata      8      8      0 vm_area_struct    201606 216140    200   20    1 : tunables 0    0    0 : slabdata  10807  10807      0 mm_struct            593    660   1088   30    8 : tunables 0    0    0 : slabdata     22     22      0 files_cache          586    690    704   23    4 : tunables 0    0    0 : slabdata     30     30      0 signal_cache         677    896   1152   28    8 : tunables 0    0    0 : slabdata     32     32      0 sighand_cache        555    600   2112   15    8 : tunables 0    0    0 : slabdata     40     40      0 task_struct         1297   1365   6528    5    8 : tunables 0    0    0 : slabdata    273    273      0 cred_jar            1433   1638    192   21    1 : tunables 0    0    0 : slabdata     78     78      0 anon_vma_chain    130566 145920     64   64    1 : tunables 0    0    0 : slabdata   2280   2280      0 anon_vma           50209  54366    104   39    1 : tunables 0    0    0 : slabdata   1394   1394      0 pid                 5785   8896    128   32    1 : tunables 0    0    0 : slabdata    278    278      0 Acpi-Operand        1008   1008     72   56    1 : tunables 0    0    0 : slabdata     18     18      0 Acpi-Parse           730    730     56   73    1 : tunables 0    0    0 : slabdata     10     10      0 Acpi-State         67424 164628     80   51    1 : tunables 0    0    0 : slabdata   3228   3228      0 numa_policy          240    240    272   30    2 : tunables 0    0    0 : slabdata      8      8      0 perf_event            26     26   1232   26    8 : tunables 0    0    0 : slabdata      1      1      0 trace_event_file    2484   2484     88   46    1 : tunables 0    0    0 : slabdata     54     54      0 ftrace_event_field   4250   4250     48   85    1 : tunables 0    0    0 : slabdata     50     50      0 pool_workqueue     10489  17344    256   32    2 : tunables 0    0    0 : slabdata    542    542      0 radix_tree_node   263371 302596    584   28    4 : tunables 0    0    0 : slabdata  10807  10807      0 task_group           725    750    640   25    4 : tunables 0    0    0 : slabdata     30     30      0 vmap_area         11212341 11212416     64   64    1 : tunables 0    0    0 : slabdata 175194 175194      0 dma-kmalloc-8k         0      0   8192    4    8 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-4k         0      0   4096    8    8 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-2k         0      0   2048   16    8 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-1k         0      0   1024   32    8 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-512        0      0    512   32    4 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-256        0      0    256   32    2 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-192        0      0    192   21    1 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-128        0      0    128   32    1 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-96         0      0     96   42    1 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-64         0      0     64   64    1 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-32         0      0     32  128    1 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-16         0      0     16  256    1 : tunables 0    0    0 : slabdata      0      0      0 dma-kmalloc-8          0      0      8  512    1 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-8k         0      0   8192    4    8 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-4k         0      0   4096    8    8 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-2k         0      0   2048   16    8 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-1k         0      0   1024   32    8 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-512        0      0    512   32    4 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-256        0      0    256   32    2 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-192      212    315    192   21    1 : tunables 0    0    0 : slabdata     15     15      0 kmalloc-rcl-128     1120   1120    128   32    1 : tunables 0    0    0 : slabdata     35     35      0 kmalloc-rcl-96      3148   4116     96   42    1 : tunables 0    0    0 : slabdata     98     98      0 kmalloc-rcl-64      8128  12416     64   64    1 : tunables 0    0    0 : slabdata    194    194      0 kmalloc-rcl-32         0      0     32  128    1 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-16         0      0     16  256    1 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-rcl-8          0      0      8  512    1 : tunables 0    0    0 : slabdata      0      0      0 kmalloc-cg-8k         84     84   8192    4    8 : tunables 0    0    0 : slabdata     21     21      0 kmalloc-cg-4k        437    456   4096    8    8 : tunables 0    0    0 : slabdata     57     57      0 kmalloc-cg-2k        578    624   2048   16    8 : tunables 0    0    0 : slabdata     39     39      0 kmalloc-cg-1k       1281   1728   1024   32    8 : tunables 0    0    0 : slabdata     54     54      0 kmalloc-cg-512       878   1024    512   32    4 : tunables 0    0    0 : slabdata     32     32      0 kmalloc-cg-256       640    640    256   32    2 : tunables 0    0    0 : slabdata     20     20      0 kmalloc-cg-192      1451   1491    192   21    1 : tunables 0    0    0 : slabdata     71     71      0 kmalloc-cg-128      1280   1280    128   32    1 : tunables 0    0    0 : slabdata     40     40      0 kmalloc-cg-96        336    336     96   42    1 : tunables 0    0    0 : slabdata      8      8      0 kmalloc-cg-64       1813   1984     64   64    1 : tunables 0    0    0 : slabdata     31     31      0 kmalloc-cg-32       1920   1920     32  128    1 : tunables 0    0    0 : slabdata     15     15      0 kmalloc-cg-16       3072   3072     16  256    1 : tunables 0    0    0 : slabdata     12     12      0 kmalloc-cg-8        4096   4096      8  512    1 : tunables 0    0    0 : slabdata      8      8      0 kmalloc-8k           284    288   8192    4    8 : tunables 0    0    0 : slabdata     72     72      0 kmalloc-4k           552    584   4096    8    8 : tunables 0    0    0 : slabdata     73     73      0 kmalloc-2k          1552   1744   2048   16    8 : tunables 0    0    0 : slabdata    109    109      0 kmalloc-1k          2204   3040   1024   32    8 : tunables 0    0    0 : slabdata     95     95      0 kmalloc-512        11804  13472    512   32    4 : tunables 0    0    0 : slabdata    424    424      0 kmalloc-256        17720  27936    256   32    2 : tunables 0    0    0 : slabdata    873    873      0 kmalloc-192        86424  92967    192   21    1 : tunables 0    0    0 : slabdata   4427   4427      0 kmalloc-128         2267   3168    128   32    1 : tunables 0    0    0 : slabdata     99     99      0 kmalloc-96          2312   2730     96   42    1 : tunables 0    0    0 : slabdata     65     65      0 kmalloc-64         14507  27840     64   64    1 : tunables 0    0    0 : slabdata    435    435      0 kmalloc-32         12125  32512     32  128    1 : tunables 0    0    0 : slabdata    254    254      0 kmalloc-16         16536  20480     16  256    1 : tunables 0    0    0 : slabdata     80     80      0 kmalloc-8           9792  10240      8  512    1 : tunables 0    0    0 : slabdata     20     20      0 kmem_cache_node      448    448     64   64    1 : tunables 0    0    0 : slabdata      7      7      0 kmem_cache           288    288    256   32    2 : tunables 0    0    0 : slabdata      9      9      0
```

```
# slabtop -o
 Active / Total Objects (% used)    : 13532483 / 14216137 (95.2%)
 Active / Total Slabs (% used)      : 272267 / 272267 (100.0%)
 Active / Total Caches (% used)     : 123 / 160 (76.9%)
 Active / Total Size (% used)       : 1228026.31K / 1332345.63K (92.2%)
 Minimum / Average / Maximum Object : 0.01K / 0.09K / 8.00K

  OBJS ACTIVE  USE OBJ SIZE  SLABS OBJ/SLAB CACHE SIZE NAME
11194816 11169612  99%    0.06K 174919       64    699676K vmap_area
1232168 935522  75%    0.14K  44006       28    176024K btrfs_extent_map
302596 264634  87%    0.57K  10807       28    172912K radix_tree_node
216140 204937  94%    0.20K  10807       20     43228K vm_area_struct
175491 126210  71%    0.08K   3441       51     13764K Acpi-State
167808  63869  38%    0.03K   1311      128      5244K lsm_inode_cache
145920 131973  90%    0.06K   2280       64      9120K anon_vma_chain
 92967  86466  93%    0.19K   4427       21     17708K kmalloc-192
 81207  63411  78%    0.19K   3867       21     15468K dentry
 61540  47280  76%    0.02K    362      170      1448K lsm_file_cache
 54015  50012  92%    0.10K   1385       39      5540K anon_vma
 52832  46732  88%    0.25K   1651       32     13208K filp
 43136  41300  95%    0.12K   1348       32      5392K kernfs_node_cache
 40431  40287  99%    1.17K   2437       27     77984K btrfs_inode
 32994  26471  80%    0.10K    846       39      3384K btrfs_free_space
 32512  12127  37%    0.03K    254      128      1016K kmalloc-32
 27936  17779  63%    0.25K    873       32      6984K kmalloc-256
 27840  14278  51%    0.06K    435       64      1740K kmalloc-64
 20480  16430  80%    0.02K     80      256       320K kmalloc-16
 17344  11174  64%    0.25K    542       32      4336K pool_workqueue
 14875  13104  88%    0.62K    595       25      9520K inode_cache
 14000   9715  69%    0.31K    560       25      4480K xfrm_dst_cache
 13472  11725  87%    0.50K    424       32      6784K kmalloc-512
 12704   6983  54%    0.25K    397       32      3176K nf_conntrack
 12608  12415  98%    0.06K    197       64       788K kmalloc-rcl-64
 10240   9792  95%    0.01K     20      512        80K kmalloc-8
  8960   4567  50%    0.02K     35      256       140K ep_head
  8896   6097  68%    0.12K    278       32      1112K pid
  5655   3514  62%    0.81K    145       39      4640K sock_inode_cache
  4250   4250 100%    0.05K     50       85       200K ftrace_event_field
  4116   4116 100%    0.09K     98       42       392K kmalloc-rcl-96
  4096   4096 100%    0.01K      8      512        32K kmalloc-cg-8
  3864   3087  79%    0.70K    168       23      2688K proc_inode_cache
  3828   1952  50%    0.71K    174       22      2784K ovl_inode
  3168   2397  75%    0.12K     99       32       396K kmalloc-128
  3072   3072 100%    0.02K     12      256        48K kmalloc-cg-16
  3040   2086  68%    1.00K     95       32      3040K kmalloc-1k
  2828   2072  73%    2.19K    202       14      6464K TCP
  2730   2232  81%    0.09K     65       42       260K kmalloc-96
  2484   2484 100%    0.09K     54       46       216K trace_event_file
  2300   2102  91%    0.31K     92       25       736K mnt_cache
  2120   2093  98%    0.77K    106       20      1696K shmem_inode_cache
  2052   1452  70%    0.11K     57       36       228K khugepaged_mm_slot
  1984   1813  91%    0.06K     31       64       124K kmalloc-cg-64
  1920   1920 100%    0.03K     15      128        60K kmalloc-cg-32
  1827   1827 100%    0.19K     87       21       348K proc_dir_entry
  1744   1542  88%    2.00K    109       16      3488K kmalloc-2k
  1728   1281  74%    1.00K     54       32      1728K kmalloc-cg-1k
  1659   1541  92%    0.19K     79       21       316K skbuff_ext_cache
  1638   1435  87%    0.19K     78       21       312K cred_jar
  1521   1365  89%    0.10K     39       39       156K buffer_head
  1491   1451  97%    0.19K     71       21       284K kmalloc-cg-192
  1419   1419 100%    0.24K     43       33       344K tw_sock_TCP
  1365   1300  95%    6.38K    273        5      8736K task_struct
  1280   1280 100%    0.12K     40       32       160K kmalloc-cg-128
  1280    905  70%    0.25K     40       32       320K skbuff_head_cache
  1120   1120 100%    0.12K     35       32       140K kmalloc-rcl-128
  1105    908  82%    2.38K     85       13      2720K TCPv6
  1089    957  87%    0.24K     33       33       264K tw_sock_TCPv6
  1024    878  85%    0.50K     32       32       512K kmalloc-cg-512
  1008   1008 100%    0.07K     18       56        72K Acpi-Operand
   992    869  87%    4.00K    124        8      3968K biovec-max
   928    928 100%    0.50K     29       32       464K skbuff_fclone_cache
   896    702  78%    1.12K     32       28      1024K signal_cache
   867    867 100%    0.08K     17       51        68K sigqueue
   864    736  85%    0.25K     27       32       216K bio-192
   816    816 100%    0.04K      8      102        32K pde_opener
   750    725  96%    0.62K     30       25       480K task_group
   730    730 100%    0.05K     10       73        40K Acpi-Parse
   703    518  73%    0.43K     19       37       304K btrfs_ordered_extent
   702    598  85%    0.30K     27       26       216K request_sock_TCPv6
   690    586  84%    0.69K     30       23       480K files_cache
   680    680 100%    0.05K      8       85        32K ip_fib_trie
   676    573  84%    0.30K     26       26       208K request_sock_TCP
   672    578  86%    1.00K     21       32       672K biovec-64
   672    624  92%    1.00K     21       32       672K PING
   660    593  89%    1.06K     22       30       704K mm_struct
   640    640 100%    0.25K     20       32       160K kmalloc-cg-256
   624    578  92%    2.00K     39       16      1248K kmalloc-cg-2k
   609    609 100%    0.38K     29       21       232K bio-344
   600    551  91%    2.06K     40       15      1280K sighand_cache
   584    552  94%    4.00K     73        8      2336K kmalloc-4k
   584    584 100%    0.05K      8       73        32K ip_fib_alias
   567    459  80%    0.19K     27       21       108K bio-128
   544    544 100%    0.12K     17       32        68K scsi_sense_cache
   456    434  95%    4.00K     57        8      1824K kmalloc-cg-4k
   448    448 100%    0.06K      7       64        28K kmem_cache_node
   448    448 100%    0.07K      8       56        32K nsproxy
   384    336  87%    2.00K     24       16       768K biovec-128
   360    360 100%    1.31K     15       24       480K UDPv6
   350    175  50%    0.91K     10       35       320K request_queue
   336    336 100%    0.09K      8       42        32K kmalloc-cg-96
   315    212  67%    0.19K     15       21        60K kmalloc-rcl-192
   312    312 100%    0.41K      8       39       128K taskstats
   296    296 100%    0.42K      8       37       128K uts_namespace
   296    296 100%    0.21K      8       37        64K file_lock_cache
   288    288 100%    0.25K      9       32        72K kmem_cache
   288    284  98%    8.00K     72        4      2304K kmalloc-8k
   272    272 100%    0.12K      8       34        32K seq_file
   272    272 100%    0.94K      8       34       256K mqueue_inode_cache
   264    264 100%    0.18K     12       22        48K ip6-frags
   240    240 100%    0.27K      8       30        64K numa_policy
   240    240 100%    0.13K      8       30        32K pid_namespace
   234    234 100%    1.19K      9       26       288K RAWv6
   168    168 100%    1.50K      8       21       256K SCTPv6
   146    130  89%    4.00K     20        8       640K names_cache
   140    140 100%    0.20K      7       20        28K ip4-frags
    96     96 100%    1.00K      3       32        96K RAW
    84     84 100%    8.00K     21        4       672K kmalloc-cg-8k
    78     78 100%    0.61K      3       26        48K user_namespace
    75     75 100%    0.31K      3       25        24K bio-256
    72     72 100%    0.65K      3       24        48K hugetlbfs_inode_cache
    69     69 100%    1.38K      3       23        96K SCTP
    60     60 100%    1.56K      3       20        96K bdev_cache
    56     56 100%    4.25K      8        7       256K net_namespace
    39     39 100%    0.81K      1       39        32K dax_cache
    32     32 100%    0.25K      1       32         8K bio-224
    30     30 100%    1.06K      1       30        32K dmaengine-unmap-128
    28     28 100%    0.56K      1       28        16K kioctx
    26     26 100%    1.20K      1       26        32K perf_event
    21     21 100%    1.52K      1       21        32K wg_peer
    20     20 100%    0.77K      1       20        16K fat_inode_cache
    15     15 100%    2.06K      1       15        32K dmaengine-unmap-256
     0      0   0%    0.01K      0      512         0K kmalloc-rcl-8
     0      0   0%    0.02K      0      256         0K kmalloc-rcl-16
     0      0   0%    0.03K      0      128         0K kmalloc-rcl-32
     0      0   0%    0.25K      0       32         0K kmalloc-rcl-256
     0      0   0%    0.50K      0       32         0K kmalloc-rcl-512
     0      0   0%    1.00K      0       32         0K kmalloc-rcl-1k
     0      0   0%    2.00K      0       16         0K kmalloc-rcl-2k
     0      0   0%    4.00K      0        8         0K kmalloc-rcl-4k
     0      0   0%    8.00K      0        4         0K kmalloc-rcl-8k
     0      0   0%    0.01K      0      512         0K dma-kmalloc-8
     0      0   0%    0.02K      0      256         0K dma-kmalloc-16
     0      0   0%    0.03K      0      128         0K dma-kmalloc-32
     0      0   0%    0.06K      0       64         0K dma-kmalloc-64
     0      0   0%    0.09K      0       42         0K dma-kmalloc-96
     0      0   0%    0.12K      0       32         0K dma-kmalloc-128
     0      0   0%    0.19K      0       21         0K dma-kmalloc-192
     0      0   0%    0.25K      0       32         0K dma-kmalloc-256
     0      0   0%    0.50K      0       32         0K dma-kmalloc-512
     0      0   0%    1.00K      0       32         0K dma-kmalloc-1k
     0      0   0%    2.00K      0       16         0K dma-kmalloc-2k
     0      0   0%    4.00K      0        8         0K dma-kmalloc-4k
     0      0   0%    8.00K      0        4         0K dma-kmalloc-8k
     0      0   0%    0.12K      0       34         0K iint_cache
     0      0   0%    1.30K      0       24         0K request_queue_srcu
     0      0   0%    0.25K      0       32         0K dquot
     0      0   0%    0.75K      0       21         0K xfrm_state
     0      0   0%    0.38K      0       21         0K request_sock_subflow
     0      0   0%    1.88K      0       17         0K MPTCP
     0      0   0%    0.03K      0      128         0K dnotify_struct
     0      0   0%    0.19K      0       21         0K userfaultfd_ctx_cache
     0      0   0%    1.19K      0       26         0K PINGv6
     0      0   0%    2.00K      0       16         0K MPTCPv6
     0      0   0%    0.12K      0       32         0K fscrypt_info
     0      0   0%    0.25K      0       32         0K fsverity_info
     0      0   0%    0.81K      0       39         0K fuse_inode
     0      0   0%    0.15K      0       26         0K fuse_request
     0      0   0%    0.04K      0      102         0K fat_cache
```

```
# lsmod
Module                  Size  Used by
tcp_diag               16384  0
inet_diag              28672  1 tcp_diag
sctp                  446464  28
ipt_REJECT             16384  0
xt_multiport           20480  1
xt_nat                 16384  64
xt_tcpudp              20480  84
veth                   36864  0
xt_conntrack           16384  12
xt_MASQUERADE          20480  23
nf_conntrack_netlink    57344  0
xfrm_user              49152  1
xfrm_algo              16384  1 xfrm_user
xt_addrtype            16384  2
nft_compat             20480  186
br_netfilter           36864  0
bridge                319488  1 br_netfilter
stp                    16384  1 bridge
llc                    16384  2 bridge,stp
wireguard              94208  0
curve25519_x86_64      36864  1 wireguard
libchacha20poly1305    16384  1 wireguard
chacha_x86_64          28672  1 libchacha20poly1305
poly1305_x86_64        28672  1 libchacha20poly1305
libcurve25519_generic    49152  2 curve25519_x86_64,wireguard
libchacha              16384  1 chacha_x86_64
ip6_udp_tunnel         16384  2 wireguard,sctp
udp_tunnel             24576  2 wireguard,sctp
overlay               155648  14
nft_objref             16384  1
nf_conntrack_netbios_ns    16384  1
nf_conntrack_broadcast    16384  1 nf_conntrack_netbios_ns
nft_fib_inet           16384  1
nft_fib_ipv4           16384  1 nft_fib_inet
nft_fib_ipv6           16384  1 nft_fib_inet
nft_fib                16384  3 nft_fib_ipv6,nft_fib_ipv4,nft_fib_inet
nft_reject_inet        16384  7
nf_reject_ipv4         16384  2 nft_reject_inet,ipt_REJECT
nf_reject_ipv6         24576  1 nft_reject_inet
nft_reject             16384  1 nft_reject_inet
nft_ct                 24576  39
nft_chain_nat          16384  34
nf_nat                 57344  3 xt_nat,nft_chain_nat,xt_MASQUERADE
nf_conntrack          188416  8 xt_conntrack,nf_nat,nft_ct,nf_conntrack_netbios_ns,xt_nat,nf_conntrack_broadcast,nf_conntrack_netlink,xt_MASQUERADE
nf_defrag_ipv6         24576  1 nf_conntrack
nf_defrag_ipv4         16384  1 nf_conntrack
nf_tables             282624  2145 nft_ct,nft_compat,nft_reject_inet,nft_fib_ipv6,nft_objref,nft_fib_ipv4,nft_chain_nat,nft_reject,nft_fib,nft_fib_inet
nfnetlink              20480  5 nft_compat,nf_conntrack_netlink,nf_tables
nls_ascii              16384  1
nls_cp437              20480  1
vfat                   24576  1
fat                    86016  1 vfat
intel_rapl_msr         20480  0
intel_rapl_common      28672  1 intel_rapl_msr
bochs                  16384  0
evdev                  28672  2
drm_vram_helper        24576  1 bochs
serio_raw              20480  0
pcspkr                 16384  0
joydev                 28672  0
drm_ttm_helper         16384  2 bochs,drm_vram_helper
virtio_console         40960  1
virtio_balloon         24576  0
sg                     40960  0
ttm                    94208  2 drm_vram_helper,drm_ttm_helper
qemu_fw_cfg            20480  0
drm_kms_helper        204800  4 bochs,drm_vram_helper
button                 24576  0
tcp_bbr                20480  2570
sch_fq                 20480  3
drm                   606208  6 drm_kms_helper,bochs,drm_vram_helper,drm_ttm_helper,ttm
fuse                  172032  1
configfs               57344  1
ip_tables              36864  0
x_tables               61440  9 xt_conntrack,nft_compat,xt_multiport,xt_tcpudp,xt_addrtype,xt_nat,ipt_REJECT,ip_tables,xt_MASQUERADE
autofs4                53248  2
btrfs                1740800  1
blake2b_generic        20480  0
raid10                 65536  0
raid456               180224  0
async_raid6_recov      24576  1 raid456
async_memcpy           20480  2 raid456,async_raid6_recov
async_pq               20480  2 raid456,async_raid6_recov
async_xor              20480  3 async_pq,raid456,async_raid6_recov
async_tx               20480  5 async_pq,async_memcpy,async_xor,raid456,async_raid6_recov
xor                    24576  2 async_xor,btrfs
raid6_pq              122880  4 async_pq,btrfs,raid456,async_raid6_recov
libcrc32c              16384  6 nf_conntrack,nf_nat,btrfs,nf_tables,raid456,sctp
crc32c_generic         16384  0
raid1                  49152  0
raid0                  24576  0
multipath              20480  0
linear                 20480  0
md_mod                192512  6 raid1,raid10,raid0,linear,raid456,multipath
hid_generic            16384  0
usbhid                 65536  0
hid                   159744  2 usbhid,hid_generic
sd_mod                 65536  4
t10_pi                 16384  1 sd_mod
crc64_rocksoft_generic    16384  1
crc64_rocksoft         20480  1 t10_pi
crc_t10dif             20480  1 t10_pi
crct10dif_generic      16384  0
crc64                  20480  2 crc64_rocksoft,crc64_rocksoft_generic
crct10dif_pclmul       16384  1
crct10dif_common       16384  3 crct10dif_generic,crc_t10dif,crct10dif_pclmul
crc32_pclmul           16384  0
sr_mod                 28672  0
crc32c_intel           24576  2
virtio_net             69632  0
cdrom                  77824  1 sr_mod
net_failover           24576  1 virtio_net
virtio_scsi            24576  3
failover               16384  1 net_failover
ata_generic            16384  0
ghash_clmulni_intel    16384  0
xhci_pci               20480  0
ata_piix               45056  0
xhci_hcd              315392  1 xhci_pci
libata                397312  2 ata_piix,ata_generic
aesni_intel           393216  0
usbcore               344064  3 xhci_hcd,usbhid,xhci_pci
crypto_simd            16384  1 aesni_intel
psmouse               184320  0
cryptd                 28672  2 crypto_simd,ghash_clmulni_intel
scsi_mod              282624  5 virtio_scsi,sd_mod,libata,sg,sr_mod
virtio_pci             24576  0
virtio_pci_legacy_dev    16384  1 virtio_pci
virtio_pci_modern_dev    20480  1 virtio_pci
virtio                 20480  5 virtio_console,virtio_balloon,virtio_scsi,virtio_pci,virtio_net
usb_common             16384  2 xhci_hcd,usbcore
virtio_ring            45056  5 virtio_console,virtio_balloon,virtio_scsi,virtio_pci,virtio_net
floppy                 86016  0
i2c_piix4              28672  0
scsi_common            16384  4 scsi_mod,libata,sg,sr_mod
z3fold                 32768  1
zstd                   16384  16
zstd_compress         311296  2 btrfs,zstd
```

Try to drop cache

```
sync && echo 3 > /proc/sys/vm/drop_caches
```

but it doesn't help.

```
# cat /etc/fstab

# /dev/sda1
UUID=xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx       / btrfs rw,noatime,compress=zstd:3,ssd,space_cache=v2,subvolid=256,subvol=/@root 0 0

# /boot/efi
UUID=xxxx-xxxx  /boot/efi       vfat    umask=0077      0       1
/dev/sr0        /media/cdrom0   udf,iso9660 user,noauto 0       0

# swap
UUID=xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx       none swap            defaults        0 0 /swapfilevolume/swapfile                        none swap            defaults        0 0
```

Thank you.

Attachment: OpenPGP_signature
Description: OpenPGP digital signature


Reply to: