SMG-4 Заканчиввается оперативная память

[GoldRok]

День добрый!

Сегодня обнаружил аварию "Оперативная память заканчивается"

Это показывает top:

Код: Выделить всё

top - 10:59:53 up 153 days, 13:47,  1 user,  load average: 0.06, 0.13, 0.14
Tasks:  74 total,   1 running,  73 sleeping,   0 stopped,   0 zombie
Cpu(s):  7.8%us,  2.3%sy,  0.0%ni, 85.3%id,  0.0%wa,  0.0%hi,  4.6%si,  0.0%st
Mem:    505728k total,   441112k used,    64616k free,      884k buffers
Swap:        0k total,        0k used,        0k free,    40196k cached

  PID USER      PR  NI  VIRT  RES  SHR S %CPU %MEM    TIME+  COMMAND
  677 root      20   0  151m  45m 2356 S  4.0  9.2   8101:28 mgapp
  759 root      20   0 66264  21m 1496 S  2.3  4.4   4116:14 pa_sip
17477 root      20   0  2340  992  800 R  0.7  0.2   0:01.37 top
  692 root      20   0 37736 2524 1632 S  0.3  0.5 149:56.80 cfgmngr
    1 root      20   0  2900  684  604 S  0.0  0.1   0:04.40 init
    2 root      20   0     0    0    0 S  0.0  0.0   0:00.07 kthreadd
    3 root      20   0     0    0    0 S  0.0  0.0  24:35.66 ksoftirqd/0
    5 root      20   0     0    0    0 S  0.0  0.0   0:00.01 kworker/u:0
    6 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 khelper
    7 root      20   0     0    0    0 S  0.0  0.0   0:00.00 kdevtmpfs
    8 root      20   0     0    0    0 S  0.0  0.0   0:00.00 kworker/u:1
  173 root      20   0     0    0    0 S  0.0  0.0   2:21.40 sync_supers
  175 root      20   0     0    0    0 S  0.0  0.0   0:01.96 bdi-default
  177 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 kblockd
  183 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 ata_sff
  194 root      20   0     0    0    0 S  0.0  0.0   0:00.00 khubd
  199 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 md
  217 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 rpciod
  218 root      20   0     0    0    0 S  0.0  0.0  20:06.36 kworker/0:1
  225 root      20   0     0    0    0 S  0.0  0.0   0:00.00 ocf_0
  226 root      20   0     0    0    0 S  0.0  0.0   0:00.00 ocf_ret_0
  239 root      20   0     0    0    0 S  0.0  0.0   0:00.00 kswapd0
  240 root      20   0     0    0    0 S  0.0  0.0   0:00.00 fsnotify_mark
  241 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 nfsiod
  243 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 xfs_mru_cache
  244 root       0 -20     0    0    0 S  0.0  0.0   0:00.00 xfslogd

CDR исправно отправляются на FTP сервер, никаких затыков с этим нет. Бутать SMG-4 днем как-то не охота (и поможет ли?)
Версия ПО V.3.1.6.1189. 4/S Build: Mar 31 2017 05:53:14

[Dmitriy_eltex]

Здравствуйте.

Пришлите вывод команд:

Код: Выделить всё

sh
df -h
free -m
cat /proc/slabinfo

[GoldRok]

Здравствуйте.

Пришлите вывод команд:

Код: Выделить всё

sh
df -h
free -m
cat /proc/slabinfo

Код: Выделить всё

SMG4> sh
/home/admin # df -h
Filesystem                Size      Used Available Use% Mounted on
/dev/root               124.0M     39.6M     84.4M  32% /
/dev/ram0                64.0M    428.0K     63.6M   1% /tmp
/dev/ram0                32.0M    280.0K     31.7M   1% /tmp/cdrs
/dev/ram0               128.0M      1.3M    126.7M   1% /tmp/logs
/dev/ram0                16.0M    752.0K     15.3M   5% /mnt/ram
ubi0:fs                  54.7M      7.4M     44.4M  14% /tmp/fs
ubi1:fs_upd              26.3M      1.2M     23.8M   5% /tmp/fs_upd
ubi2:disk               451.2M    548.0K    446.0M   0% /tmp/disk
/home/admin # free -m
             total       used       free     shared    buffers     cached
Mem:           493        430         63          0          0         39
-/+ buffers/cache:        390        103
Swap:            0          0          0
/home/admin # cat /proc/slabinfo
slabinfo - version: 2.1
# name            <active_objs> <num_objs> <objsize> <objperslab> <pagesperslab> : tunables <limit> <batchcount> <shared                                                                                                                     factor> : slabdata <active_slabs> <num_slabs> <sharedavail>
ubifs_inode_slab      52     60    384   10    1 : tunables   54   27    0 : slabdata      6      6      0
bridge_fdb_cache       0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
fib6_nodes             6    113     32  113    1 : tunables  120   60    0 : slabdata      1      1      0
ip6_dst_cache          7     15    256   15    1 : tunables  120   60    0 : slabdata      1      1      0
ndisc_cache            1     20    192   20    1 : tunables  120   60    0 : slabdata      1      1      0
RAWv6                  4     11    704   11    2 : tunables   54   27    0 : slabdata      1      1      0
UDPLITEv6              0      0    640    6    1 : tunables   54   27    0 : slabdata      0      0      0
UDPv6                  0      0    640    6    1 : tunables   54   27    0 : slabdata      0      0      0
tw_sock_TCPv6          0      0    192   20    1 : tunables  120   60    0 : slabdata      0      0      0
request_sock_TCPv6      0      0    128   30    1 : tunables  120   60    0 : slabdata      0      0      0
TCPv6                  1      3   1280    3    1 : tunables   24   12    0 : slabdata      1      1      0
nf_conntrack_expect      0      0    136   29    1 : tunables  120   60    0 : slabdata      0      0      0
nf_conntrack_c0658960      0      0    208   19    1 : tunables  120   60    0 : slabdata      0      0      0
flow_cache             0      0     88   44    1 : tunables  120   60    0 : slabdata      0      0      0
ubi_wl_entry_slab   4862   4930     24  145    1 : tunables  120   60    0 : slabdata     34     34      0
scsi_sense_cache       2     30    128   30    1 : tunables  120   60    0 : slabdata      1      1      0
scsi_cmd_cache         2     20    192   20    1 : tunables  120   60    0 : slabdata      1      1      0
sd_ext_cdb             2    113     32  113    1 : tunables  120   60    0 : slabdata      1      1      0
cfq_io_context         5     59     64   59    1 : tunables  120   60    0 : slabdata      1      1      0
cfq_queue              5     26    152   26    1 : tunables  120   60    0 : slabdata      1      1      0
xfs_buf                0      0    192   20    1 : tunables  120   60    0 : slabdata      0      0      0
fstrm_item             0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_mru_cache_elem      0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_ili                0      0    168   23    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_inode              0      0    576    7    1 : tunables   54   27    0 : slabdata      0      0      0
xfs_efi_item           0      0    352   11    1 : tunables   54   27    0 : slabdata      0      0      0
xfs_efd_item           0      0    352   11    1 : tunables   54   27    0 : slabdata      0      0      0
xfs_buf_item           0      0    176   22    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_log_item_desc      0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_trans              0      0    232   17    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_ifork              0      0     56   67    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_dabuf              0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_da_state           0      0    392   10    1 : tunables   54   27    0 : slabdata      0      0      0
xfs_btree_cur          0      0    152   26    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_bmap_free_item      0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_log_ticket         0      0    176   22    1 : tunables  120   60    0 : slabdata      0      0      0
xfs_ioend             32     53     72   53    1 : tunables  120   60    0 : slabdata      1      1      0
fuse_request           0      0    376   10    1 : tunables   54   27    0 : slabdata      0      0      0
fuse_inode             0      0    448    9    1 : tunables   54   27    0 : slabdata      0      0      0
jffs2_inode_cache      0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
jffs2_node_frag        0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
jffs2_refblock         0      0    248   16    1 : tunables  120   60    0 : slabdata      0      0      0
jffs2_tmp_dnode        0      0     32  113    1 : tunables  120   60    0 : slabdata      0      0      0
jffs2_raw_inode        0      0    128   30    1 : tunables  120   60    0 : slabdata      0      0      0
jffs2_raw_dirent       0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
jffs2_full_dnode       0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
jffs2_i                0      0    336   11    1 : tunables   54   27    0 : slabdata      0      0      0
ntfs_big_inode_cache      0      0    448    9    1 : tunables   54   27    0 : slabdata      0      0      0
ntfs_inode_cache       0      0    152   26    1 : tunables  120   60    0 : slabdata      0      0      0
ntfs_name_cache        0      0    512    8    1 : tunables   54   27    0 : slabdata      0      0      0
ntfs_attr_ctx_cache      0      0     32  113    1 : tunables  120   60    0 : slabdata      0      0      0
ntfs_index_ctx_cache      0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
nfs_direct_cache       0      0     72   53    1 : tunables  120   60    0 : slabdata      0      0      0
nfs_write_data        36     42    512    7    1 : tunables   54   27    0 : slabdata      6      6      0
nfs_read_data          0      0    512    7    1 : tunables   54   27    0 : slabdata      0      0      0
nfs_inode_cache        0      0    536    7    1 : tunables   54   27    0 : slabdata      0      0      0
nfs_page               0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
isofs_inode_cache      0      0    328   12    1 : tunables   54   27    0 : slabdata      0      0      0
fat_inode_cache        0      0    368   10    1 : tunables   54   27    0 : slabdata      0      0      0
fat_cache              0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
squashfs_inode_cache      0      0    384   10    1 : tunables   54   27    0 : slabdata      0      0      0
jbd2_inode             0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
jbd2_journal_handle      0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
jbd2_journal_head      0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
jbd2_revoke_table      0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
jbd2_revoke_record      0      0     32  113    1 : tunables  120   60    0 : slabdata      0      0      0
journal_handle         0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
journal_head           0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
revoke_table           0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
revoke_record          0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
ext4_inode_cache       0      0    512    8    1 : tunables   54   27    0 : slabdata      0      0      0
ext4_free_data         0      0     40   92    1 : tunables  120   60    0 : slabdata      0      0      0
ext4_allocation_context      0      0    112   35    1 : tunables  120   60    0 : slabdata      0      0      0
ext4_prealloc_space      0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
ext4_system_zone       0      0     32  113    1 : tunables  120   60    0 : slabdata      0      0      0
ext4_io_end            0      0    576    7    1 : tunables   54   27    0 : slabdata      0      0      0
ext4_io_page           0      0      8  339    1 : tunables  120   60    0 : slabdata      0      0      0
ext2_inode_cache     881    882    416    9    1 : tunables   54   27    0 : slabdata     98     98      0
ext3_inode_cache       0      0    432    9    1 : tunables   54   27    0 : slabdata      0      0      0
kioctx                 0      0    192   20    1 : tunables  120   60    0 : slabdata      0      0      0
kiocb                  0      0    128   30    1 : tunables  120   60    0 : slabdata      0      0      0
inotify_event_private_data      0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
inotify_inode_mark      0      0     72   53    1 : tunables  120   60    0 : slabdata      0      0      0
dnotify_mark           0      0     72   53    1 : tunables  120   60    0 : slabdata      0      0      0
dnotify_struct         0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
dio                    0      0    320   12    1 : tunables   54   27    0 : slabdata      0      0      0
fasync_cache           0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
posix_timers_cache      0      0    104   37    1 : tunables  120   60    0 : slabdata      0      0      0
uid_cache              0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
cryptodesc             0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
cryptop                0      0     64   59    1 : tunables  120   60    0 : slabdata      0      0      0
rpc_buffers            8      8   2048    2    1 : tunables   24   12    0 : slabdata      4      4      0
rpc_tasks              8     30    128   30    1 : tunables  120   60    0 : slabdata      1      1      0
rpc_inode_cache       12     18    448    9    1 : tunables   54   27    0 : slabdata      2      2      0
UNIX                  36     36    448    9    1 : tunables   54   27    0 : slabdata      4      4      0
UDP-Lite               0      0    512    7    1 : tunables   54   27    0 : slabdata      0      0      0
tcp_bind_bucket        7    113     32  113    1 : tunables  120   60    0 : slabdata      1      1      0
inet_peer_cache       10     20    192   20    1 : tunables  120   60    0 : slabdata      1      1      0
secpath_cache          0      0     32  113    1 : tunables  120   60    0 : slabdata      0      0      0
xfrm_dst_cache         0      0    256   15    1 : tunables  120   60    0 : slabdata      0      0      0
ip_fib_trie           18    113     32  113    1 : tunables  120   60    0 : slabdata      1      1      0
ip_fib_alias          19    145     24  145    1 : tunables  120   60    0 : slabdata      1      1      0
ip_dst_cache          28     40    192   20    1 : tunables  120   60    0 : slabdata      2      2      0
arp_cache              4     20    192   20    1 : tunables  120   60    0 : slabdata      1      1      0
PING                   0      0    512    7    1 : tunables   54   27    0 : slabdata      0      0      0
RAW                    2      7    512    7    1 : tunables   54   27    0 : slabdata      1      1      0
UDP                   14     14    512    7    1 : tunables   54   27    0 : slabdata      2      2      0
tw_sock_TCP          150    210    128   30    1 : tunables  120   60    0 : slabdata      7      7      0
request_sock_TCP      30     30    128   30    1 : tunables  120   60    0 : slabdata      1      1      0
TCP                   21     21   1152    7    2 : tunables   24   12    0 : slabdata      3      3      0
eventpoll_pwq          0      0     40   92    1 : tunables  120   60    0 : slabdata      0      0      0
eventpoll_epi          0      0    128   30    1 : tunables  120   60    0 : slabdata      0      0      0
sgpool-128             2      2   2048    2    1 : tunables   24   12    0 : slabdata      1      1      0
sgpool-64              2      4   1024    4    1 : tunables   54   27    0 : slabdata      1      1      0
sgpool-32              2      8    512    8    1 : tunables   54   27    0 : slabdata      1      1      0
sgpool-16              2     15    256   15    1 : tunables  120   60    0 : slabdata      1      1      0
sgpool-8               2     30    128   30    1 : tunables  120   60    0 : slabdata      1      1      0
scsi_data_buffer       0      0     24  145    1 : tunables  120   60    0 : slabdata      0      0      0
blkdev_queue          22     27    880    9    2 : tunables   54   27    0 : slabdata      3      3      0
blkdev_requests       36     36    216   18    1 : tunables  120   60    0 : slabdata      2      2      0
blkdev_ioc             3     92     40   92    1 : tunables  120   60    0 : slabdata      1      1      0
fsnotify_event_holder      0      0     16  203    1 : tunables  120   60    0 : slabdata      0      0      0
fsnotify_event         1     59     64   59    1 : tunables  120   60    0 : slabdata      1      1      0
bio-0                  3     30    128   30    1 : tunables  120   60    0 : slabdata      1      1      0
biovec-256             2      2   3072    2    2 : tunables   24   12    0 : slabdata      1      1      0
biovec-128             0      0   1536    5    2 : tunables   24   12    0 : slabdata      0      0      0
biovec-64              0      0    768    5    1 : tunables   54   27    0 : slabdata      0      0      0
biovec-16              0      0    192   20    1 : tunables  120   60    0 : slabdata      0      0      0
sock_inode_cache      70     70    384   10    1 : tunables   54   27    0 : slabdata      7      7      0
skbuff_fclone_cache     30     30    384   10    1 : tunables   54   27    0 : slabdata      3      3      0
skbuff_head_cache   4120   4120    192   20    1 : tunables  120   60    0 : slabdata    206    206      0
file_lock_cache        0      0    112   35    1 : tunables  120   60    0 : slabdata      0      0      0
shmem_inode_cache    420    420    328   12    1 : tunables   54   27    0 : slabdata     35     35      0
proc_inode_cache     357    384    328   12    1 : tunables   54   27    0 : slabdata     32     32      0
sigqueue              16     27    144   27    1 : tunables  120   60    0 : slabdata      1      1      0
bdev_cache             6      9    448    9    1 : tunables   54   27    0 : slabdata      1      1      0
sysfs_dir_cache     4807   4848     80   48    1 : tunables  120   60    0 : slabdata    101    101      0
mnt_cache             25     40    192   20    1 : tunables  120   60    0 : slabdata      2      2      0
filp                 330    450    128   30    1 : tunables  120   60    0 : slabdata     15     15      0
inode_cache          104    104    296   13    1 : tunables   54   27    0 : slabdata      8      8      0
dentry              4170   4170    128   30    1 : tunables  120   60    0 : slabdata    139    139      0
names_cache            4      4   4096    1    1 : tunables   24   12    0 : slabdata      4      4      0
buffer_head        15304  15340     64   59    1 : tunables  120   60    0 : slabdata    260    260      0
nsproxy                1    145     24  145    1 : tunables  120   60    0 : slabdata      1      1      0
vm_area_struct      1112   1232     88   44    1 : tunables  120   60    0 : slabdata     28     28      0
mm_struct             40     40    384   10    1 : tunables   54   27    0 : slabdata      4      4      0
fs_cache              34    113     32  113    1 : tunables  120   60    0 : slabdata      1      1      0
files_cache           40     40    192   20    1 : tunables  120   60    0 : slabdata      2      2      0
signal_cache          84     84    512    7    1 : tunables   54   27    0 : slabdata     12     12      0
sighand_cache         78     78   1344    3    1 : tunables   24   12    0 : slabdata     26     26      0
task_struct          144    144    832    9    2 : tunables   54   27    0 : slabdata     16     16      0
cred_jar             150    150    128   30    1 : tunables  120   60    0 : slabdata      5      5      0
anon_vma_chain       750   1015     24  145    1 : tunables  120   60    0 : slabdata      7      7      0
anon_vma             565    678     32  113    1 : tunables  120   60    0 : slabdata      6      6      0
pid                  136    177     64   59    1 : tunables  120   60    0 : slabdata      3      3      0
radix_tree_node     1115   1131    296   13    1 : tunables   54   27    0 : slabdata     87     87      0
idr_layer_cache      217    234    152   26    1 : tunables  120   60    0 : slabdata      9      9      0
size-33554432          0      0 33554432    1 8192 : tunables    1    1    0 : slabdata      0      0      0
size-16777216          0      0 16777216    1 4096 : tunables    1    1    0 : slabdata      0      0      0
size-8388608           0      0 8388608    1 2048 : tunables    1    1    0 : slabdata      0      0      0
size-4194304           0      0 4194304    1 1024 : tunables    1    1    0 : slabdata      0      0      0
size-2097152           0      0 2097152    1  512 : tunables    1    1    0 : slabdata      0      0      0
size-1048576           0      0 1048576    1  256 : tunables    1    1    0 : slabdata      0      0      0
size-524288            0      0 524288    1  128 : tunables    1    1    0 : slabdata      0      0      0
size-262144            0      0 262144    1   64 : tunables    1    1    0 : slabdata      0      0      0
size-131072            1      1 131072    1   32 : tunables    8    4    0 : slabdata      1      1      0
size-65536             2      2  65536    1   16 : tunables    8    4    0 : slabdata      2      2      0
size-32768            81     81  32768    1    8 : tunables    8    4    0 : slabdata     81     81      0
size-16384             9      9  16384    1    4 : tunables    8    4    0 : slabdata      9      9      0
size-8192             18     18   8192    1    2 : tunables    8    4    0 : slabdata     18     18      0
size-4096             51     51   4096    1    1 : tunables   24   12    0 : slabdata     51     51      0
size-2048           4148   4190   2048    2    1 : tunables   24   12    0 : slabdata   2095   2095      0
size-1024            117    124   1024    4    1 : tunables   54   27    0 : slabdata     31     31      0
size-512             405    432    512    8    1 : tunables   54   27    0 : slabdata     54     54      0
size-256             705    705    256   15    1 : tunables  120   60    0 : slabdata     47     47      0
size-192              80     80    192   20    1 : tunables  120   60    0 : slabdata      4      4      0
size-128            2580   2580    128   30    1 : tunables  120   60    0 : slabdata     86     86      0
size-64             4779   4779     64   59    1 : tunables  120   60    0 : slabdata     81     81      0
size-32             6962   6962     64   59    1 : tunables  120   60    0 : slabdata    118    118      0
kmem_cache           179    180    128   30    1 : tunables  120   60    0 : slabdata      6      6      0


[Dmitriy_eltex]

Да, свободной памяти 63Mb.., но никаких причин этому не видно.
Если еще не ребутнули SMG4, то предлагаю организовать удаленный доступ для совместного тестирования.
Детали доступа можно обсудить по почте в моей подписи с указанием ссылки на эту тему.

[GoldRok]

Да, свободной памяти 63Mb.., но никаких причин этому не видно.
Если еще не ребутнули SMG4, то предлагаю организовать удаленный доступ для совместного тестирования.
Детали доступа можно обсудить по почте в моей подписи с указанием ссылки на эту тему.

Ребутнули ночью. Ошибка ушла. Если будет опять - отпишусь.

[bags]

Была такая же проблема на SMG-2 из-за того, что всё время была открыта веб-морда с мониторингом потока.