Jump to content

Recommended Posts

Posted (edited)

День добрый. Столкнулся с проблемой когда uptime сервера переваливает за 40 - 50 дней, зависает один из интерфейсов, трафик просто перестает ходить, в tcpdump пусто, когда делаешь up/down интерфейсу сервер уходит в ребут, происходить такое не с одним сервером.

 

Железо:

Мать S5500BC

Процессоры E5530 @ 2.40GHz

ОЗУ 4G

 

FreeBSD FreeBSD 7.4-STABLE #4: Wed Apr 13 11:02:01 EEST 2011

 

em0@pci0:1:0:0: class=0x020000 card=0x34da8086 chip=0x10d38086 rev=0x00 hdr=0x00

vendor = 'Intel Corporation'

device = 'Intel 82574L Gigabit Ethernet Controller (82574L)'

class = network

subclass = ethernet

em1@pci0:3:0:0: class=0x020000 card=0x115e8086 chip=0x105e8086 rev=0x06 hdr=0x00

vendor = 'Intel Corporation'

device = 'HP NC360T PCIe DP Gigabit Server Adapter (n1e5132)'

class = network

subclass = ethernet

em2@pci0:3:0:1: class=0x020000 card=0x115e8086 chip=0x105e8086 rev=0x06 hdr=0x00

vendor = 'Intel Corporation'

device = 'HP NC360T PCIe DP Gigabit Server Adapter (n1e5132)'

class = network

subclass = ethernet

 

 

Всего 4 сетевых интерфейса, 2 встроены и 2 внешних.

 

ifconfig lagg0

lagg0: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

options=98<VLAN_MTU,VLAN_HWTAGGING,VLAN_HWCSUM>

ether 00:15:17:d7:70:fa

inet xx.xx.xx.xx netmask 0xffffffe0 broadcast xx.xx.xx.xx

media: Ethernet autoselect

status: active

laggproto lacp

laggport: em2 flags=1c<ACTIVE,COLLECTING,DISTRIBUTING>

laggport: em1 flags=1c<ACTIVE,COLLECTING,DISTRIBUTING>

 

ifconfig | grep vlan

vlan301: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 301 parent interface: em0

vlan302: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 302 parent interface: em0

vlan303: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 303 parent interface: em0

vlan304: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 304 parent interface: em0

vlan305: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 305 parent interface: em3

vlan306: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 306 parent interface: em3

vlan307: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 307 parent interface: em3

vlan308: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500

vlan: 308 parent interface: em3

 

нагрузка по трафику сутра, вечером в 3 больше.

netstat -w1 -h

input (Total) output

packets errs bytes packets errs bytes colls

182K 0 138M 176K 0 124M 0

183K 0 142M 178K 0 129M 0

187K 0 146M 182K 0 136M 0

177K 0 135M 171K 0 121M 0

177K 0 132M 172K 0 121M 0

190K 0 144M 187K 0 139M 0

190K 0 144M 187K 0 137M 0

 

netstat -m

16396/9719/26115 mbufs in use (current/cache/total)

16393/10077/26470/1048576 mbuf clusters in use (current/cache/total/max)

8/2040 mbuf+clusters out of packet secondary zone in use (current/cache)

0/167/167/12800 4k (page size) jumbo clusters in use (current/cache/total/max)

0/0/0/6400 9k jumbo clusters in use (current/cache/total/max)

0/0/0/3200 16k jumbo clusters in use (current/cache/total/max)

36885K/23251K/60136K bytes allocated to network (current/cache/total)

0/0/0 requests for mbufs denied (mbufs/clusters/mbuf+clusters)

0/0/0 requests for jumbo clusters denied (4k/9k/16k)

0/0/0 sfbufs in use (current/peak/max)

0 requests for sfbufs denied

0 requests for sfbufs delayed

0 requests for I/O initiated by sendfile

0 calls to protocol drain routines

 

vmstat -z

ITEM SIZE LIMIT USED FREE REQUESTS FAILURES

 

UMA Kegs: 216, 0, 75, 10, 75, 0

UMA Zones: 664, 0, 75, 0, 75, 0

UMA Slabs: 128, 0, 23888, 1139, 36729, 0

UMA RCntSlabs: 128, 0, 13402, 25, 13402, 0

UMA Hash: 256, 0, 2, 13, 7, 0

16 Bucket: 152, 0, 178, 22, 178, 0

32 Bucket: 280, 0, 346, 4, 346, 0

64 Bucket: 536, 0, 660, 5, 660, 41

128 Bucket: 1048, 0, 3159, 0, 3159, 6847

VM OBJECT: 216, 0, 69216, 2712, 18787622, 0

MAP: 256, 0, 7, 23, 7, 0

KMAP ENTRY: 112, 147972, 85, 1400, 527403, 0

MAP ENTRY: 112, 0, 1087, 3137, 37428924, 0

DP fakepg: 120, 0, 0, 0, 0, 0

SG fakepg: 120, 0, 0, 0, 0, 0

mt_zone: 1032, 0, 182, 13, 182, 0

16: 16, 0, 5877, 4539, 33430916, 0

32: 32, 0, 73089, 2863, 4379248390, 0

64: 64, 0, 80816, 1728, 20302694, 0

128: 128, 0, 55647, 43388, 11513957, 0

256: 256, 0, 11664, 50106, 5075057, 0

512: 512, 0, 6501, 6337, 5621680, 0

1024: 1024, 0, 163, 949, 5100243, 0

2048: 2048, 0, 1120, 3198, 3180067, 0

4096: 4096, 0, 2469, 4307, 1442308, 0

Files: 128, 0, 200, 1685, 18552756, 0

TURNSTILE: 152, 0, 2393, 415, 2393, 0

umtx pi: 96, 0, 0, 0, 0, 0

PROC: 1160, 0, 106, 1145, 1111000, 0

THREAD: 920, 0, 1253, 1139, 272036, 0

UPCALL: 88, 0, 0, 0, 0, 0

SLEEPQUEUE: 64, 0, 2393, 407, 2393, 0

VMSPACE: 432, 0, 24, 1092, 1110917, 0

cpuset: 72, 0, 2, 98, 2, 0

mbuf_packet: 256, 0, 8, 2040, 1027254, 0

mbuf: 256, 0, 16400, 7667, 19514520014, 0

mbuf_cluster: 2048, 1048576, 18448, 8022, 8737692376, 0

mbuf_jumbo_pagesize: 4096, 12800, 0, 167, 198, 0

mbuf_jumbo_9k: 9216, 6400, 0, 0, 0, 0

mbuf_jumbo_16k: 16384, 3200, 0, 0, 0, 0

mbuf_ext_refcnt: 4, 0, 0, 0, 0, 0

ACL UMA zone: 388, 0, 0, 0, 0, 0

NetGraph items: 72, 32805, 8, 2917, 564522939, 0

NetGraph data items: 72, 65565, 0, 2880, 8850494108, 0

g_bio: 216, 0, 0, 23418, 2065084, 0

ata_request: 312, 0, 0, 6924, 525964, 0

ata_composite: 352, 0, 0, 0, 0, 0

VNODE: 504, 0, 102577, 1167, 872940, 0

VNODEPOLL: 128, 0, 0, 0, 0, 0

NAMEI: 1024, 0, 0, 604, 19153074, 0

S VFS Cache: 104, 0, 104002, 10082, 1343371, 0

L VFS Cache: 327, 0, 462, 2346, 32548, 0

DIRHASH: 1024, 0, 1333, 351, 5338, 0

pipe: 744, 0, 6, 1014, 519524, 0

ksiginfo: 112, 0, 1175, 409, 1179, 0

itimer: 360, 0, 0, 0, 0, 0

KNOTE: 120, 0, 0, 465, 4694, 0

socket: 720, 1048580, 221, 1079, 9567724, 0

unpcb: 248, 1048590, 8, 532, 694269, 0

ipq: 56, 32823, 0, 630, 112901, 0

udp_inpcb: 288, 1048580, 3, 933, 8865946, 0

udpcb: 16, 1048656, 3, 2685, 8865946, 0

inpcb: 288, 1048580, 97, 917, 2865, 0

tcpcb: 728, 1048580, 97, 623, 2865, 0

tcptw: 88, 8232, 0, 546, 1119, 0

syncache: 128, 15370, 0, 609, 2396, 0

hostcache: 136, 15372, 2, 922, 1186, 0

tcpreass: 40, 65604, 0, 504, 818, 0

sackhole: 32, 0, 0, 404, 144, 0

ripcb: 288, 1048580, 90, 612, 1583, 0

rtentry: 248, 0, 1787, 3358, 164662, 0

IPFW dynamic rule: 120, 0, 0, 0, 0, 0

SWAPMETA: 288, 116519, 0, 0, 0, 0

Mountpoints: 896, 0, 5, 7, 5, 0

FFS inode: 184, 0, 102535, 1541, 872597, 0

FFS1 dinode: 128, 0, 0, 0, 0, 0

FFS2 dinode: 256, 0, 102535, 1265, 872597, 0

 

cat /boot/loader.conf

autoboot_delay="3"

ng_car_load="YES"

hw.em.rxd=4096

hw.em.txd=4096

kern.hz="4000"

kern.ipc.nmbclusters=1048576

net.graph.maxdata=65565

net.graph.maxalloc=32805

 

cat /boot/loader.conf

autoboot_delay="3"

ng_car_load="YES"

hw.em.rxd=4096

hw.em.txd=4096

kern.hz="4000"

kern.ipc.nmbclusters=1048576

net.graph.maxdata=65565

net.graph.maxalloc=32805

 

cat /etc/sysctl.conf | grep -vE '^#|^$'

net.inet.ip.fw.one_pass=0 # после пайпа опять возвращаться на следующее правило фаервола

net.inet.tcp.log_in_vain=0 # писать в логи, когда обращаются к портам без сервисов

net.inet.udp.log_in_vain=0 # писать в логи, когда обращаются к портам без сервисов

net.inet.tcp.blackhole=2 # если 1, то SYN пакеты пришедшие на порты для которых нет

# активных сервисов, остаются без RST ответа, если 2,

# то на любые пакеты нет ответа (затрудняет сканирования портов

kern.ipc.somaxconn=16384 # ограничивает размер очереди для приема новых TCP соединений

kern.ipc.maxsockbuf=16777216

net.inet.tcp.rfc1323=1

net.inet.tcp.sendbuf_max=16777216

net.inet.tcp.recvbuf_max=16777216

net.inet.tcp.inflight.enable=0

net.inet.tcp.hostcache.expire=1

net.inet.tcp.sendspace=65535

net.inet.tcp.recvspace=65535

net.inet.ip.fw.autoinc_step=10

net.inet.ip.fastforwarding=1

net.isr.direct=1

net.inet.ip.dummynet.io_fast=1

net.inet.ip.intr_queue_maxlen=16384

net.route.netisr_maxqlen=16384

net.inet.tcp.syncookies=0

kern.corefile="/var/tmp/%U.%N.core"

net.inet.ip.rtmaxcache=16384

net.inet.ip.portrange.first=1024

net.inet.ip.portrange.last=65535

net.inet.ip.portrange.randomized=0

net.inet.tcp.syncookies=1

net.inet.tcp.nolocaltimewait=1

net.inet.ip.fw.verbose=1

net.inet.ip.fw.verbose_limit=5

net.inet.raw.maxdgram=65535

net.inet.raw.recvspace=65536

net.inet.icmp.icmplim_output=0

net.inet.ip.forwarding=1

net.inet.ip.intr_queue_maxlen=16384

net.route.netisr_maxqlen=16384

net.inet.ip.dummynet.io_fast=1

net.inet.tcp.fast_finwait2_recycle=1

 

Ядро:

 

cpu HAMMER

ident CUSTOM

options SCHED_ULE # ULE scheduler

options PREEMPTION # Enable kernel thread preemption

options INET # InterNETworking

options FFS # Berkeley Fast Filesystem

options SOFTUPDATES # Enable FFS soft updates support

options UFS_ACL # Support for access control lists

options UFS_DIRHASH # Improve performance on big directories

options UFS_GJOURNAL # Enable gjournal-based UFS journaling

options MD_ROOT # MD is a potential root device

options MSDOSFS # MSDOS Filesystem

options CD9660 # ISO 9660 Filesystem

options PROCFS # Process filesystem (requires PSEUDOFS)

options PSEUDOFS # Pseudo-filesystem framework

options GEOM_PART_GPT # GUID Partition Tables.

options GEOM_LABEL # Provides labelization

options COMPAT_43TTY # BSD 4.3 TTY compat [KEEP THIS!]

options COMPAT_IA32 # Compatible with i386 binaries

options COMPAT_FREEBSD4 # Compatible with FreeBSD4

options COMPAT_FREEBSD5 # Compatible with FreeBSD5

options COMPAT_FREEBSD6 # Compatible with FreeBSD6

options SCSI_DELAY=5000 # Delay (in ms) before probing SCSI

options SYSVSHM # SYSV-style shared memory

options SYSVMSG # SYSV-style message queues

options SYSVSEM # SYSV-style semaphores

options P1003_1B_SEMAPHORES # POSIX-style semaphores

options _KPOSIX_PRIORITY_SCHEDULING # POSIX P1003_1B real-time extensions

options KBD_INSTALL_CDEV # install a CDEV entry in /dev

options ADAPTIVE_GIANT # Giant mutex is adaptive.

options STOP_NMI # Stop CPUS using NMI instead of IPI

options INCLUDE_CONFIG_FILE # Include this file in kernel

options SMP # Symmetric MultiProcessor Kernel

options IPFIREWALL

options IPFIREWALL_VERBOSE

options IPFIREWALL_VERBOSE_LIMIT=5

options IPFIREWALL_DEFAULT_TO_ACCEPT

options IPFIREWALL_FORWARD

options NETGRAPH

options NETGRAPH_BPF

options NETGRAPH_ETHER

options NETGRAPH_IFACE

options NETGRAPH_KSOCKET

options NETGRAPH_L2TP

options NETGRAPH_MPPC_ENCRYPTION

options NETGRAPH_ONE2MANY

options NETGRAPH_PPP

options NETGRAPH_PPPOE

options NETGRAPH_PPTPGRE

options NETGRAPH_RFC1490

options NETGRAPH_SOCKET

options NETGRAPH_TEE

options NETGRAPH_UI

options NETGRAPH_VJC

options NETGRAPH_TCPMSS

device cpufreq

device acpi

device pci

device ata

device atadisk # ATA disk drives

device ataraid # ATA RAID drives

device atapicd # ATAPI CDROM drives

options ATA_STATIC_ID # Static device numbering

# output. Adds ~128k to driver.

# output. Adds ~215k to driver.

device scbus # SCSI bus (required for SCSI)

device da # Direct Access (disks)

device atkbdc # AT keyboard controller

device atkbd # AT keyboard

device psm # PS/2 mouse

device kbdmux # keyboard multiplexer

device vga # VGA video card driver

device splash # Splash screen and screen saver support

device sc

device agp # support several AGP chipsets

device sio # 8250, 16[45]50 based serial ports

device uart # Generic UART driver

device de # DEC/Intel DC21x4x (``Tulip'')

device em # Intel PRO/1000 Gigabit Ethernet Family

device le # AMD Am7900 LANCE and Am79C9xx PCnet

device txp # 3Com 3cR990 (``Typhoon'')

device vx # 3Com 3c590, 3c595 (``Vortex'')

device miibus # MII bus support

device bce # Broadcom BCM5706/BCM5708 Gigabit Ethernet

device bfe # Broadcom BCM440x 10/100 Ethernet

device bge # Broadcom BCM570xx Gigabit Ethernet

device dc # DEC/Intel 21143 and various workalikes

device et # Agere ET1310 10/100/Gigabit Ethernet

device fxp # Intel EtherExpress PRO/100B (82557, 82558)

device jme # JMicron JMC250 Gigabit/JMC260 Fast Ethernet

device lge # Level 1 LXT1001 gigabit Ethernet

device msk # Marvell/SysKonnect Yukon II Gigabit Ethernet

device nfe # nVidia nForce MCP on-board Ethernet

device nge # NatSemi DP83820 gigabit Ethernet

device pcn # AMD Am79C97x PCI 10/100 (precedence over 'le')

device re # RealTek 8139C+/8169/8169S/8110S

device rl # RealTek 8129/8139

device sf # Adaptec AIC-6915 (``Starfire'')

device sis # Silicon Integrated Systems SiS 900/SiS 7016

device sk # SysKonnect SK-984x & SK-982x gigabit Ethernet

device ste # Sundance ST201 (D-Link DFE-550TX)

device ti # Alteon Networks Tigon I/II gigabit Ethernet

device tl # Texas Instruments ThunderLAN

device tx # SMC EtherPower II (83c170 ``EPIC'')

device vge # VIA VT612x gigabit Ethernet

device vr # VIA Rhine, Rhine II

device wb # Winbond W89C840F

device xl # 3Com 3c90x (``Boomerang'', ``Cyclone'')

device cs # Crystal Semiconductor CS89x0 NIC

device loop # Network loopback

device random # Entropy device

device ether # Ethernet support

device vlan # 802.1Q VLAN support

device sl # Kernel SLIP

device ppp # Kernel PPP

device tun # Packet tunnel.

device pty # Pseudo-ttys (telnet etc)

device md # Memory "disks"

device gif # IPv6 and IPv4 tunneling

device faith # IPv6-to-IPv4 relaying (translation)

device firmware # firmware assist module

device lagg

device bpf # Berkeley packet filter

device uhci # UHCI PCI->USB interface

device ohci # OHCI PCI->USB interface

device ehci # EHCI PCI->USB interface (USB 2.0)

device usb # USB Bus (required)

device ugen # Generic

device uhid # "Human Interface Devices"

device ukbd # Keyboard

device ulpt # Printer

device umass # Disks/Mass storage - Requires scbus and da

device ums # Mouse

device urio # Diamond Rio 500 MP3 player

device uscanner # Scanners

device ucom # Generic com ttys

device uark # Technologies ARK3116 based serial adapters

device ubsa # Belkin F5U103 and compatible serial adapters

device ubser # BWCT console serial adapters

device uftdi # For FTDI usb serial adapters

device uipaq # Some WinCE based devices

device uplcom # Prolific PL-2303 serial adapters

device uslcom # SI Labs CP2101/CP2102 serial adapters

device uvisor # Visor and Palm devices

device uvscom # USB serial support for DDI pocket's PHS

 

ifconfig | grep ng -c

1098

 

на это машине отпадал интерфейс em0

Edited by mcsim_ck
Posted
64 Bucket: 536, 0, 660, 5, 660, 41 128 Bucket: 1048, 0, 3159, 0, 3159, 6847

 

Памяти ему не хватает.

kern.ipc вроде для тюнинга её.

Переходите на х64 или увеличивайте память доступную ядру (KVA_Pages вроде в опциях ядра, см тюнинг от Сысоева, только дальше тюнинга ядра не смотрите, буфера тсп и ип вам не нужны).

 

 

net.inet.ip.fastforwarding=1

net.isr.direct=1

поставьте 0,

1 - это для слабых и/или одноядерных машин даёт хорошие профиты

 

net.inet.tcp. - это влияет только на коннекты к самой машине, роутер дальше IP в пакеты не смотрит.

Posted (edited)

net.inet.ip.fastforwarding=1

net.isr.direct=1

 

поставьте 0,

1 - это для слабых и/или одноядерных машин даёт хорошие профиты

 

net.isr.direct=0

дает 26 root 1 -44 - 0K 16K WAIT 2 160:44 45.80% swi1: net

пол ядра съедает.

 

Переходите на х64 или увеличивайте память доступную ядру (KVA_Pages вроде в опциях ядра, см тюнинг от Сысоева, только дальше тюнинга ядра не смотрите, буфера тсп и ип вам не нужны).

 

uname -opr

FreeBSD 7.4-STABLE amd64

 

Памяти ему не хватает.

kern.ipc вроде для тюнинга её.

 

sysctl kern.ipc

kern.ipc.maxsockbuf: 16777216

kern.ipc.sockbuf_waste_factor: 8

kern.ipc.somaxconn: 16384

kern.ipc.max_linkhdr: 16

kern.ipc.max_protohdr: 40

kern.ipc.max_hdr: 56

kern.ipc.max_datalen: 120

kern.ipc.nmbjumbo16: 3200

kern.ipc.nmbjumbo9: 6400

kern.ipc.nmbjumbop: 12800

kern.ipc.nmbclusters: 1048576

kern.ipc.piperesizeallowed: 1

kern.ipc.piperesizefail: 0

kern.ipc.pipeallocfail: 0

kern.ipc.pipefragretry: 0

kern.ipc.pipekva: 98304

kern.ipc.maxpipekva: 67334144

kern.ipc.msgseg: 2048

kern.ipc.msgssz: 8

kern.ipc.msgtql: 40

kern.ipc.msgmnb: 2048

kern.ipc.msgmni: 40

kern.ipc.msgmax: 16384

kern.ipc.semaem: 16384

kern.ipc.semvmx: 32767

kern.ipc.semusz: 152

kern.ipc.semume: 10

kern.ipc.semopm: 100

kern.ipc.semmsl: 60

kern.ipc.semmnu: 30

kern.ipc.semmns: 60

kern.ipc.semmni: 10

kern.ipc.semmap: 30

kern.ipc.shm_allow_removed: 0

kern.ipc.shm_use_phys: 0

kern.ipc.shmall: 8192

kern.ipc.shmseg: 128

kern.ipc.shmmni: 192

kern.ipc.shmmin: 1

kern.ipc.shmmax: 33554432

kern.ipc.maxsockets: 1048576

kern.ipc.numopensockets: 318

kern.ipc.nsfbufsused: 0

kern.ipc.nsfbufspeak: 0

kern.ipc.nsfbufs: 0

 

может я что то не так понял, уточните пожалуйста.

Edited by mcsim_ck
Posted

VLAN_HWTAGGING - долой.

VLAN_HWCSUM - долой.

Со всех интерфейсов.

 

HZ=4000 - много, ты же не по 64Kbps на 100000 рыл делишь, HZ=1000 вполне достаточно.

Попробуй добавить AUTO_EOI_1, срабатывает на подавляющем большинстве Intel-овских платформ.

Можно ещё попробовать AUTO_EOI_2, правда последнее у меня ни на одной матери не заработало, но говорят выигрыш ощутимый.

Мусор из ядра - долой, оставь только то, что реально нужно.

Posted (edited)

Отключается вместе с rxcsum/txcsum

Но как утверждают - опция не работает отдельно от VLAN_HWTAGGING

Если есть нат, то ещё и TSO надо отключать.

 

82574L - сильно урезанный чип, с ним много проблем, можно поискать по форуму.

Edited by Deac
Posted
net.isr.direct=0 дает 26 root 1 -44 - 0K 16K WAIT 2 160:44 45.80% swi1: net пол ядра съедает.

 

net.isr.bindthreads = 1

 

net.isr.maxthreads = количество ядер

 

VLAN_HWTAGGING - долой. VLAN_HWCSUM - долой. Со всех интерфейсов.

 

Это на всех платформах/сетевухах?

 

Что это даёт? (в плане стабильности и производительности)

 

 

Posted

net.isr.bindthreads = 1

net.isr.maxthreads = количество ядер

 

Это для какой версии FreeBSD у меня нет таких параметров.

 

sysctl net.isr

net.isr.swi_count: 98291198

net.isr.drop: 0

net.isr.queued: 1468290228

net.isr.deferred: 3997407

net.isr.directed: 1107893454

net.isr.count: 1111309153

net.isr.direct: 1

 

еще есть вопрос, кто то толково объяснить мне может, что такое ентропия во FreeBSD

в кронтабе */11<-->*<----->*<----->*<----->*<----->operator /usr/libexec/save-entropy

собственно почему спрашиваю, заметил загрузку 8 ядер под 90% на протяжении 5 минут, примерно в это время запускалась энтрпия.

Есть ли смысл ее выключить, на что может повлиять?

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

×
×
  • Create New...
На сайте используются файлы cookie и сервисы аналитики для корректной работы форума и улучшения качества обслуживания. Продолжая использовать сайт, вы соглашаетесь с использованием файлов cookie и с Политикой конфиденциальности.