[Probleem blijft] Afschuwelijke performantie van swap

[vanadium]

Vandaag had ik het in wel bijzondere omstandigheden. Enkel en alleen browser open op banksite, ik klik een link en het systeem bevriest gedurende zeker drie minuten, terwijl de schijf draait als gek. Daarna komt het systeem terug en gaat alles rustig terug verder.

De tijd werd nuttig besteed om swap aan te maken:

Code: [Selecteer]

Tasks: 141 total,   2 running, 139 sleeping,   0 stopped,   0 zombie
Cpu(s): 30.6%us,  3.7%sy,  0.0%ni, 48.2%id, 17.6%wa,  0.0%hi,  0.0%si,  0.0%st
Mem:   1025056k total,   384596k used,   640460k free,    11376k buffers
Swap:  1637372k total,   212112k used,  1425260k free,    90704k cached
Je ziet dat het een systeem is met 1 GB RAM. Swappiness staat op 20. Dit is de outprint van "top" vlak na het event. In die tijd werd 212112k swap weggeschreven (moet het nu echt drie minuten duren om 212 MB aan data weg te schrijven?).
Eigenaardig ook, vlak na de operatie is er toch nog (of weer) een flink pak geheugen vrij.

Ik vind niets op internet. Het is pas sedert 11.04 dat ik het probleem als zeer storend ervaar.

Ik heb de indruk dat Windows 98 dat wel behoorlijk kon: swappen terwijl het systeem toch doorploeterde. Iemand anders met slechte swap ervaringen, of ben ik de enige?

[jan11000]

Videokaart driver niet goed en met grote flash of java op de site, bevriesd alles.
Driver goed geinstalleerd.
Java flas goed geinstalleerd.
Je hebt hele zware website's die firefox bevriezen, meestal maar korte tijd.
Of
Harde schijf begint te weigeren, kijk bij disk utility voor de smart gegevens, dus of dit goed is.
Of
Start ubuntu in classic mode, wat doet hij dan.

En altijd je hardware opnoemen!

[vanadium]

Bedankt voor je suggesties. Hierbij een selectie uit lshw:

Code: [Selecteer]

     *-cpu
          product: Intel(R) Pentium(R) M processor 2.00GHz
     *-memory
          size: 1GiB
        *-bank:0
             description: DIMM DDR Synchronous 533 MHz (1.9 ns)
        *-bank:1
             description: DIMM DDR Synchronous 533 MHz (1.9 ns)
      *-pci
          description: Host bridge
          product: Mobile 915GM/PM/GMS/910GML Express Processor to DRAM Controller
         *-pci:0
             description: PCI bridge
             product: Mobile 915GM/PM Express PCI Express Root Port
             vendor: Intel Corporation
           *-display
                description: VGA compatible controller
                product: M24 1P [Radeon Mobility X600]
                vendor: ATI Technologies Inc
                physical id: 0
                bus info: pci@0000:01:00.0
                version: 00
                width: 32 bits
                clock: 33MHz
                capabilities: pm pciexpress msi vga_controller bus_master cap_list rom
                configuration: driver=radeon latency=0
                resources: irq:42 memory:d0000000-d7ffffff ioport:de00(size=256) memory:dfdf0000-dfdfffff memory:dfe00000-dfe1ffff
        *-pci:1
             description: PCI bridge
             product: 82801FB/FBM/FR/FW/FRW (ICH6 Family) PCI Express Port 1
             vendor: Intel Corporation
          *-network
                description: Ethernet interface
                product: NetXtreme BCM5751 Gigabit Ethernet PCI Express
                vendor: Broadcom Corporation
       *-pci:2
             description: PCI bridge
             product: 82801 Mobile PCI Bridge
             vendor: Intel Corporation
        *-multimedia
             description: Multimedia audio controller
             product: 82801FB/FBM/FR/FW/FRW (ICH6 Family) AC'97 Audio Controller
             vendor: Intel Corporation
        *-ide
             description: IDE interface
             product: 82801FBM (ICH6M) SATA Controller
             vendor: Intel Corporation
           *-disk
                description: ATA Disk
                product: Hitachi HTS72108
                vendor: Hitachi
                physical id: 0
                bus info: scsi@0:0.0.0
                logical name: /dev/sda
                version: MC4O
                serial: MPC412Y4G35D2E
                size: 74GiB (80GB)
                capabilities: partitioned partitioned:dos
                configuration: ansiversion=5 signature=00047d4f
- Video heeft steeds goed gewerkt, sedert een aantal versies met de open source driver.
- De harde schijf is gezond
- Ik zal inderdaad eens draaien op Classic mode zonder effecten.

[Pjotr]

- Zet de swapneiging eens op 1;
- vervang openJDK eens door Oracle (Sun) Java JRE (ik vermoed een Javaprobleem).

[Drummies]

Je ervaart dit als vervelend vanadium,maar volgens mij is het alleen maar goed dat dit heeft plaats gevonden

Swap wordt gebruikt indien het geheugen volloopt. De computer gaat dan data die niet frequent wordt gebruikt wegschrijven naar de vaste schijf.
Dit systeem vertraagt de computer, maar kan voorkomen dat het RAM geheugen volloopt.

[Tom]

systeem bevriest gedurende zeker drie minuten, terwijl de schijf draait als gek.
Vind dat toch niet zo denderend.

[vanadium]

Inderdaad. Swap is bedoeld om over meer geheugen te beschikken. Van zodra swap wordt gebruikt, treden er onvermijdelijk vertragingen op in het systeem, maar moet het systeem in principe werkbaar blijven.

Het lijkt erop dat dit probleem bij mij inderdaad verband houdt met de grafische hardwareversnelling. Ik ben nu op Ubuntu Classic zonder effecten het systeem aan het stretchen. Ik moet er veel moeite voor doen om swapgebruik te initiëren, maar zit nu toch op 340 K.

Code: [Selecteer]

Mem:   1025056k total,  1002544k used,    22512k free,    10640k buffers
Swap:  1637372k total,   336636k used,  1300736k free,    53392k cached

Deze keer werd de swap op een normale, werkbare manier in gebruik genomen, dus gaandeweg en zonder het systeem voor lange tijd totaal te bevriezen.

@Pjotr: Met de swapneiging heb ik al heel wat geëxperimenteerd. Als er swap nodig is, dan zal geen swapiness instelling daaraan veranderen. De wijze waarop het swapgeheugen in gebruik genomen wordt, zal echter wel beïnvloed worden door de swappiness.

Concreet denk ik (en meen ervaren te hebben) dat een lage swapneiging het probleem juist versterkt. Swapgebruik wordt dan immers zo lang mogelijk uitgesteld. Als de swap dan toch nodig is, dan moet het systeem in één keer een grote hoeveelheid data van het geheugen naar de swap schrijven, wat voor een langere onderbreking zal zorgen dan wanneer de swap reeds eerder, en meer geleidelijk in gebruik genomen wordt.

Ik vermoed niet dat het probleem met java te maken heeft. Het probleem treedt haast systematisch één keer per sessie op, namelijk de eerste keer dat de swap aangesproken moet worden, en er is zeker niet altijd java in gebruik.

Het lijkt er ondertussen toch op dat het inderdaad de desktopeffecten zijn die niet samengaan met mijn systeempje. "Going light" wordt dus de boodschap.

[Ronnie]

Ik heb het idee dat dit bij mij ook speelt. Ik kom niet vaak over mijn 4GB heen, maar als dit wel het geval is, is mijn laptop totaal niet meer bereikbaar voor enkele minuten. Soms moet ik dan zelfs een harde reset doen.

Ik heb de tijd niet om uit te zoeken waar het aan ligt. Dit topic zal ik met interesse blijven volgen.

PS. Ik draai 10.10

[vanadium]

Na een dagje draaien zonder desktop effecten, ben ik praktisch zeker dat dit inderdaad een probleem is dat verband houdt met het gebruik van 3D acceleratie op de desktop.

Ik ben ondertussen terug "gesettled" in mijn vertrouwde Unity omgeving, dank zij Unity 2D.  Ziet er zowat net hetzelfde uit, alleen is er geen mogelijkheid de iconen iets te verkleinen. Op sommige punten ietsje minder mooi, maar even functioneel, geen vertragingen, en nu kan ik het systeemje weer stretchen als vanouds.

[Cheap Applications]

Ik heb het idee dat dit bij mij ook speelt. Ik kom niet vaak over mijn 4GB heen, maar als dit wel het geval is, is mijn laptop totaal niet meer bereikbaar voor enkele minuten. Soms moet ik dan zelfs een harde reset doen.

Ik heb de tijd niet om uit te zoeken waar het aan ligt. Dit topic zal ik met interesse blijven volgen.

PS. Ik draai 10.10

Ik ga deze ook even volgen. Mijn 3Gb werkgeheugen is ook eens volgelopen met het testen van VMs, beetje teveel RAM weggegeven en... no response.
Swap was aan het draaien, maar mijn systeem niet meer. Vrijwel niks reageerde niet meer, zelfs de tty niet.

[vanadium]

Het mooie is, als je lang genoeg wacht, komt het systeem wel weer los. De stabiliteit van Linux. Maar vanuit gebruikersperspectief hoort dit niet, natuurlijk. Misschien allen ook eens wat vertellen over je systeem en grafische kaart. Bij mij gaat het over een ATI Radeon Mobility X600. Die werkt op standaard open source drivers.

[Cheap Applications]

Bij mij deed hij het na 10 minuten/kwartier nog niet, dus heb ik hem hard uit gezet.
Bij mij staat het in mijn handtekening.

[Ronnie]

Licht gestripte output van lshw, mocht er meer informatie nodig zijn, dan hoor ik het graag

Code: [Selecteer]

    description: Computer
    width: 64 bits
    capabilities: vsyscall64 vsyscall32
  *-core
       description: Motherboard
       physical id: 0
     *-memory
          description: System memory
          physical id: 0
          size: 3891MiB
     *-cpu
          product: Intel(R) Core(TM)2 Duo CPU     P8600  @ 2.40GHz
          vendor: Intel Corp.
          physical id: 1
          bus info: cpu@0
          size: 800MHz
          capacity: 800MHz
          width: 64 bits
          capabilities: fpu fpu_exception wp vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe syscall nx x86-64 constant_tsc arch_perfmon pebs bts rep_good aperfmperf pni dtes64 monitor ds_cpl vmx smx est tm2 ssse3 cx16 xtpr pdcm sse4_1 lahf_lm tpr_shadow vnmi flexpriority cpufreq
     *-pci
          description: Host bridge
          product: Mobile 4 Series Chipset Memory Controller Hub
          vendor: Intel Corporation
          physical id: 100
          bus info: pci@0000:00:00.0
          version: 07
          width: 32 bits
          clock: 33MHz
          configuration: driver=agpgart-intel
          resources: irq:0
        *-display:0
             description: VGA compatible controller
             product: Mobile 4 Series Chipset Integrated Graphics Controller
             vendor: Intel Corporation
             physical id: 2
             bus info: pci@0000:00:02.0
             version: 07
             width: 64 bits
             clock: 33MHz
             capabilities: vga_controller bus_master cap_list rom
             configuration: driver=i915 latency=0
             resources: irq:47 memory:d8000000-d83fffff memory:c0000000-cfffffff ioport:60f0(size=8)
        *-display:1 UNCLAIMED
             description: Display controller
             product: Mobile 4 Series Chipset Integrated Graphics Controller
             vendor: Intel Corporation
             physical id: 2.1
             bus info: pci@0000:00:02.1
             version: 07
             width: 64 bits
             clock: 33MHz
             capabilities: bus_master cap_list
             configuration: latency=0
             resources: memory:d8400000-d84fffff
        *-isa
             description: ISA bridge
             product: ICH9M LPC Interface Controller
             vendor: Intel Corporation
             physical id: 1f
             bus info: pci@0000:00:1f.0
             version: 03
             width: 32 bits
             clock: 33MHz
             capabilities: isa bus_master cap_list
             configuration: latency=0
        *-storage
             description: SATA controller
             product: ICH9M/M-E SATA AHCI Controller
             vendor: Intel Corporation
             physical id: 1f.2
             bus info: pci@0000:00:1f.2
             logical name: scsi0
             logical name: scsi1
             version: 03
             width: 32 bits
             clock: 66MHz
             capabilities: storage ahci_1.0 bus_master cap_list emulated
             configuration: driver=ahci latency=0
             resources: irq:45 ioport:60e8(size=8) ioport:60fc(size=4) ioport:60e0(size=8) ioport:60f8(size=4) ioport:6000(size=32) memory:d8904000-d89047ff
           *-disk
                description: ATA Disk
                product: Hitachi HTS72321
                vendor: Hitachi
                physical id: 0
                bus info: scsi@0:0.0.0
                logical name: /dev/sda
                version: FC2O
                serial: 090129FC1200NCGG747D
                size: 149GiB (160GB)
                capabilities: partitioned partitioned:dos
                configuration: ansiversion=5 signature=80d2f3ee
              *-volume:0
                   description: Extended partition
                   physical id: 1
                   bus info: scsi@0:0.0.0,1
                   logical name: /dev/sda1
                   size: 139GiB
                   capacity: 139GiB
                   capabilities: primary extended partitioned partitioned:extended
                 *-logicalvolume:0
                      description: Linux filesystem partition
                      physical id: 5
                      logical name: /dev/sda5
                      logical name: /
                      capacity: 9766MiB
                      configuration: mount.fstype=ext4 mount.options=rw,relatime,errors=remount-ro,barrier=1,data=ordered state=mounted
                 *-logicalvolume:1
                      description: Linux filesystem partition
                      physical id: 6
                      logical name: /dev/sda6
                      capacity: 9766MiB
                 *-logicalvolume:2
                      description: Linux swap / Solaris partition
                      physical id: 7
                      logical name: /dev/sda7
                      capacity: 3898MiB
                      capabilities: nofs
                 *-logicalvolume:3
                      description: Linux filesystem partition
                      physical id: 8
                      logical name: /dev/sda8
                      logical name: /home
                      capacity: 116GiB
                      configuration: mount.fstype=ext3 mount.options=rw,relatime,errors=continue,commit=5,barrier=0,data=ordered state=mounted
              *-volume:1
                   description: Windows FAT volume
                   vendor: MSDOS5.0
                   physical id: 2
                   bus info: scsi@0:0.0.0,2
                   logical name: /dev/sda2
                   version: FAT32
                   serial: 78e2-3282
                   size: 1004MiB
                   capacity: 1GiB
                   capabilities: primary fat initialized
                   configuration: FATs=2 filesystem=fat
              *-volume:2
                   description: Windows NTFS volume
                   physical id: 3
                   bus info: scsi@0:0.0.0,3
                   logical name: /dev/sda3
                   version: 3.1
                   serial: 229e3545-fc37-3049-a7f9-5c2fc7e96151
                   size: 9200MiB
                   capacity: 9218MiB
                   capabilities: primary ntfs initialized
                   configuration: clustersize=4096 created=2008-06-17 13:06:27 filesystem=ntfs label=HP_RECOVERY state=clean



[heir4c]

Staat de swap wel aan? Heb ook wel eens gehad dat de swap niet werkte doordat ik er een andere distro op zette. Daardoor veranderde de UUID en daardoor vond hij de swap niet.
Daardoor swapt hij zonder dat er eigenlijk iets naar de schijf geschreven word.
Kan je nagaan via top in de terminal.
Als er 3 nullen staan bij de swap dan werkt hij niet.
Dat kan je oplossen door de swap handmatig te starten:

Code: [Selecteer]

sudo swapon /dev/sdXYXY is de partitie van de swap.

Daarna moet je die wel even in /etc/fstab aanpassen. Evt. de UUID verwijderen of # voorzetten en veranderen naar die /dev/sdXY

[Ronnie]

SWAP staat hier gewoon aan

[vanadium]

Als je swap niet actief is, en je systeem heeft extra geheugen nodig, dan zal het systeem andere processen afbreken in een poging aan de nood tegemoet te komen. het systeem wordt onstabiel en heeft veel kans vast te lopen. Daarom is het goed steeds swapruimte te hebben, zelfs bij systemen met meer geheugen, waar swap haast nooit nodig is.

Na twee dagen draaien op Unity 2D is het voor mij zeer duidelijk dat de grafische hardwareversnelling ("desktop effects") voor mij aan de basis lagen van het problematische swapgedrag. Moeilijk op voorhand te duiden, dit probleem. Schijnbaar draait mijn systeem vlot met desktop effecten aan. Bij licht gebruik is er ook lange tijd niets aan de hand. Bij het opsommen van mogelijke oorzaken had jan11000 dit wel degelijk ook mee, waarvoor hier eens een uitdrukkelijk bedankje.

[atomos]

Controleer je hardeschijf eens. Waar het op lijkt is dat de firmware van je HD een badsector geconstateerd heeft en dat deze de badsector wil herstellen. Dit kan zeker een poosje duren bij consumenten HD's tot meer dan 3 minuten.(De HD is dan 100% bezig) Bij server HD's is de herstel tijd een heel stuk minder ( moet ook wel anders worden ze heel snel uit de RAID gegooid.)

[vanadium]

Ook met Unity 2D treed nu opeens het probleem op. Ik laad Synaptic, de boel bevriest (maar liefst tien minuten deze keer), erna komt het systeem weer tot leven, krijgen we Mozilla script errors, en blijkt er heel wat swap aangemaakt:

Code: [Selecteer]

Tasks: 148 total,   2 running, 145 sleeping,   0 stopped,   1 zombie
Cpu(s): 22.6%us,  4.3%sy,  0.0%ni, 22.6%id, 50.2%wa,  0.0%hi,  0.4%si,  0.0%st
Mem:   1025056k total,   744728k used,   280328k free,    12704k buffers
Swap:  1637372k total,   443700k used,  1193672k free,   175284k cached

  PID USER      PR  NI  VIRT  RES  SHR S %CPU %MEM    TIME+  COMMAND           
Het niet gebruiken van desktopeffecten was dus niet de oorzaak, hoewel het toch veel langer duurt vooraleer het probleem optreedt.

Schijf werd met Disk Utility gecontroleerd en werd als "gezond" aangeduid.

[Soul-Sing]

vervelend en raar probleem. "we" zijn er du nog niet uit begrijp ik. je hebt wel een zombie proces draaien, maar uit ervaring weet ik dat dit niet zo heel belangrijk is.

[Ronnie]

Bij mij geeft de de tool "schijfgereedschap" aan dat er 655414 slechte sectoren op mijn harde schijf zitten. Allereerst schok ik van het getal. Maar na wat rekenen

255 heads * 63 sectors/track * 19457 cylinders = 312576705 sectoren, dus is uiteindelijk maar 0,02% beschadigd. (dat reken ik toch goed zo?)

De tool geeft ook aan dat de "SMART Selftest" geslaagd is.

[Pjotr]

Bij mij geeft de de tool "schijfgereedschap" aan dat er 655414 slechte sectoren op mijn harde schijf zitten. Allereerst schok ik van het getal. Maar na wat rekenen

255 heads * 63 sectors/track * 19457 cylinders = 312576705 sectoren, dus is uiteindelijk maar 0,02% beschadigd. (dat reken ik toch goed zo?)

De tool geeft ook aan dat de "SMART Selftest" geslaagd is.

Advies: wegdonderen dat ding.... Liever vandaag dan morgen. Als het mis begint te gaan met een harde schijf, dan kan het heel snel escaleren.

[atomos]

+1 gelijk de algemene archief bak in.

[vanadium]

Zou het Zeitgeist kunnen zijn Ik krijg nu weer een - lichtere - aanval te verwerken, waarbij top nog actief blijft.

- Tijdens de aanval:

Code: [Selecteer]

Tasks: 148 total,   3 running, 145 sleeping,   0 stopped,   0 zombie
Cpu(s):  2.3%us,  8.9%sy,  0.0%ni,  0.0%id, 88.5%wa,  0.0%hi,  0.3%si,  0.0%st
Mem:   1025056k total,  1012912k used,    12144k free,      232k buffers
Swap:  1637372k total,   808596k used,   828776k free,    27420k cached

  PID USER      PR  NI  VIRT  RES  SHR S %CPU %MEM    TIME+  COMMAND            
 3916 vanad     20   0 1431m 606m  780 S  3.3 60.6   0:04.04 zeitgeist-daemo    
   23 root      20   0     0    0    0 D  2.7  0.0   0:02.66 kswapd0            
 2671 root      20   0 60268 9.8m 2500 D  2.3  1.0   1:09.06 Xorg              
 3097 vanad     20   0 90708 4300 2620 D  2.3  0.4   0:02.71 gnome-terminal    
 3

Kort na de aanval:

Code: [Selecteer]

Mem:   1025056k total,   744952k used,   280104k free,    16820k buffers
Swap:  1637372k total,   424968k used,  1212404k free,   194072k cached

Ik ga eens terug over op desktopeffecten, en probeer Zeitgeist uit te schakelen.

[vanadium]

Er schijnt wel degelijk een probleem met Zeitgeist: http://askubuntu.com/questions/63231/zeitgeist-daemon-excessive-ram-usage

en er is een bugrapport, wat niet te hoopvol is:
https://bugs.launchpad.net/ubuntu/+source/zeitgeist-extensions/+bug/757727

Zeitgeist kan niet verwijderd worden zonder Unity serieus te verminken. Launcher gaat nog wel, maar Dash werkt helemaal niet meer. Slecht nieuws voor Unity fans.

[vanadium]

Voor het ogenblik zit ik terug op mijn standaard Unity, dus met desktop effecten. Zeitgeist werd verwijderd met

Code: [Selecteer]

sudo apt-get purge zeitgeist-core libzeitgeist-1.0-1

(bron: http://forums.linuxmint.com/viewtopic.php?f=6&t=77881&p=453052)

Gevolg is dat de dash niet meer werkt: geen programma's meer opstarten met logo toets, geen bestanden vinden (maar dat werkt zelfs niet met zeitgeist actief. Zowel snel programma's opstarten als bestanden openen gaat evenwel als vanouds met Gnome-do.