› › ›

Linux 14.979 Themen, 106.322 Beiträge

Verfolgung starten Optionen

Linux' Swap-Verhalten - im Detail ähnlich dem von Windows ?

Andy 386 / 28 Antworten / Flachansicht Nickles

Hallo,
ich habe ab und an mit reht grossen Daten in Matlab (unter Linux) zu tun. Das Auslagern klappt soweit. Nur würde ich es gerne mit einem ("Highspeed-")USB-Stick beschleunigen. Ich habe etwas ähnliches schon mal mit einem normalen Stick und einem alten Laptop gemacht, hat wunderbar funktioniert. Um jedoch eine bessere Performance zu erzielen (bzw um überhaupt einen Gewinn zu sehen;) würde ich gerne wissen, wie genau Linux auslagert. Also, abhängig vom swappiness usw, das hab ich schon rausgefunden. Nur wie ganz genau ? Lagert es immer kleine 5kB Blöcke aus, so wie Windows, oder fängt es bei Linux erst bei 1MB an ?

Ich würde es gerne wissen, da viele USB-Sticks zwar gute Datenübertragungen erreichen, aber bei kleinen Teilen versagen.

bei Antwort benachrichtigen
Hi Andy_386: hier eine kleine Anleitung wie du einfach herrausfinden kannst ... uscos
Lagert es immer kleine 5kB Blöcke aus, so wie Windows, oder fängt es bei ... KarstenW
Erstmal muß man wissen das der Linuxkernel versucht die Anzahl der ... neanderix
Das ist ein widerspruch in sich, denn RAM, das für Caching verwendet wird, ... KarstenW
Diese Art der Speicherverwaltung ist vielleicht bei Windows üblich, aber ... neanderix
Da ich kein Systemprogrammierer bin und auch den Linuxkernel nicht so gut ... KarstenW
Da ich kein Systemprogrammierer bin Bin ich auch nicht und auch den ... neanderix
hierzu fällt mir Dieter Nuhr ein, der ja 2008 den deutschen IQ Preis ... uscos
Das Problem mit der Auslagerung von Speicher kannst du mit viel RAM umgehen. ... KarstenW
Ich hab leider nur einen 3500 64Bit, mit DDR-RAM, der immernoch ... Andy 386
Ich habe einen AMD 64 bit Rechner mit nur 1 GByte RAM. Wenn ich normale ... KarstenW
Dir ist schon klar, was man so mit MatLab macht? Wir setzten das jedenfalls ... uscos
ja, uscos, du hast schon recht. Da fehlt mir dann aber eindeutig das Geld ... Andy 386
ja, also wenn man das regelmässig privat betreibt würde ich vermutlich das ... uscos
Ich kenne nicht Matlab, aber einen USB Stick als Auslagerungspartition zu ... KarstenW
Es geht hier um eine Diplomarbeit, und an meinem FB gibts keine Cluster heul ... Andy 386
Wenn du die 32 bit Version von Linux nutzt und sehr viel Speicher ... KarstenW
@uscos Wenn Matlab unter Windows XP 32 bit läuft und Windows 32 bit nur ... KarstenW
KarstenW, auf welchem Consumersystem kann man denn heutzutage mehr als 16GB ... Andy 386
Müssen denn diese Daten unbedingt gleichzeitig im RAM sein ? Unter Windows ... KarstenW
Andy 386 KarstenW „Müssen denn diese Daten unbedingt gleichzeitig im RAM sein ? Unter Windows XP...“
Optionen

ich glaub, du sieht mein Problem grad nicht.
Mein Programmspeicher (auch wenns den nur noch theoretisch gibt) ist gross genug. Aber der Datenspeicher (sagen wir einfach mal RAM minus Programmspeicher) ist zu klein. z.B. Auflösung von 500Hz, 100 Minuten mit 128 Kanälen macht 384.000.000 Werte, also knapp 400 Mio. Nehmen wir eine Genauigkeit von 64 Bit sind das 3,2 GB. Pro Datensatz. Jetzt will ich mit dem Datensatz noch was machen, und brauche vielleicht 3*3=9 GB. Diese Unmenge muss einfach irgendwo hin !
Klar habe ich Alternativen, am günstigsten wäre hier das Splitten in verschiedene Teile, nur möchte ich die Prozeduren mit dem gesamten Datensatz machen, um keine (Rand- oder sonstwelche)Effekte aufzuschnappen...

bei Antwort benachrichtigen
Mit einer Auslagerungspartition, egal ob auf USB Stick oder Festplatte, ... KarstenW
OK EEG micht 500Hz ist unwahrscheinlich - zumindest wenn du mit Menschen ... uscos
LOL, du machst nicht zufällig Berechnungen mit EEG Daten? Das kommt mir ... uscos
also so wie ich das sehe nutzt andy linux. Der Zusammenhang Matlab - Windows ... uscos
Linux verwendet soweit ich weiß ! swapping für das Auslagern von RAM ... KarstenW
windows benutzt paging. Dies kann man aber ausschalten in ... uscos
BTW: Das heisst nicht, dass Linux nicht auch paging macht. Hier mal eine ... uscos