Folder mit paar millionen files kopieren

Redphex

Legend
RabbitOfNegativeEuphoria

Registered: Mar 2000
Location: Macrodata Refine..
Posts: 11815

10.09.2006 - 19:45

Hoi

Ich hab da einen folder mit 6.5mio files unterschiedlicher grösse bis über 4GB (gesamt 60GB) ...

... und der lässt sich wegen "not enough memory for the operation" weder packen (probiert mit winrar, winzip) noch kopieren (probiert mit xcopy, servant salamander, explorer)

hat wer einen guten tipp, welches tool ich dafür bemühen könnte?

spunz

Elder
Elder

Registered: Aug 2000
Location: achse des bösen
Posts: 11291

10.09.2006 - 19:47

robocopy ?

fresserettich

Here to stay

Registered: Jul 2002
Location: hier
Posts: 5456

10.09.2006 - 19:52

eine möglichkeit wäre immer nur einzelne teile zu kopieren, ist zwar nicht die schönste methode sollte aber funktionieren

HaBa

Vereinsmitglied
Dr. Funkenstein

Registered: Mar 2001
Location: St. Speidl / Gle..
Posts: 19769

10.09.2006 - 20:13

Zitat von fresserettich
eine möglichkeit wäre immer nur einzelne teile zu kopieren, ist zwar nicht die schönste methode sollte aber funktionieren

Ich stell mir das witzig vor z.B. 2 mio files auszuwählen.

Wie viele Mäuse bzw. Mausräder dazu wohl braucht?

Andererseits: mal alles mit "a" kopieren per Befehlszeile könnte funzen, oder?

Burschi1620

24/7 Santa Claus

Registered: Apr 2004
Location: Drüber da Donau
Posts: 6792

10.09.2006 - 20:32

fat32 partition? kann nur bis zu 4gb große files speichern

Römi

Hausmeister

Registered: Feb 2001
Location: Bez. Tulln
Posts: 5325

10.09.2006 - 20:37

Zitat von spunz
robocopy ?

ack!

COLOSSUS

Administrator
GNUltra

Registered: Dec 2000
Location: ~
Posts: 12142

10.09.2006 - 20:46

Code:

find SOURCEDIR -print0 | xargs -0 -I "{}" cp "{}" DESTDIR

Gibt's beides entweder in den UNXUTILS (vielleicht), oder ganz sicher in Cygwin.

FrankEdwinWrigh

stuck on the outside

Registered: Nov 2002
Location: im 21. Jhdt.
Posts: 2507

10.09.2006 - 20:57

m einfachsten xcopy, das is im windows schon dabei und macht gemütlich eine datei nach der anderen, egal wieviele es sind. (start ausführen cmd xcopy /? ..)

Mfg fEW

MuP

OC Addicted

Registered: Aug 2004
Location: Wien
Posts: 968

10.09.2006 - 21:06

Zitat von Redphex
Zitat von spunz
robocopy ?

Zitat von FrankEdwinWrigh
m einfachsten xcopy, das is im windows schon dabei und macht gemütlich eine datei nach der anderen, egal wieviele es sind. (start ausführen cmd xcopy /? ..)

Mfg fEW

FrankEdwinWrigh

stuck on the outside

Registered: Nov 2002
Location: im 21. Jhdt.
Posts: 2507

10.09.2006 - 21:15

oh, muss ich glatt übersehen haben :eek:

dann doch robocopy wie die anderen schon sagten :fresserettich:

sorry fEw

Römi

Hausmeister

Registered: Feb 2001
Location: Bez. Tulln
Posts: 5325

10.09.2006 - 23:19

Was noch gehen könnte - die dateien in Schüben zu kopieren, falls mit anderen Tools auch nicht geht. ZB mit Wildcards auf Namen oder alle bis zu einem Datum. Wenn die kopiert sind, dann löschen und mit den Nächsten weitermachen - somit sollte es möglich sein, selbst mit dem 'not enough memory' Fehler.

XXL

insomnia

Registered: Feb 2001
Location: /dev/null
Posts: 15703

11.09.2006 - 00:05

und wennst es in shcüben machst dann mach gleich unterordner falls es geht, dann sollte das beim öffnen der ordner net stocken so wie es jetzt wahrscheinlich der fall ist

Indigo

raub_UrhG_vergewaltiger

Registered: Mar 2001
Location: gigritzpotschn
Posts: 6694

12.09.2006 - 08:52

FAR Filemanager geht nicht?

Redphex Legend RabbitOfNegativeEuphoria Registered: Mar 2000 Location: Macrodata Refine.. Posts: 11815	10.09.2006 - 19:45 Hoi Ich hab da einen folder mit 6.5mio files unterschiedlicher grösse bis über 4GB (gesamt 60GB) ... ... und der lässt sich wegen "not enough memory for the operation" weder packen (probiert mit winrar, winzip) noch kopieren (probiert mit xcopy, servant salamander, explorer) hat wer einen guten tipp, welches tool ich dafür bemühen könnte?
spunz Elder Elder Registered: Aug 2000 Location: achse des bösen Posts: 11291	10.09.2006 - 19:47 robocopy ?
fresserettich Here to stay Registered: Jul 2002 Location: hier Posts: 5456	10.09.2006 - 19:52 eine möglichkeit wäre immer nur einzelne teile zu kopieren, ist zwar nicht die schönste methode sollte aber funktionieren
HaBa Vereinsmitglied Dr. Funkenstein Registered: Mar 2001 Location: St. Speidl / Gle.. Posts: 19769	10.09.2006 - 20:13 Zitat von fresserettich eine möglichkeit wäre immer nur einzelne teile zu kopieren, ist zwar nicht die schönste methode sollte aber funktionieren Ich stell mir das witzig vor z.B. 2 mio files auszuwählen. Wie viele Mäuse bzw. Mausräder dazu wohl braucht? Andererseits: mal alles mit "a" kopieren per Befehlszeile könnte funzen, oder?
Burschi1620 24/7 Santa Claus Registered: Apr 2004 Location: Drüber da Donau Posts: 6792	10.09.2006 - 20:32 fat32 partition? kann nur bis zu 4gb große files speichern
Römi Hausmeister Registered: Feb 2001 Location: Bez. Tulln Posts: 5325	10.09.2006 - 20:37 Zitat von spunz robocopy ? ack!
COLOSSUS Administrator GNUltra Registered: Dec 2000 Location: ~ Posts: 12142	10.09.2006 - 20:46 Code: `find SOURCEDIR -print0 \| xargs -0 -I "{}" cp "{}" DESTDIR` Gibt's beides entweder in den UNXUTILS (vielleicht), oder ganz sicher in Cygwin.
FrankEdwinWrigh stuck on the outside Registered: Nov 2002 Location: im 21. Jhdt. Posts: 2507	10.09.2006 - 20:57 m einfachsten xcopy, das is im windows schon dabei und macht gemütlich eine datei nach der anderen, egal wieviele es sind. (start ausführen cmd xcopy /? ..) Mfg fEW
MuP OC Addicted Registered: Aug 2004 Location: Wien Posts: 968	10.09.2006 - 21:06 Zitat von Redphex Zitat von spunz robocopy ? Zitat von FrankEdwinWrigh m einfachsten xcopy, das is im windows schon dabei und macht gemütlich eine datei nach der anderen, egal wieviele es sind. (start ausführen cmd xcopy /? ..) Mfg fEW
FrankEdwinWrigh stuck on the outside Registered: Nov 2002 Location: im 21. Jhdt. Posts: 2507	10.09.2006 - 21:15 oh, muss ich glatt übersehen haben dann doch robocopy wie die anderen schon sagten sorry fEw
Römi Hausmeister Registered: Feb 2001 Location: Bez. Tulln Posts: 5325	10.09.2006 - 23:19 Was noch gehen könnte - die dateien in Schüben zu kopieren, falls mit anderen Tools auch nicht geht. ZB mit Wildcards auf Namen oder alle bis zu einem Datum. Wenn die kopiert sind, dann löschen und mit den Nächsten weitermachen - somit sollte es möglich sein, selbst mit dem 'not enough memory' Fehler.
XXL insomnia Registered: Feb 2001 Location: /dev/null Posts: 15703	11.09.2006 - 00:05 und wennst es in shcüben machst dann mach gleich unterordner falls es geht, dann sollte das beim öffnen der ordner net stocken so wie es jetzt wahrscheinlich der fall ist
Indigo raub_UrhG_vergewaltiger Registered: Mar 2001 Location: gigritzpotschn Posts: 6694	12.09.2006 - 08:52 FAR Filemanager geht nicht?

Folder mit paar millionen files kopieren

Forum Index > Software > Windows

Redphex

spunz

fresserettich

HaBa

Burschi1620

Römi

COLOSSUS

FrankEdwinWrigh

MuP

FrankEdwinWrigh

Römi

XXL

Indigo