Kopírování velkých souborů přes internet

ruzne programy,konverze dat, digitalizace, atd...
aleshonsa
Příspěvky: 2954
Registrován: 30. 8. 2011, 3:18
Bydliště: Praha

13. 7. 2020, 12:38

milan584 píše: 13. 7. 2020, 4:53
aleshonsa píše: 13. 7. 2020, 3:04 A pak jak vyřešit situaci když denní přírůstek image systémové disku (kde jsou právě emaily, záložky atd.) je třeba prostě 2,7GB
Neposílat pornofilmy mailem.
2.7 GB denně na bookmarky a maily?
:mrgreen: :shock:
Milane, kdyby jsi četl pořádně, tak jsem psal, že je to denní přírůstek image celého systémového disku. Tj. cokoliv se od předchozího zálohování na systémovém disku změní, tak je v průměru v těch 2 - 3 GB. Samozřejmě když tam budu instalovat nový SW atd. tak to bude úměrně více.

A než někdo přijde s nápadem zálohovat třeba jen složku users, nebo jen poštu a bookmarky tak mu odpovím předem. Ano to jsem dřív dělal a denní přírůstky takového zálohování byly kolem 7GB. Důvodem je, že Macrium Reflect si při zálohování typu File and folder dělá nějakou indexovou tabulku či co a ta při komplikované struktuře může být dost velká. Extrémem bylo u mě třeba obsahové centrum jednoho programu na datovém disku, kde i když byl přírůstek dat jen třeba 100MB tak díky obrovské a komplikované struktuře služek tato data pak dělaly 10GB.
Nemluvě o rychlosti - přírůstek image je hotový za pár minut (a to i u datového disku kde je snad 2,5TB dat), když jsem dělal jen výše zmíněné služky tak to bylo na 1/2 hodiny.
S pozdravem
Ing. Aleš Honsa
aleshonsa
Příspěvky: 2954
Registrován: 30. 8. 2011, 3:18
Bydliště: Praha

13. 7. 2020, 12:57

bobik píše: 13. 7. 2020, 7:03 A japa to maj ošetřený v tom cloudu? To mají minimálně dva baráky ve dvou státech? Aby se vyhli riziku požáru, povodně, státní šťáry jako u toho supertlouštíka a jeho uložiště.
To záleží, jak si to ty ošetříš. AWS má datová centra na několika místech USA a pak různě po světě. Tj. můžeš to nahrávat třeba na 3 uložiště, ale platíš samozřejmě za uložená data na každém.
Nicméně otázka je na co? Základní požadavek zálohování je aby ideálně existovaly 2 zálohy a aby byla také záloha (třeba jedna z těch 2) obecně na jiném místě než je zdroj zálohovaných dat (ve smyslu v jiné budově, v jiném městě, prostě ne že budeš mít 2 USB disky a každý dáš doma do jiné skříně - to dá rozum, že to neřeší).
Já třeba dělám 1x týdně přírůstkový image disků z počítače na USB disk. To spouštím ručně. Jde o to, aby byl disk připojen k počítači co nejméně, ale zase aby se relevantně zálohovalo. Pak dělám 1x denně automatickou zálohu na NAS, kterou pak kopíruju na AWS do USA. Poštu pak ještě na NAS zálohuju každou hodinu.
Takže 2 nezávislé zálohy doma + ještě jedna z nich uploadovaná na server do USA si myslím je už postačující.

Jinak uložiště Deep Glacier není cloud. Tok dat je více méně jednosměrný a nízká cena za uložení vychází z předpokladu, že data nebudeš s hodně velkou pravděpodobností stahovat a že tam budou minimálně 1/2 roku (když je smažeš dřív, tak platíš zbytek do 1/2 roku). Když chceš data stahovat, tak nejprve musíš jejich dostupnost pro download vyžádat a dostupná pro download jsou až třeba tuším za 24h + je tam pak i nějaký poplatek za stažený objem.
Je to prostě vhodné na data co se třeba musí archivovat po nějakou dobu ze zákona a nikdo k nim nepřistupuje. Nebo pro jak já říkám poapokalyptickou zálohu - tj. zálohu kterou budeš stahovat, až když zjistíš, že jsou zničené (nebo obecně pryč) všechny zálohy co jsi měl u sebe.
Za cloud bych považoval spíš uložiště S3, kde jsou ale taky daleko větší poplatky za uložený GB.
S pozdravem
Ing. Aleš Honsa
Mex
Příspěvky: 10288
Registrován: 6. 2. 2014, 10:29

13. 7. 2020, 2:45

bobik píše: 13. 7. 2020, 7:03 A japa to maj ošetřený v tom cloudu? To mají minimálně dva baráky ve dvou státech? ...
Ještě bych pohlídal, aby jeden z těch států byl dlouhodobě pro-demokratický a druhý pro-republikánský.
Vzhledem k současnému vývoji, který směřuje k občanské válce, to možná bude důležité.
Hlavně to uložiště u demokratů. Pokud by vyhráli republikáni, tak to asi ničit nebudou. Pokud ale vyhrajou demokraté, tak podle svých nejlepších tradic asi to republikánské uložiště vypálí.

Ještě k té velikosti 3GB denních záloh:
Celé životní dílo Williama Shakespeara nemá ani zlomek tohoto objemu. Možná ani díla všech dramatiků za celý jejich život nemá tento objem.
Stejně tak celé životní dílo Alberta Einsteina nebude mít ani zlomek. A možná ani práce všech velkých fyziků dohromady.

Mám virtuální disk, kde mám uložené vše, co jsem v životě udělal a vymyslel. Tedy mraky programů, spoustu schemat, poznámek, textů.
Samozřejmě ukládané ne-dementním způsobem. Celé tohle všechno nemá ani 2 GB. A to ještě většinu z toho berou fotky, kde si dokumentuju výsledky práce.
Mám tam třeba i tu zmiňovanou zálohu bookmarků Firefoxu a uložená hesla. Těch bookmakrů mám docela slušné stovky nebo spíš malé tisíce. Uložené v rozumném formátu zabírají necelých 5.5MB, a to si k jednotlivým odkazům ještě dost často píšu i poznámky.

Jako všechno na světě i tohle se dá dělat dobře nebo blbě.
Jsem rád, že s podobným zálohovačem nesdílím kolizní doménu připojení k internetu (aspoň doufám).
aleshonsa
Příspěvky: 2954
Registrován: 30. 8. 2011, 3:18
Bydliště: Praha

13. 7. 2020, 3:22

Mex píše: 13. 7. 2020, 2:45
bobik píše: 13. 7. 2020, 7:03 A japa to maj ošetřený v tom cloudu? To mají minimálně dva baráky ve dvou státech? ...
Ještě bych pohlídal, aby jeden z těch států byl dlouhodobě pro-demokratický a druhý pro-republikánský.
Vzhledem k současnému vývoji, který směřuje k občanské válce, to možná bude důležité.
Hlavně to uložiště u demokratů. Pokud by vyhráli republikáni, tak to asi ničit nebudou. Pokud ale vyhrajou demokraté, tak podle svých nejlepších tradic asi to republikánské uložiště vypálí.

Ještě k té velikosti 3GB denních záloh:
Celé životní dílo Williama Shakespeara nemá ani zlomek tohoto objemu. Možná ani díla všech dramatiků za celý jejich život nemá tento objem.
Stejně tak celé životní dílo Alberta Einsteina nebude mít ani zlomek. A možná ani práce všech velkých fyziků dohromady.

Mám virtuální disk, kde mám uložené vše, co jsem v životě udělal a vymyslel. Tedy mraky programů, spoustu schemat, poznámek, textů.
Samozřejmě ukládané ne-dementním způsobem. Celé tohle všechno nemá ani 2 GB. A to ještě většinu z toho berou fotky, kde si dokumentuju výsledky práce.
Mám tam třeba i tu zmiňovanou zálohu bookmarků Firefoxu a uložená hesla. Těch bookmakrů mám docela slušné stovky nebo spíš malé tisíce. Uložené v rozumném formátu zabírají necelých 5.5MB, a to si k jednotlivým odkazům ještě dost často píšu i poznámky.

Jako všechno na světě i tohle se dá dělat dobře nebo blbě.
Jsem rád, že s podobným zálohovačem nesdílím kolizní doménu připojení k internetu (aspoň doufám).
Já jsem taky rád, že nemusím mít nic společného s takovým přemoudřelým s prominutím bullshitářem jako jsi ty. Už jsem od tebe tady četl plno pitomostí, ale tohle je bezkonkurenční.

Tady nemá cenu psát nic o tom, čí mají jaká data velikost. Ty jsi prostě pupek světa a každý kdo to tak nemá stejně jako ty je podle tebe očividně debil.
Naposledy upravil(a) aleshonsa dne 14. 7. 2020, 2:16, celkem upraveno 1 x.
S pozdravem
Ing. Aleš Honsa
Mex
Příspěvky: 10288
Registrován: 6. 2. 2014, 10:29

13. 7. 2020, 3:53

aleshonsa píše: 13. 7. 2020, 3:22 Už jsem od tebe tady četl plno pitomostí, ale tohle je bezkonkurenční.
Jasná zpráva. Je fajn, že jsi na to přišel.
Aby se ti tato informace neztratila, tak si ji pořádně zazálohuj. Dneska je moderní natočit ten text kamerou a uložit jako video.
Ideálně do Ameriky a Austrálie (sich je sichr - co kdyby třeba dopadl nějaký velký meteorit, už se to prý kdysi stalo).
;-)
Uživatelský avatar
bobik
Příspěvky: 4564
Registrován: 11. 12. 2007, 7:48
Bydliště: Okres Klatovy

13. 7. 2020, 4:04

Trochu se to tady zvrhlo a mrzí mi, že jsem k tomu přispěl. Každá práce s PC má jiné nároky na datovou náročnost a jiný přístup k jejich zálohování. Pro mě je třeba cloud sprosté slovo ale při rozumném použití to má nesporné výhody, takto zálohovat.
aleshonsa
Příspěvky: 2954
Registrován: 30. 8. 2011, 3:18
Bydliště: Praha

13. 7. 2020, 4:07

Mex nechceš už jít dělat ze sebe šaška zase do jiného vlákna? Já jsem se na začátku vlákna něco ptal a tvoje jedovatý pindy o ničem mě nezajímaj, nevím jak ostatní.

Hlavně si pak zase nezapomeň stěžovat jak je blbá nálada na fóru ....
S pozdravem
Ing. Aleš Honsa
aleshonsa
Příspěvky: 2954
Registrován: 30. 8. 2011, 3:18
Bydliště: Praha

13. 7. 2020, 4:11

bobik píše: 13. 7. 2020, 4:04 Trochu se to tady zvrhlo a mrzí mi, že jsem k tomu přispěl. Každá práce s PC má jiné nároky na datovou náročnost a jiný přístup k jejich zálohování. Pro mě je třeba cloud sprosté slovo ale při rozumném použití to má nesporné výhody, takto zálohovat.
Já myslím, že ty jsi zase tak nic strašného nenapsal. Možná jsi ten dotaz třeba myslel jízlivě, ale zase na druhou stranu to není od věci jestli jsou data někde na cloudu nějak jištěna atd.

Já taky nemam cloudy rád, proto je nepoužívám. AWS Deep Glacier ale není cloud ...
S pozdravem
Ing. Aleš Honsa
aleshonsa
Příspěvky: 2954
Registrován: 30. 8. 2011, 3:18
Bydliště: Praha

15. 7. 2020, 6:36

Tak abychom se vrátili k původnímu účelu vlákna - včera jsem byl v Praze a dodělal jsem nastavení FTP na NASu.
Přes VPN se tam za pomocí FileZilla v pohodě dostanu. Ještě to budu testovat jak účelovými testy tak při provozu, ale zatím co jsem zkoušel tak navazování funguje. Není to sice tak přímočaré jako u robocopy (ten si to řeší kompletně sám - po opětovném spojení VPN sám naváže a začne pokračovat), ale funguje to.
Konkrétně jde o to, že po spadnutí VPN se stane, že FileZilla přehodí nedokončení transfer z "Queued files" do "Failed transfers". Po obnovení VPN spojení se musí opět spojit s FTP, v záložce "Failed transfers" nedokončené transfery restartovat - tím se dostanou zpět do "Queued files", a následně transfer ručně spustit. Přitom se FileZilla zeptá, co má dělat s kusem již staženého souboru, protože se na to dívá, jako že soubor již existuje. Tj. jestli, vynechat, přepsat, atd. a samozřejmě - co je pro mě důležité - volba Resume, tj. navázat.
Nicméně jelikož VPN nepadá každých 5 minut, tak v tom nevidím problém. Ještě zkusím prolézt nastavení, jestli se tam nedá někde nastavit, aby automaticky pokračoval. Přeci jen už jsem FileZillu několik let neviděl.
Důležité ale je, že to funguje a že je rychlost stejná jako u kopírování pomocí Exploreru nebo TeraCopy.
S pozdravem
Ing. Aleš Honsa
aleshonsa
Příspěvky: 2954
Registrován: 30. 8. 2011, 3:18
Bydliště: Praha

26. 7. 2020, 5:44

Takže FileZilla mam už dostatečně vyzkoušenou - chdí to jak potřebuju. Navazovat jde spolehlivě, včetně i po vypnutí počítače.
S pozdravem
Ing. Aleš Honsa
Odpovědět

Zpět na „Ostatní software“