{"id":3722,"date":"2018-09-08T23:27:37","date_gmt":"2018-09-08T20:27:37","guid":{"rendered":"http:\/\/vahamartti.fi\/blog\/?p=3722"},"modified":"2018-09-08T23:27:37","modified_gmt":"2018-09-08T20:27:37","slug":"freenasin-automaattinen-varmuuskopiointi-rsynclla","status":"publish","type":"post","link":"http:\/\/vahamartti.fi\/blog\/?p=3722","title":{"rendered":"FreeNAS:in automaattinen varmuuskopiointi Rsync:ll\u00e4"},"content":{"rendered":"

Varmuuskopioiden tekeminen on tunnetusti ik\u00e4v\u00e4\u00e4 puuhaa, koska se ei yleens\u00e4 ole automaattista. Koska varmuuskopioiden tekeminen j\u00e4\u00e4 yleens\u00e4 muistin varaan, j\u00e4\u00e4 se usein kokonaan tekem\u00e4tt\u00e4, tai kopiot ovat todella vanhoja. Ja sitten kun se odottamaton joskus tapahtuu, alkaa harmittaa.<\/p>\n

Digikuvia olen varmuuskopioinut levypalvelimelta ulkoiselle kovalevylle k\u00e4ytt\u00e4en FreeFileSync<\/a> nimist\u00e4 ohjelmaa, joka on t\u00e4ysin vapaa ohjelmisto. Ohjelman k\u00e4ytt\u00e4minen on helppoa ja se tutkii kohteiden v\u00e4liset erot, jonka j\u00e4lkeen se kopioi, poistaa tai p\u00e4ivitt\u00e4\u00e4 levyjen keskin\u00e4iset sis\u00e4ll\u00f6t yksisuuntaisesti tai kaksisuuntaisesti k\u00e4ytt\u00e4j\u00e4n valintojen mukaisesti. Mik\u00e4li levypalvelimella on useita k\u00e4ytt\u00e4ji\u00e4 (jokaisella henkil\u00f6kohtainen levyasema yhteisten asemien lis\u00e4ksi), niin t\u00e4ll\u00f6in jokaiselle k\u00e4ytt\u00e4j\u00e4lle pit\u00e4isi asentaa t\u00e4m\u00e4 ohjelma… kuulostaa hankalalta.<\/p>\n

Oma konstruktio<\/strong><\/p>\n

Levypalvelimen olen rakentanut itse, joka koostuu FreeNAS ohjelmistosta, sek\u00e4 seitsem\u00e4st\u00e4 3TB levyst\u00e4 yhdess\u00e4 muiden tietokoneen peruskomponenttien kanssa. Levyt ovat ZFS RAID-Z2:ssa, eli se on kuin RAID 5 mutta sill\u00e4 erolla, ett\u00e4 pariteettilevyj\u00e4 on yhden sijaan kaksi. K\u00e4yt\u00e4nn\u00f6ss\u00e4 t\u00e4m\u00e4 tarkoittaa, ett\u00e4 mitk\u00e4 tahansa kaksi levy\u00e4 saa hajota j\u00e4rjestelm\u00e4st\u00e4 ilman, ett\u00e4 tiedot katoavat. Kolmannen hajotessa menetet\u00e4\u00e4n kaikki data. RAID:in k\u00e4ytt\u00e4minen useine pariteettilevyineen ei kuitenkaan ole varmuuskopiointia.<\/p>\n

T\u00e4st\u00e4 syyst\u00e4 johtuen, rakensin toisen levypalvelimen (virtuaalikoneeseen, jolla ajetaan samalla muitakin palveluita). Toistaiseksi varmuuskopioille on varattuna ainoastaan 4TB tilaa (my\u00f6hemm\u00e4ss\u00e4 vaiheessa on tarkoitus ostaa kolme 8TB levy\u00e4). N\u00e4it\u00e4 levyj\u00e4 ajetaan t\u00e4ll\u00e4 hetkell\u00e4 RAID 0 moodissa, joka yhdist\u00e4\u00e4 nelj\u00e4 teran levy\u00e4 yhdeksi nelj\u00e4n teran levyksi. Mik\u00e4li yksi levyist\u00e4 hajoaa, kadotetaan kaikki tiedot. Se mahdollisuus, ett\u00e4 kahdesta erillisest\u00e4 levypalvelimesta hajoaisi levyt yht\u00e4 aikaa, on todella ep\u00e4todenn\u00e4k\u00f6ist\u00e4. Toisaalta tulipalon varalta, varmuuskopiopalvelimen olisi syyt\u00e4 olla fyysisesti eri sijainnissa.<\/p>\n

Mutta sitten itse asiaan, eli kuinka automaattinen varmuuskopiointi kahden FreeNAS levypalvelimen kesken saadaan toteutettua Rsyncin avulla<\/p>\n

Rsync asutukset<\/strong><\/p>\n

Kumpaankin palvelimeen sy\u00f6tet\u00e4\u00e4n l\u00e4hes identtiset asetukset, jolla varmuuskopiointi saadaan toimimaan.<\/p>\n

 <\/p>\n

Varsinaisen levypalvelimen asetukset:<\/p>\n

Ensin lis\u00e4t\u00e4\u00e4n Rsync moduuli, jonka saa tehty\u00e4 valikon\u00a0Services – Rsync – rsync modules – add rsync module <\/em>kautta.<\/em><\/p>\n

Moduulille annetaan haluttu nimi, valitaan mik\u00e4 polku halutaan synkata (t\u00e4ss\u00e4 tapauksessa koko data pooli, joka sis\u00e4lt\u00e4\u00e4 ihan kaikki l\u00e4hiverkon jaot kaikille k\u00e4ytt\u00e4jille). K\u00e4ytt\u00e4j\u00e4ksi m\u00e4\u00e4ritell\u00e4\u00e4n root ja ryhm\u00e4ksi wheel.<\/p>\n

\"\"<\/a><\/p>\n

T\u00e4m\u00e4n j\u00e4lkeen lis\u00e4t\u00e4\u00e4n Rsync task, joka saa tehty\u00e4 valikon\u00a0Tasks – rsync tasks – add rsync task<\/em> kautta.<\/p>\n

J\u00e4lleen valitaan sama polku kuin edell\u00e4, joka halutaan varmuuskopioida. K\u00e4ytt\u00e4j\u00e4ksi m\u00e4\u00e4ritell\u00e4\u00e4n root<\/em>. M\u00e4\u00e4ritell\u00e4\u00e4n varmuuskopiolevypalvelimen IP osoite (ei siis varsinaisen palvelimen omaa osoitetta). Annetaan vapaasti valittava nimi taskille. Lis\u00e4ksi on t\u00e4rke\u00e4\u00e4 huomioida, ett\u00e4 direction<\/em> -kohtaan on valittu Push<\/strong><\/em>. Loput asetukset toimivat sellaisenaan, niit\u00e4 voi muokata haluamakseen ja m\u00e4\u00e4ritt\u00e4\u00e4 milloin ja kuinka usein varmuuskopioin tekeminen tapahtuu.<\/p>\n

\"\"<\/a><\/p>\n

 <\/p>\n

Varmuuskopiopalvelimen asetukset:<\/p>\n

Varmuuskopiopalvelimella s\u00e4\u00e4det\u00e4\u00e4n asetukset l\u00e4hes identtisesti kuin varsinaisella levypalvelimella.<\/p>\n

Ensin lis\u00e4t\u00e4\u00e4n varmuuskopio moduuli, joka saa tehty\u00e4 valikon\u00a0Services – Rsync – rsync modules – add rsync module<\/em> kautta.<\/p>\n

Poluksi valitaan se paikka, jonne kopio halutaan teht\u00e4v\u00e4n. Polun ei tarvitse olla identtinen varsinaisen levypalvelimen polun kanssa.<\/p>\n

\"\"<\/a><\/p>\n

T\u00e4m\u00e4n j\u00e4lkeen lis\u00e4t\u00e4\u00e4n Rsync task, joka saa tehty\u00e4 valikon\u00a0Tasks – rsync tasks – add rsync task<\/em> kautta.<\/p>\n

J\u00e4lleen valitaan sama polku kuin edell\u00e4, jonne varmuuskopio halutaan teht\u00e4v\u00e4n. K\u00e4ytt\u00e4j\u00e4ksi m\u00e4\u00e4ritell\u00e4\u00e4n root<\/em>. M\u00e4\u00e4ritell\u00e4\u00e4n varsinaisen levypalvelimen IP osoite (ei siis varmuuskopiopalvelimen omaa osoitetta). Annetaan vapaasti valittava nimi. Lis\u00e4ksi t\u00e4rke\u00e4\u00e4 on huomioida, ett\u00e4 direction<\/em> kohtaan on valittu Pull<\/strong><\/em>.<\/p>\n

\"\"<\/a><\/p>\n

Lopuksi kummankin\u00a0palvelimen asetuksista k\u00e4yd\u00e4\u00e4n aktivoimassa Rsync moduuli p\u00e4\u00e4lle, joka tapahtuu\u00a0services – control services<\/em> kautta. Ativoi Rsync ja laita start on boot<\/em> -kohtaan t\u00e4pp\u00e4. Nyt varmuuskopioinnin pit\u00e4isi aktivoitua automaattisesti k\u00e4ytt\u00f6\u00f6n jokaisen bootin yhteydess\u00e4. Jotta moduuli l\u00e4htee saman tien p\u00e4\u00e4ll\u00e4 ilman boottia, tulee viel\u00e4 painaa start now<\/em>.<\/p>\n

\"\"<\/a><\/p>\n

 <\/p>\n

T\u00e4m\u00e4n j\u00e4lkeen p\u00e4\u00e4st\u00e4\u00e4nkin kokeilemaan, toimiiko varmuuskopioiden tekeminen. Mene Tasks – rsync taks – view rsync tasks,<\/em>\u00a0ja valitse taski jonka hetki sitten loit, paina Run Now<\/em>. Kest\u00e4\u00e4 hetken ennen kuin kopioiminen alkaa. Miss\u00e4\u00e4n ei kuitenkaan ole edistymisest\u00e4 kertovaa prosenttilukua tai muutakaan indikaattoria, miten kopiointi etenee.<\/p>\n

Reporting<\/em> -v\u00e4lilehden kautta voidaan k\u00e4yd\u00e4 tutkailemassa ethernet interfacen liikennett\u00e4 sek\u00e4 kovalevyjen luku ja kirjoitus tiedonsiirtonopeutta. Kun varmuuskopiointi on alkanut, alkaa n\u00e4iss\u00e4 k\u00e4yriss\u00e4 tapahtua liikehdint\u00e4\u00e4.<\/p>\n

\"\"<\/a> \"\"<\/a><\/p>\n

\"\"<\/a> \"\"<\/a><\/p>\n

My\u00f6s Display system Processes<\/em> kautta voidaan k\u00e4yd\u00e4 katsomassa, ett\u00e4 Rsync on p\u00e4\u00e4ll\u00e4 ja ett\u00e4 se k\u00e4ytt\u00e4\u00e4 prosessoria. Varsinaisen levypalvelimen prosessori huutaa l\u00e4hes 100% kuormalla, mutta backup kone selvi\u00e4\u00e4 10% kuormalla.<\/p>\n

\"\"<\/a> \"\"<\/a><\/p>\n

 <\/p>\n

Hyvin yksinkertaista, ja nyt jatkossa kaikki varmuuskopiot tapahtuvat automaattisesti. T\u00e4m\u00e4 oli pieni pinta raapaisu asetusten tekemiseen, jotta varmuuskopiointi saatiin ylip\u00e4\u00e4t\u00e4\u00e4n p\u00e4\u00e4lle. Asetukset kannattaa k\u00e4yd\u00e4 viilaamassa kuntoon omien tarpeiden mukaisiksi.<\/p>\n

On syyt\u00e4 muistaa aina ajoittain k\u00e4yd\u00e4 tarkistamassa, ett\u00e4 onhan palvelimilla kaikki kunnossa ja ett\u00e4 varmuuskopioita tosiasiallisesti tehd\u00e4\u00e4n. Joskus kun voi k\u00e4yd\u00e4 niin, ett\u00e4 kopioiden tekeminen vain loppuu ja siit\u00e4 ollaan t\u00e4ysin tiet\u00e4m\u00e4tt\u00f6mi\u00e4, kunnes se pahin tapahtuu, jonka j\u00e4lkeen taas harmittaa.<\/p>\n","protected":false},"excerpt":{"rendered":"

Varmuuskopioiden tekeminen on tunnetusti ik\u00e4v\u00e4\u00e4 puuhaa, koska se ei yleens\u00e4 ole automaattista. Koska varmuuskopioiden tekeminen j\u00e4\u00e4 yleens\u00e4 muistin varaan, j\u00e4\u00e4 se usein kokonaan tekem\u00e4tt\u00e4, tai kopiot ovat todella vanhoja. Ja sitten kun se odottamaton joskus tapahtuu, alkaa harmittaa. Digikuvia olen varmuuskopioinut levypalvelimelta ulkoiselle kovalevylle k\u00e4ytt\u00e4en FreeFileSync nimist\u00e4 ohjelmaa, joka on t\u00e4ysin vapaa ohjelmisto. Ohjelman k\u00e4ytt\u00e4minen … Jatka lukemista FreeNAS:in automaattinen varmuuskopiointi Rsync:ll\u00e4<\/span> →<\/span><\/a><\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_crdt_document":"","_monsterinsights_skip_tracking":false,"_monsterinsights_sitenote_active":false,"_monsterinsights_sitenote_note":"","_monsterinsights_sitenote_category":0,"jetpack_post_was_ever_published":false,"_jetpack_newsletter_access":"","_jetpack_dont_email_post_to_subs":false,"_jetpack_newsletter_tier_id":0,"_jetpack_memberships_contains_paywalled_content":false,"_jetpack_memberships_contains_paid_content":false,"footnotes":"","jetpack_publicize_message":"","jetpack_publicize_feature_enabled":true,"jetpack_social_post_already_shared":true,"jetpack_social_options":{"image_generator_settings":{"template":"highway","default_image_id":0,"font":"","enabled":false},"version":2}},"categories":[52,30,384],"tags":[932,544,534,533,930,931],"class_list":["post-3722","post","type-post","status-publish","format-standard","hentry","category-lahiverkko","category-saatoa","category-vinkit","tag-freefilesync","tag-freenas","tag-levypalvelin","tag-nas","tag-rsync","tag-varmuuskopiointi"],"jetpack_publicize_connections":[],"jetpack_featured_media_url":"","jetpack_shortlink":"https:\/\/wp.me\/p1fteB-Y2","jetpack_sharing_enabled":true,"jetpack-related-posts":[],"_links":{"self":[{"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=\/wp\/v2\/posts\/3722","targetHints":{"allow":["GET"]}}],"collection":[{"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=3722"}],"version-history":[{"count":2,"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=\/wp\/v2\/posts\/3722\/revisions"}],"predecessor-version":[{"id":3735,"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=\/wp\/v2\/posts\/3722\/revisions\/3735"}],"wp:attachment":[{"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=3722"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=3722"},{"taxonomy":"post_tag","embeddable":true,"href":"http:\/\/vahamartti.fi\/blog\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=3722"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}