Add icloud-drive-docker

This docker image downloads folders and photos from iCloud to allow local backups.

README.md

@@ -46,6 +46,7 @@ This playbook adds storage, services, applications, and configurations to a prev
   - [Grafana](https://grafana.com/) - Operational dashboards
   - [Grafana Loki](https://grafana.com/oss/loki/) - Log aggregation system
   - [Headless Trunk](https://github.com/alpeware/chrome-headless-trunk) - Headless Chromium
+  - [iCloud Drive Docker](https://github.com/mandarons/icloud-drive-docker) - Backup files and photos from Apple iCloud
   - [InfluxDB](https://www.influxdata.com/) - Time series database
   - [Lidarr](https://lidarr.audio/) - Music collection manager
   - [nginx](https://www.nginx.com/) - Web server

templates/nomad_jobs/icloud_backup.hcl

@@ -0,0 +1,142 @@
+job "icloud_backup" {
+    region      = "global"
+    datacenters = ["{{ datacenter_name }}"]
+    type        = "service"
+
+    // constraint {
+    //     attribute = "${node.unique.name}"
+    //     operator  = "regexp"
+    //     value     = "rpi(1|2|3)"
+    // }
+
+  update {
+      max_parallel      = 1
+      health_check      = "checks"
+      min_healthy_time  = "10s"
+      healthy_deadline  = "5m"
+      progress_deadline = "10m"
+      auto_revert       = true
+      canary            = 0
+      stagger           = "30s"
+  }
+
+  group "icloud_backup" {
+
+    count = 1
+
+    restart {
+        attempts = 0
+        delay    = "30s"
+    }
+
+    task "icloud_backup" {
+
+      env {
+          PUID        = "${meta.PUID}"
+          PGID        = "${meta.PGID}"
+          TZ          = "America/New_York"
+      }
+
+      driver = "docker"
+      config {
+          image    = "mandarons/icloud-drive"
+          hostname = "${NOMAD_TASK_NAME}"
+          volumes  = [
+            "${meta.nfsStorageRoot}/nate/icloud_backup:/app/icloud",
+            "local/icloud_backup.yaml:/app/config.yaml",
+            "/etc/timezone:/etc/timezone:ro",
+            "/etc/localtime:/etc/localtime:ro"
+          ]
+      } // docker config
+
+          template {
+              destination = "local/icloud_backup.yaml"
+              env         = false
+              change_mode = "restart"
+              perms       = "644"
+              data        = <<-EOH
+                app:
+                  logger:
+                    # level - debug, info, warning (default) or error
+                    level: "info"
+                    # log filename icloud.log (default)
+                    filename: "icloud.log"
+                  credentials:
+                    # iCloud drive username
+                    username: "{{ icloud_backup_username }}"
+                    # Retry login interval - default is 10 minutes
+                    retry_login_interval: 600
+                  # Drive destination
+                  root: "icloud"
+                  smtp:
+                    # If you want to recieve email notifications about expired/missing 2FA credentials then uncomment
+                    email: "{{ email_smtp_account }}"
+                    password: "{{ icloud_backup_smtp_password }}"
+                    host: "{{ email_smtp_host }}"
+                    port: {{ email_smtp_port }}
+                    # If your email provider doesn't handle TLS
+                    no_tls: false
+                drive:
+                  destination: "drive"
+                  remove_obsolete: true
+                  sync_interval: 1440
+                  filters:
+                    # File filters to be included in syncing iCloud drive content
+                    folders:
+                      - "Scanner By Readdle"
+                      # - "folder2"
+                      # - "folder3"
+                    file_extensions:
+                      # File extensions to be included
+                      - "pdf"
+                      - "png"
+                      - "jpg"
+                      - "jpeg"
+                      - "xls"
+                      - "xlsx"
+                      - "docx"
+                      - "pptx"
+                      - "txt"
+                      - "md"
+                      - "html"
+                      - "htm"
+                      - "css"
+                      - "js"
+                      - "json"
+                      - "xml"
+                      - "yaml"
+                      - "yml"
+                      - "csv"
+                      - "mp3"
+                      - "mp4"
+                      - "mov"
+                      - "wav"
+                      - "mkv"
+                      - "m4a"
+                photos:
+                  destination: "photos"
+                  remove_obsolete: false
+                  sync_inteval: 720
+                  filters:
+                    albums:
+                      - "offline_backup"
+                      - "All Favorites"
+                    file_sizes: # valid values are original, medium and/or thumb
+                      - "original"
+                      # - "medium"
+                      # - "thumb"
+                EOH
+          } // template data
+
+      // resources {
+      //     cpu    = 100 # MHz
+      //     memory = 300 # MB
+      // } // resources
+
+    } // task
+
+
+  } // group
+
+
+} // job

vault.yml

@@ -1,112 +1,116 @@
 $ANSIBLE_VAULT;1.1;AES256
-30633431616365363966656330363465643061363964363962633964613432666465323663373661
+39643165343034336362656434646231306366653363336636383066356162306164363364323939
-3431343463353466373739383966613736623732343733620a643266333632393533653831376262
+6238666236363037303263323862386637373337626135610a363533623631373532376536303563
-61343837626135653534346639313230623464303636663639326639623937373061383635643661
+66393566326466323633363038393335346461386534643432613439353665313730343737356361
-3563643361623162650a333232653866346539363864616535303838363266343132323737653966
+3133663630393765640a646266386237656132656333646465326631326131366566386635666130
-63653638356161396465303865386433313933646664313637366433613932616564346162383463
+38623262646638383330336539613131646434613763636536666563306331653164623435653262
-32356431623636393836613230626332373836393137353663336237613266323363373936636134
+39653462663833323362616339623061376336313764333836383432643330633137333534313463
-64366161643730306230616636386330393834383864356435626363346330313264393261326662
+35306234366365653038323535323137663432343663313033363733343833656339316638333939
-39373838636338306638323561373534386266306332636634356636316632373961323661633661
+39343139333733393762353036373836333232326530373435343835383131336632313733323236
-66346133363737613631313963353865656564393832613530623865626466386463306333303161
+34323236336166663663356431646262656435643761396164393437633230386265653539313863
-35646233313262353130656532636330323831613064306166663766653434343639306465303836
+31343438373139353731613939653038306131366463366637643262633762383664353830613634
-30643832623939353236353761623965346464333138313239306333316338386430303033666532
+30643237643030663930333462313235383766623331656234666661623137346161316336313564
-37613837626233313530393466633761646533303262656563623539333139636661346337373036
+37623739383336623062336136646231656561316534323934643162353738626431343161373033
-36373063363133366337313863326230376361366661653530643032306338616238386438356530
+62656662333531623835663532376630363666353233643131656562656632663665326162333837
-64653339613130303638623262383564346230313861656262313334663634663464386138633539
+30643432373839313636396165643736353961303536666131646466653362363837636238656265
-35346630653536363936333761616164643438653535356138373066623330336365346432646266
+38336538623032626234386631323435363639616538343361616431383439366435633161636334
-31633336616439346238336561346562306262386262396131623761363165666432353664613265
+62366239636261383363376561613364323434656137653030383232663236636266343234333734
-31343962373037326233623832633836326231626664356636363064636133653266663332306633
+34633164343434613332366264393065663632353563316535373665346365643962393137613864
-35363231383333633338663162303361366162366237306339373134633861633363376564656366
+61346631393865653662643739353538643566383735333164393037316162363363666438373936
-66383432623938383164376130383666643632383762393636383639353563626630396633616634
+36636435363138663436613532306437666336356561343037656131343932363337363930626439
-61343265393239623366313162646533616238666133633833366365303965633265366435323537
+63326432633936663033633539316130386364663065326561323361636665333965353031393265
-38343038616536656436653664313039643334623166623131643634653330663162636639616339
+37383831383263323262623835633665646262343661636537633432333530613237326532356330
-38663737333233626536306131646630366334383738396561616665356135363034613066653235
+32323432636631326561636632336666396364666335616533333063373333363565316466363738
-32623337343161653536656661353566323436363666306232613366626532333434666662656631
+64343238346334636538653233366332633261333465643231323161323536643766653736356264
-35613738323836323063306334393034653463336466643434626532376565346566666434623938
+63633231633364346364393732306364373866653766326530383562303638633932626564396138
-62326361303061343765306665356561373639663638303465623934346663613834346333343035
+30353632623965393633306137326130653863643831653763636363336662656661616438646636
-37323633666233386461643635363431656331343435613330333030323462353630376138373661
+39616133643038316137363166613835396533303139336263383936666533386434346239613165
-38656562313937363830646334623265303662376331633735656630323062613136366539666663
+35613730306630646161346261626330636434363738663062353230623535636662316635313161
-64326531643737323665343066663364356665366533623263376139376338376234313863653532
+30346535663433666234373063393435643262663234623230363764633234646461653561353330
-61326539643634353435663337303665363037303263633462396131393636636133363539363431
+37336636346336616161353963623432343736616538653534623935383762323731393738646162
-64616561336165383064646538613364383862613732393861363666643964313062363439643162
+62666130343134613335303534323830383336303238326539383234376665613764323536393964
-64326539356439623234303137336239356534646438333564323533633531333132306563343933
+31326631356231646665623833373534383765323033613462616238626537653530316666613539
-37356636343632623664363364316435316232383665633433643830333266626338653934666530
+64326163636238336339353537623038366162633563373565663330643333343836323938356639
-30653961383932353466646235363962663063656131393866326337663133373134653835396637
+36663161343238363237613233623130613463626131363964326231613435666434396531316365
-38663434363363373836613665626536303862643835326630613961636431623866316163666232
+64613962626266396163393032386134313736613234613539363332326539613664306362313234
-37366464666538396634666565316538383465613037356538376537323931643931663532306362
+37306436613935353837386334653965343435353436373663356538306639373335396339386566
-65643633376632366133373534376363616461353336656162623435663434336164363132623066
+65656466643037376366363938616462613530333663303735663262346439323138616666353838
-33313766626439653135303238326332353962663064613261616664356266346166323663373566
+30613931383235316338616431343836656635353734376464376464613036613738376331656336
-32376631356639373731633464386565376561376638666535323837613034386566363561653162
+39636237353630663265663431323436656137633261613066656531306564666130633635663530
-37633261363133626337373039656262366233396233373534656534663733313361343764666336
+63326132623264376537343937663835626635356632656135386234323432653864333665306264
-32626635663234356537333830643238623064326537633534316464353532383265663064336432
+33646536313333613234373363313934333633313463346362623138326637656637373864653339
-37353739623034646561623735643530333066373862653735303433363438633736316538636638
+31366639373663366234626264356362646161303930353134636566613437356237643362633437
-31386432326532353831633333376666653063633037613630323630636164313465663364656461
+38643062653462346461326365656435363731623733633735363535326566613937326237316435
-31323739326161303865383863633938363531656436353139393361363734353434386234643666
+37303363303030613630623138656264313233363237303263353431313366386666646561613964
-35336166643138663233666533363264366363343837636639333339623932366438393536386561
+33666365373734363062623264326435373339343864636430303234393836653537336139653163
-61353831643937363339386264383436393030316364306633666334626462356163626463313561
+33346537623936646164313036343133636531383736343839656162663936313133323563636538
-66636161383961326563383463643634633136373231636635386339373465643964363339613164
+32616633333131336533646132623662393666353439653762313163663864626462363065323837
-31613666343866653363336666653237343962626238646436623539666537323131643330623966
+31306532336661323334353334303861303939386465663835303932376536326162666533663033
-62643034346138633664356564343864396631623635626661336562383833326334393538383438
+39306434623334356566646430643962313961386137313465623038623032303339373665656533
-39613635643062326335383332393536643966636363316363346430633034316130393137313362
+64336432663436353062333463633264306137636630646662386165346164363566623966643039
-62393236306465396461613665636437383963653133623961373838343161666461643336633037
+31636334626661636364383734393562366137363164643436663237366535316631383638346535
-33323936313163316164366162373637393533626432656631663533376465306336306665353065
+31353737636639393237316362356562396331623461323465646464376539306538623132313465
-64373066633939363563356139343665613163633630656334653666303966333036363066363032
+33616238336461313634613962393939363765333539616633303364623761333437396361653537
-64313566613562346330633634663933636331363138623336303562316362356365323837326133
+37623833393161303965343062393536616438663339663033396432333865383266346663356563
-30346166313763633733393937346465613837323966643863636339663366356338316663323830
+66396335363464383434653931316162633665623831666538303261356164343965333035393737
-36396531346463613331313064363563656264363235383033366337383762653539366636663930
+63333334393563623731333137656662326662653738386131363963653264303834303464633933
-39303231376535343231353233613831643262336634353565333862373035653230626662353765
+36616264623233363239623732396566613132396330383934666637643765393230656164636637
-64336362653562343435306637663831646264313935363938643061613039343562653431636563
+36613066313431393463346465386265613735623534316535616133376232326639386464616364
-63313432313433353761646563303733663462363734366331353432373833366365373835663661
+30313134653165386264393464636134613736316638303138306366336639343033326430306366
-30343563373762353435306133353430623665623739346336656663383261396165356561363830
+65386265326434656435343066363933623032643165343632356636666664633136666531313333
-66333131623464623937656630643765303536616137656262303330353465656665336361366132
+33656530393964323562303932356261343436636334646230383135306230623864393962383130
-65366535633062653731383561336233303539373762353861616137336138613162636332333837
+38623664613966663432316133393837386535366165643039303932363939376331396165346133
-31303439643965303333666231643235386664373861643761366164383766343830393033396262
+38633031663535383662316538313162333138663964366133333639313332393365633034363965
-35346437626363333037306637326537376462383432373866323764353961633566366235353037
+30316162653739396433356237623865663736356661326434643561393733383738376666326635
-37646135626135356635633236643933663039666533626331363330313037333266643130393330
+65663038666235343165616531363436353863333936653638313336323665656635393433393636
-30363666383231393430663136666665386330613265313535326132306235393964373031306131
+35393333393134313537326535333735373966643632643933326433346166366534396633326665
-61336430393365646238366131643764366663346361653732306366356464663433356531626464
+35636231393034633536383431643164643566343734666534313932333730336363656563306133
-66616339343530366533326534343232326662613465643466633331303539356231396439396135
+64616137346365626630663063666139663462393534613361613364386165366461386439643330
-35396166653562656438636562353235306331333131363334326630306239396163613531376330
+33663833346131303666393633303561373333363033636634396266303134383162613664326336
-38306132386134626464373736353830653731313961333839306665313265643437636233613536
+66343733303438306630626432343335346165373539353231313035306533343234346164383532
-36353839646663613331643230333861323633373337323339363230333563646539623537613262
+39326332353037373234343963376561353833316136326235333031383730313862303234626432
-33633338656630333039616538356332333934633936333539633064393932363964373764653431
+32666466653738323966336131366335306239336138303164366565656238656631323333303466
-64616133363731636661353866636366393835323734626234656661376662383938313237646437
+65376437386133653935303538393033363062363133313366373463343238623836313134623937
-66353666333930313034376461303033663064363237313039303536313131366664643234323366
+66393636646135623833366461323763613932653738373363353734626331363838653233663231
-30326630356337333036613738353636376666336262353037383039643933376162346433326536
+38656137353733333362383034396331626436303936303034313332393762303831303465643739
-64393132323032303664653366623433346463643566663763633839623365333564396233346538
+30326135653661303439303632616461326566613530616666363130353139386266613066353834
-64346266303066613936306263613232393233313363633930303931383134336336636234333934
+37386138373133353134643835653636366562383331616264303936376462373538633138356337
-66613337363534336236363666656537376434336230303536323630303161646632363263643964
+66643136653430616133616364333165303663343831353762313461623339643564626161356539
-36313566343431303166333965643632333234343334343966356135643630393364656635356662
+34373030396637653132313538656531386630333530623838626430336166663064303338313966
-33376131343235303330353034653935653732646239353262326539656634613737356335646566
+66663437356265373262376361353937326639303138613636303464323936383665626336636664
-64366632646138643939633330333232623565356338303566616233383731356266376130346263
+35303230356665613836393863396537626536363764666330613732386466646230373865633666
-31366530643366653636326135643631353631303834303461326263353135643364386261643133
+64376261613836626164373364383435343438333164636563396433396538393037366433353666
-38633737633766303638643933646562383465333739346436633564333239383235313236323432
+61663234316133363763343830613164646365653535366363376365663365626665313966636631
-39623765633731333731613237366134303865376532306663306338666663613065363131636431
+30316331323239633534353439323035333339343030636536333237646431333635663538336265
-64356265373364663664346465336461396134323262313535343637353766363237396238323736
+38306335663333323439393338646431386235333233623065656265316663643462663833373462
-62363530613135663236373565666331646632643534373833333165373761303863336132666537
+61363763306664366436643963626130346461666165306664666236613737336331383237623866
-36303431623466616136393039336162633961316134326632373265363164313938633464623738
+38303738666566633237323939643964343665353238306337303536653430323562396235643562
-63643866363530363766663438633865613230633031363036613462336235336335343164353531
+36316361346438316538386136396265336439396539373735333831386339303935623837366134
-36656263313637663637373533323764626630373538666330373739613335613131313665656231
+39616335323836356265646565653564663537343364363135643434616538633135363065313663
-37303531333763316330393766393963386230393736386133393563613936316531663034363033
+30343335323430316637373335323330303364313831343933306639663561306664646234306433
-61633664323738396432636439353366323131393066353466643166326631333131333231653837
+36336231356364343564393331333937336231353366346335393531656432633164316137373535
-65323834653936393466323361323235353334636332343635326664383537653632346430396139
+66653865343564623731306337336662633938633330373333613032343137336439373130363839
-36343834373830303964613266623661616533633266636133306433616565613065666561393561
+39626131373966373337363563333666346233663035333632396634636134396535613965356234
-61616666613061316132626364353531656561666563383833373438633537376137313466366663
+38303765383439346530373639373832663039636638303566643336623133663634363139306465
-38353665313766666633363932363765623463653266666164653739366535303463316337323965
+33303564303932353234613665393063666139313139373333373733616330636337363038343666
-35656235646266343034313830323338613666323535366161393235616631646562653330613465
+31383138376364393036333563643461376266356231376663623431303636363639383263333837
-62646165363635653665353832653765363730666638306434613764643364383031353934393930
+36356635353537356336653435353836653262306639653134633439303166366132303135353534
-62666433396235623239346661333430353864373635383065303061376362643934306535613639
+39363863353938313961653432623635386566333231656162373231663164616437633362663438
-30333135323461636134373734663766316563376262643231323431333335643436316465373763
+61336334373236636565383830336332653636376264326561326430653065343631663366333733
-64633335343665663961353033393964323439616634306438393766643534396530343262643836
+36356262643336356431646564623834366363656138616539626235393630306130636161636136
-38393164383564616632613330353035633365626431613262626134366666633466643932373563
+37353766326536303133613061646638636639646239383166343466333265626565643863343966
-61306362353139383636616630373737633763613734323034663636363462613032303864363938
+33656163356637363238313364313633343738313636306661643139383664323966353931323230
-64646630336235633161633265326131323266343661643233626334383932343834613936346466
+61383065333731363662333932346433613336633836366537636561623331323337363732616364
-30346132366234666165333630393434393365303436303738363736383864386662353731386238
+66633661353030623766616138656362306662376462373631316130393665643861316436633238
-31303835633736303231303433343261613537643461633866326663363237343037393135363835
+61343834356334346162313866616466343938336133643136663233643832663864613532336663
-65633365383063363531313036366664396538656366643665616333393535323838623361616435
+37393631643339636561343965306562363737383636333238313537663761623738613764653462
-30666663396239633934663035333739326231646238333538626536643261373566363130356134
+32633765616132616130636264366466303866303461656132653965613138353530636134336232
-63323539643165623362303031636561303235336230623634663736646332663230323232386136
+63386365323864356364643163373232666232633039323265646433623936376261303062356432
-36633863326537366633373438373033333436623938303833643665303965353631633162656538
+64633663653233666664373161633665633233643338396663666134633334353239373332336639
-62653631326162306334633262356431663239343465396533333030353532643135663337323364
+37343639306230343534393566643134353732626532316530393166303561636331623632663436
-66616130643433613063633538613536366130313834393631333037373962363166663938643936
+33313962346266343565643535636132303463636565633139326237383937353134306566333836
-383634623262383935306238623737643930
+30373931656630326231616538333933393462336234393537663764643734626131306637383964
+66383666646436346436313363633334383437613033616532396331626464623731356134666232
+32306234646334303865303032383966336534633938373264323738626266306463626434356336
+64393362353039316539346431626534636365646462363730656262616265303131633834386233
+376235326366346534306331346534383138