Self-Hosted - Генерална Дискусија

[Psycore]

Ја отварам оваа тема да поразговараме општо за selfhosted. Дали поседувате дома некаков вид на сервер? Дали хостирате нешто?

Одкако ми рикна HTPC-то од потпис: Intel® Core™ i5-4570 | Ultra Small Form Factor | SSD 120GB | 6TB WDs | Plex Media Server, и одкога плаќам VPS сервери извесно време решив да купам домашен мини ПЦ и да го користам како сервер.

Се решив за следниов mini PC: Beelink - SER5 PRO 5700U со следанва конфигурација:
Processor: AMD Ryzen 7 5700U (8 cores/16 threads, up to 4.3GHz)
Graphics: AMD Radeon Graphics (integrated, 8 cores, 1900MHz)
Memory: 32GB DDR4 RAM (upgradable to 64GB)
Storage: 1TB M.2 NVMe SSD (upgradable to 2TB)
Connectivity:

• Wi-Fi 6 (802.11ax)
• Bluetooth 5.2
• Gigabit Ethernet
• HDMI 2.0
• DisplayPort 1.4 (supports 4K@144Hz)
• USB 3.2 Gen 2 Type-C x 1
• USB 3.2 Gen 2 Type-A x 4
• USB 2.0 Type-A x 2
• Audio jack

Mе фати некаде околу 400 евра со давачки (DHL и 5% царина).

Core
На самиов PC инсталирав Debian Based Proxmox OS кој e hypervisor и нуди одлична виртуелизација и изолација. Овозможува креирање на виртуелни машини со добра кастомизација и дава одлични перформанси (97% од реални). Панел-от е налик на панелите од познатите провајдери кои нудат VPS. Си бираш колку јадра да користи секоја виртуелна машина, колку рам, колку сториџ. Се креираат цели кластери, мрежи, итн. Има преголем број на опции од најпрости до доста комплексни.

(слика од интернет)​

Повеќе инфо за Proxmox може да добиете на нивниот сајт: Proxmox Server Solutions
Потоа во секоја виртуелна машина користам Docker/Docker Compose за стартување на сервисите и уште еден layer на изолација и извегнување на dependencies.

VMs
Засега користам 4 виртуелни машини со различни перофoрманси и еве краток опис за нив:

VM#1 Production околина
Тука ми е хостиран мал сајт (во иднина и повеќе), со докери за Java Backend, React Frontend, PostgreDB и Nginx. Не користам статична IP и користам динамичен DNS од CloudFlare.

VM#2 Dev околина
Исто како Production, само послаба и за тестинг цели.

VM#3 Media
Тука имам цел Plex стак, исто така кренат со докер. Plex, Radarr, Sonarr, Bazarr, Jackett, Deluge. Закачен (shared) 10TB HDD Sea Baracuda Pro.

VM#4 Other
Тука засега користам само Couch DB и Obsidian Live Sync за Obsidian notes.


Што планирам во иднина?

• Synology RAID10 со 4х 10TB дискови
• Да го мигрирам цел Home Assistant од Raspberry Pi на серверов.
• Immich Photo Server (клон на Google Photos)
• Private Cloud Storage
• Уште неколку сајтови и проекти

Инспирација

https://www.reddit.com/r/selfhosted/

GitHub - awesome-selfhosted/awesome-selfhosted: A list of Free Software network services and web applications which can be hosted on your own servers

A list of Free Software network services and web applications which can be hosted on your own servers - awesome-selfhosted/awesome-selfhosted

github.com

 

[wolverine]

Браво за темата, конечно и ваква тема овде. До сега супер ти изгледа сетапот. Јас имам два сервери дома, едниот е unRAID, другиот е Proxmox. Ги користам за различни намени како на пример:

- unRAID (32GB DDR5, i5-13500)
Воглавно за податоци пропратено со некои Docker апликации за различни работи претежно за манипулација со медија. Сликите/видеата од телефоните ни се направени автоматски да се бекапираат тука преку Nextcloud и се зачувуваат на unRAID. Тука чувам филмови, серии и други податоци што ми се од значење. За филмовите користиме неколку апликации од типот на Emby и Plex.
Овој сервер ми е конфигуриран со цел да ги зачувам подаотците па тука воопшто не штедев за storage. Има редундантни дискови по 8TB за податоци, редундантен кеш pool со NVMEs и дополнителни дискови за backups за најбитните податоци.

- Proxmox (32GB DDR5, i3-13100)
воглавно тука имам виртуелки за домашна автоматизација (Home Assistant, ESPHome и тн), контрола на пристап, безбедносни камери и снимање (Shinobi), симнување на торенти (Deluge) и неколку гејм сервер виртуелки што ги уклучувам по потреба (Minecraft, Teraria и др).

Мрежата ми е воглавно 1GBps со 10GBps оптички линк помеѓу двата главни свичеви во куќата и 10GBPs линк од мојот ПЦ до unRAID серверот преку тие свичеви. Во иднина постепено ќе ја надоградам цела мрежа на 10GBps оптика. Мрежните уреди се Mikrotik.

Инспирација наоѓам на /r/selfhosted, /r/homelab и awesome-selfhosted, но пред се сакам да имам целосна контрола врз сите податоци што ме засегаат мене па така да воопшто не користам cloud сервиси од типот на Dropbox, Google Photos и тн.

Во прилог прикачив неколку фотографии од мојот сетап.

 

[gdamjan]

Мојот „сервер“ е уствари истовремено Desktop-от, но ретко седнувам физички на него. Си има тастатура, mouse, монитор класик
CPU: AMD Ryzen 5 PRO 4650G (vega igpu)
RAM: 32GB 2x16 DDR4 3200
MB: MSI MAG B550M Mortar Wifi
Storage: 2x 2TB P300 HDD Raid1/LVM, 1x 1TB NVME .
Connectivity: преку wifi-то од матичната (ax200 мислам беше) - не е идеално, ама кај што ми стои „десктопот“ не можам да м'кнам кабел. иначе има 2.5GB ethernet.

Archlinux базиран. libvirt за виртуелизација, со virt-manager преку ssh се конектирам од било каде. Виртуелките главно ги користам за експерименти - не работат постојано. Имам debian, arch, fedora, nixos, redox-os, guix, fedora coreos, и некој windows виртуелки. Имав и minikube виртуелка, ама за kubernetes експерименти се пребацив на k3s.

Storage-от, т.е. двата hdd се подесени со LVM (Logical Volume Manager) и така-наречени thin-volumes. За секоја намена и/или виртуелка креирам посебен thin LV и можам посебно да изберам дали сакам raid1 редундантност или без. Додуше дел од двата hdd-а е и btrfs фајлсистем, за нешто медиа, музика, слики и сл. Најверојатно во скоро време тоа ќе го мигрирам на bcachefs.

Менаџментот, рака на срце, го правам претежно преку ssh и cli алатки (virsh, lvm итн), но понекогаш многу ретко користам и некои gui алатки: претходно спомнатиот virt-manager, а исто имам и cockpit и virtlyst.

Софтвер/сервиси:

• Nextcloud - фајлови, instant upload од телефон, contact листа и календар за телефонот
• Jellyfin медиа сервер - главен јузер телевизорот
• transmission симиња во заеднички медиа фолдер со jellyfin-от
• Samba - фолдерот со медиа е достапен и вака
• Influxdb - база за метрики, во моментов не собирам ништо - али едно време собирав метрики од сензори и сл. Уствари чеј, грешка, собирам network performance метрики и метрики од самиот систем.
• останато: nginx + letsencrypt, redis, ipfs

сите овие работат како класични archlinux сервиси (значи не користам docker, vm-ки и сл.) - works fine.

пс.
се мислам да ги сменам HDD-ата со nvme-а … пошто подбучуваат. home-assistant исто ми е во план, ама не сум му седнал. и имам некои dongle-иња за zigbee и сл. кои што исто треба да се интегрираат. Immich е добра идеја исто, ако не ме мрзи да го интегрирам со nextcloud-от

ппс.
дисковите се енкриптирани со LUKS и со клуч складиран во TPM2 модулот (fTPM на AMD), така да системот бутира unattended (како се вика на македонски?) а сепак клучот не е exposed. исто системот има secure boot со мои клучеви.

 

[Metuzalem]

unattended (како се вика на македонски?)

Off-topic: ненадгледуван (можеби).

 

[gdamjan]

Може требаше да го спомнам дека и рутерот ми е дел од home setup-от. Тоа е Ubiquiti EdgeRouter X, MediaTek MT7621 архитектура, 5 gigabit порти, 256MB рам, 256MB flash. Флешуван со OpenWrt. Освен нормалните интернет ствари на него имам и dyndns со duckduckdns, IPv6 тунел преку Hurricane Electric, wireguard „сервер“ за да можам од надвор да си влегувам во ланот и dhcp сервер за претходно спомнатите виртуелки (vm серверот е само dhcp relay).

Надвор од дома па, за хаклаб работи self-host-ирам следново:

• soju / gamja - irc bouncer и web интерфејс за него
• znc - исто irc bouncer - имам некои legacy јузери на него, ама ќе го гасам (soju е помодерен има ircv3 можности)
• thelounge - исто legacy irc web клиент, ќе го гасам
• Pleroma - fediverse/mastodon компатибилна дистрибуирана социјална мрежа
• matrix-synapse сервер (matrix е федериран chat протокол)
• matrix-appservice-irc - bridge меѓу irc и matrix мрежите
• irc bot напишан во erlang и couchdb база за да логира во неа
• tinytinyrss - апликација за читање RSS feed-ови
• конвертор од yuscii кирилица во utf-8 кирилица
• mediawiki и drupal сајтови - мислам ќе ги гасам (би ги пребацил ко статички страни на github)
• графана
• тук и тамо има по некој postgres и mysql за некои од сервисиве

 

[Psycore]

crosspost:





Од ЈВС-Нет 13-14К половен.

• 1x Seagate Barracuda Pro 10TB 7200RPM (изваден од Seagate Expansion)
• 1х Western Digital WD100EDAZ Helium 10TB 5400RPM (изваден од WD Elements)

Земав различни за споредба. Ама дефинитивно WD е подобар, побрз и драстично потивок. Врзани во SHR(RAID1) сега за сега, па ќе видиме дали SHR(RAID5) ili RAID10 понатаму. Според калкулатори, бидејќи користам 10ТB дискови, доста се мали шансите за recovery на цел raid array, доколку рикне диск. Ваше мислење или искуство со вакво нешто?

 

[gdamjan]

Според калкулатори, бидејќи користам 10ТB дискови, доста се мали шансите за recovery на цел raid array, доколку рикне диск.

во која смисла? не сум сигурен зашто големината на дисковите би играла улога?

RAID1 е full mirror, податоците се запишуваат паралелно на двата диска, скоро истовремено. Дури и да рокне некој од дисковите, другиот има све.

 

[Delicon]

Со RAID1 и двата диска ти се идентични со податоци.
Ако ти рикне еден диск, на другиот ги имаш сите податоци и ќе ти бидат достапни за користење.
Sinology-то ќе ти јави дека има проблем со едниот диск и ќе треба да го смениш.
Ќе го клонира дискот со податоци на новиот и продолжуваш пак со RAID1.

 

[Oktar]

во која смисла? не сум сигурен зашто големината на дисковите би играла улога?

Ваљда дека на 10ТБ им треба многу подолго да се ископираат одколку на 2ТБ и во тој период од да речеме десетина саати постои шанси да ти цркне и дискот со податоците. Не е невозможно.

@Psycore јас мислам дека би идел со раид 5 на 4 диска, ама генерално заивиси и од потребите за простор, ако 20ТБ ти се доволни за наредните 5 години, тогаш 10ка. Дополнително, јас лично на Синологијата и закачив еден екстерен УСБ диск на кој ми стојат филмовите, апсолутно нема потреба за редундантност за нив, тој диск и да цркне... ние да сме здрави и живи, ќе си симнеме пак.

 

[gdamjan]

Ваљда дека на 10ТБ им треба многу подолго да се ископираат одколку на 2ТБ и во тој период од да речеме десетина саати постои шанси да ти цркне и дискот со податоците. Не е невозможно.

тоа е првиот sync - а ни тогаш

 

[Psycore]

во која смисла? не сум сигурен зашто големината на дисковите би играла улога?

RAID1 е full mirror, податоците се запишуваат паралелно на двата диска, скоро истовремено. Дури и да рокне некој од дисковите, другиот има све.

Oва го зборував за RAID5.
RAID rebuild failure chance calculator еве калкулатор за ризик.
RAID1 и RAID10 е секако нај-safe варијанта.

Иначе како што кажа Oktar, ќе терам до 20TB со RAID10, после ќе размислам дали ми требаат 30ТB (RAID5). Или ќе барам друго решение.

 

[Oktar]

тоа е првиот sync - а ни тогаш

Не е муабеот за првиот синк, муабетот е за кога ке цркне диск и ке го замениш со нов и ке треба да се прави рибилд.

 

[gdamjan]

добро ок.

пс.
само да потсетам, RAIDx било кој - не е решение за бекап на податоците туку за high-availability или перформанси.

 

[Oktar]

добро ок.

пс.
само да потсетам, RAIDx било кој - не е решение за бекап на податоците туку за high-availability или перформанси.

Бекап се знае, на лента!

 

[wolverine]

unRAID уште неделава имаат еднократни цени, од другата недела ја менуваат ценовната структура и почнува со претплата на годишно ниво. Тие што купиле до пред промена на цените ќе им важат лиценците цело време.

 

[Majestic]

unRAID уште неделава имаат еднократни цени, од другата недела ја менуваат ценовната структура и почнува со претплата на годишно ниво. Тие што купиле до пред промена на цените ќе им важат лиценците цело време.

Претпоставувам unRAID Basic лиценца е доволна како за почетник, + мотивација за конечно да се стави нога во selfhosted светот за кои се кандисувам веќе подолго време?

 

[wolverine]

Претпоставувам unRAID Basic лиценца е доволна како за почетник, + мотивација за конечно да се стави нога во selfhosted светот за кои се кандисувам веќе подолго време?

Повеќе од доволно јас мислам за NAS (до 6 дискови) и нема потреба од поголем сервер освен ако навистина сакаш да правиш нешто поголемо. Со Basic од старава ценовна структура ќе можеш да надоградуваш кон погорните планови без да те префрлат на претплата.

 

[Ervo]

Hardware: Synology NAS DS220+ / 10 GB RAM / 8TB Storage (за сега, понатаму планирам possible upgrade 16TB) / SHR Enabled No Protection for now (уште да ставам втор HDD, soon)

Да видиме и ваш dashboard, кој services користите, што идеи имате, ваш usage, etc.

Исто, дали има некој предлог за UPS? Maybe https://anhoch.com/product/599881049/ups-armac-home-hl850f-v2-850va-480w-2x-schuko-outlets-led иако не е дел од compatibility lists на официјална Synology страна. Некој искуства?

 

[Delicon]

Моменталниот Homepage dashboard. (треба уште малце да се досреди)

 

[Mao]

Моменталниот Homepage dashboard. (треба уште малце да се досреди)

Погледнете го атачментот 137736

Sto dashboard e ova? Od synology e ili nesto dr?


Испратено од iPhone преку IT.mk форум апликација

 

[Delicon]

Sto dashboard e ova? Od synology e ili nesto dr?


Испратено од iPhone преку IT.mk форум апликација

Home - Homepage

A modern, fully static, fast, secure, fully proxied, highly customizable application dashboard with integrations for over 100 services and translations into multiple languages.

gethomepage.dev

 

[Steff_92]

Дали некој успеал да инсталира Container Manager на постари Synology 213j или 215j што официјално не се поддржани?