RAID 6 bedeutet n+2. Das technische Minimum für zweifache Redundanz sind drei Datenträger. Natürlich ist das sehr ineffizient was das brutto-netto-Verhältnis an verfübarem Speicherplatz angeht - konnte aber je nach Situation dennoch früher Sinn machen. Konnte, weil man heute wegen der höheren Flexibilität und zusätzlicher Features in der Regel nur noch Softraids verwenden sollte, wie z.b. RAIDZ2, welches auch doppelte Redundanz bietet; ebenfalls ab drei Datenträgern.
@@elmariachi5133 Raid6 geht niemals mit nur 3 Festplatten. Mit 3 Festplatten bauste maximal nen Raid5. Bei Raid6 dürfen 2 Festplatten ausfallen ohne dass Daten verloren gehen. Lass bei nem Raid5 mal 2 Platten kaputt gehen, da haste gar nix mehr.
@@dosperado74 ..btw; Ist das Argument 1GB RAM pro 1TB Plattenspeicher nicht zumindest für den privaten Gebrauch längst Geschichte (?) klar, ZFS nutzt eben vorhandene RAM, was ja auch sinnvoll ist „brauchen“, werden die wenigsten wohl mehr als 16GB.
@@dosperado74 TrueNAS ist es für den Home-Server, gerade als Media-Library, nicht. Du willst nicht 8 Platten oder mehr "sinnlos" laufen lassen, nur weil du mal 3 Stunden einen Film schaust. Ein Cache mit ZFS für den schnellen Zugriff ja, aber auf dem Array definitiv nicht.
Die Platten brauchen ca. 3-5 Watt pro Stk. Im idle liegt der Server bei 80 W aktuell. Unter hoher Last konnte ich max. 140W messen bis jetzt. Da lässt sich aber auch noch was optimieren 👍
Hallo Leo. Tolles Projekt! Die spannende Frage dabei ist: was und wie sicherst Du die Daten. Ein NAS ist zwar redundant, aber gegen Blitzeinschlag, Netzteilüberspannung, Diebstahl und dergleichen machtlos. Insofern brauchst man eigentlich ja mindestens noch einen Offlinespeicher oder Cloudspeicher. Oder hoffst Du einfach das nix passiert?
Leo es wäre mega interessant, wenn du nach einem halben Jahr oder nach einem Jahr ein Update bringen könntest maybe Sachen die dich stören oder die du geändert hasst und natürlich den Speicherverbrauch das wäre auch eine gute Idee für ein YT Short, oder nicht?
Ein sehr cooles Projekt, habe auch einen unraid Server, aber komplett aus alten Festplatten und einem alten Rechner zusammengeschustert Ein Feedback zu deinem Schnitt hätte ich: diese ständigen Wisch Überblendungdungen, finde ich persönlich wahnsinnig anstrengend.
Cooler Server, hätte aber bei den SSDs extra NAS / Server SSDs genommen die für den Dauerbetrrieb ausgelegt sind. Habe die WD Red Nvme SSDs in meiner NAS drin.
Tolles Projekt. Hat mir gute Anregungen gebracht.. Aber wie sieht es mit dem Stromverbrauch aus ? Ich versuche meine Systeme in der Nacht auszuschalten. Das spart mir ca 10 Euro pro Monat. Da ich leider keinen Strom selber herstellen kann, ist mir der kostenoptimierte Betrieb wichtig.
Mega Cooles Video! Finde es cool, das du auch mal was mit Unraid machst. Jedoch würde ich dir von den SanDisk Fit USB Sticks als Boot-Drive abraten, da bei mir letztens dem Hitzetod getorben ist. Die werden sehr schnell sehr heiß und wenn die 24/7 laufen tut denen das nicht gut und machen früher oder später schlapp. Würde dir da eher zu anderen Sticks raten. Bei mit habe ich so nen Cruzer Blade von Sandisk, läuft seit Tag eins durch mit dem.
da verlässt man sich auf guten virenschutz und lässt sich bei hd ausfall informieren. dann austauschen, fertig. wichtige daten lagert man zusätzlich auf externe festplatten. geht bei mir seit 4 jahren problemlos... hatte nie ausfall.
Hallo, wäre an einer kleineren Version Interessiert. Auch die 12 Version gefunden die Ausreichend wäre. Wie kann ich das jetzt mit einem Nas verbinden, die 2x 4TB und 2X2TB hat ? Was passiert wenn ich auf´s Nas Kopiere, werden die Daten automatisch auf den Server geladen? grüße Bernhard
Interessantes Video, toll gemacht, vielen Dank. Welche Leistung gönnt sich das System im Idle-Zustand und wenn Du z.B. schnell durch ein Video scrollst? Es dürfte so 300W bis 600 W sein. Korrekt? Eine USV hast Du vermutlich auch installiert?
Ohne Optimierungen läuft das System im idle bei 80 W aktuell. Wenn Last auf das System kommt waren 140W das absolute maximum welches ich bis jetzt gemessen habe. Die HDDs brauchen im Schnitt 3-5W pro Platte. Ich werde noch etwas im BIOS rumspielen und ein paar ungenutzte Controller deaktivieren. Damit sollten man auch noch ein paar Watt rausholen 😅
Blöde Frage, ist es eine Option die Videos zu transkodieren auf h265? tdarr ist in der Lage die Videos so zu konvertieren das es einen massiven Speicherplatz Gewinn erzielen kann. Andererseits, wäre es auch möglich die Videos in Archive zu packen die komprimiert sind? Oder werden die Daten regelmäßig gebraucht. Das wäre so mein erster Ansatz gewesen wenn ich wüsste das der Hauptbestandteil meiner Daten aus Videos bestehen.
Achja und die USB Sticks die du gekauft hast habe ich auch benutzt gehabt. 2 Stück sind davon nach ca 1 Jahr jeweils abgeraucht und habe mir stattdessen einen empfohlenen Samsung Stick was im Forum gebannt wurde gegönnt. Die habe ich zwar bis jetzt 6 Monate aber es heißt das die längere Lebensdauer haben. Der Grund warum die abgeraucht sind liegt zum Teil aber auch daran das ich eine Zeit die Logs auf den Stick direkt geschrieben habe weil ich mit dem System Troubleshooting betreiben musste. Viel Erfolg mit dem NAS 👍🏼 cooles Video
Wenn 144TB zu unbeeindruckend klingen und man 440TB schreiben muss. Mit 24TB währen es sogar 600TB 23:30 du kannst dir mal die MTU anschauen 1500 ist sehr klein.
MTU 1500 ist ok, größere MTU aka Jumbo Frames nur bei großen Enterprise SANs mit Fibre-Channel nützlich mit vielen parallelen Zugriffen. Fürs Home-NAS bringts absolut keine Speed-Vorteile.
Super video! Hast du zufällig ein Link oder einen genaue Modellbezeichnung von dem HBA Controller? Bei 12:25 baust du noch eine Karte ein, ich nehme an das ist einen Netzwerkkarte? Welches Modell hast du hier verwendet? Danke schonmal und weiter so 👍
Klar! Hier der Link: www.haehnlein-it.com/host-bus-adapter/247/lenovo-430-16i/broadcom-lsi-9400-16i-sata/sas-hba-controller-raid-12gbps-pcie-x8-avago-it-fw Wichtig ist, dass die HBA Card mit einer IT-Firmware geflasht ist. Bei Haehnlein ist sie das.
Auf ein Erdungsband fürs Handgelenk wäre es bei dem Preis auch nicht mehr angekommen 😉. Aber tolles Projekt. Man sollte bei der Auswahl des Serverschranks darauf achten, dass er tief genug für das Plattengehäuse ist. Ich denke, 60 cm sollten es schon sein. Wenn man Platz hat auch mehr
60 reichen meist nicht mehr aus. Du musst ja auch bedenken, dass du in den 60er Schrank keine 60cm Tiefe einbauen kannst, meist muss man rund 15cm abziehen. D.h. maximale EInbautiefe wäre dann 45cm. Ich würde für die meisten Privaten Bereiche einen 80er Tiefe empfehlen wollen, dann bekommst 65cm Tiefe rein, da hast du schon eine große Auswahl an Gehäusen. Vieleschwören heut aber auf 1m Tiefe.... Irgendwie creepy sowas zu Hause hinzupacken :-D
Interessantes Video 👍... Könntest du vielleicht ein Update bringen in dem du vielleicht auf deine Einstellungen in Unraid eingehst? Grade das Thema mit deiner 10Gbit Leitung, weil du im Video sagst da könnte man noch optimieren. Oder wie hast du es mit dem Backup geregelt, oder wie machst du das mit dem verschieben von den Daten vom Cache, also wie ist der mover eingestellt..
Sehr gut gemacht. Ich hab auch ein Unraid laufen aber nicht mit der Speicherkapazität und nicht mit so neuer Hardware 🙂 Bei mir ist ein Xeon E5 2680 V4 mit 64GB Ram und 4x 16TB Exos X20 (auch rezertifiziert) im Einsatz Bei dem Bildspeicher wirst du bestimmt immich nutzen wollen oder? Ich habe eine Netxtcloud laufen und mache darüber meine Backups der Bilder von einem iPhone + Android Handy. Mich würde mal interessieren was für Docker du am Ende benutzt 🙃
Oh junge da bluten nicht nur die 17,77 auf dem konto sondern auch die gedanken was man damit machen könnte. sieht richtig gut aus muss ich ja mal als laie sagen.
Hi Leo, ein wirklich tolles Video zu deinem Speicherproblem. Mich würde noch interessieren, wie viel Strom (Watt) dein neuer Server im Idle und unter normaler Last verbraucht? Die Synology Diskstation würde ich an deiner stelle noch behalten (falls du die noch hast), da man diese gut als Backupserver nutzen kann. Ich habe auch einen unraid Server im betrieb und bin gerade mir dabei eine DS224+ anzuschaffen, damit ich meinen unraid Server damit sichern kann. Bei deiner Speichergröße könnte das natürlich etwas problematisch werden. Am besten schaust du dir zu diesem Thema den RUclips-Kanal AGTech an. :)
Danke für deine Nachricht! Im idle mit den Platten im Spin-Down liegt der Server aktuell bei ≈ 80 W... Das ist nicht ideal und lässt sich im Bios sicherlich noch fine tunen... Die integrierte LAN Schnittstelle, Audio driver etc. des Motherboards können auch noch deaktiviert werden. Da bin ich auch noch nicht ganz zufrieden aktuell. @AGTech ist dort wirklich ein Top Kanal der viel mehr Aufmerksamkeit verdient. Habe bei Ihm auch super viel gelernt! Aktuell habe ich tatsächlich alles verschlüsselt zu Google Drive gespiegelt. Bei aktuellen 120 EUR / Monat sollte ich mir das aber nochmal überlegen....😅😬
@@TipsTricksMore Vielen Dank für deine Antwort! 80W ist in Anbetracht der Hardware ok. Stellst du (wie du auch schon geschrieben hast) die "C-States" im Bios richtig ein und schaust mithilfe des Befehls "powertop" im unraid Terminal nach deinen C-States, kannst du sehen, wie gut deine CPU/Hardware im Stromsparmodus ist. Mit dem Befehl "powertop --auto-tune &>/dev/null" kannst du dann versuchen deinen Stromverbrauch vom deinem unraid Server zu optimieren. Schau dir aber zuerst den Beitrag vom user "mgutt" im unraid Forum an! Mithilfe von Powertop kannst du auch sehen, welches Hardwareteil deinen Server davon abhält höhere C-States (höhere C-States=mehr Potenzial zum Energiesparen) zu erreichen. Wenn du mehr zum Thema Servereffizienz herausfinden möchtest, kann ich den Kanal @WolfgangsChannel sehr empfehlen. Falls du Zukunft einen Backup-Server in baust, würde ich mich und vermutlich auch andere über ein Video darüber sehr freuen :D. Habe gerade vor zwei Tagen eine neue PV-Anlage mit 9,6kWh Batteriespeicher und einem Wechselrichter mit Notstrom bekommen. Der Wechselrichter soll laut SUNGROW in unter ~10-20ms komplett auf den Batteriespeicher umswitchen. Ich habe es leider noch nicht testen können, aber ggfs. kann man sich hierdurch eine USV für den unraid Server sparen. Falls du dazu auch ein Video machst, wäre ich (und vermutlich auch andere) sehr daran interessiert. Ich hoffe, ich konnte dir und anderen die diesen Kommentar lesen helfen 😀 Viele Grüße Clemens ✌
Es gab keinen bestimmten Grund, wenn ich ehrlich bin. Der Preis war attraktiv. Jetzt bei den Blackfriday angeboten wäre ich wahrscheinlich auf einen Samsung EVO gegangen...
Tolles Video, wenn auch für mich etwas überdimensioniert, aber ich mache ja auch keine Videos, für dich sicher gerade richtig. Solch ein Gehäuse finde ich echt stark, aber zu tief für meinen kleinen Serverschrank. Toll wäre es wenn du da vllt. eine kleine Unraid Videoreihe machst, dass mit den Bildern denke ich zielt auf Immich. Ich habe gerade auch einen kleinen Unraid aufgesetzt und warte auf sinkende Festplatten Preise, wollte mir zwei 20TB Toshiba holen, aber die sind recht teuer. Alo Danke für das Video und wenn es möglich ist gerne eine kleine Video Reihe zu Unraid, ich nutze übrigens schon die Beta 4
Also ich bin mir sicher inwiefern eine noch schnellere PCI 4.0 SSD sinnvoll gewesen wäre, ich kann nur sagen die Teile sind der Hammer. Oder is der mit den ganzen HDDs so ausgelastet, dass die Lanes eh kein 4.0 hergeben?
Wozu der riesen Cache wenn du fertig geschnittene Videos dann nur für „die Ewigkeit“ speichern willst?! Das kann doch dann auch einfach im Hintergrund gechillt passieren… Löst du die alten Server da jetzt auf und nutzt die Festplatten zusammen im neuen?
Bei 400 GB macht es schon einen Unterschied ob man mit ≈ 120MB/s oder ≈ 900MB/s die Daten überträgt. ≈ 55 Minuten vs. ≈ 8 Minuten Da mein Büro und Wohnort nicht am gleichen Standort sind, bin ich froh wenn der Daten-Dump am Abend möglichst schnell geht 😅 Genau, ich werde jetzt beide Server zusammenführen.
für um die 200€ bekommst Du schon einen gebrauchten DL380G9 mit 32G RAM als Basis. (Ohne Storage) Der Prozessor mag nicht der Burner sein, aber Du hast da ein feinabgestimmtes System mit Storagebackplane und integriertem HW-RAID, was die CPU massiv entlastet. Darüber hinaus hast Du die Möglichkeit für nicht allzuviel Geld auch Glas oder DAC anzuschliessen. Mit dem RAID hast du allerdings nur eine Sicherheit gegenüber systembedingen Datenverlusten. Was tust Du um Deine Daten gegen zB Malware oder einen Komplettausfall zu sichern?
Richtig. Die Exos sind für deutlich mehr Schreibleistung gemacht und haben eine längere Garantie. Der Nachteil ist, dass die Festplatten recht laut werden können. Iron Wolf haben eher was in kleinen NAS Systemen im Wohnraum oder PC zu suchen, wo Lautstärke eine Rolle spielt.
Hast du einen Tipp für ein Gehäuse, was max 50cm tief ist? Habe zu Hause nur ein 60iger Rack - wo die QNAPs mit kurzer Bautiefe wunderbar reinpassen... habe gerade ein QNAP TS-855eU zum testen da und bekommen 3000 Mbits im Read und 1600 im write mit 8x Exos 20 TB und 25GBE Mellanox Adaptern. SSD Cache kannst du vergessen - habe jeweils die gleichen Werte mit und ohne SSD sowohl unter QTS und QuTS Hero... Danke für das wunderbare Video :) LG Daniel.
habe gerade ein QNAP TS-855eU zum testen da und bekommen 3000 Mbits im Read und 1600 im write mit 8x Exos 20 TB und 25GBE Mellanox Adaptern. SSD Cache kannst du vergessen - habe jeweils die gleichen Werte mit und ohne SSD sowohl unter QTS und QuTS Hero...
kann man bei unraid auch ein normales RAID 6 bauen? Seperate Partätsfestplatten, finde ich persönlich nicht als sicher genug für Daten der Familie. Außerdem lässt sich ein RAID 6 ohne Probleme mit weiteren Festplatten erweitern. PS: Schönes Video!
@@TipsTricksMore also selbst, wenn dem so ist, kann man immer noch auf RAID 60 umschwenken. Wenn man einen entsprechenden Controller hat. Aber das einfache Schreiben von Unraid macht das ganze doch super langsam...zumindest hab ich das aus deinem Video so verstanden. Wenn das wirklich so gehandhabt wird wäre unraid für mich keine Option.
Der einfachste Weg wäre einen weiteren Nutzer anlegen und einen Ordner (User Share) erstellen, den du dann diesem Nutzer freigibst. Das ganze sind ein paar Klicks in der Unraid Oberfläche
Nice. Hab mich wegen dem Video jetzt für FANTEC 2564 mit 24x SATA/SAS Ports Controller entschieden. Günstiger und mehr Disks.... Warum ein 16port Controller bei 20 Einschüben? Ein 24 Port Non-Raid Controller gibts für gleiche Geld wie der 16port... Was egal ist wenn eh Unraid installiert wird.
Bin dabei. Nachdem meine Synology aus allen Nähten platzt, muss was größeres, flexibleres her. Was ich ein bisschen vermisse, sind Aussagen zum Energiebedarf. Noch gibt es leider keinen vergleichbare bezahlbare ARM Server Lösung. Oder doch? (Ich rede jetzt nicht vom Raspi)
Im idle liegt meine Config aktuell bei 80W. Hier lässt sich aber noch einiges übers BIOS optimieren. ARM kann man machen. Für mich war die iGPU im Intel ausschlaggebend für VMs und vor allem Plex transcoding 👍
Ich kenne kein Software RAID in dem ich sofern physisch noch ein Slot vorhanden ist keine HDD hinzufügen kann und den bestehenden Pool erweitern kann. Grade Synology und Qap machen das durch ihr GUI kinderleicht. Für mich wäre ein Grund für unraid die Art wie die Daten gespeichert werden. Da die Platten nicht in einem klassischen RAID sind verliere ich im Worst Case nur die Daten der defekten Platten und nicht wie bei einem RAID den ganzen Pool.
Hm also ich finde die Hardwarekomponenten nicht so dolle. Das case ist super! Aber ein Gaming Mainboard ist eher nicht als Servermainboard geeignet. Da solltest du lieber eins von z.bsp. von Supermicro oder so verwenden. Des weiteren einen günstigen gebrauchten stromsparende CPU wie den Xeon. Server CPU eben. Du baust in einem Server Gehäuse Gaming Komponenten ein. Das kannst du besser :-) die Karte für die Platten find ich super. Eine günstige Variante ist eine LSI 9340 die du in den IT Mode Flashen kannst. Dann baust du dir für unter 50€ eine Karte die vergleichbar mit einer IBM M1215 (weit über 100€) ist. Die Karte macht dann nichts anderes, als alle Festplatten einfach durchzureichen. Ideal für ein ZFS System. Unraid absolut empfehlenswert! RAM bitte einen mit ecc Speicher verwenden.
Danke für dein Feedback! Im Grunde bin ich da bei dir und ich hatte mich zwischenzeitlich auch mit richtigen Server Motherboards beschäftigt. Am Ende ist für mich aus preislichen Gründen und aufgrund der Intel CPU ein normales Motherboard geworden. Die Intel CPU habe ich auch nur wegen der tollen iGPU genommen, da diese zusammen mit Plex nur so durch transcodes fliegt! Das ist schon bei meinem vorherigen i3 beindruckend gewesen. 3-5 UHD Streams auf 1080p sind gar kein Problem und das ohne externe GPU bei moderatem Energieverbrauch. Das mit der LSI 9340 ist ein sehr guter Tipp!
@@TipsTricksMore , gebrauchte Serverboards sind mehr(!) als ausreichend und auch nicht teurer. V.a. ist RAM (RDIMMs) als Gebrauchtware sehr guenstig. Ich habe hier mehrere Supermicro X9SRi-F (Stand 2012) seit 2020 im gewerblichen Einsatz. Heute wuerde ich natuerlich auf X10 oder X11 gehen. Aber an sich ist alles, was die letzten 6+ Jahre auf den Markt kam, fuer so einen Einsatz massiv ueberdimensioniert.
Auch Gaming Mainboards halten gerne ewig. Viel schlimmer finde ich den Verzicht auf ECC RAM, denn das wird irgendwann zu korrupten Daten führen. Ist zwar stark von der Umgebung abhängig, aber im Schnitt kann man mit mindestens einem fehlerhaften Bit pro Stunde pro Gigabyte rechnen. In stärker belasteten Umgebungen habe ich auch schon das 8-fache davon gesehen und sogar schon einen double bit flip (im besagten System statistisch gesehen 1x alle 70 Jahre) miterlebt. All das wird ohne ECC RAM fehlerhaft auf die Festplatten geschrieben und führt mit ZFS sogar schleichend zur Datenkorruption.
Ich habe auch einen Mini Server mit nur 2 SSD und brauche 9 Watt Leistung. Will nicht wissen was der Server an Strom Frist. Habe meinen Mini Server PC gebraucht für 20 € von einer Firma bekommen (ohne Festplatten und Rammspeicher) Find es cool, aber die Stromrechnung will ich nicht sehen.
Top Video mal wieder, weiter so👍 Hab mich während dem schauen gefragt wie du des alles schaffst Firma, RUclips und so ein umfangreiches Fachwissen in allen möglichen Technischen Bereichen, Respekt!
Ich finde es sehr nice das du ein Video zu Unraid machst, nutze dies auch schon länger. Ich hoffe du wirst noch einzelne Ablegervideos machen über Docker, die du installierst und nutzt und auch über VM´s die du erstellst und nutzt! Ich habe aber auch zwei wichtige Kritikpunkte: 1. In deinem Video verkaufst du das Array als Datensicher und das ist es nur bedingt! Du hast zwar ein kleines Sicherungsnetz wenn eine Platte ausfällt, aber das Array kann niemals ein Backup ersetzen da es immer zu einem Hardwaredefekt kommen kann oder auch zu einem simplen Datenverlust (Das Array bietet keine Rückholfunktion von selbst gelöschten Daten) ! Ein Backup stellt sicher, dass du eine sichere Kopie deiner Daten an einem anderen Ort, außerhalb des Arrays hast. Daher ist es ganz wichtig das du dich mit dem Thema nochmal auseinander setzt und vielleicht auch ein Video dazu machst, wie du das Backup umgesetzt hast. 2. Ist es wichtig das du EEC-Ram in einem Server verwendest, grade wenn es um sensible Daten geht, wie Dokumente oder auch Videoschnitt etc. EEC-Ram kann Einzelbitfehler erkennen und korrigieren. Das ist in Servern besonders wichtig, da Datenintegrität und Zuverlässigkeit oberste Priorität haben. Einzelbitfehler können durch elektromagnetische Störungen, kosmische Strahlung oder physische Beschädigung auftreten und führen zu Datenkorruption oder Systemabstützen. EEC-Ram korrigiert diese Fehler automatisch und macht dein System zuverlässiger und stabieler und schützt somit deine Daten vor Datenverlust durch digitale Beschädigung. VG
Hey wollte kurz was fragen und sagen: 1. Der cpu Kühler ist viel zu klein. Schau was der cpu für TDP wert hat und hole einen wo etwas 30% stärker ist als cpu hitze. Der cpu wird dir danken. 2. In welchen vormalt hast du bei Muterplatine für M.2 eingestellt? Standard wäre normalerweise S-ATA. 3. Wenn du deine M.2 über längeren zeit ca. 5 min auf fulle Power betreibst kommt er auf über 80°C bau auf die M.2 ein aktiver kühler. Habe selber ein M.2 mit 7GB/S und wen es bestimmte Programme an sind kommt er auf 80°C und hast blauer Bildschirm. Wäre ergelisch für dich wenn es dan ausgeht. 4. Jeder sagt da was anderes wegen Wärmeleitpaste verteilen, mach lieber gleichmesig auf den cpu Streicheln.
Was soll er da beim Mainboard einstellen? M.2 sind mechanisch kodiert, das erkennt das Board sofern in den Slot eine NVme oder SATA einbauen kannst und sofern es im UEFI einen Punkt gibt wo man das manuell erzwingen kann, steht dieser per default erstmal auf Auto. Aktiver Kühler? Das sind keine PCIe 5.0 Nvme SSDs oder eine der wenigen "schlechten" PCIe 4.0 deren Controller selbst mit passiv Kühler überhitzen. Das ist eine QLC SSD die nur knapp über 3GB/s kann, die wird nie heiß genug. Da hat man beim Beschreiben eher das Problem, dass irgendwann die Geschwindigkeit auf HDD Speed (unter 100 mb/s) einbricht weil der Pseudo SLC Cache voll ist. Über 10Gbit LAN kommt er aber eh nur an die 1GB/s beim Schreiben und wenn dann später Unraid die Dateien von den NVme auf die HDDs schiebt oder kopiert kommen die beim Lesen auch nicht an die 3 GB/s ran. Sprich bei seinen SSDs können nur zwei Probleme auftreten. Problem 1 Einbruch der Geschwindigkeit wenn pSLC Cache voll: Kann er umgehen wenn er den Unraid Cache so einstellt, dass die Daten nicht ewig auf den NVme gammeln. Denn wenn die SSD zu 80% voll ist hat diese nur noch nen pSLC Cache von ca. 60-70 GB dann bricht sie auf unter 100mb/s ein. Aber so wie es im Video rüberkam lässt er die da sowieso nicht ewig auf den SSDs liegen. Problem 2 die niedrigen 220TB TBW der SSDs. reicht zwar um das derzeitige NAS fast zweimal komplett zu füllen, aber dennoch glaube ich die schlechteste von den "Marken" SSDs. Wenn er nicht viel Daten hin und her schuppst sollte es dennoch reichen. Darfst halt nur nicht zig Docker und VMs auch noch drauf rumrödeln lassen.
Toller Server, aber warum alle Festplatten von einer Marke? Wenn alle gleichzeitig neu anlaufen ist es sehr wahrscheinlich, dass nach ein paar Jahren mehrere Festplatten gleichzeitig ausfallen können.
Genau, wozu löschen, wenn man viel mehr Speicher kaufen kann! So habe ich das auch gemacht! 😂Ich habe aber nicht eine einzige deiner Komponenten gekauft außer die Festplatten!
Echt ein cooler Server, aber als IT'ler finde ich es gerade bei soeinem eh schon teuren Gerät schade das dort kein Windows Server drauf läuft. Ist vielleicht für den Heimgebrauch mit möglichen AD, Printserver etc zu viel, aber irgendwie halt auch cooler Spielkram für Nerds. Aber wenn es dich happy macht, ist das natürlich auch inordnung. Sonst cooles Projekt und cooles Video
Einen Server mit Gaming-Mainboard ohne IPMI, nicht-ECC Speicher und einem i5, der nativ schon keine ECC-Fähigkeit besitzt, zu konfigurieren halte ich für sehr fragwürdig und nicht empfehlenswert.
Hallo Leo, und PV / PC-Freunde, dieses wird mehrere von euch interessieren: 😷 🧐 ☹ 🥸 😇 Zur Inspiration: PV Nachtspeicher Strom HALBIEREN am Gaming PC, Server, Miner, TV... & damit auch Stromkosten. Ich umgehe Inverter + PC Netzteil, über 12V DC-Bypass. So spare ich fast 40- 50%, weil ich gleich 2x Wandlungs-Verluste umgehe. Das originale PC Netzteil läuft dabei im Leerlauf mit, und übernimmt erst, wenn der Laderegler Ausgang den PC Strom kappt... Bei einer 24V Split-Klimaanlage / Wärmepumpe, da macht das noch mehr Sinn diesen Wechselrichter zu umgehen, um 25% Heizkosten zu sparen (LKW-Zubehör). 24V Kühlschrank, 24V @250W Wasserkocher gibt's ja schon. Die Waschmaschine, Wasserkocher, E-Heizung, Bügeleisen, Backofen, ... u.v.m. habe ich auch von 2500W auf Balkonkraftwerk-freundliche 200W... 600W herunter gedimmt. Mehr Videos zu diesen Themen auf meinem RUclips - Kanal. Like + Abo nicht vergessen, denn da kommt noch einiges mehr von mir. 🥳 🤒 MfG Christian
Unraid kann man auch auf eine nvme Flaschen über einen Marken Usb3 Adapter, dann läuft die auch normal im PC als Nvme!! Ich hatte auch erst USB-Sticks benutzt, und Monate später gab's Probleme. Seit ich das auf Nvme habe, gab es keine Probleme mehr. Selbiges geht auch mit Sshd, SSD, und sogar Hdds.😊 Alles hält länger als ein USB Stick.
Nein, kann man nicht. Die USB Stick ID Nummer brauchts als Identifier. Es kommt nur auf den Stick an, da gibts auch Endurance Sticks. Ein Backup der Installation extern ist eh Pflicht.
@@TipsTricksMore Jep, besser ist das. ;) Im Prinzip sind Festplatten Verbrauchsgüter. Wenn man gebraucht kauft, hat man weniger "Lebenszeit" zum Verbrauchen vor dem unvermeidlichen Ausfall. Ob sich da dann der Preis rentiert? Häufig nicht.
Ich wäre mit AMD gegangen, weil man für die mega günstig Server Boards bekommt, die dann auch Features wie IPMI oder BMC haben worüber du dann eine KVM hast. Beispiel ( GIGABYTE MC12-LE0 )
Also als Erstes musst du nicht für jede Kleinigkeit wie ein BIOS update oder einer BIOS Einstellung einen Monitor anstecken. Zweitens haben Server Boards eigenes Monitoring mit Logs, die auch gehen, wenn das OS abgestützt ist, du siehst auch welche Hardware defekt ist, weil die Managementoberflächen ( BMC / IPMI / ILO /usw) Unabhängig sind. Drittens diese Boards sind nicht wirklich teuer, hab mein GIGABYTE MC12-LE0 damals für 50 euro neu bekommen. Wenn man den Luxus eines Servermainboards noch nie hatte, verstehe ich das man das für unnötig hält, aber ich muss sagen das es mir schon oft Zeit und nerven gespart hat vor allem, wenn in seinem Rack mehr als ein Server ist. (und Server haben einen Grafik-Chip auf dem Mainboard, brauchen also weder iGPU noch normale GPU)
Ist der Pool in Unraid mit RAID 6 konfiguriert? Ich vermute, dass dies nicht der Fall ist, da anscheinend keine zweite Paritätsplatte genutzt wird. Ich würde dir empfehlen, dich einmal mit dem Thema 'Bit Rot' zu beschäftigen. Ohne geeignete Maßnahmen zur Sicherstellung der Datenintegrität könnten Daten nach einigen Jahren teilweise unbrauchbar werden und wären unter Umständen nicht mehr wiederherstellbar.
Nettes Video - aber sorry - im Vergleich zu einem echten Storage mit eigenen redundanten StorageControllern ist dieses Unraid-Gedöns langfristig nichts anderes als ein Datengrab... Nix mit Hotplug - nix mit Autorestore.... Viel Spaß wenn sich da mal was beim zfs verabschiedet... Wünsch ich Dir zwar nicht - ist aber vorhersehbar - lieber ein altes IBM DS FC kaufen und ewig Ruhe haben - Liebe Grüße aus Niederösterreich ! Edit: Cach ohne Stützakku ist der vorprogrammierte Datentot bei Stromausfall....
Alles gut und recht mein Ding wers nicht, ich sag nur eines, viel Spass bei der Reinigung sag wir mal so nach einem halben Jahr ist das Ding so zu das du es wieder auseinander nehmen muss und dann kann der Spass beginnen, und wer jetzt nur alle halb Jahre der irrt, weil sich nicht alles reinigen last hängt der Staub genau dort an und wie von Zauberhand musst du das Teil wieder reinigen, dazu hätte ich kein Bock da kann ich mir besseres vorstellen, ja man könnte die Anlage so verbauen das diese auch mit Filtern ausgerüstet werden kann, ich sagte ja man könnte, aber jetzt mal ehrlich wer hat die Zeit das Geld das er oder sie einfach zum Fenster rausschmeissen könnte, das ist wieder dieses Word, man könnte! Wer dieses Wort man könnte sagt sagt es nur aber macht es nie in seinem Leben, es würde mich persönlich interessieren viele da mit reden und das Wort man könnte sagen, aber weder das eine noch das andere haben, ich sag’s euch wie’s iss 1 Prozent können es die restlichen 99 Prozent wollen nur dabei sein und haben ihr Wissen von Google oder Chatgpt was eigentlich das selbe gelernt, doch können das diese 99 Prozent es wirklich? Eher nicht lol 😂
hähh? ausser staub habe ich nicht wirklich verstanden, was du uns sagen möchtest Bei mir läuft sowas ähnliches seit 4 jahren. und da habe ich noch wie was entstaubt
![BLACK BAG - Official Trailer [HD] - Only in Theaters March 14](http://i.ytimg.com/vi/Du0Xp8WX_7I/mqdefault.jpg)
14:43 Sorry fürs Klugscheißen.. Bei Raid 6 benötigt man mindestens 4 Festplatten ^^
RAID 6 bedeutet n+2. Das technische Minimum für zweifache Redundanz sind drei Datenträger. Natürlich ist das sehr ineffizient was das brutto-netto-Verhältnis an verfübarem Speicherplatz angeht - konnte aber je nach Situation dennoch früher Sinn machen. Konnte, weil man heute wegen der höheren Flexibilität und zusätzlicher Features in der Regel nur noch Softraids verwenden sollte, wie z.b. RAIDZ2, welches auch doppelte Redundanz bietet; ebenfalls ab drei Datenträgern.
@@elmariachi5133 Raid6 geht niemals mit nur 3 Festplatten. Mit 3 Festplatten bauste maximal nen Raid5. Bei Raid6 dürfen 2 Festplatten ausfallen ohne dass Daten verloren gehen. Lass bei nem Raid5 mal 2 Platten kaputt gehen, da haste gar nix mehr.
@@elmariachi5133 Rai6 sind 4 Platten minimum. Dauert nicht mal ne Minute das nachzugucken
Speicher ist wie Hubraum.
Lässt sich nur durch noch mehr Speicher ersetzen. 😂
So ist es 😅😂
MIT ZFS in Truenas als Beispiel kann man mittlerweile einzelne Festplatten zu einem RAID hinzufügen, ohne ein neues RAID zu bauen
Das wusste ich gar nicht 👍 Danke für den Hinweis!
Ja, ZFS ist the Way-To-Go, man sollte aber mind. 16GB RAM dafür haben.
@@dosperado74 ..btw; Ist das Argument 1GB RAM pro 1TB Plattenspeicher nicht zumindest für den privaten Gebrauch längst Geschichte (?) klar, ZFS nutzt eben vorhandene RAM, was ja auch sinnvoll ist „brauchen“, werden die wenigsten wohl mehr als 16GB.
@@dosperado74 ja am besten sogar noch mehr das Ding ist richtig hungrig
@@dosperado74 TrueNAS ist es für den Home-Server, gerade als Media-Library, nicht. Du willst nicht 8 Platten oder mehr "sinnlos" laufen lassen, nur weil du mal 3 Stunden einen Film schaust. Ein Cache mit ZFS für den schnellen Zugriff ja, aber auf dem Array definitiv nicht.
Cooles Video! Tolles Rack 👌🏻
Allgemein der Stromverbrauch mit den 8 exos HDDs wäre interessant…!
Die Platten brauchen ca. 3-5 Watt pro Stk.
Im idle liegt der Server bei 80 W aktuell. Unter hoher Last konnte ich max. 140W messen bis jetzt. Da lässt sich aber auch noch was optimieren 👍
@@TipsTricksMoredas ist für das Monster n guter Wert..
Cool
Cooles Projekt 👍😎 interessant umgesetzt 👍💻🖖
Mein erstes Video von Dir. Find ich super wie Du das gemacht hast. Schaue mir jetzt mal an was sonst noch so da ist :-) freu mich drauf.
Mega! Das freut mich sehr 🙏
Hallo Leo. Tolles Projekt! Die spannende Frage dabei ist: was und wie sicherst Du die Daten. Ein NAS ist zwar redundant, aber gegen Blitzeinschlag, Netzteilüberspannung, Diebstahl und dergleichen machtlos. Insofern brauchst man eigentlich ja mindestens noch einen Offlinespeicher oder Cloudspeicher. Oder hoffst Du einfach das nix passiert?
👍 Sieht gut aus, wie hoch ist denn der Stromverbrauch?
Die Frage hab ich mir auch gestellt.
Eine frage, wie viel kostet dich dieser nas server insgesamt (strom-technisch)
Leo es wäre mega interessant, wenn du nach einem halben Jahr oder nach einem Jahr ein Update bringen könntest maybe Sachen die dich stören oder die du geändert hasst und natürlich den Speicherverbrauch das wäre auch eine gute Idee für ein YT Short, oder nicht?
Ein sehr cooles Projekt, habe auch einen unraid Server, aber komplett aus alten Festplatten und einem alten Rechner zusammengeschustert
Ein Feedback zu deinem Schnitt hätte ich: diese ständigen Wisch Überblendungdungen, finde ich persönlich wahnsinnig anstrengend.
Ich möchte das auch machen. Hast du auch ein Cash benutzt?
ein like allein wein der anfang schon lustig war :)
was meinen sie dazu ein meiner upgrade sinnvoll?
Cooler Server, hätte aber bei den SSDs extra NAS / Server SSDs genommen die für den Dauerbetrrieb ausgelegt sind. Habe die WD Red Nvme SSDs in meiner NAS drin.
Wie hoch ist der Stromverbrauch?
Die schönen 12GB RAM wer kennt sie nicht😅. Trotzdem ein sehr spannendes Video.
Jo 😅 Da wer der Kopf mal wieder ausgeschaltet beim sprechen 😂
Also Gaming Mainboard und kein ECC Ram. Also wenn man schon so groß auffährt hätte ich gleich was ordentliches gemacht.
Tolles Projekt. Hat mir gute Anregungen gebracht.. Aber wie sieht es mit dem Stromverbrauch aus ? Ich versuche meine Systeme in der Nacht auszuschalten. Das spart mir ca 10 Euro pro Monat. Da ich leider keinen Strom selber herstellen kann, ist mir der kostenoptimierte Betrieb wichtig.
consumer ssds zum kaputt schreiben als cache... ?
Lieber länger, dafür aber ausführlich ❤
Du sagst bei 02:00 , dass du 12GB RAM einbaust. Da bin ich direkt zusammengeschreckt
Ich auch im Schnitt 😂😅
@@TipsTricksMore
32 GB in der Hand gehalten, 12 GB gesagt 🤣🤣🤣
Mega Cooles Video! Finde es cool, das du auch mal was mit Unraid machst. Jedoch würde ich dir von den SanDisk Fit USB Sticks als Boot-Drive abraten, da bei mir letztens dem Hitzetod getorben ist. Die werden sehr schnell sehr heiß und wenn die 24/7 laufen tut denen das nicht gut und machen früher oder später schlapp. Würde dir da eher zu anderen Sticks raten. Bei mit habe ich so nen Cruzer Blade von Sandisk, läuft seit Tag eins durch mit dem.
Cooles Projekt, werde ich (in kleiner) nachbauen. Aber sag mal, wohast du die Festplatten gekauft?
kennen sie Festplatten Mining?
Ich frage mich nur wie du 125 TB oder den Endausbau von 440 TB sicherst weil Raid xx ist keine Sicherung …?
da verlässt man sich auf guten virenschutz und lässt sich bei hd ausfall informieren. dann austauschen, fertig.
wichtige daten lagert man zusätzlich auf externe festplatten.
geht bei mir seit 4 jahren problemlos... hatte nie ausfall.
Profi´s nehmen LTO dafür.
Sehr schönes Video😊 hast du echt gut gemacht da kannst du stolz drauf sein. Ich versuche das Teil mal in klein für mich zu bauen.
Danke für dein Feedback 😊👍 Mache das auf jeden Fall! Gerade alte ausrangierte PCs eignen sich wunderbar für sowas 👍
Hallo, wäre an einer kleineren Version Interessiert. Auch die 12 Version gefunden die Ausreichend wäre. Wie kann ich das jetzt mit einem Nas verbinden, die 2x 4TB und 2X2TB hat ? Was passiert wenn ich auf´s Nas Kopiere, werden die Daten automatisch auf den Server geladen? grüße Bernhard
Interessantes Video, toll gemacht, vielen Dank.
Welche Leistung gönnt sich das System im Idle-Zustand und wenn Du z.B. schnell durch ein Video scrollst?
Es dürfte so 300W bis 600 W sein. Korrekt?
Eine USV hast Du vermutlich auch installiert?
Ohne Optimierungen läuft das System im idle bei 80 W aktuell. Wenn Last auf das System kommt waren 140W das absolute maximum welches ich bis jetzt gemessen habe.
Die HDDs brauchen im Schnitt 3-5W pro Platte.
Ich werde noch etwas im BIOS rumspielen und ein paar ungenutzte Controller deaktivieren. Damit sollten man auch noch ein paar Watt rausholen 😅
Sehr gutes video
Backupkonzept nicht vergessen. Wenn der Controller mal hops geht, dann sind auch trotz RAID alle Daten unwiederbringlich weg :-)
Blöde Frage, ist es eine Option die Videos zu transkodieren auf h265? tdarr ist in der Lage die Videos so zu konvertieren das es einen massiven Speicherplatz Gewinn erzielen kann.
Andererseits, wäre es auch möglich die Videos in Archive zu packen die komprimiert sind? Oder werden die Daten regelmäßig gebraucht.
Das wäre so mein erster Ansatz gewesen wenn ich wüsste das der Hauptbestandteil meiner Daten aus Videos bestehen.
Achja und die USB Sticks die du gekauft hast habe ich auch benutzt gehabt. 2 Stück sind davon nach ca 1 Jahr jeweils abgeraucht und habe mir stattdessen einen empfohlenen Samsung Stick was im Forum gebannt wurde gegönnt. Die habe ich zwar bis jetzt 6 Monate aber es heißt das die längere Lebensdauer haben.
Der Grund warum die abgeraucht sind liegt zum Teil aber auch daran das ich eine Zeit die Logs auf den Stick direkt geschrieben habe weil ich mit dem System Troubleshooting betreiben musste.
Viel Erfolg mit dem NAS 👍🏼 cooles Video
Der kleine Lüfter an dem LSI, welcher ist das? Und welche Kabel braucht man da nun vom LSI zum HDD komplex? Ansonsten, tolles Video
Das ist für private Sachen schon ziemlich monströs. Wie handelst du Backups?
Kleine Korrektur: Ein richtiges Raid 5/6 mit einem Hardware Raid Controller kann unter GPT beliebig um HDDs erweitert werden😀👍
Wenn 144TB zu unbeeindruckend klingen und man 440TB schreiben muss.
Mit 24TB währen es sogar 600TB
23:30 du kannst dir mal die MTU anschauen 1500 ist sehr klein.
MTU 1500 ist ok, größere MTU aka Jumbo Frames nur bei großen Enterprise SANs mit Fibre-Channel nützlich mit vielen parallelen Zugriffen. Fürs Home-NAS bringts absolut keine Speed-Vorteile.
Cooles Projekt, wie ist den der Stromverbrauch im idle des Servers?
Gute Idee, nur hätte er für das Geld etwas besseres gebrauchtes bekommen von HP und noch die bessere Qualität.
Tolles Video! Wie ist der Stromverbrauch:D?
Super video! Hast du zufällig ein Link oder einen genaue Modellbezeichnung von dem HBA Controller? Bei 12:25 baust du noch eine Karte ein, ich nehme an das ist einen Netzwerkkarte? Welches Modell hast du hier verwendet? Danke schonmal und weiter so 👍
Klar! Hier der Link: www.haehnlein-it.com/host-bus-adapter/247/lenovo-430-16i/broadcom-lsi-9400-16i-sata/sas-hba-controller-raid-12gbps-pcie-x8-avago-it-fw
Wichtig ist, dass die HBA Card mit einer IT-Firmware geflasht ist. Bei Haehnlein ist sie das.
Was für ein Lüfterchen hast du denn da auf die HBA Karte geklemmt? Muss ich mir auch zulegen, die passive Kühlung bei meinem HBA ist Murx. :o
Gute Frage, würde ich auch gerne wissen ;-)
@@user-ql1rd5pf9k Sieht nach einem Noctua 40mm-Lüfter aus.
Auf ein Erdungsband fürs Handgelenk wäre es bei dem Preis auch nicht mehr angekommen 😉. Aber tolles Projekt. Man sollte bei der Auswahl des Serverschranks darauf achten, dass er tief genug für das Plattengehäuse ist. Ich denke, 60 cm sollten es schon sein. Wenn man Platz hat auch mehr
60 reichen meist nicht mehr aus. Du musst ja auch bedenken, dass du in den 60er Schrank keine 60cm Tiefe einbauen kannst, meist muss man rund 15cm abziehen. D.h. maximale EInbautiefe wäre dann 45cm. Ich würde für die meisten Privaten Bereiche einen 80er Tiefe empfehlen wollen, dann bekommst 65cm Tiefe rein, da hast du schon eine große Auswahl an Gehäusen. Vieleschwören heut aber auf 1m Tiefe.... Irgendwie creepy sowas zu Hause hinzupacken :-D
Interessantes Video 👍... Könntest du vielleicht ein Update bringen in dem du vielleicht auf deine Einstellungen in Unraid eingehst? Grade das Thema mit deiner 10Gbit Leitung, weil du im Video sagst da könnte man noch optimieren. Oder wie hast du es mit dem Backup geregelt, oder wie machst du das mit dem verschieben von den Daten vom Cache, also wie ist der mover eingestellt..
Sehr gut gemacht. Ich hab auch ein Unraid laufen aber nicht mit der Speicherkapazität und nicht mit so neuer Hardware 🙂 Bei mir ist ein Xeon E5 2680 V4 mit 64GB Ram und 4x 16TB Exos X20 (auch rezertifiziert) im Einsatz Bei dem Bildspeicher wirst du bestimmt immich nutzen wollen oder? Ich habe eine Netxtcloud laufen und mache darüber meine Backups der Bilder von einem iPhone + Android Handy.
Mich würde mal interessieren was für Docker du am Ende benutzt 🙃
Oh junge da bluten nicht nur die 17,77 auf dem konto sondern auch die gedanken was man damit machen könnte.
sieht richtig gut aus muss ich ja mal als laie sagen.
Hi Leo, ein wirklich tolles Video zu deinem Speicherproblem. Mich würde noch interessieren, wie viel Strom (Watt) dein neuer Server im Idle und unter normaler Last verbraucht? Die Synology Diskstation würde ich an deiner stelle noch behalten (falls du die noch hast), da man diese gut als Backupserver nutzen kann. Ich habe auch einen unraid Server im betrieb und bin gerade mir dabei eine DS224+ anzuschaffen, damit ich meinen unraid Server damit sichern kann. Bei deiner Speichergröße könnte das natürlich etwas problematisch werden. Am besten schaust du dir zu diesem Thema den RUclips-Kanal AGTech an. :)
Danke für deine Nachricht!
Im idle mit den Platten im Spin-Down liegt der Server aktuell bei ≈ 80 W... Das ist nicht ideal und lässt sich im Bios sicherlich noch fine tunen... Die integrierte LAN Schnittstelle, Audio driver etc. des Motherboards können auch noch deaktiviert werden. Da bin ich auch noch nicht ganz zufrieden aktuell. @AGTech ist dort wirklich ein Top Kanal der viel mehr Aufmerksamkeit verdient. Habe bei Ihm auch super viel gelernt!
Aktuell habe ich tatsächlich alles verschlüsselt zu Google Drive gespiegelt. Bei aktuellen 120 EUR / Monat sollte ich mir das aber nochmal überlegen....😅😬
@@TipsTricksMore Vielen Dank für deine Antwort!
80W ist in Anbetracht der Hardware ok. Stellst du (wie du auch schon geschrieben hast) die "C-States" im Bios richtig ein und schaust mithilfe des Befehls "powertop" im unraid Terminal nach deinen C-States, kannst du sehen, wie gut deine CPU/Hardware im Stromsparmodus ist.
Mit dem Befehl "powertop --auto-tune &>/dev/null" kannst du dann versuchen deinen Stromverbrauch vom deinem unraid Server zu optimieren. Schau dir aber zuerst den Beitrag vom user "mgutt" im unraid Forum an! Mithilfe von Powertop kannst du auch sehen, welches Hardwareteil deinen Server davon abhält höhere C-States (höhere C-States=mehr Potenzial zum Energiesparen) zu erreichen.
Wenn du mehr zum Thema Servereffizienz herausfinden möchtest, kann ich den Kanal @WolfgangsChannel sehr empfehlen.
Falls du Zukunft einen Backup-Server in baust, würde ich mich und vermutlich auch andere über ein Video darüber sehr freuen :D.
Habe gerade vor zwei Tagen eine neue PV-Anlage mit 9,6kWh Batteriespeicher und einem Wechselrichter mit Notstrom bekommen. Der Wechselrichter soll laut SUNGROW in unter ~10-20ms komplett auf den Batteriespeicher umswitchen. Ich habe es leider noch nicht testen können, aber ggfs. kann man sich hierdurch eine USV für den unraid Server sparen. Falls du dazu auch ein Video machst, wäre ich (und vermutlich auch andere) sehr daran interessiert.
Ich hoffe, ich konnte dir und anderen die diesen Kommentar lesen helfen 😀
Viele Grüße Clemens ✌
Wieso hast du dich für eine QLC SSD entschieden? Die Schreibrate der P3 bricht meiner Erfahrung nach relativ früh ein.
Es gab keinen bestimmten Grund, wenn ich ehrlich bin. Der Preis war attraktiv. Jetzt bei den Blackfriday angeboten wäre ich wahrscheinlich auf einen Samsung EVO gegangen...
Tolles Video, wenn auch für mich etwas überdimensioniert, aber ich mache ja auch keine Videos, für dich sicher gerade richtig. Solch ein Gehäuse finde ich echt stark, aber zu tief für meinen kleinen Serverschrank.
Toll wäre es wenn du da vllt. eine kleine Unraid Videoreihe machst, dass mit den Bildern denke ich zielt auf Immich. Ich habe gerade auch einen kleinen Unraid aufgesetzt und warte auf sinkende Festplatten Preise, wollte mir zwei 20TB Toshiba holen, aber die sind recht teuer.
Alo Danke für das Video und wenn es möglich ist gerne eine kleine Video Reihe zu Unraid, ich nutze übrigens schon die Beta 4
Also ich bin mir sicher inwiefern eine noch schnellere PCI 4.0 SSD sinnvoll gewesen wäre, ich kann nur sagen die Teile sind der Hammer.
Oder is der mit den ganzen HDDs so ausgelastet, dass die Lanes eh kein 4.0 hergeben?
Hat mir gefallen, bin selber ein Bastler 😊
Baue lieber, alles selber.🫡
Wozu der riesen Cache wenn du fertig geschnittene Videos dann nur für „die Ewigkeit“ speichern willst?! Das kann doch dann auch einfach im Hintergrund gechillt passieren…
Löst du die alten Server da jetzt auf und nutzt die Festplatten zusammen im neuen?
Bei 400 GB macht es schon einen Unterschied ob man mit ≈ 120MB/s oder ≈ 900MB/s die Daten überträgt. ≈ 55 Minuten vs. ≈ 8 Minuten
Da mein Büro und Wohnort nicht am gleichen Standort sind, bin ich froh wenn der Daten-Dump am Abend möglichst schnell geht 😅
Genau, ich werde jetzt beide Server zusammenführen.
@ als ob du nachts dein Mac aus machst ;P
für um die 200€ bekommst Du schon einen gebrauchten DL380G9 mit 32G RAM als Basis. (Ohne Storage)
Der Prozessor mag nicht der Burner sein, aber Du hast da ein feinabgestimmtes System mit Storagebackplane und integriertem HW-RAID, was die CPU massiv entlastet.
Darüber hinaus hast Du die Möglichkeit für nicht allzuviel Geld auch Glas oder DAC anzuschliessen.
Mit dem RAID hast du allerdings nur eine Sicherheit gegenüber systembedingen Datenverlusten.
Was tust Du um Deine Daten gegen zB Malware oder einen Komplettausfall zu sichern?
War die Segate iron wolf Serie nix oder warum eine andere Segate Serie?
Exos ist hoeherwertig (Data Center) und gleichzeitig billiger (als Neuware)
Richtig. Die Exos sind für deutlich mehr Schreibleistung gemacht und haben eine längere Garantie. Der Nachteil ist, dass die Festplatten recht laut werden können. Iron Wolf haben eher was in kleinen NAS Systemen im Wohnraum oder PC zu suchen, wo Lautstärke eine Rolle spielt.
Die nvme's werden das 10 Gbps LAN auf jeden Fall ausreizen. Aber das LAN eben nicht die SSD's ;)
So ist es. Das habe ich auch schon gemerkt und nun über 25GbE nachgedacht 😅 Aber dann wieder ein Switch umzustellen hat auch wieder rein…
USV nicht vergessen. Habe selbst eine von Cyberpower
😄viel Spaß mit den recertifieded HDDs, mal gucken wieviel defekte Sektoren Unraid findet und wie oft du deine Paraty neu machen wirst....
Kurze Frage bezüglich des ganzen: Hast du schon mal ans Homelabbing gedacht?
RAID hieß übrigens am Anfang Redundant Array of Inexpensive Disks und wurde dann irgendwann umbenannt.
nein, das heisst immernoch so
Ja, das wurde von inexpensive auf indepndent umbenannt und so heisst es auch heute noch.
Hast du einen Tipp für ein Gehäuse, was max 50cm tief ist? Habe zu Hause nur ein 60iger Rack - wo die QNAPs mit kurzer Bautiefe wunderbar reinpassen...
habe gerade ein QNAP TS-855eU zum testen da und bekommen 3000 Mbits im Read und 1600 im write mit 8x Exos 20 TB und 25GBE Mellanox Adaptern. SSD Cache kannst du vergessen - habe jeweils die gleichen Werte mit und ohne SSD sowohl unter QTS und QuTS Hero...
Danke für das wunderbare Video :)
LG Daniel.
habe gerade ein QNAP TS-855eU zum testen da und bekommen 3000 Mbits im Read und 1600 im write mit 8x Exos 20 TB und 25GBE Mellanox Adaptern. SSD Cache kannst du vergessen - habe jeweils die gleichen Werte mit und ohne SSD sowohl unter QTS und QuTS Hero...
kann man bei unraid auch ein normales RAID 6 bauen? Seperate Partätsfestplatten, finde ich persönlich nicht als sicher genug für Daten der Familie. Außerdem lässt sich ein RAID 6 ohne Probleme mit weiteren Festplatten erweitern.
PS: Schönes Video!
RAID 6 wird meines Wissens nach aktuell nicht supported. Allerdings lese ich online, dass man dabei auf 16 Platten max begrenzt ist?
@@TipsTricksMore also selbst, wenn dem so ist, kann man immer noch auf RAID 60 umschwenken. Wenn man einen entsprechenden Controller hat. Aber das einfache Schreiben von Unraid macht das ganze doch super langsam...zumindest hab ich das aus deinem Video so verstanden. Wenn das wirklich so gehandhabt wird wäre unraid für mich keine Option.
Kannst du auch einzeln Person Zugriff geben und auch so das sie nur auf ihre Daten zugreifen können und nicht noch auf deine mit?
Klar, dafür gibt es praktische Docker Container die installiert werden können bei Unraid.
Der einfachste Weg wäre einen weiteren Nutzer anlegen und einen Ordner (User Share) erstellen, den du dann diesem Nutzer freigibst. Das ganze sind ein paar Klicks in der Unraid Oberfläche
@@TipsTricksMore Das ist dann natürlich auch noch geil
Das Konto findet das vielleicht nicht so geil, aber was viel wichtiger ist, sind die Folge Stromkosten :)
Im Sommer mit PV und Speicher 100% abgedeckt 😊😉
@TipsTricksMore ja meine Gurke benötigt so 270w mit nichts tun XD
Nice. Hab mich wegen dem Video jetzt für FANTEC 2564 mit 24x SATA/SAS Ports Controller entschieden. Günstiger und mehr Disks....
Warum ein 16port Controller bei 20 Einschüben? Ein 24 Port Non-Raid Controller gibts für gleiche Geld wie der 16port...
Was egal ist wenn eh Unraid installiert wird.
Bin dabei.
Nachdem meine Synology aus allen Nähten platzt, muss was größeres, flexibleres her.
Was ich ein bisschen vermisse, sind Aussagen zum Energiebedarf.
Noch gibt es leider keinen vergleichbare bezahlbare ARM Server Lösung. Oder doch?
(Ich rede jetzt nicht vom Raspi)
Im idle liegt meine Config aktuell bei 80W. Hier lässt sich aber noch einiges übers BIOS optimieren.
ARM kann man machen. Für mich war die iGPU im Intel ausschlaggebend für VMs und vor allem Plex transcoding 👍
Hab ich das richtig verstanden, eine Parität und 8 HDD. Statistisch gesehen ist das je nach Chargennummern nicht optimal.
Ich werde noch eine weitere Paritäts-Platte hinzufügen. Dann ist es mir genug Fail-Safe...😅
Hast du schon mal was von distributed RAID gehört ?
@@ltcmdrdata4611 Ja.. ist aber hier nen Unraid. Nimmt die Rückfrage bezug auf meine Frage oder war dies ein Hinweis?
Danke!
Ich kenne kein Software RAID in dem ich sofern physisch noch ein Slot vorhanden ist keine HDD hinzufügen kann und den bestehenden Pool erweitern kann. Grade Synology und Qap machen das durch ihr GUI kinderleicht.
Für mich wäre ein Grund für unraid die Art wie die Daten gespeichert werden. Da die Platten nicht in einem klassischen RAID sind verliere ich im Worst Case nur die Daten der defekten Platten und nicht wie bei einem RAID den ganzen Pool.
Hm also ich finde die Hardwarekomponenten nicht so dolle. Das case ist super! Aber ein Gaming Mainboard ist eher nicht als Servermainboard geeignet. Da solltest du lieber eins von z.bsp. von Supermicro oder so verwenden. Des weiteren einen günstigen gebrauchten stromsparende CPU wie den Xeon. Server CPU eben. Du baust in einem Server Gehäuse Gaming Komponenten ein. Das kannst du besser :-) die Karte für die Platten find ich super. Eine günstige Variante ist eine LSI 9340 die du in den IT Mode Flashen kannst. Dann baust du dir für unter 50€ eine Karte die vergleichbar mit einer IBM M1215 (weit über 100€) ist. Die Karte macht dann nichts anderes, als alle Festplatten einfach durchzureichen. Ideal für ein ZFS System. Unraid absolut empfehlenswert! RAM bitte einen mit ecc Speicher verwenden.
Danke für dein Feedback! Im Grunde bin ich da bei dir und ich hatte mich zwischenzeitlich auch mit richtigen Server Motherboards beschäftigt. Am Ende ist für mich aus preislichen Gründen und aufgrund der Intel CPU ein normales Motherboard geworden. Die Intel CPU habe ich auch nur wegen der tollen iGPU genommen, da diese zusammen mit Plex nur so durch transcodes fliegt! Das ist schon bei meinem vorherigen i3 beindruckend gewesen. 3-5 UHD Streams auf 1080p sind gar kein Problem und das ohne externe GPU bei moderatem Energieverbrauch.
Das mit der LSI 9340 ist ein sehr guter Tipp!
@@TipsTricksMore , gebrauchte Serverboards sind mehr(!) als ausreichend und auch nicht teurer. V.a. ist RAM (RDIMMs) als Gebrauchtware sehr guenstig. Ich habe hier mehrere Supermicro X9SRi-F (Stand 2012) seit 2020 im gewerblichen Einsatz. Heute wuerde ich natuerlich auf X10 oder X11 gehen. Aber an sich ist alles, was die letzten 6+ Jahre auf den Markt kam, fuer so einen Einsatz massiv ueberdimensioniert.
Auch Gaming Mainboards halten gerne ewig. Viel schlimmer finde ich den Verzicht auf ECC RAM, denn das wird irgendwann zu korrupten Daten führen.
Ist zwar stark von der Umgebung abhängig, aber im Schnitt kann man mit mindestens einem fehlerhaften Bit pro Stunde pro Gigabyte rechnen. In stärker belasteten Umgebungen habe ich auch schon das 8-fache davon gesehen und sogar schon einen double bit flip (im besagten System statistisch gesehen 1x alle 70 Jahre) miterlebt. All das wird ohne ECC RAM fehlerhaft auf die Festplatten geschrieben und führt mit ZFS sogar schleichend zur Datenkorruption.
Ich habe auch einen Mini Server mit nur 2 SSD und brauche 9 Watt Leistung. Will nicht wissen was der Server an Strom Frist.
Habe meinen Mini Server PC gebraucht für 20 € von einer Firma bekommen (ohne Festplatten und Rammspeicher)
Find es cool, aber die Stromrechnung will ich nicht sehen.
Schade kein Threadripper
Top Video mal wieder, weiter so👍 Hab mich während dem schauen gefragt wie du des alles schaffst Firma, RUclips und so ein umfangreiches Fachwissen in allen möglichen Technischen Bereichen, Respekt!
Danke dir 😊🚀 Man steht unter Dauerstrom soviel kann ich dir sagen 😅
Von mir auch Respekt, bist ein lustiger fleißiger Kerl. Wünsch dir viel Erfolg…
Installiere doch Home Assistent wie bei simon42
Ich finde es sehr nice das du ein Video zu Unraid machst, nutze dies auch schon länger. Ich hoffe du wirst noch einzelne Ablegervideos machen über Docker, die du installierst und nutzt und auch über VM´s die du erstellst und nutzt!
Ich habe aber auch zwei wichtige Kritikpunkte:
1. In deinem Video verkaufst du das Array als Datensicher und das ist es nur bedingt! Du hast zwar ein kleines Sicherungsnetz wenn eine Platte ausfällt, aber das Array kann niemals ein Backup ersetzen da es immer zu einem Hardwaredefekt kommen kann oder auch zu einem simplen Datenverlust (Das Array bietet keine Rückholfunktion von selbst gelöschten Daten) !
Ein Backup stellt sicher, dass du eine sichere Kopie deiner Daten an einem anderen Ort, außerhalb des Arrays hast. Daher ist es ganz wichtig das du dich mit dem Thema nochmal auseinander setzt und vielleicht auch ein Video dazu machst, wie du das Backup umgesetzt hast.
2. Ist es wichtig das du EEC-Ram in einem Server verwendest, grade wenn es um sensible Daten geht, wie Dokumente oder auch Videoschnitt etc.
EEC-Ram kann Einzelbitfehler erkennen und korrigieren. Das ist in Servern besonders wichtig, da Datenintegrität und Zuverlässigkeit oberste Priorität haben. Einzelbitfehler können durch elektromagnetische Störungen, kosmische Strahlung oder physische Beschädigung auftreten und führen zu Datenkorruption oder Systemabstützen.
EEC-Ram korrigiert diese Fehler automatisch und macht dein System zuverlässiger und stabieler und schützt somit deine Daten vor Datenverlust durch digitale Beschädigung.
VG
Ich hab ein Flashcore Storage ..
Seagate oder Seagate nicht :D IT Witz und so.
Da hat aber jemand viel LTT geguckt 😅
Haha 😅 Jeden Tag 😂
Hey wollte kurz was fragen und sagen:
1. Der cpu Kühler ist viel zu klein. Schau was der cpu für TDP wert hat und hole einen wo etwas 30% stärker ist als cpu hitze. Der cpu wird dir danken.
2. In welchen vormalt hast du bei Muterplatine für M.2 eingestellt? Standard wäre normalerweise S-ATA.
3. Wenn du deine M.2 über längeren zeit ca. 5 min auf fulle Power betreibst kommt er auf über 80°C bau auf die M.2 ein aktiver kühler. Habe selber ein M.2 mit 7GB/S und wen es bestimmte Programme an sind kommt er auf 80°C und hast blauer Bildschirm. Wäre ergelisch für dich wenn es dan ausgeht.
4. Jeder sagt da was anderes wegen Wärmeleitpaste verteilen, mach lieber gleichmesig auf den cpu Streicheln.
Was soll er da beim Mainboard einstellen? M.2 sind mechanisch kodiert, das erkennt das Board sofern in den Slot eine NVme oder SATA einbauen kannst und sofern es im UEFI einen Punkt gibt wo man das manuell erzwingen kann, steht dieser per default erstmal auf Auto.
Aktiver Kühler? Das sind keine PCIe 5.0 Nvme SSDs oder eine der wenigen "schlechten" PCIe 4.0 deren Controller selbst mit passiv Kühler überhitzen. Das ist eine QLC SSD die nur knapp über 3GB/s kann, die wird nie heiß genug. Da hat man beim Beschreiben eher das Problem, dass irgendwann die Geschwindigkeit auf HDD Speed (unter 100 mb/s) einbricht weil der Pseudo SLC Cache voll ist. Über 10Gbit LAN kommt er aber eh nur an die 1GB/s beim Schreiben und wenn dann später Unraid die Dateien von den NVme auf die HDDs schiebt oder kopiert kommen die beim Lesen auch nicht an die 3 GB/s ran.
Sprich bei seinen SSDs können nur zwei Probleme auftreten.
Problem 1 Einbruch der Geschwindigkeit wenn pSLC Cache voll: Kann er umgehen wenn er den Unraid Cache so einstellt, dass die Daten nicht ewig auf den NVme gammeln. Denn wenn die SSD zu 80% voll ist hat diese nur noch nen pSLC Cache von ca. 60-70 GB dann bricht sie auf unter 100mb/s ein. Aber so wie es im Video rüberkam lässt er die da sowieso nicht ewig auf den SSDs liegen.
Problem 2 die niedrigen 220TB TBW der SSDs. reicht zwar um das derzeitige NAS fast zweimal komplett zu füllen, aber dennoch glaube ich die schlechteste von den "Marken" SSDs. Wenn er nicht viel Daten hin und her schuppst sollte es dennoch reichen. Darfst halt nur nicht zig Docker und VMs auch noch drauf rumrödeln lassen.
Tolles Projekt , bin begeistert und beeindruckt. Was hat das Projekt gekostet .
Der Bürgergeld-Empfänger wird wohl an der einen oder anderen Seagate sparen müssen..
Toller Server, aber warum alle Festplatten von einer Marke? Wenn alle gleichzeitig neu anlaufen ist es sehr wahrscheinlich, dass nach ein paar Jahren mehrere Festplatten gleichzeitig ausfallen können.
🙃
Desktop CPU, Non-ECC RAM in Kombi mit ZFS und recertified Platten - was soll schon schief gehen 💀💀💀
Immerhin, er hat ein Software RAID drüber liegen . . .
@ltcmdrdata4611: das wird ihn bei RAM-Fehlern auch nicht retten. Ich benutze für sowas nur noch ECC-RAM!
😮Alter, was macht man mit 440Tb?? Ich habe über 250Tb , und mich hat man schon für Bekloppt abgestempelt.😅
Genau, wozu löschen, wenn man viel mehr Speicher kaufen kann! So habe ich das auch gemacht! 😂Ich habe aber nicht eine einzige deiner Komponenten gekauft außer die Festplatten!
Wenn ich da meine ganzen Blu-ray ribs auf deinen Server ziehen würde ich glaube dann brauchst du auf jeden Fall neue Festplatten
Echt ein cooler Server, aber als IT'ler finde ich es gerade bei soeinem eh schon teuren Gerät schade das dort kein Windows Server drauf läuft. Ist vielleicht für den Heimgebrauch mit möglichen AD, Printserver etc zu viel, aber irgendwie halt auch cooler Spielkram für Nerds. Aber wenn es dich happy macht, ist das natürlich auch inordnung. Sonst cooles Projekt und cooles Video
Guter Witz 😂😂
Einen Server mit Gaming-Mainboard ohne IPMI, nicht-ECC Speicher und einem i5, der nativ schon keine ECC-Fähigkeit besitzt, zu konfigurieren halte ich für sehr fragwürdig und nicht empfehlenswert.
Na wer schaut denn da LTT`...
Hallo Leo, und PV / PC-Freunde, dieses wird mehrere von euch interessieren: 😷 🧐 ☹ 🥸 😇 Zur Inspiration: PV Nachtspeicher Strom HALBIEREN am Gaming PC, Server, Miner, TV... & damit auch Stromkosten. Ich umgehe Inverter + PC Netzteil, über 12V DC-Bypass. So spare ich fast 40- 50%, weil ich gleich 2x Wandlungs-Verluste umgehe. Das originale PC Netzteil läuft dabei im Leerlauf mit, und übernimmt erst, wenn der Laderegler Ausgang den PC Strom kappt... Bei einer 24V Split-Klimaanlage / Wärmepumpe, da macht das noch mehr Sinn diesen Wechselrichter zu umgehen, um 25% Heizkosten zu sparen (LKW-Zubehör). 24V Kühlschrank, 24V @250W Wasserkocher gibt's ja schon. Die Waschmaschine, Wasserkocher, E-Heizung, Bügeleisen, Backofen, ... u.v.m. habe ich auch von 2500W auf Balkonkraftwerk-freundliche 200W... 600W herunter gedimmt. Mehr Videos zu diesen Themen auf meinem RUclips - Kanal. Like + Abo nicht vergessen, denn da kommt noch einiges mehr von mir. 🥳 🤒 MfG Christian
Unraid kann man auch auf eine nvme Flaschen über einen Marken Usb3 Adapter, dann läuft die auch normal im PC als Nvme!! Ich hatte auch erst USB-Sticks benutzt, und Monate später gab's Probleme. Seit ich das auf Nvme habe, gab es keine Probleme mehr. Selbiges geht auch mit Sshd, SSD, und sogar Hdds.😊 Alles hält länger als ein USB Stick.
Nein, kann man nicht. Die USB Stick ID Nummer brauchts als Identifier. Es kommt nur auf den Stick an, da gibts auch Endurance Sticks. Ein Backup der Installation extern ist eh Pflicht.
Wenn du es darauf anlegst kannst du da statt 3.5k auch schnell mal 35k drin versenken. Dann aber mit echtem RAID.
Das stimmt 😅
Hör bitte auf, die HDDs zu schütteln. :|
Press doch bitte nicht so dermaßen beim erzählen
Recertified Festplatten. Die gebrauchten Kondome unter den Festplatten. Nogo.
Es gab zum Black Friday auch sehr gute Deals. Ich bin nun auch auf neue Platten umgestiegen 😅
@@TipsTricksMore Jep, besser ist das. ;) Im Prinzip sind Festplatten Verbrauchsgüter. Wenn man gebraucht kauft, hat man weniger "Lebenszeit" zum Verbrauchen vor dem unvermeidlichen Ausfall. Ob sich da dann der Preis rentiert? Häufig nicht.
Ich wäre mit AMD gegangen, weil man für die mega günstig Server Boards bekommt, die dann auch Features wie IPMI oder BMC haben worüber du dann eine KVM hast. Beispiel ( GIGABYTE MC12-LE0 )
Wat willste damit wenn du eh neben der Kiste sitzt. Wenn die irgendwo anders oder im RZ steht das was anderes.
Also als Erstes musst du nicht für jede Kleinigkeit wie ein BIOS update oder einer BIOS Einstellung einen Monitor anstecken. Zweitens haben Server Boards eigenes Monitoring mit Logs, die auch gehen, wenn das OS abgestützt ist, du siehst auch welche Hardware defekt ist, weil die Managementoberflächen ( BMC / IPMI / ILO /usw) Unabhängig sind. Drittens diese Boards sind nicht wirklich teuer, hab mein GIGABYTE MC12-LE0 damals für 50 euro neu bekommen. Wenn man den Luxus eines Servermainboards noch nie hatte, verstehe ich das man das für unnötig hält, aber ich muss sagen das es mir schon oft Zeit und nerven gespart hat vor allem, wenn in seinem Rack mehr als ein Server ist. (und Server haben einen Grafik-Chip auf dem Mainboard, brauchen also weder iGPU noch normale GPU)
Bei 300GB Dateien hätte ich mich für eine 100Gbit (12,5GB/s) Verbindung entschieden, aber soll jeder machen wie er will 😊
Ist der Pool in Unraid mit RAID 6 konfiguriert? Ich vermute, dass dies nicht der Fall ist, da anscheinend keine zweite Paritätsplatte genutzt wird. Ich würde dir empfehlen, dich einmal mit dem Thema 'Bit Rot' zu beschäftigen. Ohne geeignete Maßnahmen zur Sicherstellung der Datenintegrität könnten Daten nach einigen Jahren teilweise unbrauchbar werden und wären unter Umständen nicht mehr wiederherstellbar.
Wegen 20 oder 40 Euro weniger, kaufe ich garantiert kein gebrauchtes Produkt 🤣
Nettes Video - aber sorry - im Vergleich zu einem echten Storage mit eigenen redundanten StorageControllern ist dieses Unraid-Gedöns langfristig nichts anderes als ein Datengrab... Nix mit Hotplug - nix mit Autorestore.... Viel Spaß wenn sich da mal was beim zfs verabschiedet... Wünsch ich Dir zwar nicht - ist aber vorhersehbar - lieber ein altes IBM DS FC kaufen und ewig Ruhe haben - Liebe Grüße aus Niederösterreich ! Edit: Cach ohne Stützakku ist der vorprogrammierte Datentot bei Stromausfall....
Alles gut und recht mein Ding wers nicht, ich sag nur eines, viel Spass bei der Reinigung sag wir mal so nach einem halben Jahr ist das Ding so zu das du es wieder auseinander nehmen muss und dann kann der Spass beginnen, und wer jetzt nur alle halb Jahre der irrt, weil sich nicht alles reinigen last hängt der Staub genau dort an und wie von Zauberhand musst du das Teil wieder reinigen, dazu hätte ich kein Bock da kann ich mir besseres vorstellen, ja man könnte die Anlage so verbauen das diese auch mit Filtern ausgerüstet werden kann, ich sagte ja man könnte, aber jetzt mal ehrlich wer hat die Zeit das Geld das er oder sie einfach zum Fenster rausschmeissen könnte, das ist wieder dieses Word, man könnte!
Wer dieses Wort man könnte sagt sagt es nur aber macht es nie in seinem Leben, es würde mich persönlich interessieren viele da mit reden und das Wort man könnte sagen, aber weder das eine noch das andere haben, ich sag’s euch wie’s iss 1 Prozent können es die restlichen 99 Prozent wollen nur dabei sein und haben ihr Wissen von Google oder Chatgpt was eigentlich das selbe gelernt, doch können das diese 99 Prozent es wirklich? Eher nicht lol 😂
hähh? ausser staub habe ich nicht wirklich verstanden, was du uns sagen möchtest
Bei mir läuft sowas ähnliches seit 4 jahren. und da habe ich noch wie was entstaubt
@@mikedien3609 , ich habe es auch nicht verstanden. Weder sein Problem, noch den Rest.