@@zhouzh2 FreeNAS/Zol on VM的确可以解决问文件系统问题,但本质All in one维护性差才是主要问题。存储系统的原则是不间断服务(例如zfs目前L2arc在reboot后内容会被抛弃);但业务平台和渲染工作站是有较多停机机会的(比如更换添加显卡,BIOS调整,hypervisor升级,硬件passthough调整都会需要重启)。存储系统好比长跑运动员,而渲染VM系统好比短跑运动员,一个教练很难调教出两类不同的奥运选手。我原先也打算把homelab的zfs跑在vm上,但最终还是主存储硬件部署,但冷备份用的zol选择跑在hypervisor上。
最近挖矿一直在找能支持980PRO,满速且便宜的PCIE4.0GEN4卡,看完测试发现佳翼iHyper-M2X16才达到PCIE3.0的速度,要真正实现980PROPCIE4.0的速度,应该上华硕或者技嘉的Hyper M.2 x16 Gen 4,这样才能发挥980PRO真正的实力。否则现在的配置,花了两万买固态,只用了一万的速度。
十分感动然后我用720p的分辨率观看你们的节目
自动在480。
360P
哈哈哈哈哈
我360P我说啥了?
144
你们可能在用一个错误的方式解决一系列的问题。All in one的机器并不一定合适你们的工作流。1)首先NTFS不是一个长期可靠的文件系统,切换到Linux/BSD显然会导致大部分的常用工具不能正常工作(依赖Windows/Mac)2)渲染工作站有可能会为特定的workload做调教而重启,意味着你的存储系统也会同时重启。3)使用的NVME如果直插PCIE也无法不断电维护。所以工作负载和存储没有紧密关联,切有互斥的维护因素时,将存储和渲染分开其实是更好的选择。
另外由于视频写入量大,可以考虑傲腾。毕竟傲腾可以无脑买,而SSD只能买新的保证质量。再者SSD的raid5或者raid z1/2都会带来问题(特别是性能或者计算开销),raid10或者镜像后条带更合适高度存储(毕竟你们上40g)。另外消费级SSD(特别是上raid5)要考虑掉电保护,以免cache掉电数据丢失导致raid出错。
最后需要个ups来保证掉电正常关机时,高功耗的cpu和显卡此时对于电池而言就是负担,正常情况下只需要保证存储关机,UPS是撑不住1-2小时的显卡渲染的。我自己的homelab就是1热存储1冷备份存储加两个VM host分离。上面都是躺过的坑。
他上了64核肯定宿主做了虚机了呀……主要问题是这样的桌面平台确实不如上rack拓展性好冗余性好
Apache pass/Barlow Pass/Crow Pass 就是很貴阿, 不太流行 可能只有大企業使用
其實像一般SSD測試都不準確 , 有時內部CACHE寫滿就會變非常非常慢
有時遇到需要ERASE也是,最快的CASE就是剛好你要寫的BLOCK都是0xFF, erase速度會非常快
Optane一值沒有提到 BW是多少,你查不到切確資料,然後遇到需要ERASE我覺得CYCLE一樣是拖長
DIMM BASED 還會占用DIMM SLOT ,減少memory channel BW.
@@zhouzh2 FreeNAS/Zol on VM的确可以解决问文件系统问题,但本质All in one维护性差才是主要问题。存储系统的原则是不间断服务(例如zfs目前L2arc在reboot后内容会被抛弃);但业务平台和渲染工作站是有较多停机机会的(比如更换添加显卡,BIOS调整,hypervisor升级,硬件passthough调整都会需要重启)。存储系统好比长跑运动员,而渲染VM系统好比短跑运动员,一个教练很难调教出两类不同的奥运选手。我原先也打算把homelab的zfs跑在vm上,但最终还是主存储硬件部署,但冷备份用的zol选择跑在hypervisor上。
@@fuzhaopeng 这么说的话确实是,从企业角度NAS是不如SAN的,但是UP主也说了目的是为了一机多用(环保)省钱而已,本质上是牺牲不间断服务节省了另一套计算设备的主板、CPU、电源等。当然我也觉得他们后面还会再调整的。渲染机和NAS放一起确实是诸多不便的。
@@zhouzh2 说的没错,毕竟这个配置是完全奔着渲染需求去的。以后升级那肯定是必须的了。但另一方面,存储的迁移和重部署都是十分昂贵的,特别是涉及到存储方案的切换。最糟糕的情况下是需要把所有的数据备份出来,再重做存储倒回去,除非能把现有存储系统直接迁移到新机器,否则又是一笔购置临时存储的钱。
估算一下如果额外加个4U存储全部落地,走超微洋垃圾+x9/xeon E5 v2路线要多个5000;全新国产箱+新主板+xeon e5 v3-v4系统要7-8k;全新的新xeon平台也要5位数起了。对于工作室着实也不是笔小钱。(但不知道有没有实验的蟑螂贵~笑)
员工的有效工作时间大幅度的提高,👏,老板能更好的压榨员工的价值了。😄
这下好了,员工连考素材时放松一下的机会也没有了。
員工:老闆我們上8K+HDR+高刷新率
以前剪輯費用很貴的,因為輸出渲染可能要一個晚上。
現在:字太小了,改一下,兩分鐘後給我。
根本不会放松,脑子里想着怎么剪,然后等传输和渲染是煎熬
我彷彿在看中文版的Linus🤣
雖然配備差很多 但內容更豐富易懂
"GB每秒" 聽到這個詞真的很感動 常常都是聽到千兆每秒真的是轉不過來
应该读GByte每秒
看似说了一堆,实际上什么有用的信息都没有
0:05 我错在追求8K HDR,所以到现在都没有视频。上传过很多,但都被RUclips压缩得不成样子。
RUclips好像是支持8K的
@@comet-space 最多15k x 15k,但我上传的比别人上传的压缩得严重得多。
等AV1普及之后8K就能普及了
6分钟的视频 要200G的素材。。。 原来做视频这么辛苦。感谢你们提供的优秀内容。
1、考虑数据灾害备份,虽然有阵列校验了。但是NAS系统是有概率会挂掉的,系统一挂,硬盘数据是没法直接像移动硬盘读取的。只能通过极贵的商业恢复了;建议你们再组一台灾害备份机做服务器集群,配置不用高,定时工作时间外自动备份即可;2、还是要考虑散热,你们渲染也要靠这台服务器,有没有考虑过它的感受;
请问 如果在一台nas服务器上 如何保证数据备份和安全呢?
@@yunshuizhongyi 永远要有备份,越多越好
好一个千万up主的起步阶段
千萬是指經費嗎
眼光不错,哈哈哈
他们在B站已经有一百多万粉丝了
巧了 我们最近也上了服务器 上了两个980 pro做高速缓存盘 12个硬盘bay一个没买 等着做视频求赞助
有钱有能力上U2企业+HBA。多bay系统会有热插拔需求的。你们本来就走rack了就别用民用产品了。而且价格不一定比980贵。
又肝了那么晚?别拖更,最近节奏慢点了你AK
活捉小电丸
求赞助
用傲腾,现在给无论什么方案都给客户配傲腾,体验极好。
作者推荐的SSD并不建议在企业中使用,因为这都是消费级产品,生命周期有限;从数据安全的角度将,作者忽略了TBW和DWPD指标,这是企业级和数据中心采用的标准。
lto也是方案之一
上企业SSD就是了
四块盘已经有冗余了,坏盘的话能马上发现更好
你想多了,人家最重要的需求不是数据安全,而是素材的网络传输速度和渲染速度,素材不过是在制作视频中使用,视频做完了,素材就不需要了。退1W步来说,即便同时两个硬盘挂了,数据全部丢失,实际上的损失也就是最近在工作的那个视频,历史数据可以从各大上传网站上下载回来。
@@colinyan4322 除此之外,固態大部分時間是緩存盤,過一段時間就會進機械,損失的應該祇有最近更改的東西,之前有的一樣在機械裡面
然后你所有工作机都要上40G网卡,然后你就需要40G交换机了
交換機需要,但工作機10G很夠了,理論上可4人同時傳輸不掉速
hahah。 真实
也想想陣列的讀取速度不一定能夠那麼快還有軟體需不需要吃到那麼大帶寬
@@瓦特咩龍-d8n 速度都 13GB 了,哪來的道理不能勝任 40Gb 的速度…
最后直呼真香,消费了10w。
看了博主的nas组装,突然有感而发:近期,一客户在4块4tb sata(企业级)做的raid5,跑数据库,巨慢。经过交流后,得知:该用户不但强势(将华为原厂给的配置,用廉价的SATA取代昂贵的SSD硬盘),而且不懂技术(连IOPS都不知道),浪费了多方(甲方、乙方、监理方、咨询公司)的时间和资源。
這我也發生過
組raid 5跑
hyperv
又跑資料庫 (你們講數據庫)
講不聽的 一整個傻眼 計算機概論真的要重修了
都sata了也配叫企业级?
@@悟空-s5y 硬碟廠商自HI用辭彙,現在每家硬碟廠商都有出企業級SATA硬碟...
@@steven211t 和这种甲方交流真的头痛
刚开始自己剪片时,我也极其后悔使用4k素材
但每當拍攝時 不拍4k又怕後悔
这样挺好的,员工有休息的时间,设备也得到相当充分的利用
这个思路很对,中央式计算处理,单兵作战使用短小精悍但也能用的小机器(比如m1电脑,生产力和常规办公两不误)能够体现工作室架构的优势。否则每个人都需要性能相当不错的pc,既浪费传输渲染的时间,又会造成算力资源的浪费。
RAID6+8个4T,24T可用,4K60 RAW用不了多久就满了,其实可以考虑美商亚马逊买WD mybook12T或16T拆出来硬盘再组nas,那样用的时间更长些,还可以避免后期总是扩容带来的麻烦事和紧张的硬盘位
WD mybook12T我拆了N个了,虽然是氦气,但只有5400转的转速,不适用于大数据读写。视频编辑最好的选择是购买希捷企业级12T或更大容量。速度快且数据安全。
@@greatjack3958 确实,家用可以,企业就是上企业级的12T氦气吧
raid6 8×4T=6×4T×0.9≈21.6TB,估计是去年挖矿入手的,HDD容量太小了,不然还是推荐HGST 16TB性价比
……说实话,我觉得还不如买DELL或者HP的服务器……向R640就是一个选择;还有一种方法,就是瘦客户机+渲染服务器的解决方法,比如上一个R940XA服务器,装上显卡,装ESXi host,然后后面插多块显卡直接做虚拟机让编辑用虚拟机做编辑和渲染,还能保证数据不外泄。
RUclips支持8k 60fps HDR,希望下次可以看到。正好我4k hdr1000的显示器可以发挥作用了
这不去买个三星8k电视?
@@张育恒-j8l 没有,我买了索尼z9j
其实,同一个时期购买的机械硬盘很容易一起挂掉。或者一张硬盘挂掉在你恢复数据的时候会进行庞大的读取写入,这恰巧又是另一块硬盘故障的导火索。。。
思考方向 改成兩層式架構...伺服器端運算喧與資料存放分開放...資料也建議改用De-Dupe壓縮空間主機效能也要好,專業繪圖軟體是文檔會自動在用戶端本機作暫存,等到編輯完成,才會回存到伺服器,減少重複寫入壓力
程序员看完这期,表示很舒服,很多思想在软件的架构都可以体现
如果能把拷贝,渲染,发布,做成Jenken 或者其他CD软件,那就真的舒服了。
@@Fue3512 这不就是pipeline吗
LTT的历史太长了,所以太多基本讲解都直接省略或搬到其他youtube channels. 这个除了是中文以外,影片够长之余,解释也非常仔细。就是从零开始最好的影片。虽然很多国外影片一直说NAS, 但大多数都是一些个人案列分析为主,很少说到很基本的NAS概念,也懒得找教学。这个当是消遣之余涨涨知识的”先看评测“绝对推荐!
it的专业就是在新技术的更代,帮观众做高价值的产品测试也是对观众超值的付出
這完全不是NAS等級了阿...這已經到了render server「順便」當NAS了
确实,NAS一般不需要那么好的CPU
我太喜欢你们的团队了。
看到这样的配置 我的gtx745哭晕在了厕所里
活捉大佬
为啥哪里都有你?
我说为什么会推荐给我这内容呢,原来有大佬在这评论
原来是91数先生,失敬失敬。
不是,怎么哪里都有你呢?
RUclips好像可以8K+120Hz+HDR了
先看的破产vlog会出吗
先看會變成先不要。
首先你要有一台8K+120Hz+HDR的相機
光是攝影的硬件成本恐怕不是破產就可以處理的
@@shps100606先別看
@@Anzs1152 eos r5搞定
@@5204 R5只有8K30P喔。
翼王的100T值得学习
SSD阵列+磁带库,PB级容量+3KMB/秒传输速率。
(KMB不就是GB么。。。
我能偷偷告诉你,之前我就是三维渲染和nas装在同一台电脑里面,双路,24小时开机渲染,太热,把硬盘烤坏了,raid5连续挂两个硬盘
最近挖矿一直在找能支持980PRO,满速且便宜的PCIE4.0GEN4卡,看完测试发现佳翼iHyper-M2X16才达到PCIE3.0的速度,要真正实现980PROPCIE4.0的速度,应该上华硕或者技嘉的Hyper M.2 x16 Gen 4,这样才能发挥980PRO真正的实力。否则现在的配置,花了两万买固态,只用了一万的速度。
真正得勇士敢做大容量RAID5
单盘4T问题不大
真正的勇士应该上raid0
舊的nas拿來備份吧 raid5重建基本上都是火燒連環船
还是做raid10靠谱,单nas插满都不够的话就上分布式存储
不raid z3说啥可靠性
很用心製作的節目 謝謝
请大家把穷打在弹幕上!
这个有弹幕嘛。。。
这个有弹幕嘛。。。
穷穷穷穷穷穷穷穷穷穷穷穷穷穷穷穷穷
哇差 單就看那個剪綵的徒手剪,整個牛逼啦...>@
有没有觉得开篇的厉害特别像乔杉,喜感十足。为了那个封面的4k那段看了好几遍
這期拍得很幽默啊! 推推推~~
厉害还是太老实,直接1080转4k啊,国产黑科技。
对于他们来讲可能要的是效率吧
轉4K的都是假的,跟原始4k差多了
5:02 看到这里,猛然发现这是2年前的视频啊,2年前的固态这么贵啊,刚买的4t才1千出头啊
可以预见,不出一年,那几块4T硬盘就满了。
@@hanchen7685 他说的是八块4t的硬盘不是三星2t的,肯定很容易满的,到时候再加硬盘就完事了。
@@handsometom6004 XD..一直沒注意他機械盤4T這麼小⋯。
三星980 2T,1200TBW壽命保固五年,平均可每天寫入差不多660G,平攤下來壽命也還行
8块4T的组RAID5, 没有热备, up主绝对是个小白。
他们还是请个专业人士管管他们的设备吧。
这期最有喜感,支持了
1年後來看 3星PRO 4999 2T 現在大約等於 1565人民幣這樣 確實跌了不少
现在已经跌破千元人民币了
感觉这集厉害整个人都活了过来,那个兴奋劲。
看似是装机视频 其实是个理财视频
你可以考桌面虑虚拟化方案和专业的分布式存储。
这年头4K不是techtuber最最最基本的要求了么?
不管你怎么觉得,1K始终是主流,接下来5年也还是主流。
大部分螢幕也沒買那麼好啊WW
哈哈,我家里也是这么搭建的,用了FreeNAS系统,后端可以用Raid5。
对了,前端Buffer Cache主要是不能全看连续读写,4K随机性能更重要。
這個故事告訴你開始的時候千萬...別挖坑!
讲真,你们与其给每个员工配好电脑+NAS,不如考虑下每个员工用虚拟化电脑然后直接上刀片服务器。
好我看到后半部分你们的确这么干了,当我没说。
說到NAS 直接找 翼王 可能比較快
懂了,下一步就是说服我的父母我为什么有这套需求了
你的 980 NVMe 也得有备份盘,因为这种 cache 是后写的,NVMe 坏了也会丢数据
數據丟了就丟了,原始數據還在,SSD當RAM使用就是了
@@swear001 看清楚,UP 主明确说了 NVMe cache 可以加速写,说明 fsync 发生时不是 write through 的,因此可能会出现 NVMe 故障时有一些数据还没来得及 write back 会主磁盘阵列的情况。
其实能装多少水并不取决那块儿短板,取决于木桶横向宽度。或者木头短板朝上,倾斜后可以无限加长
同样的板,加1cm长能解决的问题,你非要加10cm或更长
换一个平均水平的人能完成的工程,你却要老板多花10倍的佣金请更多的人
你的想法很对
@@流氓王的铁蛋公主 可你为什么忽略了装入的水也是无限呢?老板花10倍工资却得到了10倍回报。难道说的不对吗?
我飘了……竟然看这么贵的视频
巧了,我想买硬盘的时候硬盘也涨价了!只能勉强用着手头的35T硬盘了
让影视飓风出一期他们工作流服务器的搭建视频吧
貌似一个月前出过
拉倒吧,真把影视飓风当专业的了,还不如看翼王的
@@chenkarenina4299 找肥仔给出方案,顺便大家都能出多一期视频。不过厉害还是很厉害了。
@@chenkarenina4299 找白嫖老赖也可以啊 哈哈哈
这个配置做3D动画就很nice了
是不是一个月之后,发现让数据服务器同时处理渲染服务的决定可能是错误的
这个区别在于单机工作站还是分布式数据集群。
去年阿里巴巴的大数据平台双11的数据写入速度就是300G+/s, 读取速度好像是至少1.6T+/s. 我就是搞大数据的,我们的Cluster写入速度可能不及阿里巴巴,但是读取速度绝对不输。而且容量单位已经不是M,G,T, 而是P。
不过你这个单机已经相当彪悍,不知道有没有和某网红那台PK一下。
嚇得我吃手手
打開齒輪,還好還是1080P60HZ
因為你的螢幕是1080P
@@deathjj10 就算沒4K也能開4K,沒啥用就是了
8盘位群晖组RAID6上万兆网卡也能有不错的读取速度,可以跑满万兆带宽。我的配置是群晖1821+,英特尔X550t2,8T*8,TP-link的8电口万兆交换机,电脑(四台)上网卡用AQC-107,不算硬盘,花了一万块钱。
低端的万兆直接取消掉,群晖1821+满载16T插上4口兼容10光卡,PC端全部三星M2 SSD+万兆卡直通NAS,速度拉满
24盘位+2T缓存+双万兆链路聚合
@翼王
有几个关键点没有说明:1. 这台服务器安装了什么系统? 2. 如果要数据安全,硬盘应该要组件阵列,但这点没有在视频中有提到哦。3. 网络的网口没有这么块,如何实现电脑拷贝十几G的拷贝速度?4. 组建了什么的网络来配套这台服务器呢?望up 主指点。
赚了 把nas 拿去挖矿 发了
偏重不一样,他们主要在传输上花了钱,跟算力没多大关系,跟普通电脑加个3080没区别。
加油加油,越做越好
你这不是nas了,这叫服务器了
NAS也算一种服务器
现成的NAS也不错,还有售后。
不過HDD應該買8T以上的吧 不然都smr
@Zhiyi Huang 因为chia币暴涨导致硬盘价格翻一倍,当时6t以下的硬盘是最划算的,10t的最高涨到过3300rmb
@@saamuu4882 沒錯 當時chia幣漲得時候硬碟價格真的超可怕,幸好現在chia疊成屎了
感謝你們,這篇超棒
硬盘现在好贵。
都是因為礦工
我给小姐姐盖的小区实际容量都过百T了,你们这要加油😏😏😏
這個一般人看了評測也下不了單
要看單位, 電視台需要後製與Archive, 有幾家是買更高檔的平行處理Storage, 效能更高
哈哈,这期做的太有意思了,笑死我了
小型工作室上4K至少得上10G,最好是双万兆电口做bond,吞吐到20G。
40G网卡和交换机还是太贵了,普通工作室用不起
机器贵不是最重要的,吵才是最要命的。而且线贵。
10G应该还是用得起的。双10G LAG普通低成本交换机做不了(目前而言),交换芯片可以做2层交换,但现在10GLAG基本要过CPU,口多的价格基本5位数往上走。
@@fuzhaopeng 这个也容易解决,买二层交换机做堆叠,堆叠上限看型号,不过对于小型工作室应该够用了。
@@newptone 不怕噪音可以搞个cisco N3K独立部署。安静的产品基本上能用的也就是Mikrotik CRS317-1G-16S。我家2层走的这个,但没法LAG/Bond。16口也基本够用了。冗余依靠iscsi和nfs的MPIO,虽然不能提速,但两根网线冗余还是有的,可以随时断掉一路维护(换线换接口之类的)。
时间过去半年,我觉得25G方案可以替代10G了,成本增加不多,但单口25G也比双口10G Bond吞吐强。同时企业级的NVMe闪存和SATA SSD的价格也差不多了
那么好的配置不挖矿可惜了!
這片比想像中好看,一直沒點進來直到不小心進來了
還在想怎麼會把SATA SSD裝到CPU的位置上,仔細一看它還真的就是顆CPU
其中不是很明白,添加固态硬盘作为缓存,不是只是会提升存入速度吗?因为存入时可以把文件先放入固态,从而利用固态速度节省时间,后续再存入机械的时间就不用等;而如果读取的时候,肯定是需要从机械读出来,这时候无论有没有固态,瓶颈都是在机械上面,那并没有达到节省时间的目的啊
比较好奇软件用的是什么方案?
应该是windows,不然怎么做渲染
@@shenweb 請問渲染為何一定要windows?
@@catnight9815 他们是i9组装机不是···除非黑苹果
我现在相信了,一些在我们看来简单的事情,但是对IT小白来说就是高科技......
因为你站在巨人的肩膀上
好深的口袋呀.....
厉害 怎么沧桑了 晚上的运动及生活要节制啊啊啊啊~~😎
8K HDR 干起来~
拍得非常好!
想問是如何搞定4個硬盤保存資料和叫ssd 做緩存的?
還有怎麼這麼隨便就叫到nas做渲染。。
油管服务器是真牛B
用消费级的SSD做缓存你会后悔的……
并不会,其实真正问题是缓存SSD只应该使用RAID10,别的都是找死
你们的才华,在油管上丢视频真是大材小用了!应该去拍电影去!“没完没了”第N集。。。
广大网民真的需要那么高的码率和分辨率么,未必,军备竞赛而已
再過幾年估計是能夠開始選擇4K了
用手機看1080糊的我不忍直視
“厉害”,“先看评测,再下单”,用到这集上,真的应该先看油管留言,再下单!你看看油管留言里有多少高手!各种出主意,指出你有更好的选择和方案!
可以,很奢侈,有创意
我是花了1000块,某宝买了二手nas 可以插12块盘,都是单盘用一块插一块机械4t,群晖nas有自动备份数据功能,让系统自动备份另外一块盘,nas和交换机是万兆,剩下工作室小伙伴千兆互相传输,目前多个电脑剪辑4k视频 没觉得卡顿。 成本是不是低很多嘞。
对了 有个致命缺点 个头大,噪音大,我是放到隔壁房间专门给nas 供了个神位
频道不错,关注了。
我喜歡千萬up主的起步這句讚!
哈哈我的小电影数据库已经有240TB了,涵盖了2012年至今日本主流厂家及素人片商发行的绝大多数作品,以及各种国产小电影,门事件,以及P站TOP500热门影片,以及台湾SWAG,香港韩国三级, 印度教学影片,幼幼,动物,猎奇,下个月要买我的第13块西数12TB机械硬盘了。我觉得我的资源保有量够开一个大型网站了哈哈…
如果追求速度为什么不用内存做缓存盘?固态再快能快过内存?上1T或者2T的内存,再上一倍的固态,最后是机械盘。
谢谢您的视频。
那多I9和显卡其实应该做分布式渲染。
ssd+raid3的方案,ssd当缓存,raid3作存储。 有几个疑问,这种对ssd擦写次数要求较高吧? 还有这个方案得益于SSD缓存,存储8T以内的文件速度可以跑满,但是读取的最大速度还是受机械硬盘限制为150x3MB/S。如果是这样可以设置,存储时时走SSD缓存,读取时绕过SSD直接访问机械硬盘,理论上可以延长SSD一倍的使用寿命。Nas里装显卡作剪辑渲染是什么鬼?
土豪会怕磨损的吗?
5:56数据流的单位应该是40Gbps,换算成存储单位是5GB/s