[作业贴] ryzen3 1200 @x370GT3 ESXI家用服務器搭建。龜速跟新

Jnicewitit-avatar

Jnicewitit

2019-06-30T05:59:51+00:00

全篇繁體字,可能會給各位帶來閲讀上的不便,請諒解。

配置單
ryzen3 1200 全新盒裝304含郵費
biostar X370GT3 全新盒裝479含郵費
镁光E-DIE 全新盒裝409含郵費
intel 傲騰16G 31.88含郵費
閃迪SSD PLUS(閑置)
LSI2008+minisas to 4sata 220含郵費
富士通I350T4 240含郵費
希捷氦气盘10T 1740含郵費
若干SSD+HHD
機箱 DF node 804 最大可以支持到3.5*10+2.5*2/3.5*8+2.5*4 屯了三年了,才拿出來用,價格記不清了。
貓頭鷹D14散熱器,無風扇(閑置)。
貓頭鷹F12*2 (閑置)

基本敲定系统
freenas
windows_server
openwrt
ROS 大约会在双十一跟换成官方出售的有线千兆五口

2019/7/1跟新:
喜報:ROS+OP已成功运行,黑群暉已經成功引導,舊硬盤全都滿了,新硬盤還沒到手,計劃延遲。
INTEL I340不支持直通,已聯係商家退貨,重新購買了I350T4。舊硬盤是WIN的分區,目前證實無法無痛轉移數據至黑群暉,打算買一塊新硬盤作爲跳板。

2019/7/1晚8點跟新:
5L的回復讓我注意到了非直連CPU的PCIE設備無法使用直通的問題,使用intel 82576雙口網卡,測試并證實了這一點。
根據目前的資料:AM4民用matx暫無兩條cpu直通pcie的主板,ATX版型目前之有X470 GAMING M7 AC大概率支持兩條PCIE*8(暫未證實),X470D4U以及X470D4U2-2T 大概率支持*8+*8/*4+*4+*4(暫未證實),價格超出我整臺機器故不考慮。
正好之前看到不少前人提到雙軟路由最好跟NAS分開,所以目前有兩個想法:
方案A 之前的J1900依舊當作雙軟路由使用,ryzen系統直通LSI卡給黑裙+ubuntu使用。
方案B 依舊執行三合一,采用給I350T4直通方案,lsi卡擴展硬盤犧牲一些硬盤性能,考慮到瓶頸只存在網絡,或許可行。
之後兩根方案均會嘗試,倒是再跟大家分享。

2019/7/3晚七點跟新:
i350T4網卡已收到,esxi下成功直通給虛擬機pfsense,并且發現支持主板也可以支持到SR IOV,還沒搞懂原理正在研究
添加了一塊已經閑置了三年的SSD用來放數據以及儅虛擬機的存儲硬盤。
裝了一大堆虛擬機,有空了慢慢研究。
放幾張圖在下面。
[img]https://img.nga.178.com/attachments/mon_201907/03/9aQ5-9moKfT3cSzo-3n.png[/img]
[img]https://img.nga.178.com/attachments/mon_201907/03/9aQ5-ex3oKxT3cSub-96.png[/img]
[img]https://img.nga.178.com/attachments/mon_201907/03/9aQ5-ehtrKpT3cSl0-9x.png[/img]
[img]https://img.nga.178.com/attachments/mon_201907/03/9aQ5-72gaK1vT3cS18f-bf.png[/img]
[img]https://img.nga.178.com/attachments/mon_201907/03/9aQ5-40u1XfZ44T3cS3k0-2o0.jpeg[/img]
[img]https://img.nga.178.com/attachments/mon_201907/03/9aQ5-d10yX14Zb5T3cS3k0-2o0.jpg[/img]

2019/7/4 收貨當天發現lsi2008hba卡上有大量水漬,今天賣家終於肯讓我換一張了,繼續等。
ESXI下DSM跟WIN10互傳文件,最高跑到了160m,兩邊的網卡均顯示是千兆,應該是cpu内交換數據了,舒適,
種草X470D4U2,有錢必須拿下,等2700降到1K以下再入一套吧......

慣例跟新一下
默頻烤機50度左右
3.9G 1.2V就能穩,烤機供電撐不了多久
配件全面翻車,先玩兩天OW再説[s:ac:茶]
LSI卡有考慮買全新的?
網卡要不降級也買全新?

其實整體已經可以正常使用,我的規劃出現了一點問題,正在重新考量,
目前停更一段時間,到時候東西到齊了在另開一貼。

2019-08-08 20:52

更新一下,基本可以用。纯双软路由的性能基本跟J1900没差

应该考虑一下新的方案了

资源浪费的不是一点点,就算是4K硬解,也吃不到多少资源。

lsi hba卡直通给黑裙可以正常用,smart可以读,ssd也可以机械盘加速

就是网卡不直通让我很难受

2019-08-16 12:10

因为M.2是直连CPU的,所以尝试通过M.2转接pcie X 4,最后一条PCIE2.0 X 16转接成M.2作为启动盘。
到货测试:
M.2转接pcie X 4 翻车,卖家证实,不支持AMD平台,
PCIE2.0 X 16转接成M.2,可以启动

得了,又多了一张无用的转接卡

M.2转接pcie X 4已经销毁,卖家也给退款了,此贴应该不会更新了,路走死了

转投INTEL平台,折腾完在开一贴吧

2019-08-18 21:17

记录一下,碰到了安装esxi的时候出现了键盘失效的情况
键盘是K95 RGB
解决办法是把键盘上的BIOS跳回去
Jnicewitit-avatar

Jnicewitit

貼一下圖[img]https://img.nga.178.com/attachments/mon_201907/01/9aQ5-fshcKeT3cS1ph-2b.png.medium.jpg[/img]
[img]https://img.nga.178.com/attachments/mon_201907/01/9aQ5-24x3ZcT3cS17z-iv.png.medium.jpg[/img]

有點想裝個WIN10直通顯卡鍵鼠玩玩。
iDergy-avatar

iDergy

关注一下,也在考虑这么折腾一个...
Jnicewitit-avatar

Jnicewitit

補個速度測試
[img]https://img.nga.178.com/attachments/mon_201907/01/9aQ5-amnaK2bT3cSqc-fw.png.medium.jpg[/img]
230M的帶寬跑迅雷全速下載,CPU占用在40~60之間跳動。
DartHoze-avatar

DartHoze

建议铲掉exsi改pve走硬件直通路线。网卡也不用这么折腾了。
Slickmamba-avatar

Slickmamba

楼主方便分享下ros op和裙子的软包吗?

之前我也折腾了一轮,但是op和裙子的文件包疑似有问题,重启宿主机之后就无法对op和裙子开机...

主机是i3220 ,h61主板,8g内存,另外买了块双口i350-t2。奇怪的是这块网卡我查过应该是支持直通的,但是在esxi下看支持直通的设备却没有。
Jnicewitit-avatar

Jnicewitit

Reply to [pid=349033136,17748973,1]Reply[/pid] Post by [uid=141986]karyo[/uid] (2019-07-01 17:47)ESXI就我自己的感覺還是比PVE好用,到時候實在不行再跳車....期待I350T4不要翻
Jnicewitit-avatar

Jnicewitit

Reply to [pid=349034303,17748973,1]Reply[/pid] Post by [uid=60248092]windowson[/uid] (2019-07-01 17:52)目前我查到的資料:支持sr-iov的平台一定支持VT-D,反之不一定,SR-IOV还需要在BIOS里手动启用,仅支持CPU直连的PCIE通道,PCH连接的PCIE不支持
原文鏈接:[url]http://koolshare.cn/thread-154567-1-12.html[/url],僅作爲參考,我空下來之後在打包一下文件吧
Slickmamba-avatar

Slickmamba

Reply to [pid=349039847,17748973,1]Reply[/pid] Post by [uid=42865642]二寶是不可能抽的[/uid] (2019-07-01 18:20)

谢谢~

这套系统还有个诡异的地方,原本内存是4+8g两条,但是插上网卡之后2号位的内存识别不出来了,不知道是不是跟某些通道被占了有关..
GenialLoki-avatar

GenialLoki

最喜欢看这种贴,实用,有参考价值。
天秤-avatar

天秤

lz这一套多少钱,另外功耗多少,120瓦电源能带几台?
Jnicewitit-avatar

Jnicewitit

Reply to [pid=349050386,17748973,1]Reply[/pid] Post by [uid=231478]sunelims[/uid] (2019-07-01 19:19)價格已更新至主貼,功耗手頭沒有儀器可以測
DartHoze-avatar

DartHoze

Reply to [pid=349063364,17748973,1]Reply[/pid] Post by [uid=42865642]二寶是不可能抽的[/uid] (2019-07-01 20:42)
我帮你估算下吧。intel网卡待机功耗10w+cpu主板其他功耗40w左右。 日常待机48w起了
Jnicewitit-avatar

Jnicewitit

Reply to [pid=349064244,17748973,1]Reply[/pid] Post by [uid=141986]karyo[/uid] (2019-07-01 20:48)我查intel官網看TDP也就5W?,看來到時候真的買個測功耗的看看
Jnicewitit-avatar

Jnicewitit

同樣230M的下載速度,ROS固件下。
PVE J1900 2C[img]https://img.nga.178.com/attachments/mon_201907/03/9aQ5-91zgZaT3cSze-jo.png[/img]
Jnicewitit-avatar

Jnicewitit

DSM下的PLEX硬解4K測試 :

4Core
8G RAM
SSD磁盤
4K很流暢,但是基本不能拖進度條。
1080P秒開隨便跑。
Slickmamba-avatar

Slickmamba

所以最后是选了plan b、换了张网卡实现了吗?
ikon-avatar

ikon

主网络和nas分开放。主网用j1900。nas装黑群加opwrt。主网要保证绝对稳定。
Jnicewitit-avatar

Jnicewitit

Reply to [pid=349650187,17748973,1]Reply[/pid] Post by [uid=60248092]windowson[/uid] (2019-07-04 13:24)確實是實現了,但用這張網卡會導致玩游戲的時候ping突然爆炸,那張老的就沒有這個情況,頭疼
!cxllum!-avatar

!cxllum!

[s:ac:哭笑]这个id莫非是个咕哒