• 2

請問有AI工作站或伺服器使用經驗的前輩嗎?

因為公司打算導入網路AI客服
就派我去聽一場相關服務的發表會

發表會提到服務是透過上傳資料來避免AI亂回
可是資料多少牽扯到隱私的問題、更怕資料外流出去==

QA環節我就有發問,想知道他們資料會存在哪
最終得到的回覆是存在他們的雲端伺服器
但有補充如果服務建在公司本地端資料就能存在自己公司
就是需要一些相應的硬體規格

後來回公司就有開始查AI工作站的商品
在PChome找到兩台跟輝達配合的AI工作站
分別是Altos GB10 f1跟技嘉 Ai TOP Atom
看官網規格好像差不多,還都加入自家AI系統
能方便開發者快速完成訓練、推論與部署
但價格上Altos GB10 F1 相對便宜不少

想問如果想把發表會聽到的AI客服服務
用這台來放他們做好的模型,最後我們再自己匯入資料規範AI
不知道是否可行呢?還請各位專業人員解惑了,感謝
2026-01-02 10:46 發佈
要先弄懂軟體規格再找硬體,如果要使用發表會的那套,那至少要先弄懂他們能不能在本地自建服務器

如果發表會那套是在x86運行,那選arm的設備可能要花一個月的時間重新編譯,還不見得會成功

不是發表會那套,那還是要先懂要用的能不能在arm的設備運作

別說x86跟arm差很大,就算nvidia支援的CUDA版本,硬體使用的CUDA較新,軟體也很多地方要重新編譯

訓練要在使用的環境確認後才可規劃,所以源頭還是要用哪套做客服問題

AI的問題問AI會快一點,直接放網址給AI去分析會較簡單,或請AI做規劃
我是不懂啦!啥酷達啥啊裡啊達… 但重要資料自己要離線備份呀!硬碟也不是說多貴…. 
Bobbybob wrote:
想問如果想把發表會聽到的AI客服服務用這台來放他們做好的模型,最後我們再自己匯入資料規範AI

哪一家不講,當大家是半仙?
你應該直接問提供解決方案的廠家啊

問他們自架設備需要什麼 OS ( Linux? Windows? ) 及硬體

你提的二家硬體都是NVIDIA GB10 迷你超級電腦 128GB RAM 4TB SSD + DGX OS, PCHome 上的價格差二萬

若突然電腦/網路掛了怎麽辦? 不需要準備二台? 還是掛了就改人工?

自架有比較好? 有懂得維護的資工人員? 要如何做資料備份?

或者問是否可能只用他們的服務, 但資料庫可放在你們公司指定的任何地方/伺服器?

這樣根本不需超級電腦
泰倫特斯

以前伺服器多數沒什麼保固、隔日到府換機更是沒有隔壁版有人有開箱Altos那台啊,我看留言有人講到這牌好像就有這種服務?!技嘉的就要再查查了不然電腦當掉頭真的是會很痛

2026-01-06 15:09
好奇+1,我們也想做AI客服,但聽了幾個相關服務,也是卡在資料要上傳雲端
公司有預購一台來當地端個人助理,幫我們處理公司法務資料整理,避免資料丟到雲端,給你參考
可以直接問安圖斯的客服吧

他們有官方Line能問
yalovesport

雖然Altos有客服可回,也是要先給他們發表會那套的模型,不然客服再厲害也回不出來R

2026-01-07 10:37
先別急著決定買軟、硬體。很多人連客服反應和知識庫的差異都不知道。

AI百百款,你的功能需求是哪方面,要列出來,才好找相對應的產品。
Bobbybob wrote:
但有補充如果服務建在公司本地端資料就能存在自己公司
就是需要一些相應的硬體規格


既然你有提問,對方當下告訴你"需要一些相應的硬體規格"

那就直接問他們需要哪種硬體,來做本地搭建對應它們的AI模型就好。

丟上來大家也不會通靈...

然後提到的技嘉 Ai TOP Atom
這些迷你機器都是偏以個人、工作室計算為主,

機器內部並無太多的儲存擴充空間,
是否能支撐商業級龐大的客服資料鏈儲存? 要確捏

你要做的不是在網路上亂買這些迷你雞,

而是確認相容規格後,聯絡可架站的廠商例如廣達 (Quanta)鴻海 (Foxconn)、
技嘉本身也有...等...伺服器搭建部門來協助公司搭建。

(不要想成超大型積架式伺服器哪種,
他們也賣小企業用塔式的AI訓練多儲存伺服器)

而且有專門的軟硬體服務這樣對資料才有保障。
  • 2
內文搜尋
X
評分
評分
複製連結
Mobile01提醒您
您目前瀏覽的是行動版網頁
是否切換到電腦版網頁呢?