從 20 億文件中查詢一個(gè)數(shù)據(jù)，可以秒級(jí)返回結(jié)果么？

可以。

多套業(yè)務(wù)，可以用同一套存儲(chǔ)系統(tǒng)滿足么？

也可以。

可以實(shí)現(xiàn)在存儲(chǔ)端配置管理 Windows ACL，而不訪問客戶端環(huán)境么？

當(dāng)然也可以。

這是深南電路無錫廠區(qū)管理人員在規(guī)劃新產(chǎn)線工廠時(shí)，陸續(xù)問出的三個(gè)問題。在原有的廠區(qū)和生產(chǎn)線中，他們已經(jīng)飽受相關(guān)問題折磨，從而嚴(yán)重影響了他們的工作效率。

他們需要據(jù)此實(shí)現(xiàn)數(shù)據(jù) ON Demand，即數(shù)據(jù)隨需而變：在進(jìn)行質(zhì)量檢測(cè)管理的時(shí)候，數(shù)據(jù)能夠被隨需快速查詢到；在業(yè)務(wù)系統(tǒng)需要的時(shí)候，數(shù)據(jù)能夠被隨需訪問；在工作人員和產(chǎn)品不斷變化時(shí)，相關(guān)的數(shù)據(jù)權(quán)限能夠被隨需控制。

這聽起來簡(jiǎn)直是天方夜譚，但是深南電路相信，一定有企業(yè)能夠提供合適的創(chuàng)新方案，滿足這些需求。

成立于 1984 年的深南電路，始終專注于電子互聯(lián)領(lǐng)域，經(jīng)過近 40 年的深耕與發(fā)展，已經(jīng)擁有印制電路板、電子裝聯(lián)、封裝基板三項(xiàng)業(yè)務(wù)。

在長(zhǎng)期發(fā)展的歷程中，深南電路始終致力于引入創(chuàng)新技術(shù)和先進(jìn)設(shè)備來提升生產(chǎn)效率，方能在日趨激烈的市場(chǎng)競(jìng)爭(zhēng)中脫穎而出，成長(zhǎng)為中國(guó)印制電路板行業(yè)的領(lǐng)先企業(yè)，中國(guó)封裝基板領(lǐng)域的先行者。

因此，在提升基礎(chǔ)設(shè)施能力、找到更能提升數(shù)據(jù)價(jià)值的系統(tǒng)方面，深南電路也是始終不遺余力。

在調(diào)研選型了多家廠商的方案、并進(jìn)行相關(guān)的 POC 測(cè)試驗(yàn)證之后，深南電路發(fā)現(xiàn)只有星辰天合的產(chǎn)品及解決方案的能力，可以滿足其業(yè)務(wù)規(guī)劃需求，最終選擇了與星辰天合合作，構(gòu)筑存儲(chǔ)基礎(chǔ)設(shè)施，支撐了其無錫廠區(qū)新產(chǎn)線的業(yè)務(wù)。

150 億數(shù)據(jù)

實(shí)現(xiàn)秒級(jí)查詢

怎么才能夠保證產(chǎn)品的質(zhì)量？

質(zhì)檢工作必須要及時(shí)、準(zhǔn)確。

單靠人工質(zhì)檢是難以滿足大規(guī)模的印制電路板、封裝基板等產(chǎn)品的檢測(cè)需求的，畢竟人工存在個(gè)體差異，不利于保證質(zhì)量一致性。同時(shí)，傳統(tǒng) CV 計(jì)算機(jī)視覺算法的機(jī)器視覺系統(tǒng)難以應(yīng)對(duì)缺陷位置隨機(jī)出現(xiàn)的情況。

為此，深南電路引入了基于 AI 算法的視覺缺陷檢測(cè)系統(tǒng)（AOI），實(shí)現(xiàn)了對(duì)隨機(jī)缺陷的識(shí)別和檢測(cè)，拓展了傳統(tǒng)機(jī)器視覺的應(yīng)用范圍，可以更好地實(shí)現(xiàn) PCB 缺陷識(shí)別和外觀檢測(cè)。

在該質(zhì)量檢測(cè)過程會(huì)產(chǎn)生大量的影像數(shù)據(jù)，每個(gè)機(jī)臺(tái)大概每天會(huì)產(chǎn)生 6 萬多個(gè)圖片數(shù)據(jù)，而深南電路規(guī)劃中的無錫廠區(qū)新產(chǎn)線，會(huì)建設(shè) 100 多臺(tái)生產(chǎn)封測(cè)機(jī)臺(tái)設(shè)備，包含前道和后道測(cè)試機(jī)臺(tái)，那么每天會(huì)產(chǎn)生大概 600 多萬個(gè)圖片數(shù)據(jù)，每天會(huì)新增 3.5TB 數(shù)據(jù)量。

這些數(shù)據(jù)，會(huì)按照“電子產(chǎn)品相關(guān)生產(chǎn)數(shù)據(jù)要存儲(chǔ) 3 年，汽車相關(guān)生產(chǎn)數(shù)據(jù)存儲(chǔ) 15 年”的規(guī)則，被長(zhǎng)期保存，以便在產(chǎn)品發(fā)生質(zhì)量問題時(shí)可以回溯。

為何需要數(shù)據(jù)檢索追溯？

一方面，為確保出廠產(chǎn)品質(zhì)量，質(zhì)檢員需要定期對(duì)缺陷檢測(cè)系統(tǒng)的結(jié)果進(jìn)行抽檢；另外一方面，一旦出廠產(chǎn)品出現(xiàn)問題，需要及時(shí)進(jìn)行回溯查詢，不僅要發(fā)現(xiàn)問題所在，更要去查看同一批次產(chǎn)品的質(zhì)量問題，并據(jù)此持續(xù)訓(xùn)練缺陷檢測(cè)系統(tǒng)，提高良品率。

在原無錫一期SUB-A廠，由于采用了集中式 NAS 存儲(chǔ)， 20 億文件存儲(chǔ)的情況下，查詢一個(gè)圖片，則需要數(shù)小時(shí)，會(huì)嚴(yán)重耽誤質(zhì)檢的抽查工作以及產(chǎn)品質(zhì)量回溯工作，飽受深南電路相關(guān)員工的詬病。

在新建的無錫 SUB-B 廠，深南電路預(yù)期存儲(chǔ)數(shù)據(jù)量將達(dá) 150 億個(gè)文件，希望新的存儲(chǔ)系統(tǒng)能夠滿足秒級(jí)查詢的需求，這也是他們跟星辰天合的相關(guān)技術(shù)人員反復(fù)強(qiáng)調(diào)的一個(gè)內(nèi)容。

星辰天合以數(shù)據(jù)存儲(chǔ)平臺(tái)支撐了機(jī)臺(tái)數(shù)據(jù)的存儲(chǔ)，滿足了千億文件存儲(chǔ)及管理能力，尤其是實(shí)現(xiàn)了 150 億文件秒級(jí)檢索的需求，極大地提升了深南電路質(zhì)檢工作的效率。

不僅如此，星辰天合的數(shù)據(jù)存儲(chǔ)平臺(tái)還可以實(shí)現(xiàn)機(jī)臺(tái)生產(chǎn)數(shù)據(jù)的自動(dòng)打標(biāo)簽、方便實(shí)現(xiàn)多維度查詢；也能夠?qū)崿F(xiàn)與其 AI 訓(xùn)練平臺(tái)的平滑對(duì)接，以幫助深南電路通過 AI 訓(xùn)練以提升 AOI 質(zhì)檢準(zhǔn)確度及質(zhì)檢效率。

一套存儲(chǔ)

支撐多個(gè)業(yè)務(wù)系統(tǒng)

容器云平臺(tái)對(duì)接了一套存儲(chǔ)系統(tǒng)；

對(duì)象存儲(chǔ)平臺(tái)對(duì)接了另外一套開源的存儲(chǔ)系統(tǒng)；

質(zhì)量檢測(cè)系統(tǒng)和 AI 訓(xùn)練平臺(tái)對(duì)接了星辰天合的數(shù)據(jù)存儲(chǔ)平臺(tái)。

這樣豎井式的存儲(chǔ)架構(gòu)，不僅使得數(shù)據(jù)流動(dòng)不靈活，也使得深南電路的存儲(chǔ)管理極為復(fù)雜。

存儲(chǔ)系統(tǒng)為什么不能統(tǒng)一？

深南電路在體驗(yàn)到了星辰天合的數(shù)據(jù)存儲(chǔ)平臺(tái)豐富的功能和易用的管理之后，希望能夠以一套存儲(chǔ)平臺(tái)來支撐上述的多個(gè)業(yè)務(wù)系統(tǒng)。

能夠同時(shí)支持對(duì)象、文件和塊存儲(chǔ)的統(tǒng)一數(shù)據(jù)平臺(tái) XEDP，正是星辰天合的優(yōu)勢(shì)所在。

因此，在了解到深南電路容器云平臺(tái)使用的是青云 KubeSphere，對(duì)象存儲(chǔ)平臺(tái)使用的是開源的 MinIO 之后，為了更友好的使用體驗(yàn)，星辰天合單獨(dú)為深南電路配置了 CSI 容器接口，通過 CSI-iSCSI 容器接口對(duì)接青云 kubesphere 平臺(tái)，承接其容器云后端存儲(chǔ)；同時(shí)，通過標(biāo)準(zhǔn) S3 接口直接給對(duì)象業(yè)務(wù)使用，替換原有的開源存儲(chǔ)方案。

同時(shí)，如上圖所示，在容器和對(duì)象存儲(chǔ)之外，星辰天合的統(tǒng)一數(shù)據(jù)平臺(tái) XEDP，通過 SMB/CIFS 文件接口支撐 了深南電路無錫 SUB-B 新廠區(qū)所有機(jī)臺(tái)數(shù)據(jù)存儲(chǔ)；通過 NFS 接口對(duì)接思謀 AI 平臺(tái)，直接將機(jī)臺(tái)數(shù)據(jù)共享給 NFS 做模型訓(xùn)練。

通過一套存儲(chǔ)支撐了所有的業(yè)務(wù)系統(tǒng)之后，深南電路得以構(gòu)筑更為簡(jiǎn)便的數(shù)據(jù)基礎(chǔ)設(shè)施，簡(jiǎn)化了存儲(chǔ)的管理，也得以提升了整個(gè)工廠的存儲(chǔ)使用效率，讓無錫 SUB-B 新廠區(qū)的生產(chǎn)更為高效。

存儲(chǔ)端配置 Windows ACL

效率提升 5-10 倍

沒有人愿意做大量繁復(fù)的重復(fù)勞動(dòng)。

不僅浪費(fèi)時(shí)間和精力，更重要的是無法體現(xiàn)工作的價(jià)值。

客戶端的 Windows ACL 權(quán)限配置工作，一度是令深南電路管理人員頭疼的老大難問題。

由于工廠產(chǎn)品隨客戶需求不斷變動(dòng)，相關(guān)操作人員訪問不同數(shù)據(jù)的權(quán)限也需要即時(shí)做相應(yīng)的修改，每次權(quán)限的變動(dòng)都需要管理員登錄到不同的客戶端進(jìn)行逐一的 ACL 配置修改，大量時(shí)間都被重復(fù)繁瑣的工作消耗。

深南電路的管理員非常期待，這個(gè)權(quán)限能夠在存儲(chǔ)系統(tǒng)的內(nèi)部實(shí)現(xiàn)，也就是在存儲(chǔ)端配置管理 Windows ACL，這樣他們就可以免去大量的無謂的配置工作。

Windows ACL（Access Control List，訪問控制列表）是 Windows 內(nèi)針對(duì)某一文件或目錄的 ACE（Access Control Entry）集合。每個(gè) ACE 可以針對(duì)某一用戶或用戶組設(shè)置允許或拒絕訪問某一文件或目錄，并設(shè)置創(chuàng)建文件、創(chuàng)建文件夾、刪除等十余項(xiàng)權(quán)限。在對(duì)細(xì)粒度權(quán)限管控要求較高的場(chǎng)景中，需要登陸到 Windows 客戶端，連接可訪問的 SMB 共享后，通過手工調(diào)整 ACL 來控制權(quán)限。

雖然此前這種通過 Windows 客戶端設(shè)置 Windows ACL ，是業(yè)內(nèi)普遍的管理方式，但長(zhǎng)期以來一直有統(tǒng)一管理的訴求，深南電路的管理員也并不例外。

針對(duì)深南電路的訴求，星辰天合在新版本中實(shí)現(xiàn)了該功能，并為他們進(jìn)行了在線升級(jí)之后交付。

這極大的解放了深南電路相關(guān)管理員的工作量，他們因此可以：

百億文件秒級(jí)查詢、一套存儲(chǔ)對(duì)接所有業(yè)務(wù)系統(tǒng)、存儲(chǔ)端 Windwos ACL 配置…… 

一個(gè)個(gè)需求正被滿足，一項(xiàng)項(xiàng)變化正在發(fā)生。

在星辰天合的幫助下，深南電路的生產(chǎn)線變得更加智能，管理更簡(jiǎn)化、工作效率更高，極好的滿足了深南電路對(duì)提升工廠效率的需求，這也使得深南電路在其其南通廠區(qū)的規(guī)劃中直接復(fù)制了無錫新廠區(qū)的整體方案。

兩個(gè)新廠區(qū)均啟用了 Windows ACL 管理功能，客戶可以在存儲(chǔ)端統(tǒng)一對(duì)無錫新廠區(qū)和南通新廠區(qū)進(jìn)行統(tǒng)一的用戶權(quán)限配置，大幅提高其工作效率。

正是這樣不間斷地引入新方案和部署能力更強(qiáng)的數(shù)字化方案，讓深南電路得以不斷地提升運(yùn)營(yíng)效率，可以有能力開發(fā)更多新客戶，也有更多精力有序推進(jìn)研發(fā)工作。

就在 9 月 5 日的公告中，深南電路表示公司已成為內(nèi)資最大的封裝基板供應(yīng)商、國(guó)內(nèi)領(lǐng)先的處理器芯片封裝基板供應(yīng)商。

這就是百億文件實(shí)現(xiàn)隨需應(yīng)變（On Demand）的價(jià)值，是智能存儲(chǔ)的力量，更是數(shù)字化轉(zhuǎn)型的魅力。

分享到

崔歡歡

相關(guān)推薦