“大”也可能意味著代價不菲，而對于那些正在使用大數據的企業來說，成本控制是關鍵問題。想控制成本，就意味著要讓每一臺設備都實現更高的“效率”，同時還要減少那些昂貴的部件。目前，像重復數據刪除等技術已經進入到主存儲市場，而且現在還可以處理更多的數據類型，這都可以為大數據存儲應用帶來更多的價值，提升存儲效率。在數據量不斷增長的環境中，通過減少后端存儲的消耗，哪怕只是降低幾個百分點，都能夠獲得明顯的投資回報。此外，自動精簡配置、快照和克隆技術的使用也可以提升存儲的效率。
很多大數據存儲系統都包括歸檔組件，尤其對那些需要分析歷史數據或需要長期保存數據的機構來說，歸檔設備必不可少。從單位容量存儲成本的角度看，磁帶仍然是最經濟的存儲介質，事實上，在許多企業中，使用支持TB級大容量磁帶的歸檔系統仍然是事實上的標準和慣例。
對成本控制影響最大的因素是那些商業化的硬件設備，因此，很多初次進入這一領域的用戶以及那些應用規模最大的用戶，都會定制他們自己的“硬件平臺”而不是用現成的商業產品，這一舉措可以用來平衡他們在業務擴展過程中的成本控制戰略。為了適應這一需求，現在越來越多的存儲產品都提供純軟件形式，可以直接安裝在用戶已有的、通用的或者現成的硬件設備上。此外，很多存儲軟件公司還在銷售以軟件產品為核心的軟硬一體化裝置，或者與硬件廠商結盟，推出合作型產品。
