❶ 大數據技術平台有哪些
Java：只要了解一些基礎即可，做大數據不需要很深的Java 技術，學java SE 就相當於有學習大數據。基礎
Linux：因為大數據相關軟體都是在Linux上運行的，所以Linux要學習的扎實一些，學好Linux對你快速掌握大數據相關技術會有很大的幫助，能讓你更好的理解hadoop、hive、hbase、spark等大數據軟體的運行環境和網路環境配置，能少踩很多坑，學會shell就能看懂腳本這樣能更容易理解和配置大數據集群。還能讓你對以後新出的大數據技術學習起來更快。
好說完基礎了，再說說還需要學習哪些大數據技術，可以按我寫的順序學下去。
Oozie：既然學會Hive了，我相信你一定需要這個東西，它可以幫你管理你的Hive或者MapRece、Spark腳本，還能檢查你的程序是否執行正確，出錯了給你發報警並能幫你重試程序，最重要的是還能幫你配置任務的依賴關系。我相信你一定會喜歡上它的，不然你看著那一大堆腳本，和密密麻麻的crond是不是有種想屎的感覺。
Hbase：這是Hadoop生態體系中的NOSQL資料庫，他的數據是按照key和value的形式存儲的並且key是唯一的，所以它能用來做數據的排重，它與MYSQL相比能存儲的數據量大很多。所以他常被用於大數據處理完成之後的存儲目的地。
Kafka：這是個比較好用的隊列工具，隊列是干嗎的？排隊買票你知道不？數據多了同樣也需要排隊處理，這樣與你協作的其它同學不會叫起來，你干嗎給我這么多的數據(比如好幾百G的文件)我怎麼處理得過來，你別怪他因為他不是搞大數據的，你可以跟他講我把數據放在隊列里你使用的時候一個個拿，這樣他就不在抱怨了馬上灰溜溜的去優化他的程序去了，因為處理不過來就是他的事情。而不是你給的問題。當然我們也可以利用這個工具來做線上實時數據的入庫或入HDFS，這時你可以與一個叫Flume的工具配合使用，它是專門用來提供對數據進行簡單處理，並寫到各種數據接收方(比如Kafka)的。
Spark：它是用來彌補基於MapRece處理數據速度上的缺點，它的特點是把數據裝載到內存中計算而不是去讀慢的要死進化還特別慢的硬碟。特別適合做迭代運算，所以演算法流們特別稀飯它。它是用scala編寫的。Java語言或者Scala都可以操作它，因為它們都是用JVM的。
❷ 公司有很多應用系統，有推薦的統一數據存儲平台嗎
推薦了解XEDP 平台，XSKY星辰天鉛歲槐合的這款產品在很不錯的。它可以同時提供塊、文件和對象多介面，可以支撐企業各種各樣的應用負載，能實現雀伏多應用數據的統一存槐友儲管理。
❸ 在數據資源化管理上比較靠譜的數據存儲軟體大家推薦一個
數據採集一般分為了傳統的工具採集（寫好的一個採集程序輸入你要採集的內容自動採集）
定製化的採集（數據公司給你為你量身定製一套採集程序根據你的需求給你定製化的採集）
通用的工具採集
火車頭、八爪魚採集器 、神箭手採集平台、集搜客GooSeeKer等
這類採集工具的好處是費用低，適宜針對小數量的數據採集，但是面對返爬蟲技術稍高的網頁無能為力，且面對大量復雜的數據也無能為力！
定製採集
探碼科技、iDataAPI
定製採集的話你面對的不是工具而是面對面的與人交談，你提需求數據公司幫你實現，效果好，更精準，安全。適宜數量大，數據要求質量高精準的行業！
插入鏈接的是有代表性的公司和工具可以去了解下！
大數據分析平台是一個集成性的平台，可以將企業用戶所用的數據接入，然後在該平台上進行處理，最後對得到的數據，通過各種方式進行分析展示。
大數據平台應該是集數據整合、數據處理、數據存儲、數據分析、可視化、數據採集填報等功能為一體，真正幫助企業挖掘數據背後的業務邏輯，洞悉數據的蛛絲馬跡，發現數據的潛在價值。億信華辰的一站式數據分析平台ABI，就是大數據分析平台的一個典型代表。該平台融合了數據源適配、ETL數據處理、數據建模、數據分析、數據填報、工作流、門戶、移動應用等核心功能。採用輕量級SOA架構設計、B/S模式，各模塊間無縫集成。支持廣泛的數據源接入。數據整合模塊支持可視化的定義ETL過程，完成對數據的清洗、裝換、處理。數據集模塊支持資料庫、文件、介面等多方式的數據建模。數據分析模塊支持報表分析、敏捷看板、即席報告、幻燈片、酷屏、數據填報、數據挖掘等多種分析手段對數據進行分析、展現、應用。
❹ 數據存儲平台有好的選擇嗎
想選個好的，還是有的。
❺ 可以介紹下比較主流的數據存儲平台嗎
時下比較主流的是XSKY星辰天合的XEDP 平台，操作簡單。它可以承接各種形態的數據，能夠實現從單資源池數台到數百台的不停機水平擴展，能夠滿足海量的數據存儲管理需求。
❻ 什麼數據存儲軟體的兼容性比較高
1. Ceph
Ceph是一個強大的存儲系統，它在同一個系統中同時提供了對象，塊（通過RBD）和文件存儲。無論您是希望在虛擬機中使用塊設備，還是將非結構化數據存儲在對象存儲中，Ceph都可以在一個平台上提供所有功能，並且還能獲得出色的靈活性。 Ceph中的所有內容都以對象的形式存儲，不管原始的數據類型是什麼，RADOS（reliable autonomic distributed object store）都會把它們當做對象來進行存儲。
RADOS層確保數據始終保持一致狀態並且可靠。Ceph會通過數據復制，故障檢測和恢復，以及跨群集節點進行數據遷移和重新平衡來實現數據一致性。 Ceph提供了一個符合POSIX的網路文件系統（CephFS），旨在實現高性能，大數據存儲以及與傳統應用程序的最大兼容。Ceph可以通過各種編程語言或者radosgw（RGW）實現無縫的訪問對象存儲，（RGW）這是一種REST介面，它與為S3和Swift編寫的應用程序兼容。另一方面，Ceph的RADOS塊設備（RBD）可以訪問在整個存儲集群中條帶化和復制的塊設備映像。
Ceph的特性
獨立、開放和統一的平台：將塊，對象和文件存儲組合到一個平台中，包括最新添加的CephFS
兼容性：您可以使用Ceph 存儲對外提供最兼容Amazon Web Services（AWS）S3的對象存儲。
精簡配置模式：分配存儲空間時，只是虛擬分配容量，在跟進使用情況佔用實際磁碟空間。這種模式提供了更多的靈活性和磁碟空間利用率。
副本：在Ceph Storage中，所有存儲的數據都會自動從一個節點復制到多個其他節點。默認任何時間群集中的都有三份數據。
自我修復：Ceph Monitors會不斷監控你的數據集。一旦出現一個副本丟失，Ceph會自動生成一個新副本，以確保始終有三份副本。
高可用：在Ceph Storage中，所有存儲的數據會自動從一個節點復制到多個其他的節點。這意味著，任意節點中的數據集被破壞或被意外刪除，在其他節點上都有超過兩個以上副本可用，保證您的數據具有很高的可用性。
Ceph很強大：您的集群可以用於任何場景。無論您希望存儲非結構化數據或為數據提供塊存儲或提供文件系統，或者希望您的應用程序直接通過librados使用您的存儲，而這些都已經集成在一個Ceph平台上了。
可伸縮性：C
❼ 在大數量級的數據存儲上，比較靠譜的分布式文件存儲有哪些
一、 Ceph
Ceph最早起源於Sage就讀博士期間的工作、成果於2004年發表，並隨後貢獻給開源社區。經過多年的發展之後，已得到眾多雲計算和存儲廠商的支持，成為應用最廣泛的開源分布式存儲平台。
二、 GFS
GFS是google的分布式文件存儲系統，是專為存儲海量搜索數據而設計的，2003年提出，是閉源的分布式文件系統。適用於大量的順序讀取和順序追加，如大文件的讀寫。注重大文件的持續穩定帶寬，而不是單次讀寫的延遲。
三、 HDFS
HDFS(Hadoop Distributed File System)，是一個適合運行在通用硬體(commodity hardware)上的分布式文件系統，是Hadoop的核心子項目，是基於流數據模式訪問和處理超大文件的需求而開發的。該系統仿效了谷歌文件系統(GFS)，是GFS的一個簡化和開源版本。
❽ 數據雲平台有哪些
數據雲平台：
1.
阿里雲,適合中小企業;
2.
騰訊雲,適合游戲客戶、開發者、APP用戶等;
3.
小鳥雲,適合中小型及大型企業;
4.
華為雲,適合政府、大中型企業、銀行等大客戶。
❾ 數據分析平台有哪些
作為一個新興的市場領域，自助式BI的廠商眾多，不同廠商推出的自助式BI產品，在易用性、復雜性和功能上各不相同。有些產品可能主要用於簡單的儀表盤和可視化，而不能承擔更復雜的任務，如自助數據准備、數據發現或互動式可視化探索。也有類似於Smartbi的全能型BI工具，支持從多數據源整合、ETL數據處理、數據建模、數據可視化、數據分析、數據填報、移動應用的全線功能。總之，選擇適合自己的自助式BI，大幅降低商業智能的使用門檻，是企業從數據分析中獲益的最快早旦路徑。像思邁特軟體開發的Smartbi自助分析平台，它主要圍繞業務人員提供企業級數分析工具和服務，以業務、問題為向導，讓企業里的每一個人釋放數據價模孫值，讓大數據應用和分析走進員工和管理者工作中，激發各層人員對數據的認知、挖掘和運用；通過推動全員自助分析、數據共享，提升企業數據資產價值，促進業務發展、風險控制和內部管理，進而推動數字化轉型大數據可視化是進行各種大數據分析解決的最重要組成部分之一，通過思邁特軟體Smartbi數據加工工作都得到了極大的簡化，採用「類Excel數據透視表」的設計，多維分析不再需要建立模型，就能夠組合維度、匯總計算、切片、鑽取，洞察數據。不僅如此，任何欄位都可直接作為輸出欄位或篩選條件，輕松實現對數據的查詢與探索。Smartbi產品功能設計全面，涵蓋數據提取、數據管理、數據分析、數據共享四個環節，幫助客戶從數據的角度描述業務現狀，分析業陸碼擾務原因，預測業務趨勢，推動業務變革。
思邁特軟體Smartbi個人用戶全功能模塊長期免費試用
馬上免費體驗:Smartbi一站式大數據分析平台
❿ 各位知道在數據容災方面做的比較突出的數據存儲平台有哪些品牌
XSKY星辰天合的XEDP 平台在數據容災上非常專業。平台支持本地和跨站點等多種方式數據保護，支持延展集群的方式實現同城雙活，雙活和災備方面非常有產品優勢的。