⑴ 常見的數據分析軟體有哪些
好的數據分析工具可以讓數據分析事半功倍,更容易處理數據。分析一下市面上流行的四款大數據分析軟體:
一、Excel
Excel使用人群眾多是新手入門級數據分析工具,也是最基本的數據分析工具之一。Excel主要學習使用常用函數、快捷鍵操作、基本圖表製作、數據透視表等。Excel具有多種強大的功能,可以滿足大多數數據分析工作的需要。而且Excel提供了相當友好的操作界面,對於有基本統計理論的用戶來說更容易上手。
二、sql軟體
SQL是一種資料庫語言,它具有數據操作和數據定義功能,交互性強,能給用戶帶來很大方便。SQL專注於Select、聚合函數和條件查詢。關聯庫是目前應用較廣的資料庫管理系統,技術較為成熟。這類資料庫包括mysql.SQLServer.Oracle.Sybase.DB2等等。
SQL作為一種操作命令集,以其豐富的功能受到業界的廣泛歡迎,成為提高資料庫運行效率的保證。SQLServer資料庫的應用可以有效提高數據請求和返回速度,有效處理復雜任務,是提高工作效率的關鍵。
三、Python軟體
Python提供了能夠簡單有效地對對象進行編程的高級數據結構。Python語法和動態類型,以及解釋性語言的本質,使它成為大多數平台上寫腳本和快速開發應用的編程語言,並可用於可定製軟體中的擴展程序語言。豐富的Python標准庫提供了源代碼或機器代碼,適用於各種主要系統平台。Python有極其簡單的解釋文檔,所以更容易上手。
四、BI工具
BI工具是商業智能(Busines Inteligence)分析工具的英文縮寫。它是一個完整的大數據分析解決方案,可以有效地整合企業中現有的數據,快速准確地提供報表和幫助領導作出決策的數據依據,幫助企業做出明智的業務決策。BI工具是根據數據分析過程設計的。首先是數據處理,數據清理,然後是數據建模,最後是數據可視化,用圖表識別問題,影響決策。
在思邁特軟體Smartbi的例子中,Smartbi以工作流的形式為庫表提取數據模型的語義,通過可視化工具來處理數據,使其成為具有語義一致性和完整性的數據模型;它也增強了自助式數據集建立數據模型的能力。該系統支持的數據預處理方法有:采樣、分解、過濾與映射、列選擇、空值處理、合並列、合並行、元數據編輯、線選擇、重復值清除、排序等等。
它能通過表格填寫實現數據採集和補錄,並能對數據源進行預先整合和處理,通過簡單的拖放產生各種可視圖。同時,提供了豐富的圖標組件,可實時顯示相關信息,便於利益相關者對整個企業進行評估。
目前市場上的大數據分析軟體很多,如何選擇取決於企業自身的需求。因此,企業在購買數據分析軟體之前,首先要了解企業數據分析的目的是什麼。假如你是數據分析的新手,對需求了解不多,不妨多試試BI工具,BI工具在新手數據分析方面還是比較有優勢的。
⑵ SQLServer
SQLServer2008R2基於SQLServer2008提供可靠高效的智能數據平台構建而成,SQLServer2008R2提供了大量新改進,可幫助您的組織滿懷信心地調整規模、提高IT效率並實現管理完善的自助BI。此版本中包含應用程序和多伺服器管理、復雜事件處理、主數據服務及最終用戶報告等方面的新功能和增強功能。
SQLServer2008R2新派蘆增了大量重要功能,在性能和可擴展性方面也有了極大提升。主要功能包括:
PowerPivot:
這是一種自主託管分析方案,幫助終端用戶在IT管理環境中使用Excel2010和SharePoint2010訪問、分析和共享企業數據。
主數據服務:
幫助IT組織實現中央管理全公司及跨系統的重要數據資產,允許更多用戶安全地直接管理主數據。
應用程序和多伺服器管理:
幫助企業前攝地管理資料庫環境。
ReportBuilder3.0
其主要特性包括:
實用性高的可信賴和可擴展平台,主數據服務支持異構系統間的數據協調,能夠實現對大規模復雜事件的處理,並支持多達256個邏輯處理器的大型應用程序。
通過對多種資料庫應用程序、實例或伺服器的集銀羨信中管理提高IT和開發人員的效率,加快應用程序的開發和部署,通過WindowsServer2008R2中的Hyper-V來完善對虛擬化和實時鋒輪遷移的支持。
可託管的自助式商業智能(self-servicebusiness)賦予企業用戶在無IT支持的情況下創建並分享強大的商業智能(BI)方案的能力,同時還可以使用Excel和SharePoint中最新的PowerPivot技術監控和管理終端用戶生成的BI方案
⑶ 如何查表是否有索引 sqlserver
1、本文以表pi_content為例,相應的欄位為([piid] int, [seqnum] int,[phname] nvarchar(50),[content] nvarchar(MAX)),數據量為百萬級。
⑷ 在oracle中有沒有像sqlserver profiler的分析工具
沒有sqlserver profiler類似的工具
oracle通過em只能監控頂級性能的sql
通過查詢V$系列視圖,可以看到sql執行情況
但和sqlserver profiler比,功能相差較大
⑸ 如何使用loadrunner測試SQL查詢語句的性能
第一步測試准備 第二步配置ODBC數據源 第三步錄制SQL語句在Sql Server查詢分析器中的運行過程 第四步優化錄制腳本設置事務 第五步改變查詢數量級查看SQL語句的性能 第六步在controller中運行腳本 下面開始具體的介紹 測試准備階段我們首先要確認測試資料庫伺服器我們可以在本地安裝SQLSERVER資料庫服務端及客戶端也可以確定一台裝好的SQL SERVER伺服器 接下來准備測試數據對資料庫測試時我們要考慮的不是SQL語句是否能夠正確執行而是在某數量級的情況下SQL語句的執行效率及資料庫服務的運行情況所以我們分別准備不同數量級的測試數據即根據實際的業務情況預估資料庫中的記錄數在本次講解中我們不考慮業務邏輯也不考慮數據表之間的關系我們只建立一張表並向此表中加入不同數量級的數據如分別加入條條條條數據查看某SQL語句的執行效率 在查詢分析器中運行如下腳本 創建測試資料庫 create database loadrunner_test; use loadrunner_test 創建測試數據表 create table test_table (username varchar()sex intage intaddress varchar()post int) 通過一段程序插入不同數量級的記錄具體的語法在這里就不多說了 declare @i int set @i=while @i< //循環次可以根據測試數據情況改變插入條數 begin BEGIN TRAN T insert into test_table (usernamesexageaddresspost) values (戶瑞海+cast(@i as varchar)@i@i+北京市和平里+cast(@i as varchar)+號); IF @@ERROR <> begin rollback; select @@error end else begin commit; set @i = @i+ end end 好了執行完上述語句後建立的數據表中已經有條記錄了下面進行第二步的操作配置ODBC數據源為了能讓loadrunner能夠通過ODBC協議連接到我們建立的SQL SERVER數據路我們需要在本機上建立ODBC數據源建立方法如下 控制面板—性能和維護—管理工具—數據源(ODBC)添加在列表中選擇SQL SERVER點擊完成根據向導輸入數據源名稱鏈接的伺服器下一步輸入鏈接資料庫的用戶名和密碼更改鏈接的資料庫完成ODBC的配置如果配置正確的話在最後一步點擊測試數據源會彈出測試成功的提示 配置好ODBC數據源後就要錄制SQL語句在查詢分析器中的執行過程了 打開loadrunner選擇ODBC協議 在start recording中的application type 選擇win applicationprogram to record中錄入SQL SERVER查詢分析器的路徑\安裝目錄\isqlwexe 開始錄制首先通過查詢分析器登錄SQL SERVER在打開的查詢分析器窗口中輸入要測試的SQL語句如select * from test_table; 在查詢分析器中執行該語句執行完成後結束錄制 好了現在就可以看到loadrunner生成的腳本了(由於腳本過長在這里就不粘貼了有需要的朋友可以加我QQ我把腳本發給你們)通過這些語句我們可以看出登錄資料庫的過程執行SQL語句的過程 接下來我們來優化腳本我們分別為資料庫登錄部分和執行SQL語句的部分加一個事物在增加一個double的變數獲取事務執行時間簡單內容如下 Action() { double trans_time; //定義一個double型變數用來保存事務執行時間 lr_start_transaction(sqserver_login); //設置登錄事務的開始 lrd_init(&InitInfo DBTypeVersion); //初始化鏈接(下面的都是loadrunner生成的腳本了大家可以通過幫助查到每個函數的意思) lrd_open_context(&CtxLRD_DBTYPE_ODBC ); lrd_db_option(Ctx OT_ODBC_OV_ODBC ); lrd_alloc_connection(&Con LRD_DBTYPE_ODBC Ctx /*Unused*/ ); ……………… trans_time=lr_get_transaction_ration( sqserver_login ); //獲得登錄資料庫的時間 lr_output_message(sqserver_login事務耗時 %f 秒 trans_time); //輸出該時間 lr_end_transaction(sqserver_login LR_AUTO); //結束登錄事務 lr_start_transaction(start_select);//開始查詢事務 lrd_cancel( Csr /*Unused*/ ); lrd_stmt(Csr select * from test_table;\r\n /*None*/ );//此句為執行的SQL lrd_bind_cols(Csr BCInfo_D ); lrd_fetch(Csr PrintRow ); …………… trans_time=lr_get_transaction_ration( start_select ); //獲得該SQL的執行時間 lr_output_message(start_select事務耗時 %f 秒 trans_time); //輸出該時間 lr_end_transaction(start_select LR_AUTO); //結束查詢事務 優化後在執行上述腳本後就可以得到登錄到資料庫的時間及運行select * from test_table這條語句的時間了當然我們也可以根據實際情況對該條語句進行參數化可以測試多條語句的執行時間也可以將該語句改為調用存儲過程的語句來測試存儲過程的運行時間 接下來把該腳本在controller中運行設置虛擬用戶數設置集合點這些操作我就不說了但是值得注意的是沒有Mercury 授權的SQL SERVER用戶license在運行該腳本時回報錯提示You do not have a license for this Vuser type Please contact Mercury Interactive to renew your license我們公司窮啊買不起loadrunner所以我也無法繼續試驗希望有license朋友們監控一下運行結果! 最起碼在VUGen中運行該腳本我們可以得到任意一個SQL語句及存儲過程的執行時間如果我們測試的B/S結構的程序我們也可以通過HTML協議錄制的腳本在CONTROLLER中監控SQL SERVER伺服器的性能情況這樣兩方面結合起來就可以對資料庫性能做一個完整的監控了