⑴ 常见的数据分析软件有哪些
好的数据分析工具可以让数据分析事半功倍,更容易处理数据。分析一下市面上流行的四款大数据分析软件:
一、Excel
Excel使用人群众多是新手入门级数据分析工具,也是最基本的数据分析工具之一。Excel主要学习使用常用函数、快捷键操作、基本图表制作、数据透视表等。Excel具有多种强大的功能,可以满足大多数数据分析工作的需要。而且Excel提供了相当友好的操作界面,对于有基本统计理论的用户来说更容易上手。
二、sql软件
SQL是一种数据库语言,它具有数据操作和数据定义功能,交互性强,能给用户带来很大方便。SQL专注于Select、聚合函数和条件查询。关联库是目前应用较广的数据库管理系统,技术较为成熟。这类数据库包括mysql.SQLServer.Oracle.Sybase.DB2等等。
SQL作为一种操作命令集,以其丰富的功能受到业界的广泛欢迎,成为提高数据库运行效率的保证。SQLServer数据库的应用可以有效提高数据请求和返回速度,有效处理复杂任务,是提高工作效率的关键。
三、Python软件
Python提供了能够简单有效地对对象进行编程的高级数据结构。Python语法和动态类型,以及解释性语言的本质,使它成为大多数平台上写脚本和快速开发应用的编程语言,并可用于可定制软件中的扩展程序语言。丰富的Python标准库提供了源代码或机器代码,适用于各种主要系统平台。Python有极其简单的解释文档,所以更容易上手。
四、BI工具
BI工具是商业智能(Busines Inteligence)分析工具的英文缩写。它是一个完整的大数据分析解决方案,可以有效地整合企业中现有的数据,快速准确地提供报表和帮助领导作出决策的数据依据,帮助企业做出明智的业务决策。BI工具是根据数据分析过程设计的。首先是数据处理,数据清理,然后是数据建模,最后是数据可视化,用图表识别问题,影响决策。
在思迈特软件Smartbi的例子中,Smartbi以工作流的形式为库表提取数据模型的语义,通过可视化工具来处理数据,使其成为具有语义一致性和完整性的数据模型;它也增强了自助式数据集建立数据模型的能力。该系统支持的数据预处理方法有:采样、分解、过滤与映射、列选择、空值处理、合并列、合并行、元数据编辑、线选择、重复值清除、排序等等。
它能通过表格填写实现数据采集和补录,并能对数据源进行预先整合和处理,通过简单的拖放产生各种可视图。同时,提供了丰富的图标组件,可实时显示相关信息,便于利益相关者对整个企业进行评估。
目前市场上的大数据分析软件很多,如何选择取决于企业自身的需求。因此,企业在购买数据分析软件之前,首先要了解企业数据分析的目的是什么。假如你是数据分析的新手,对需求了解不多,不妨多试试BI工具,BI工具在新手数据分析方面还是比较有优势的。
⑵ SQLServer
SQLServer2008R2基于SQLServer2008提供可靠高效的智能数据平台构建而成,SQLServer2008R2提供了大量新改进,可帮助您的组织满怀信心地调整规模、提高IT效率并实现管理完善的自助BI。此版本中包含应用程序和多服务器管理、复杂事件处理、主数据服务及最终用户报告等方面的新功能和增强功能。
SQLServer2008R2新派芦增了大量重要功能,在性能和可扩展性方面也有了极大提升。主要功能包括:
PowerPivot:
这是一种自主托管分析方案,帮助终端用户在IT管理环境中使用Excel2010和SharePoint2010访问、分析和共享企业数据。
主数据服务:
帮助IT组织实现中央管理全公司及跨系统的重要数据资产,允许更多用户安全地直接管理主数据。
应用程序和多服务器管理:
帮助企业前摄地管理数据库环境。
ReportBuilder3.0
其主要特性包括:
实用性高的可信赖和可扩展平台,主数据服务支持异构系统间的数据协调,能够实现对大规模复杂事件的处理,并支持多达256个逻辑处理器的大型应用程序。
通过对多种数据库应用程序、实例或服务器的集银羡信中管理提高IT和开发人员的效率,加快应用程序的开发和部署,通过WindowsServer2008R2中的Hyper-V来完善对虚拟化和实时锋轮迁移的支持。
可托管的自助式商业智能(self-servicebusiness)赋予企业用户在无IT支持的情况下创建并分享强大的商业智能(BI)方案的能力,同时还可以使用Excel和SharePoint中最新的PowerPivot技术监控和管理终端用户生成的BI方案
⑶ 如何查表是否有索引 sqlserver
1、本文以表pi_content为例,相应的字段为([piid] int, [seqnum] int,[phname] nvarchar(50),[content] nvarchar(MAX)),数据量为百万级。
⑷ 在oracle中有没有像sqlserver profiler的分析工具
没有sqlserver profiler类似的工具
oracle通过em只能监控顶级性能的sql
通过查询V$系列视图,可以看到sql执行情况
但和sqlserver profiler比,功能相差较大
⑸ 如何使用loadrunner测试SQL查询语句的性能
第一步测试准备 第二步配置ODBC数据源 第三步录制SQL语句在Sql Server查询分析器中的运行过程 第四步优化录制脚本设置事务 第五步改变查询数量级查看SQL语句的性能 第六步在controller中运行脚本 下面开始具体的介绍 测试准备阶段我们首先要确认测试数据库服务器我们可以在本地安装SQLSERVER数据库服务端及客户端也可以确定一台装好的SQL SERVER服务器 接下来准备测试数据对数据库测试时我们要考虑的不是SQL语句是否能够正确执行而是在某数量级的情况下SQL语句的执行效率及数据库服务的运行情况所以我们分别准备不同数量级的测试数据即根据实际的业务情况预估数据库中的记录数在本次讲解中我们不考虑业务逻辑也不考虑数据表之间的关系我们只建立一张表并向此表中加入不同数量级的数据如分别加入条条条条数据查看某SQL语句的执行效率 在查询分析器中运行如下脚本 创建测试数据库 create database loadrunner_test; use loadrunner_test 创建测试数据表 create table test_table (username varchar()sex intage intaddress varchar()post int) 通过一段程序插入不同数量级的记录具体的语法在这里就不多说了 declare @i int set @i=while @i< //循环次可以根据测试数据情况改变插入条数 begin BEGIN TRAN T insert into test_table (usernamesexageaddresspost) values (户瑞海+cast(@i as varchar)@i@i+北京市和平里+cast(@i as varchar)+号); IF @@ERROR <> begin rollback; select @@error end else begin commit; set @i = @i+ end end 好了执行完上述语句后建立的数据表中已经有条记录了下面进行第二步的操作配置ODBC数据源为了能让loadrunner能够通过ODBC协议连接到我们建立的SQL SERVER数据路我们需要在本机上建立ODBC数据源建立方法如下 控制面板—性能和维护—管理工具—数据源(ODBC)添加在列表中选择SQL SERVER点击完成根据向导输入数据源名称链接的服务器下一步输入链接数据库的用户名和密码更改链接的数据库完成ODBC的配置如果配置正确的话在最后一步点击测试数据源会弹出测试成功的提示 配置好ODBC数据源后就要录制SQL语句在查询分析器中的执行过程了 打开loadrunner选择ODBC协议 在start recording中的application type 选择win applicationprogram to record中录入SQL SERVER查询分析器的路径\安装目录\isqlwexe 开始录制首先通过查询分析器登录SQL SERVER在打开的查询分析器窗口中输入要测试的SQL语句如select * from test_table; 在查询分析器中执行该语句执行完成后结束录制 好了现在就可以看到loadrunner生成的脚本了(由于脚本过长在这里就不粘贴了有需要的朋友可以加我QQ我把脚本发给你们)通过这些语句我们可以看出登录数据库的过程执行SQL语句的过程 接下来我们来优化脚本我们分别为数据库登录部分和执行SQL语句的部分加一个事物在增加一个double的变量获取事务执行时间简单内容如下 Action() { double trans_time; //定义一个double型变量用来保存事务执行时间 lr_start_transaction(sqserver_login); //设置登录事务的开始 lrd_init(&InitInfo DBTypeVersion); //初始化链接(下面的都是loadrunner生成的脚本了大家可以通过帮助查到每个函数的意思) lrd_open_context(&CtxLRD_DBTYPE_ODBC ); lrd_db_option(Ctx OT_ODBC_OV_ODBC ); lrd_alloc_connection(&Con LRD_DBTYPE_ODBC Ctx /*Unused*/ ); ……………… trans_time=lr_get_transaction_ration( sqserver_login ); //获得登录数据库的时间 lr_output_message(sqserver_login事务耗时 %f 秒 trans_time); //输出该时间 lr_end_transaction(sqserver_login LR_AUTO); //结束登录事务 lr_start_transaction(start_select);//开始查询事务 lrd_cancel( Csr /*Unused*/ ); lrd_stmt(Csr select * from test_table;\r\n /*None*/ );//此句为执行的SQL lrd_bind_cols(Csr BCInfo_D ); lrd_fetch(Csr PrintRow ); …………… trans_time=lr_get_transaction_ration( start_select ); //获得该SQL的执行时间 lr_output_message(start_select事务耗时 %f 秒 trans_time); //输出该时间 lr_end_transaction(start_select LR_AUTO); //结束查询事务 优化后在执行上述脚本后就可以得到登录到数据库的时间及运行select * from test_table这条语句的时间了当然我们也可以根据实际情况对该条语句进行参数化可以测试多条语句的执行时间也可以将该语句改为调用存储过程的语句来测试存储过程的运行时间 接下来把该脚本在controller中运行设置虚拟用户数设置集合点这些操作我就不说了但是值得注意的是没有Mercury 授权的SQL SERVER用户license在运行该脚本时回报错提示You do not have a license for this Vuser type Please contact Mercury Interactive to renew your license我们公司穷啊买不起loadrunner所以我也无法继续试验希望有license朋友们监控一下运行结果! 最起码在VUGen中运行该脚本我们可以得到任意一个SQL语句及存储过程的执行时间如果我们测试的B/S结构的程序我们也可以通过HTML协议录制的脚本在CONTROLLER中监控SQL SERVER服务器的性能情况这样两方面结合起来就可以对数据库性能做一个完整的监控了