① 資料庫技術，關聯，聚類，分類有哪些方法
通常,為有監督分類提供若干已標記的模式(預分類過),需要解決的問題是為一個新遇到的但無標記的模式進行標記.在典型的情況下,先將給定的無標記的模式用來學習〔訓練),反過來再用來標記一個新模式.聚類需要解決的問題是將已給定的若千無標記的模式聚集起來使之成為有意義的聚類.從某種意義上說,標一記也與聚類相關,但這些類型的標記是由數據驅動的,也就是說,只是從數據中得到這些標記.聚類與數據挖掘中的分類不同,在分類模塊中,對於目標資料庫中存在哪些類是知道的,要做的就是將每一條記錄分別屬於哪一類標記出來:與此相似但又不同的是,聚類是在預先不知道目標資料庫到底有多少類的情況下,希望將所有的記錄組成不同的類或者說「聚類」,並且使得在這種分類情況下,以某種度量為標準的相似性,在同一聚類之間最小化,而在不同聚類之間最大化.事實上,聚類演算法中很多演算法的相似性都是基於距離的,而且由於現實資料庫中數據類型的多樣性,關於如何度量兩個含有非數值型欄位的記錄之間的距離的討論有很多,並提出了相應的演算法.在很多應用中,聚類分析得到的每一個類中的成員都可以被統一看待.
② 在sqlServer中使用索引的技巧
在SQL Server中 為了查詢性能的優化 有時我們就需要對數據表通過建立索引的方式 目的主要是根據查詢要求 迅速縮小查詢范圍 避免全表掃描
索引有兩種類型 分別是聚集索引(clustered index 也稱聚類索引 簇集索引)和非聚集索引(nonclustered index 也稱非聚類索引 非簇集索引)
聚集索引在一個表中只能有一個 默認情況下在主鍵建立的時候創建 它是規定數據在表中的物理存儲順序 我們也可以取消主鍵的聚集索引 所以必須考慮資料庫可能用到的查詢類型以及使用的最為頻繁的查詢類型 對其最常用的一個欄位或者多個欄位建立聚集索引或者組合的聚集索引 它就是SQL Server會在物理上按升序(默認)或者降序重排數據列 這樣就可以迅速的找到被查詢的數據
非聚集索主要是數據存儲在一個地方 索引存儲在另一個地方 索引帶有指針指向數據的存儲位置 索引中的項目按索引鍵值的順序存儲 而表中的信息按另一種順序存儲 可以在一個表格中使用高達 個非聚集的索引 在查詢的過程中先對非聚集索引進行搜索 找到數據值在表中的位置 然後從該位置直接檢索數據 這使非聚集索引成為精確匹配查詢的最佳方法 因為索引包含描述查詢所搜索的數據值在表中的精確位置的條目
所以我們在選擇創建聚集索引的時候要注意以下幾個方面
) 對表建立主鍵時 就會為主鍵自動添加了聚集索引 如自動編號欄位 而我們沒有必要把聚集索引浪費在主鍵上 除非你只按主鍵查詢 所以會把聚集索引設置在按條件查詢頻率最高的那個欄位或者組合的欄位
) 索引的建立要根據實際應用的需求來進行 並非是在任何欄位上建立索引就能提高查詢速度 聚集索引建立遵循下面幾個原則
包含大量非重復值的列
使用下列運算符返回一個范圍值的查詢 BEEEN > >= < 和 <=
被連續訪問的列
返回大型結果集的查詢
經常被使用聯接或 GROUP BY 子句的查詢訪問的列;一般來說 這些是外鍵列 對ORDER BY 或 GROUP BY 子句中指定的列進行索引 可以使 SQL Server 不必對數據進行排序 因為這些行已經排序 這樣可以提高查詢性能
OLTP 類型的應用程序 這些程序要求進行非常快速的單行查找(一般通過主鍵) 應在主鍵上創建聚集索引
舉例來說 銀行交易日誌中對交易日期建立聚合索引 數據物理上按順序存於數據頁上 重復值也排列在一起 因而在范圍查找時 可以先找到這個范圍的起末點 且只在這個范圍內掃描數據頁 避免了大范圍掃描 提高了查詢速度 而如果我們對員工的基本信息表中性別的欄位列上建立聚集索引 就完全沒有必要 因為內容里只涉及到 男 與 女 兩個不同值
) 在聚集索引中按常用的組合欄位建立索引 形成復合索引 一般在為表建立多個主鍵的時候就會產生 如果一個表中的數據在查詢時有多個欄位總是同時出現則這些欄位就可以作為復合索引 這樣能形成索引覆蓋 提高where語句的查詢效率
)索引對查詢有一這的優化 但由於改變一個表的內容 將會引起索引的變化 頻繁的對數據操作如insert update delete語句將導致系統花費較大的代價進行索引更新 引起整體性能的下降 一般來講 在對查詢性能的要求高於對數據維護性能要求時 應該盡量使用索引 有時在這種操作資料庫比較頻繁的某些極端情況下 可先刪除索引 再對資料庫表更新大量數據 最後再重建索引 新建立的索引總是比較好用
索引在使用了長久的時候 就會產生很多的碎片 查詢的性能就會受到影響 這時候有兩種方法解決 一是利用DBCC INDEXDEFRAG整理索引碎片 還有就是利用DBCC DBREINDEX重建索引
DBCC INDEXDEFRAG 命令是聯機操作 所以索引只有在該命令正在運行時才可用 而且可以在不丟失已完成工作的情況下中斷該操作 這種方法的缺點是在重新組織數據方面沒有聚集索引的除去/重新創建操作有效
重新創建聚集索引將對數據進行重新組織 其結果是使數據頁填滿 填滿程度可以使用 FILLFACTOR 選項進行配置 這種方法的缺點是索引在除去/重新創建周期內為離線狀態 並且操作屬原子級 如果中斷索引創建 則不會重新創建該索引
我們來看看索引重建使用的方法
語法 DBCC DBREINDEX ( [ TableName [ index_name [ fillfactor ] ] ] )
參數 TableName
是要重建其指定的索引的表名 資料庫 所有者和表名必須符合標識符的規則 有關更多信息 請參見使用標識符 如果提供 database 或 owner 部分 則必須使用單引號 ( )
將整個 database owner table_name 括起來 如果只指定 table_name 則不需要單引號
index_name 是要重建的索引名 索引名必須符合標識符的規則 如果未指定 index_name 或指定為 就要對表的所有索引進行重建
fillfactor 是創建索引時每個索引頁上要用於存儲數據的空間百分比 fillfactor替換起始填充因子以作為索引或任何其它重建的非聚集索引(因為已重建聚集索引)的新默認值 如果 fillfactor 為 DBCC DBREINDEX 在創建索引時將使用指定的起始fillfactor
我們在查詢分析器中輸入如下的命令
DBCC DBREINDEX ( MyTable )
lishixin/Article/program/SQLServer/201311/22210
③ 將兩個表聯系之後怎樣用sql實現k均值聚類
兩個表關聯只是用來獲取想要處理的數據。和單表獲取數據一樣。
聚類實現需要使用聚合函數：sum,avg,min,max等。
舉例：
select id,avg(b.price)
from a
inner join b
on a.id=b.id
④ sql server 索引 全文索引和聚類索引的區別
http://wenku..com/view/22ee60d376a20029bd642d75.html
看看文檔吧，有些東西需要耐心看下。
全文引擎使用全文索引中的信息來編譯可快速搜索表中的特定詞或片語的全文查詢。 全文索引將有關重要的詞及其位置的信息存儲在資料庫表的一列或多列中。 全文索引是一種特殊類型的基於標記的功能性索引，它是由 SQL Server 全文引擎生成和維護的。 生成全文索引的過程不同於生成其他類型的索引。 全文引擎並非基於特定行中存儲的值來構造 B 樹結構，而是基於要編制索引的文本中的各個標記來生成倒排、堆積且壓縮的索引結構。全文索引大小僅受運行 SQL Server 實例的計算機的可用內存資源限制。
從 SQL Server 2008 開始，全文索引與資料庫引擎集成在一起，而不是像 SQL Server 早期版本那樣位於文件系統中。對於新資料庫，全文目錄現在為不屬於任何文件組的虛擬對象；它僅是一個表示一組全文索引的邏輯概念。 然而，請注意，在升級 SQL Server 2005 資料庫（即包含數據文件的任意全文目錄）的過程中，將創建一個新文件組。
⑤ 在SQL中怎樣用指定索引查詢
一般來說在條件中使用索引對應的第一個欄位就可能會用到該索引。
微軟的SQL SERVER提供了兩種索引：聚集索引（clustered index，也稱聚類索引、簇集索引）和非聚集索引（nonclustered index，也稱非聚類索引、非簇集索引）。
索引是資料庫中重要的數據結構，它的根本目的就是為了提高查詢效率。現在大多數的資料庫產品都採用IBM最先提出的ISAM索引結構。
數據搜索實現角度
索引也是另外一類文件/記錄，它包含著可以指示出相關數據記錄的各種記錄。其中，每一索引都有一個相對應的搜索碼，字元段的任意一個子集都能夠形成一個搜索碼。這樣，索引就相當於所有數據目錄項的一個集合，它能為既定的搜索碼值的所有數據目錄項提供定位所需的各種有效支持。
以上內容參考：網路-資料庫索引
⑥ sql數據挖掘插件如何聚類
聚類演算法是使用非常多的一種演算法，它的作用是對數據進行分組，將特徵相近的實體組織在一起，以便幫助我們對於目標實體分類決策。典型的情況，例如人口分析，客戶分析。
聚類演算法大致的效果如下（下面的分類名都可以修改，定義成我們更加容易理解的，例如「金牌客戶」，「銀牌客戶」等等）
⑦ sql的一個聚類查詢
select SJ,COUNT(av1TestCount1) as av1TestCount1,COUNT(av1Pass) as av1Pass,case when COUNT(av1TestCount1)>0 then str(COUNT(av1Pass)*100.0/COUNT(av1TestCount1),6,2)+'%' else '' end as av1yield,
COUNT(av2TestCount1) as av2TestCount1,COUNT(av2Pass) as av2Pass,case when COUNT(av2TestCount1)>0 then str(COUNT(av2Pass)*100.0/COUNT(av2TestCount1),6,2)+'%' else '' end as av2yield
from (select case when 測試時間<=CAST(DATEADD(HOUR,-4,GETDATE()) as time) then CONVERT(char(8),DATEADD(HOUR,-5,GETDATE()),108)+'～'+CONVERT(char(8),DATEADD(HOUR,-4,GETDATE()),108)
when 測試時間<=CAST(DATEADD(HOUR,-3,GETDATE()) as time) then CONVERT(char(8),DATEADD(HOUR,-4,GETDATE()),108)+'～'+CONVERT(char(8),DATEADD(HOUR,-3,GETDATE()),108)
when 測試時間<=CAST(DATEADD(HOUR,-2,GETDATE()) as time) then CONVERT(char(8),DATEADD(HOUR,-3,GETDATE()),108)+'～'+CONVERT(char(8),DATEADD(HOUR,-2,GETDATE()),108)
when 測試時間<=CAST(DATEADD(HOUR,-1,GETDATE()) as time) then CONVERT(char(8),DATEADD(HOUR,-2,GETDATE()),108)+'～'+CONVERT(char(8),DATEADD(HOUR,-1,GETDATE()),108)
else CONVERT(char(8),DATEADD(HOUR,-1,GETDATE()),108)+'～'+CONVERT(char(8),GETDATE(),108) end as SJ,
case when 類型='av1' then 類型 end av1TestCount1,
case when 類型='av1' and 結果='pass' then 結果 end av1Pass,
case when 類型='av2' then 類型 end av2TestCount1,
case when 類型='av2' and 結果='pass' then 結果 end av2Pass
from 表) A
group by SJ
⑧ idea的sql query plugin插件怎麼用
1、Identifier Highlighter 高亮顯示選中變數插件（idea14報錯無法使用）
不安裝插件的時的快捷鍵是選中這個變數然後按Ctrl+F7
idea默認的選中變數以後，是不會像eclipse一樣提示這個變數用到的地方的。安裝這個插件以後既可以和eclipse一 樣啦
2、Key Promoter 快捷鍵提示插件
當你點擊滑鼠一個功能的時候，可以提示 你這個功能快捷鍵是什麼 ，和這個按鈕你的使用頻率
3、Jrebel 熱部署插件
MyEclipse10和2014 都是默認debugger模式 支持熱部署的。
而idea需要你安裝這個插件才會支持熱部署，所以也算個遺憾吧
4、FindBugs for IntelliJ IDEA，
通過FindBugs幫你找到隱藏的bug及不好的做法。
5、TabSwitch 通過ctrl + tab在文件，各個面板tab間切換。
6、Mybatis 插件
7、UpperLowerCapitalize 大小寫轉換插件
安裝後快捷鍵alt+P全部大寫 alt+L全部小寫 alt+C開頭字母大寫
8、generate serialversionuid 生成uuid 的插件
安裝後快捷鍵 alt+insert
9、sql query plugin 資料庫插件（這個13版本已經自帶了database插件，比這個好用。可以不安裝了）
默認快捷鍵是ctrl+alt+v ，但是和其他的快捷鍵沖突了， 建議修改為ctrl+等號
10、idea vim 模擬Linux下 vi編輯器的插件支持vi的命令
11、generateO2O 自動對象轉換插件。
方法體內可以生成對應的get set方法把一個對象對等拷貝到另一個對象里 快捷鍵 alt+insert
12、IdeaJad 反編譯插件
13、EncodingPlugin 可按項目指定其默認編碼，非常有用
14、Equals and hashCode 重寫equals和hashcode方法的自定義模板
15、unitTest 在指定的方法上按下shift + cmd + t 即可為這個方法生成單元測試代碼模板。
16、FileBrowser 在IDEA中查看項目外的文件 （目前13.1.2以上好像不支持不知道其他人怎麼樣）
17、GenerateToString 自動生成toString方法, toString方法是可定製的