資料庫表查詢去重復的資料庫

① 教你刪除Oracle資料庫中重復沒用的數據

在對資料庫進行操作過程中我們可能會碰到這種情況 表中的數據可能重復出現 使我們對資料庫的操作過程中帶來很多的不便 那麼怎麼刪除這些重復沒有用的數據呢?

重復數據刪除技術可以提供更大的備份容量 實現更長時間的數據保留 還能實現備份數據的持續驗證 進步數據恢復服務水平 方便實現數據容災凱段等 重復的數據可能有這樣兩種情況 第一種時表中只有某些欄位一樣 第二種是兩行記錄完全一樣 Oracle資料庫重復數據刪除技術有如下優勢 更大的備份容量 數據能得到持續驗證 有更高的數據恢復服務水平 方便實現備份數據的容災

一皮搏 刪除部分欄位重復數據

先來談談如何查詢重復的數據吧

下面語句可以查詢出那些數據是重復的

select 欄位 欄位 count(*) from 表名 group by 欄位 欄位 having count(*) >

將上面的>號改為=號就可以查詢出沒有重復的數據了

想要刪除這些重復的數據 可以使用下面語句進行刪除

delete from 表名 a where 欄位 欄位 in

(select 欄位 欄位 count(*) from 表名 group by 欄位 欄位 having count(*) > )

上面的語句非常簡單 就是將查詢到的數據刪除掉 不過這種刪除執行的效率非常低 對於大數據量來說 可能會將資料庫弔死 所以我建議先將查詢到的重復的數據插入到一個暫時表中 然後對進行刪除 這樣 執行刪除的時候就不用再進行一次查詢了 如下

create TABLE 暫時表 AS

(select 欄位 欄位 count(*) from 表名 group by 欄位 欄位 having count(*) > )

上面這句話就是建立了暫時表 並將查詢到的數據插入其中

下面就可以進行這樣的刪除操作了

delete from 表名 a where 欄位 欄位 in (select 欄位 欄位 from 暫時表);

這種先建暫時表再進行刪除的操作要比直接用一條語句進行刪除要高效得多

這個時候 大家可能會跳出來說 什麼?你叫我們執行這種語句 那不是把所有重復的全都刪除嗎?而我們想保留重復數據中最新的一條記錄啊!大家不要急 下面我就講一下如何進行這種操作

在oracle中 有個隱藏了自動rowid 裡面給每條記錄一個唯一的rowid 我們假如想保留最新的一條記錄

我們就可以利用這個欄位 保留重復數據中rowid最大的一條記錄就可以了

下面是查詢重復數據的一個例子

以下是引用片段 selecta rowid a *from表名awherea rowid!=(selectmax(b rowid)from表名bwherea 欄位 =b 欄位 anda 欄位 =b 欄位 )

下面我就來講解一下 上面括弧中的語句是查詢出重復數據中rowid最大的一條記錄

而外面就是查詢出除了rowid最大之外的其他重復的數據了

由此 我們要刪除重復數據 只保留最新的一條數據 就可以這樣寫了

deletefrom表名awherea rowid!=(selectmax(b rowid)from表名bwherea 欄位 =b 欄位 anda 欄位 =b 欄位 )

隨便說一下 上面盯握譽語句的執行效率是很低的 可以考慮建立暫時表 講需要判定重復的欄位 rowid插入暫時表中 然後刪除的時候在進行比較

createtable暫時表asselecta 欄位 a 欄位 MAX(a ROWID)dataidfrom正式表aGROUPBYa 欄位 a 欄位 ;deletefrom表名awherea rowid!=(selectb dataidfrom暫時表bwherea 欄位 =b 欄位 anda 欄位 =b 欄位 );mit;

二 完全刪除重復記錄

對於表中兩行記錄完全一樣的情況 可以用下面語句獲取到去掉重復數據後的記錄

select distinct * from 表名

可以將查詢的記錄放到暫時表中 然後再將原來的表記錄刪除 最初將暫時表的數據導回原來的表中 如下

createTABLE暫時表AS(selectdistinct*from表名);truncatetable正式表; 注 原先由於筆誤寫成了droptable正式表; 現在已經改正過來insertinto正式表(select*from暫時表);droptable暫時表;

假如想刪除一個表的重復數據 可以先建一個暫時表 將去掉重復數據後的數據導入到暫時表 然後在從暫時表將數據導入正式表中 如下

insertINTOt_table_bakselectdistinct*fromt_table;

三 怎樣快速刪除oracle資料庫

最快的方法就進入注冊表 在運行 里輸入regedit

依次展開HKEY_LOCAL_MACHINE SOFARE

找到ORACLE節點 刪除

然後刪除ORACLE數據文件 安裝的時候選的路徑

② oracle資料庫中怎樣刪除一個表的重復數據

這個問題就是要刪除表中叢橡重納山復的記錄，查詢的sql語句如下：x0dx0aselect id,name from (x0dx0aselect id,name,row_numer() over(partition by id,name order by id,name) rn from tableA)x0dx0awhere rn>1;x0dx0a刪除的sql語洞鄭中句如下：x0dx0aDELETE tableA WHERE ROWNUM = (SELECT ROWNUMx0dx0a FROM (SELECT id,name,x0dx0a ROW_NUMBER() OVER(PARTITION BY id,name ORDER BY id,name) RNx0dx0a FROM tableA )x0dx0a WHERE RN > 1);

③ 如何查找和刪除資料庫中的重復數據

法一:
用Group
by語句
此查找很快的select
count(num),
max(name)
from
student
–查找表中num列重復的，列出重復的記錄數，並列出他的name屬性group
by
numhaving
count(num)
>;1
–按num分組後找出表中num列重復，即出現次數大於一次delete
from
student(上面Select的)這樣的話就把所有重復的都刪除了。—–慎重法二:當表比較大(例如10萬條以上)時,這個方法的效率之差令人無法忍受,需要另想辦法:—-
執行下面SQL語句後就可以顯示所有DRAWING和DSNO相同且重復的記錄SELECT
*
FROM
EM5_PIPE_PREFABWHERE
ROWID!=(SELECT
MAX(ROWID)
FROM
EM5_PIPE_PREFAB
D
–D相當於First,SecondWHERE
EM5_PIPE_PREFAB.DRAWING=D.DRAWING
ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);—-
執行下面SQL語句後就可以刪除所有DRAWING和DSNO相同且重復的記錄DELETE
FROM
EM5_PIPE_PREFABWHERE
ROWID!=(SELECT
MAX(ROWID)
FROM
EM5_PIPE_PREFAB
DWHERE
EM5_PIPE_PREFAB.DRAWING=D.DRAWING
ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);法一:
用Group
by語句
此查找很快的select
count(num),
max(name)
from
student
–查找表中num列重復的，列出重復的記錄數，並列出他的name屬性group
by
numhaving
count(num)
>;1
–按num分組後找出表中num列重復，即出現次數大於一次delete
from
student(上面Select的)這樣的話就把所有重復的都刪除了。—–慎重法二:當表比較大(例如10萬條以上)時,這個方法的效率之差令人無法忍受,需要另想辦法:—-
執行下面SQL語句後就可以顯示所有DRAWING和DSNO相同且重復的記錄SELECT
*
FROM
EM5_PIPE_PREFABWHERE
ROWID!=(SELECT
MAX(ROWID)
FROM
EM5_PIPE_PREFAB
D
–D相當於First,SecondWHERE
EM5_PIPE_PREFAB.DRAWING=D.DRAWING
ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);—-
執行下面SQL語句後就可以刪除所有DRAWING和DSNO相同且重復的記錄DELETE
FROM
EM5_PIPE_PREFABWHERE
ROWID!=(SELECT
MAX(ROWID)
FROM
EM5_PIPE_PREFAB
DWHERE
EM5_PIPE_PREFAB.DRAWING=D.DRAWING
ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);

④ 如何查找和刪除資料庫中的重復數據

法一: 用Group by語句 此查找很快的select count(num), max(name) from student –查找表中num列重復的，列出重復的記錄數，並列出他的name屬性group by numhaving count(num) >;1 –按num分組後找出表中num列重復，即出現次數大於一次delete from student(上面Select的)這樣的話就把所有重復的都刪除了。—–慎重法二:當表比較大(例如10萬條以上)時,這個方法的效率之差令人無法忍受,需要另想辦法:—- 執行下面SQL語句後就可以顯示所有DRAWING和DSNO相同且重復的記錄SELECT * FROM EM5_PIPE_PREFABWHERE ROWID!=(SELECT MAX(ROWID) FROM EM5_PIPE_PREFAB D –D相當於First,SecondWHERE EM5_PIPE_PREFAB.DRAWING=D.DRAWING ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);—- 執行下面SQL語句後就可以刪除所有DRAWING和DSNO相同且重復的記錄DELETE FROM EM5_PIPE_PREFABWHERE ROWID!=(SELECT MAX(ROWID) FROM EM5_PIPE_PREFAB DWHERE EM5_PIPE_PREFAB.DRAWING=D.DRAWING ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);法一: 用Group by語句 此查找很快的select count(num), max(name) from student –查找表中num列重復的，列出重復的記錄數，並列出他的name屬性group by numhaving count(num) >;1 –按num分組後找出表中num列重復，即出現次數大於一次delete from student(上面Select的)這樣的話就把所有重復的都刪除了。—–慎重法二:當表比較大(例如10萬條以上)時,這個方法的效率之差令人無法忍受,需要另想辦法:—- 執行下面SQL語句後就可以顯示所有DRAWING和DSNO相同且重復的記錄SELECT * FROM EM5_PIPE_PREFABWHERE ROWID!=(SELECT MAX(ROWID) FROM EM5_PIPE_PREFAB D –D相當於First,SecondWHERE EM5_PIPE_PREFAB.DRAWING=D.DRAWING ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);—- 執行下面SQL語句後就可以刪除所有DRAWING和DSNO相同且重復的記錄DELETE FROM EM5_PIPE_PREFABWHERE ROWID!=(SELECT MAX(ROWID) FROM EM5_PIPE_PREFAB DWHERE EM5_PIPE_PREFAB.DRAWING=D.DRAWING ANDEM5_PIPE_PREFAB.DSNO=D.DSNO);

⑤ SQL查詢，如何去除重復的記錄

sql查詢去除重復值語句x0dx0asql 單表/多表查詢去除重復記錄x0dx0a單表distinctx0dx0ax0dx0a多表group byx0dx0ax0dx0agroup by 必須放在 order by 和 limit之前，不然會報錯x0dx0ax0dx0a************************************************************************************x0dx0ax0dx0a1、查找表中多餘的重復記錄，重復記錄是根據單個欄位（peopleId）來判斷x0dx0ax0dx0aselect * from peoplex0dx0ax0dx0awhere peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1)x0dx0a2、刪除表中多餘的重復記錄，重復記錄是根據單個欄位（peopleId）來判斷，只留有rowid最逗臘飢小的記山返錄x0dx0ax0dx0adelete from peoplex0dx0awhere peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1)x0dx0aand rowid not in (select min(rowid) from people group by peopleId having count(peopleId )>1)x0dx0a3、查找表中多餘的重復記錄（多個欄位）x0dx0ax0dx0aselect * from vitae ax0dx0awhere (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)x0dx0a4、刪除表中局鎮多餘的重復記錄（多個欄位），只留有rowid最小的記錄x0dx0adelete from vitae ax0dx0awhere (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)x0dx0aand rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)x0dx0a5、查找表中多餘的重復記錄（多個欄位），不包含rowid最小的記錄x0dx0ax0dx0aselect * from vitae ax0dx0awhere (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)x0dx0aand rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>

⑥ sql中如何刪除一個表中重復的記錄

sql中刪除一個表中的重復記錄可以采褲晌用如下步驟：

1、把a_dist表的記錄用distinct去重，結果放到臨時表中。

select distinct * into #temp from a_dist;

2、把a_dist表的記錄全部刪除。

delete from a_dist;

3、把臨時表中旦虛的數據信息導進到a_dist表中，並刪除臨時表。

insert into a_distselect * from #temp;

drop table #temp;

(6)資料庫表查詢去重復的資料庫擴展閱讀：

SQL (結構化查詢語言)是用於執行查詢的語法。在資料庫上執行的大部分工作都由 SQL 語句完成。SQL 語言包含用於更新、插入和刪除記錄的模純燃語法。

增刪改查指令構成了 SQL 的 DML 部分：

• SELECT- 從資料庫表中獲取數據

• UPDATE- 更新資料庫表中的數據

• DELETE- 從資料庫表中刪除數據

• INSERT INTO- 向資料庫表中插入數據

⑦ oracle查詢出來的數據如何消除重復數據

oracle查詢出來的數據消除重復卜彎數據的具體步驟如下：

1、首先我消襲們查看錶中重復的數拿弊兄據。

⑧ 如何查找資料庫中的重復數據

1、查找表中多餘的重復記錄，重復記錄是根據單個欄位（peopleId）來判斷

select * from peoplewhere peopleId in (select peopleId from people group by peopleId having count (peopleId) > 1)

2、刪除表中多餘的重復記錄，重復記錄是根據單個欄位（peopleId）來判斷，只留有rowid最小的記錄

delete from peoplewhere peopleId in (select peopleId from people group by peopleId having count (peopleId) > 1)and rowid not in (select min(rowid) from people group by peopleId having count(peopleId )>1)

3、查找表中多餘的重復記錄（多個欄位）

select * from vitae awhere (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having

(8)資料庫表查詢去重復的資料庫擴展閱讀

FROM子句指定SELECT語句查詢及與查凳凱詢相關的表或視圖。在FROM子句中最多可指定256個表或視圖，它們之間用逗號分隔。

在FROM子句同時指定多個表或視圖時，如果選擇列表中存在同名列，這時應使用對象名限定這些列所屬的表或視圖。

例如在usertable和citytable表中同時存在cityid列，在查詢兩個表中的cityid時應使用下面語句格式加以限定：

SELECTusername,citytable.cityid

FROMusertable,citytable

WHEREusertable.cityid=citytable.cityid

在FROM子句中可用以下兩種格式為表或視圖指定別名：

表名 as 別名

表名 別名

參考資蔽讓料：百棗並喚度網路 SELECT語句

⑨ SQL查詢，如何去除重復的記錄

首先，先說明一個問題。這樣的結果出現，說明系統設計是有問題的。
其次
刪除重復數據，你要提供你是什麼資料庫。
不同資料庫會有不叢掘同的解決方案。
關鍵字Distinct
去除重復，如下列SQL，去除Test相同的記錄；
1.
select
distinct
Test
from
Table
2.
如果是要刪除表中存在的重復記錄，那就邏輯處理，如下：
3.
select
Test
from
Table
group
by
Test
having
count（test)>1
4.
先查詢存在重復的數據，後面根據條件刪除
還有一個更簡單的方法可以嘗試一下：
select
aid,
count(distinct
uid)
from
表名
group
by
aid
這是sqlserver
的寫滲慶核法。

如圖一在數據表中有兩個膀胱沖差核洗重復的記錄。

2
可以通過sql語句「select
*from
表名
where
編碼
in(select
編碼
from
表名
group
by
編碼
having
count(1)
>=
2)」來查詢出變種所有重復的記錄如圖二

3
通過sql語句"
delete
from
表名
where
編碼
in(select
編碼
from
表名
group
by
編碼
having
count(1)
>=
2)
and
編碼
not
in
(select
max(編碼)from
表名
group
by
編碼
having
count(1)
>=2)
"來刪除重復的記錄只保留編碼最大的記錄

⑩ 如何查找資料庫中的重復數據

實現方式如下：