Konuyu Oyla:
  • Derecelendirme: 0/5 - 0 oy
  • 1
  • 2
  • 3
  • 4
  • 5
Sorgu hızlandırılması yardım
#11
(04-03-2019, Saat: 12:41)r3n4m3 Adlı Kullanıcıdan Alıntı: @edo  daha fırsatım olmadı bugün deneyeceğim. Not exist ile ya ben yanlış bir şey mi yazıyorum yada başka bir şey mi gerekli kayıtlar getiremedim.

Ayrıca sunun denemesi yaptım tabiki daha az kayıta kadar bir 8 kayıtla

benim not in ile sorgusu 0,351 second

@dnzylmz@hotmail.com  arkadaşımızın verdiği sorgusu ile  0,35-0,37 cıvarında çıktı

Nasıl yazdığını söylersen yanlış bir şey mi yazıyorsun cevap verebiliriz  Rolleyes
Cevapla
#12
konuda benim ve arkadaşımız sorgusu var onları denedim sadece tekrar yazmak gereği duymadım
Cevapla
#13
"Not exist ile ya ben yanlış bir şey mi yazıyorum yada başka bir şey mi gerekli kayıtlar getiremedim." demişsiniz ne sizin sorgunuzda ne de diğer sorgularda exists kullnımı yok, dolayısıyla nasıl yazdınız da kayıt gelmedi yorum yapamıyorum  Huh
Cevapla
#14
(04-03-2019, Saat: 14:26)r3n4m3 Adlı Kullanıcıdan Alıntı: konuda benim ve arkadaşımız sorgusu var onları denedim sadece tekrar yazmak gereği duymadım

Ben sizin yerinize size zahmet olmasın diye bir test yaptım elimdeki datalar ile
onlarıda paylaşayımki belki ilerde başkalarına yardımcı olur analiz souçları 
en azından aynı konu altında toplanmış olsun istedim.

TableA Kayıt Sayısı : 591000
TableB Kayıt Sayısı : 421000
Kod Alanı : nvarchar(100) index bir alan

Select * From TableA  
Where Kod Not In (Select Kod From TableB)
Sonuç :  SQL Server Execution Times: CPU time = 1125 ms


Select * From TableA 
 Where Kod Not In (Select Kod From TableB Group By Kod)
Sonuç : SQL Server Execution Times: CPU time = 1148 ms


Select * From TableA 
        Left Join TableB On TableB.Kod = TableA.Kod
Where TableB.Kod Is Null
Sonuç : SQL Server Execution Times: CPU time = 1438 ms


Select Kod Into #Tmp From TableB Group By Kod
Select * From TableA 
     Left Join #Tmp On #Tmp.Kod = TableA.Kod
Where #Tmp.Kod Is Null
Sonuç : SQL Server parse and compile time: CPU time = 672 ms


Select Kod Into #Tmp From TableB Group By Kod
Select * From TableA
      Where Kod Not In (Select Kod From #Tmp)
Sonuç : SQL Server parse and compile time: CPU time = 612 ms
Bu dünyada kendine sakladığın bilgi ahirette işine yaramaz. 
Cevapla
#15
(02-03-2019, Saat: 12:45)adelphiforumz Adlı Kullanıcıdan Alıntı: @dnzylmz@hotmail.com peki bir sorum olacak
yazdığınız koşulda her master sorguya karşılık bir count işlemi mi oluşacak
yoksa sql bunun için önce kosullu olarak countları bulacak sonramı master ile ilişkilendirecek
eğer 2. ihtimalse bu bağlantıyı where koşulundan nasıl anlıyacak
bu kadar net nasıl daha hızlı çalışacağını varsaydınız

Merhaba,
Sorgunun en hızlı çalışması mantığına dayanarak, diğer sorgular sonucunda oluşacak kayıtlar icin count çekilecek demek en doğrusu olur. kesin konuşamamızın nedeni ORacle SQL i nasıl parse ettiğini ve çalıştırdığını tam olarak bilmediğimizden. 
Tabloların yapısını ve nasıl veriler tutulduğu ve aralarındaki ilişkiyi bilsek daha farklı SQL ler de yazılabilir.
Oracle da zorunlu olmadıkca IN , EXIST fonksiyonlarını kullanmamak gerekiyor.
Countaki tabloda where deki o 3 alan için index olup olmadığı da önemli. Varsa en hızlı yöntemlerden biri olur.
Cevapla
#16
(05-03-2019, Saat: 22:53)dnzylmz@hotmail.com Adlı Kullanıcıdan Alıntı:
(02-03-2019, Saat: 12:45)adelphiforumz Adlı Kullanıcıdan Alıntı: @dnzylmz@hotmail.com peki bir sorum olacak
yazdığınız koşulda her master sorguya karşılık bir count işlemi mi oluşacak
yoksa sql bunun için önce kosullu olarak countları bulacak sonramı master ile ilişkilendirecek
eğer 2. ihtimalse bu bağlantıyı where koşulundan nasıl anlıyacak
bu kadar net nasıl daha hızlı çalışacağını varsaydınız

Merhaba,
Sorgunun en hızlı çalışması mantığına dayanarak, diğer sorgular sonucunda oluşacak kayıtlar icin count çekilecek demek en doğrusu olur. kesin konuşamamızın nedeni ORacle SQL i nasıl parse ettiğini ve çalıştırdığını tam olarak bilmediğimizden. 
Tabloların yapısını ve nasıl veriler tutulduğu ve aralarındaki ilişkiyi bilsek daha farklı SQL ler de yazılabilir.
Oracle da zorunlu olmadıkca IN , EXIST fonksiyonlarını kullanmamak gerekiyor.
Countaki tabloda where deki o 3 alan için index olup olmadığı da önemli. Varsa en hızlı yöntemlerden biri olur.

Exists yerine count kullanmanın çok daha kötü bir fikir olduğunu düşünüyorum.  Rolleyes  Exists: var mı yok mu sorusu iken, count: kaç tane sorusudur Idea
Cevapla
#17
Merhabalar

Bir çoğu denedim hemen hemen aynı sonuca vardım. Neden derseniz örnek olarak PL/SQL üzerinde sorgu çalıştırdığınız zaman ilk 10 kayıt getirmektedir. Fakat siz bunu sonraki yüz kayıt göster derseniz daha süre istenmektedir ve sorgu sanki tekrar çalıştırıyor gibi. Sonra düşündüm ki acaba sorgu çalıştırarak bir geçici bir tabloya mı doldursam şu NOT IN sorgu eklemeden çünkü NOT IN önceki sorgu hemen hemen 20 saniye kadar o ilk gösteren 10 kayıt getiriyor. (Bu işlemleri hepsi oracle bir fonksiyona yıkıyorum delphi sadeec o fonksiyon çağıracaktır) Tablo doldurduktan sonra ikinci sorgu kullanarak gereksizleri silmek amacımdır. Silme konusunda yani tablo dolunca herhangi bir sorun yok en fazla 2-3 saniye bittiriyor işi. Fakat daha önce dediğim gibi NOT IN önceki sorgu 10K kayıt olsa da INSERT INTO TABLE (SORGU) yapılınca 10 -15 dakika arasında sürmektedir. Anlayacağınıza daha tam istediğimi alamadım.

Bakalım belki bir yolunu bulup o insert table işlemleri hızlandırabilirsem kendimce çözmüş olacağım.

Herkese Teşekkürler
Cevapla
#18
@r3n4m3 yanlış anlaşılmasın fakat MS SQL üzerinde yaptığım ve yukarıda örneklerini verdiğim sorguda 421000 civarı insert işlemi ve bunun sorgusu 612 ms tutuyor
10 - 15 dakika demişsiniz insert işlemine bir yanlışlık yok dimi
Bu dünyada kendine sakladığın bilgi ahirette işine yaramaz. 
Cevapla
#19
Sorgunun execution plan'ini paylaşır mısınız
Cevapla
#20
(06-03-2019, Saat: 09:17)edo Adlı Kullanıcıdan Alıntı:
(05-03-2019, Saat: 22:53)dnzylmz@hotmail.com Adlı Kullanıcıdan Alıntı: Merhaba,
Sorgunun en hızlı çalışması mantığına dayanarak, diğer sorgular sonucunda oluşacak kayıtlar icin count çekilecek demek en doğrusu olur. kesin konuşamamızın nedeni ORacle SQL i nasıl parse ettiğini ve çalıştırdığını tam olarak bilmediğimizden. 
Tabloların yapısını ve nasıl veriler tutulduğu ve aralarındaki ilişkiyi bilsek daha farklı SQL ler de yazılabilir.
Oracle da zorunlu olmadıkca IN , EXIST fonksiyonlarını kullanmamak gerekiyor.
Countaki tabloda where deki o 3 alan için index olup olmadığı da önemli. Varsa en hızlı yöntemlerden biri olur.

Exists yerine count kullanmanın çok daha kötü bir fikir olduğunu düşünüyorum.  Rolleyes  Exists: var mı yok mu sorusu iken, count: kaç tane sorusudur Idea

A tablosu 100
B tablosu 200 kayıt olsun

A not exist B 
komutu her 100 için o 200 kayıt içinde olup olmadığına bakar. yani toplamda 100*200 defa
Benim yazdığımda 100 kayıt için sadece 100 defa bakar. Eğer unuqie index varsa bu cok daha hızlı olur. Normal inde de de bu biraz daha yavaş olur.
Cevapla




Konuyu Okuyanlar: 1 Ziyaretçi