Yorumları: 850
Konuları: 149
Kayıt Tarihi: 07-12-2017
Aktif Kullandığınız Delphi Sürümü:
Rep Puanı: 3.181
Uzman
09-12-2021, Saat: 18:10
(Son Düzenleme: 12-12-2021, Saat: 11:42, Düzenleyen: adelphiforumz.)
Merhabalar
Farklı 2 MS SQL server arasında en hızlı data aktarımını sağlamanın bir yolu varmıdır.
A Server'ından edilen bir sorgu sonucunu B Server'ı üzerindeki bir tabloya insert etmenin en hızlı yolu nedir acaba.
Bağlantı şekli A Server'ı B Server'ına "Linked Server" ile bağlıdır.
Sorgu sonucunda yaklaşık 5 adet integer, 3 adet datetime, 5 adet bit, 6 adet nvarchar(100) şeklinde alan mevcuttur.
Benim şu anda kullandığım yöntem başitçe aşağıdaki şekildedir.
Bu yöntemle 10.000 adet satır yaklaşık 50 saniye sürmektedir.
Insert into LNKSRV.xxxx.DB (A,B,C....)
Select A,B,C.... from LOCAL.xxxx.DB
Teşekkürler
Bu dünyada kendine sakladığın bilgi ahirette işine yaramaz.
Yorumları: 176
Konuları: 0
Kayıt Tarihi: 01-09-2016
Aktif Kullandığınız Delphi Sürümü:
Rep Puanı: 556
Acemi
10.000 Adet insert'i 50 sn sürüyorsa eğer bence Insert edilen tabloda yada Db de bir sorun var.
Geçenlerde buna benzer bir işlem yaptım 12 bin küsür satır 3 snde Insert etti.
Lınked Server aslında bu durumda en hızlı olabilecek durumlardan biri. Hatta Şahsen benim bildiğim kadarıyla en hızlı yöntem.
Diğer bir yöntem olarak bi windows service ile işlem çözülebilir.
Yorumları: 850
Konuları: 149
Kayıt Tarihi: 07-12-2017
Aktif Kullandığınız Delphi Sürümü:
Rep Puanı: 3.181
Uzman
Bir test sonucunu paylaşmak istedim.
A Sunucusu B sunucusuna 10.000 adet kaydı yazmak isterse süre 50-55 saniye civarı sürüyor.
Fakat B sunucusu A sunucundaki dataya Select çekip B sunucusuna yazarsa bu süre 1 sn ancak sürüyor.
Bu test her iki tarafın birbirinde veri alıp yazması şeklinde test edildi.
En kısa süre her zaman, Select olarak karşı serverdan bilgiyi okuyup kendisindeki veritabanına yazması şeklinde sonuçlanıyor.
Bu dünyada kendine sakladığın bilgi ahirette işine yaramaz.
Yorumları: 1.902
Konuları: 23
Kayıt Tarihi: 05-08-2016
Aktif Kullandığınız Delphi Sürümü:
Rep Puanı: 21.290
Üstad
10-12-2021, Saat: 11:21
(Son Düzenleme: 10-12-2021, Saat: 11:28, Düzenleyen: mrmarman.)
sunuculardan insert işlemi yavaş olanın tablolara tanımlı index sayısı fazla olabilir mi?
Select hızlı olsun diye olası yapılan bir index sayısı arttırımı, insert işlemlerinde ayağınıza dolanıyor olmalı.
Saygılarımla
Muharrem ARMAN
Yorumları: 645
Konuları: 85
Kayıt Tarihi: 04-10-2017
Aktif Kullandığınız Delphi Sürümü:
- Delphi 11
- Delphi 10.4
- Delphi 10.3
- Delphi 10.2
- Delphi 10.1
- Delphi 10
- Delphi XE Serisi
Rep Puanı: 2.772
Uzman
Toplu insert yaptığınızda sonuç ne oluyor acaba örn:
INSERT INTO LOCALTABLO(ALANLAR) SELECT ALANLAR FROM LINKED.DATABASE.TABLOADI
Yalnızım ama bir kente yürüyen ordu gibiyim, edebiyattan kaçınmalıyım..
Yorumları: 850
Konuları: 149
Kayıt Tarihi: 07-12-2017
Aktif Kullandığınız Delphi Sürümü:
Rep Puanı: 3.181
Uzman
10-12-2021, Saat: 14:53
(Son Düzenleme: 10-12-2021, Saat: 14:54, Düzenleyen: adelphiforumz.)
(10-12-2021, Saat: 11:21)mrmarman Adlı Kullanıcıdan Alıntı: sunuculardan insert işlemi yavaş olanın tablolara tanımlı index sayısı fazla olabilir mi?
Select hızlı olsun diye olası yapılan bir index sayısı arttırımı, insert işlemlerinde ayağınıza dolanıyor olmalı.
Auto number key alanı var
hiç index yok hocam
garip olan her iki yönde de karşıdan select yapılınca çok hızlı
(10-12-2021, Saat: 11:36)narkotik Adlı Kullanıcıdan Alıntı: Toplu insert yaptığınızda sonuç ne oluyor acaba örn:
INSERT INTO LOCALTABLO(ALANLAR) SELECT ALANLAR FROM LINKED.DATABASE.TABLOADI
Hocam örnekte belirttiğim gibi
işlemler zaten toplu 10.000 kayıt
Bu dünyada kendine sakladığın bilgi ahirette işine yaramaz.
Yorumları: 176
Konuları: 0
Kayıt Tarihi: 01-09-2016
Aktif Kullandığınız Delphi Sürümü:
Rep Puanı: 556
Acemi
Eğer tablolarda indexleme yoksa iki sunucu arasındaki kayıt hızı aynı olması lazım.
Insert Cumlenizi bir procedure yada bazen çok değişik sonuçlar veriyor
Table Function'a yazarak yapmanızı öneririm.
table functionlar iş yükünü sql'e yükleidiğinden güzel sonuçlar çıkıyor.
Birde her iki SQL Server de
Insert ve Select edeceğiniz Tablolar için öncelikle kesinlikle
UPDATE STATISTICS Tablo adı yazarak çalıştırın.
Insert cümlenizin en üstünde bu kod ile birlikte çalıştırıp bir deneyin.
DBCC DROPCLEANBUFFERS
Table Function yada Stored Procedure de denemenizi öneririm.
Yorumları: 850
Konuları: 149
Kayıt Tarihi: 07-12-2017
Aktif Kullandığınız Delphi Sürümü:
Rep Puanı: 3.181
Uzman
12-12-2021, Saat: 11:32
(Son Düzenleme: 12-12-2021, Saat: 13:42, Düzenleyen: adelphiforumz.)
(11-12-2021, Saat: 11:07)sabanakman Adlı Kullanıcıdan Alıntı: (10-12-2021, Saat: 10:20)adelphiforumz Adlı Kullanıcıdan Alıntı: ... En kısa süre her zaman, Select olarak karşı serverdan bilgiyi okuyup kendisindeki veritabanına yazması şeklinde sonuçlanıyor.

Karşıya insert işlemi yapmak yerine bunu karşıdaki tanımlı bir Stored Procedure ı çağırma şekline çevirmek uygun olur mu? Sonuçta karşıya insert işlemi çalışacak ama bunu oradaki Stored Procedure çağrıldığı için daha kısa sürede bitirecektir.
@
sabanakman
hocam buraki sorunum; Örnekte belirtiğim gibi dışarıya kapalı(A) sunucundan dışarıya açık olan (B) sunucusu üzerine veri aktarmam gerekiyor
Bu nedenle veriyi A dan okuyup B ye yazmak durumunda
Arkadaşlar son olarak aşağıdaki yöntemle yapmaya karar verdim.
Yaklaşık 2-3 sn içinde 10.000 data karşıya yazılıyor.
A sunucusuna bir servis yazıldı
B sunucusuna bir API Servis oluşturuldu
A sunucusu veriyi alıp JSON data haline çevirip 2000 lik paketler halinde B sunucusundaki API'ye basıyor
API bu JSON datayı alıp B sunucusunda oluşturulmuş TableType yapısında bir StoreProcedure basıyor
StoreProcedure TableType içindeki kayıtları toplu olarak inset yapıyor.
Sonuçta işlemler olduça kısa bir sürede bitmiş oluyor.
Fikir paylaşımı sağlayan tüm arkadaşlara tekrardan
TEŞEKKÜRLER
Bu dünyada kendine sakladığın bilgi ahirette işine yaramaz.
Yorumları: 120
Konuları: 24
Kayıt Tarihi: 03-12-2016
Rep Puanı: 112
Başlangıç
SELECT * INTO musterilerYedek FROM musteriler
bu şekilde denermisiniz?