Query Data Store

SQL Server’da çoğu zaman query’lerden dolayı sistemlerde problemler yaşayabiliriz. Çözüm için bazı zamanlarda query’de tuning yapmamız gerekebilir. Her zaman olmasa da kılavuz olarak kendimize ‘Sınırsız kaynak yoktur Performance Tuning vardır’ sözünü ilke edinebiliriz. SQL Server query’ler de sıklıkla karşılaştığımız problemlerden biride SQL Server’ın doğasında olan Parameter Sniffing’tir. Bu durumda kullanılan execution plan değişebilir ve normalde ms’lerde gelebilecek sorgular dakikalarca cevap alamayız. Sonuç olarak bu durum sistemde bottleneck’e sebep olur ve servisin kapanmasına kadar gidebilir. Microsoft bu ve benzeri durumların önüne geçebilmek için 2016 yılında Query Data Store (QDS) özelliğini tanıttı. QDS ile query’ler toplanıp, diskte depolanarak kullanması gereken plana force ederek sorguları hızlandırabiliriz. Query Data Store’un topladığı tüm sorguları aşağıdaki script ile kontrol edebilirsiniz. SELECT TOP 100     qp.last_execution_time [qp__last_execution_time],     ( select qt.query_sql_text for xml path, type ) query_sql_text,     len(qt.query_sql_text) sql_length,          round(rs.avg_duration ,5) avg_duration     ,max_rowcount,avg_rowcount,last_rowcount FROM     sys.query_store_plan qp     INNER JOIN sys.query_store_query         [q]        ON qp.query_id […]

Query Data Store

SQL Server’da çoğu zaman query’lerden dolayı sistemlerde problemler yaşayabiliriz. Çözüm için bazı zamanlarda query’de tuning yapmamız gerekebilir.

Her zaman olmasa da kılavuz olarak kendimize ‘Sınırsız kaynak yoktur Performance Tuning vardır’ sözünü ilke edinebiliriz.

SQL Server query’ler de sıklıkla karşılaştığımız problemlerden biride SQL Server’ın doğasında olan Parameter Sniffing’tir.

Bu durumda kullanılan execution plan değişebilir ve normalde ms’lerde gelebilecek sorgular dakikalarca cevap alamayız.

Sonuç olarak bu durum sistemde bottleneck’e sebep olur ve servisin kapanmasına kadar gidebilir.

Microsoft bu ve benzeri durumların önüne geçebilmek için 2016 yılında Query Data Store (QDS) özelliğini tanıttı.

QDS ile query’ler toplanıp, diskte depolanarak kullanması gereken plana force ederek sorguları hızlandırabiliriz.

Query Data Store’un topladığı tüm sorguları aşağıdaki script ile kontrol edebilirsiniz.

SELECT

TOP 100

    qp.last_execution_time [qp__last_execution_time],

    ( select qt.query_sql_text for xml path, type ) query_sql_text,

    len(qt.query_sql_text) sql_length,     

    round(rs.avg_duration ,5) avg_duration

    ,max_rowcount,avg_rowcount,last_rowcount

FROM

    sys.query_store_plan qp

    INNER JOIN sys.query_store_query         [q]        ON qp.query_id = q.query_id

    INNER JOIN sys.query_store_query_text    [qt]       ON q.query_text_id = qt.query_text_id

    INNER JOIN sys.query_store_runtime_stats [rs]       ON qp.plan_id = rs.plan_id

order by len(qt.query_sql_text) desc

 

İlgili database üzerine gelip sağ tıklayıp properties dedikten sonra en altta Query Store özelliğini görebilirsiniz.

 

Aşağıdaki script ile QDS ilgili database üzerinde açılır.

alter database [AdventureWorks2017]  set query_store = on
go
alter database [AdventureWorks2017]  set query_store (operation_mode =read_write)
go

Yukarıdaki script ile QDS açıldıktan sonra değerlerin konfigüre edilmesi gerekmektedir.

Özellikle Operation Mode querylerin hem okunup hem yazılmasını istiyorsak bu mode seçilmeli. Eğer planı Force etmek istiyorsak Read Write olması gerekmektedir.


Eğer yukarıda belirttiğimiz boyut dolarsa tekrar yazamayacaktır. O yüzden QDS’in temizlenmesi gerekmektedir. Aşağıdaki script ile bu işlemi yapabilirsiniz.

 

alter database [AdventureWorks2017] set query_store clear all

or

EXEC sys.sp_query_store_flush_db

Aynı işlemi Purge Query Data butonu ile de yapabilirsiniz.

QDS için kullanılabilecek tüm store procedure ve viewları aşağıdaki script ile bulabilirsiniz.

select * from sys.all_objects where name like '%query_store%' or name ='%query_content_setings%'

QDS sorgularına ilişkin monitoring için yukarıdaki özellikleri inceleyebilirsiniz.

QDS özelliğini kapatmak isterseniz aşağıdaki script yardımı ile kapatabilirsiniz.

alter database [AdventureWorks2017]  set query_store = off

***QDS kullanımında özellikle dikkat edilmesi gereken hususlar!!!

1-) QDS özelliği aktif edildikten sonra DATA_FLUSH_INTERVAL_SECONDS özelliği default olarak 15 dakika olarak ayarlanır. Bu özellik toplanan sorguların ne aralıkla disklerden boşalacağını bize söyler. Toplanan sorguların optimizasyonu için verilerin bir kısmı Memory’de saklanır. Tüm bu verileri diske yazmak maliyet oluşturur. Bu yüzden sorguları geçici olarak memory’de saklar. DATA_FLUSH_INTERVAL_SECONDS özelliği de verilerin bellekten diske boşaltacağı süreyi belirler. Sunucu beklenmedik şekilde shutdown olduğunda bu süre zarfında toplanan verileri diske yazmak için beklemeniz gerekmektedir. Bu süreyi yoğun sistemlerde tahmin etmek oldukça güçtür. Bunun yerine –T7745 trace Flag’ını kullanarak. Makine kapatıldığında SHUTDOWN WITH NOWAIT komutu ile eşdeğer olan 7745 trace flag kullanarak diske yazmadan hızlı bir şekilde makinayı katabilirsiniz. Fakat bu süreçte QDS tarafından toplanan veriler kaybolacaktır.

2-) SQL Server Servisi açıldığında QDS sorguları toplmaya başlar ve bir anda memory’i işgal etmeye başlar. Özellikle bu süreç failover sonrası yük devralma esnasında memory’i kullanmak isteyen QDS, sistemin yük almasına engel teşkil eder. Bu durumda WAIT_INFO bilgisinde QDS_LOADDB olarak görebilirsiniz. Bu durum olası krizler (HA/DR) için kullandığınız failover’a yeni bir disaster durumu yaratabilir. Bu sorunun çözümü için –T7752 trace flag eklenerek, sistemin memory’i rahatça kullanması sağlanabilir.

Benzer Yazılar

SQL SERVER SERViS RESTART HATASI

SQL Server 2 hafta önce

Bu haftaki yazımızda karşılan bir hata üzerindeki; logları ve çözümünü anlatacağım. Aşağıdaki GÖRSEL-1’de görüldüğü üzere SQL servisini restart ettiğimiz sırada bir hata ile karşılaşıyoruz. Servis running state’e geçemiyor. “The request failed or the service did not respond in a timely fashion. Consult the event log or other applicable error logs for details” şeklinde bir uyarı veriyor. Hatanın çözümüne doğru ilerlerken farklı servis hesaplarıyla veya “Local System” hesabı ile restart etmeye çalıştığınızda servis ilginç bir şekilde ayağa kalkıyor. Ancak Always on sistem çalışıyorsanız farklı servis hesaplarını kullandığınızda always on size haberleşme izni vermiyor. Aynı hesabın şifresi ile ilgili sorunlar olduğu düşünüp hesabın şifresini de değiştirdiğiniz de yine sonuç alamıyorsunuz. Burdan yola çıkıldığında sıkıntı servis hesabında gibi görünüyor olabilir ancak çözüme geçildiğinde regedit üzerinde yapacağımız bir işlem ile sorunu çözüyoruz. Servis hesabının kaydının olduğu regedit kaydını siliyoruz. Regedit üzerindeki servis hesap bilgisi güncellendiğinde sorun çözülmüş olmakta. GÖRSEL-1  Servis restart edildiğinde SQL’in verdiği Error […]

SQL’DE İKİ NODE’UN RESOLVING DURUMA DÜŞMESİ VE ÇÖZÜMÜ

SQL Server 1 ay önce

Bu yazımızda failover olma işlemi esnasında karşılaşılan bir durumdan kısaca bahsedeceğim. Kısa bir yazı olacak ama önemli olduğunu düşünüyorum. Bazen failover olmak istediğinizde cluster secondary’e node’a failover olamaz, hem secondary hem de primary node’unuz resolving durumuna geçer. Bu durumla daha çok otomatik failover olma durumlarında karşılaşılır çünkü sistem failover’a aslında hazır değildir ancak cluster bunu bir şekilde bilemez. Failover olma gerçekleşemez bir anlamda sql cluster askıda kalır ve hiçbir sunucu da sql engine çalışmaya devam edemez. (GÖRSEL-1) GÖRSEL-1 GÖRSEL-1 üzerinde gördüğünüz üzere availability group resolving duruma düşer. Availability replica’lar üzerinde de gördüğünüz üzere primary ve secondary tüm node’lar resolving state’e düşer. Böyle bir durumunda iki farklı çözüm yolumuz var;   Çözüm: ikinci node’a sunucu restart’ı atmak. Bu noktada secondary sql node’a servis restart atmak işe yaramıyor. Zaten db’ler iki taraflı resolving modda. O sebeple ancak sunucu restart atıldığında cluster ayakta olan sunucuyu görüyor ve askıda kalma durumundan ilk başta primary […]

Query Store Nedir?

SQL Server 1 ay önce

Query Store ile birlikte execution planın seçimi ve bu sürecin performansa etkisini anlayabiliriz. SQL Server içerisinde bulunan Query Store özelliği, çalıştırılan sorguların execution planını ve bu sırada oluşan istatistiklerini otomatik olarak yakalar. Böylece query plan değişikliği ile oluşan problemleri de hızlı ve kolay şekilde fark edebiliriz. Elinizde bulunan bir sorguya ait query plan zamanla değişebilir. Bunun birçok sebebi vardır. Tablo yapısına yeni bir column eklenmesi Veri tipinin değiştirilmesi Sorgularda yeni parametrelerin eklenip çıkarılması Verilerde, schemalarda veya sorgu parametrelerindeki değişiklik Burada önemli olan ise bazen bu değişimler sorgunun yavaş çalışmasına neden olur. Query Store ile beraber bu yavaşlığın kök nedenine inmek daha kolay oldu. Ayrıca query store sayesinde ilgili sorguya ait read-write bilgileri ve cpu tüketimi bilgilerine de erişebilirsiniz. Query Store’u veritabanı seviyesinde aktif edebiliyoruz. Veritabanı üzerine sağ tıklayarak properties diyoruz ve Query Store sekmesine geliyoruz. Operation Mode alanından Read Write’ı seçiyoruz. Böylelikle Query Store gerekli bilgiyi toplayabilir ve size ilgili sonuçları […]

2 Yorum

  • Ömer AKKÖK 9 Mayıs 2023

    Merhaba,

    Emeğinize sağlık güzel bir makale olmuş fakat aklıma bir soru takıldı. QDS e verdiğimiz boyut dolduğunda sql otomatik temizlemiyor mu belli periodlarda ? illa bu işi manuel mi yapmamız gerekiyor?

  • Serdar BAYRAK 9 Mayıs 2023

    Merhaba Ömer Hocam, öncelikle ilgi ve alakan için çok teşekkürler. Daha önce yoğun transaction olan bir veri tabanında QDS kullandık. Fakat disk dolduktan sonra purge etsek te bir işe yaramadı. Devamında Fazla alana ihtiyaç duyacağı için bu özelliği kapatmak zorunda kaldık. Yukarıda paylaştığım, purge etmek için kullanılan scripti bir job ile belirli aralıklarda otomatik çalıştırarak QDS için verilen disk alanı dolmadan purge etmek işe yarayabilir. Bu konu hakkında testleri yaptıktan sonra yazıya ekleyebiliriz. Değerli sorun için çok teşekkür ederim.

Yorum Yaz

Rastgele