Verilerin birleştirilmesi, değiştirilmesi gibi işlemleri genellikle verileri aldıktan sonra yapmaktayız. Daha doğrusu bu işlemleri ya uygulama fazında yapıyoruz  ya da veriler aktarıldıktan sonra tekrar işleme sokarak. Söz gelimi ad ve soyad bilgilerini birleştirmek istediğimizde ya kişi nesnemizdeki ad ve soyad özelliklerini aralarında bir boşluk bırakarak hesaplatıp (uygulama fazında) veritabanına gönderiyoruz.

Bir ikinci seçenek ise ad ve soyad bilgileri geldikten sonra veritabanında tekrar işleme sokarak FullName alanını elde etmemiz. Aslında bu örnek fazlasıyla geliştirilebilir.

Satış ile ilgili herhangi bir işlem yapıyorsanız muhtemelen veritabanınızdaki alanlar Brüt Satış Miktarı , Brüt Satış Tutarı, İade Satış Miktarı ve İade Satış Tutarı gibi olacaktır. Normal şartlar altında bu veriler kaynağından çekildiğinden sonra tekrar bir işleme sokularak net değerleri hesaplanmaktadır.

continue reading "Tips & Tricks: SQL Server Computed Columns"

BirçoÄŸumuz bir tablonun içeriÄŸine bakmak için SELECT * FROM … atarız tablolara ve çok da severiz, hatta kimimiz sanki 700.000 kaydı okuyacakmış gibi SQL Server IDE’sinin inleyerek dönen sorgu barına STOP dahi demez.

GeliÅŸtirme ve test aÅŸamalarında bu ÅŸekilde tablolara atılan sorgular eskiden OPEN TABLE diye açılırdı ancak 2005′ten sonra 2008 ile Microsoft bu zaafı gördü ve rastgele atılan OPEN TABLE‘ların engellenmesi için “SELECT TOP 1000 Rows” seçimini koydu…

Yurdum DBA’i bu kezde 1000 lafını SQL’den silerek çalıştırdı ki amacı test ederken rastgelen gelen bir kayıt kümesi görmekti, ilk kayıtların tam bir anlamı olmuyordu.

Ä°ÅŸte özetle söylemek istediÄŸimi anlayanlara kısa bir kod… Bu sayede artık tablonun ne kadarlık bir kek dilimini istiyorsanız alabilirsiniz.

continue reading "Tips & Tricks: Tablodan Rastgele Örneklem (TABLESAMPLE)"

Özellikle raporlama uzmanları baÅŸta olmak üzere veritabanlarında (türü ne olursa olsun) sorgulama yaparken aggregate – Türkçe’ye bilerek çevirmedim – fonksiyonlarına sıklıkla baÅŸvurmaktayız.

Bu fonksiyonları sıralayacak olursak;

• Sum (Toplam)
• Maximum (En Yüksek)
• Minimum (En Düşük)
• Count (Say)
• Count Distinct (Benzersiz Say)
• Group By (Grupla)
• Average (Aritmetik Ortalama)

Bu fonksiyonların SQL dilinde hazır metotları olsa da kimi zaman Integration Services uygulamalarımızda kullanmak durumunda kalabiliriz.

ÖrneÄŸin veri kaynağınızın bir veritabanı (MS SQL, Oracle, DB2) deÄŸilde basit olarak deÄŸer tutan dosyalar olduÄŸunu düşünün (xls, csv vs…).

Bu tip veri kaynaklarındaki verilerinize bu işlemleri yapabilmek için Data Flow Task altında Data Flow Tranformations sekmesinde yer alan Aggregate kontrolünü kullanabilirsiniz. Bu şekilde bahsettiğim veri kaynaklarında yer alan verileri temp bir tabloya yazıp daha sonradan işlem yapmak yerine kolayca çözümleyebilirsiniz.

continue reading "Tips & Tricks: SSIS Aggregate"

Bu yazımızda Microsoft SQL Server 2008 Integration Services projelerinde yer alan WMI Data Reader Task kontrolünü inceleyeceğiz. Fakat kontrolü incelemeden önce WMI ile ilgili bilgi vermenin faydalı olacağını düşünüyorum.

Win32, system gibi sınıfları barındıran WMI (Windows Management Instrumentation)  adından da anlaşılacağı gibi Windows işletim sistemindeki yönetim bilgilerine erişmemizi sağlar (disk, BIOS, işlemci, network vs.). Sınıflara erişerek gerekli bilgileri elde edebiliriz. (WQL) Bilgiler elde etmek için sınıflarda sorgulama yapabiliriz ki yapacağımız sorguların SQL deki sorgulardan hiçbir farkı yoktur.

SQL’de basit bir select sorgusu yaparken from dan sonra table ismini yazdığımız gibi burada da from dan sonra aşağıda birkaçını yazdığım class isimlerini yazıyoruz. WMI içinde sıklıkla managementobject, managementobjectsearcher, managementquery classlarını kullanırız. Gerekli sorgulamalarımızı managementobjectsearcher içine yazarız.

continue reading "Tips & Tricks: SSIS WMI Data Reader"

Kalite kavramının gelişimine baktığımızda Japon felsefesine ve özellikle de Toyota kültürüne ayrı bir yer ayırmak gerekir. Kalite anlayışının son ürün odağından uzaklaşarak genel bir bakış açısı kazanması ve toplam kalite yönetimi fikrinin gelişimi ve yayılımında Toyota’nın Yolu (Toyota Way) önemli bir sistemdir.

Peki Toyota kültürü nasıl oluşmuş ve başarı dolu geçmişe sahip bu imparatorluk nasıl bugünlere gelmiştir; işte başarı hikayesi.

Toyota’nın hikayesi, Sakichi Toyoda‘nın 19. yüzyıl sonlarında Japonya tekstil endüstrisi için bir devrim niteliÄŸi taşıyan, Japonya’nın ilk otomatik dokuma tezgahını icat etmesiyle baÅŸlar. Sakichi Toyoda, 1918 Ocak ayında Toyoda Spinning & Weaving Company‘yi (Toyoda Ä°plik ve Dokuma Åžirketi) kurmasının ardından, büyük rüyası olan otomatik dokuma tezgahını oÄŸlu Kiichiro‘nun da yardımı ile 1924 yılında tamamlar. Ä°ki yıl sonra da, Toyoda otomatik dokuma tezgahları fabrikası kurulur.

continue reading "Toyota’nın BaÅŸarı Öyküsü"

Çok hızlı bir sisteme sahipsiniz ve sırf artistik patinaj olsun diye kullanıcıyı 3 sn bekletip iÅŸlemi öyle yaptırmak istiyorsunuz…

Şaka bir yana gereksinimler gereği illaki bir sebebiniz vardır.

– WAITFOR Statement

PRINT ‘Step 1 complete. ‘;
GO
DECLARE @time_to_pass NVARCHAR(8);
SELECT @time_to_pass = N’00:00:03′;

WAITFOR DELAY @time_to_pass;
PRINT ‘Step 2 completed three seconds later. ‘;

Ne kadar veritabanına hakim olursanız olun mevcut sistemlerin birçoğu tam optimize olmadığı için bizlere veriambarlarında sıkıntı yaratabilmektedir. Söz gelimi değerlerin tekil (unique) olduğunu varsaydığınız bir alan için o şekilde hareket ettiğinizde, -veritabanında unique olarak ayarlanmamışsa-  tekrarlanan bir veri çıktığında küçük sıkıntılar yaratabilmektedir.

Bir başka durumda ise veri ambarlarına veri aktarımı sırasında değerlerin olduğu gibi alınmasıdır. Örneğin NULL değerlerimiz olduğunda veriambarı yerine raporlama sorgularında gerekli değişikliklerin yapılması sıkça karşılaşılan bir durumdur.

Verilerimiz NULL olarak veritabanına aktarılmalı mı? NULL ile boşluk aynı değer midir? Verilerimizin özellikleri nedir?

Data Profiling Task ile belirtmiş olduğumuz alanların profil özellikleri çıkartılmaktadır. Özellikle iş zekası projelerinin analiz fazında önemli bilgi vereceğini düşünmüş olduğum Integration Services’te yer alan Data Profiling Task kontrolünü inceleyeceğiz.

continue reading "Tips & Tricks: SSIS Data Profiling"