Veri Madencliği

VERİ MADENCİLİĞİ (DATA MİNİNG)

Herhangi bir bilginin akılda kalabilecek biçimde kalmasıdır. Basit anlamda ulaşıtığımız bilgileri madenleme işlemidir. Genel olarak araştırdığımız büyük veriler içerisinde gelecek ile ilgili tahminde bulunmamızı sağlayıp bilgisayar programı kullanarak aranmasıdır. Veri madenciliği alanları istatistik, makine bilgisi, veri tabanları, ve yüksek performanslı işlem gibi temelleri de içerir.

VERİ MADENCİLİĞİ SÜRECİ :

1. Problemin tanımlanması

2. Verilerin hazırlanması

3. Modelin kurulması ve değerlendirilmesi

4. Modelin kullanılması

5. Modelin izlenmesi

VERİ MADENCİLİĞİ NASIL YAPILIR ?

Ø  Veri madenciliğinin yapılabilmesi için elde etmek istediğimiz konu veya konular sabitlenmelidir.

Ø  İkinci adımda elde ettiğimiz konular gruplandırılmalıdır.

Ø  Yapılan gruplandırmanın ardından Veri Tabanları oluşturulmalıdır.

Ø  Oluşturduğumuz veri tabanlarında istemediğimiz verileri temizleyebiliriz (silebiliriz).

Ø  Veri tabanında kalan veriler tek bir çatı altında birleştirilmelidir.

Ø  İstenilen konu ile alakalı veri tabanında analiz yapılıp gerekli veriler seçilmelidir.

Ø  Kalan veri tabanının ‘’kayda değer (işlenebilecek)’’ hale getirilmesi gereklidir.

Ø  Akıllı metodlar kullanılarak kayda değer veri tabanında örüntü araması yapılmalıdır.

Ø  Çıkan sonuç değerlendirilmelidir.

Ø  Değerlendirmenin sonucunda elde ettiğimiz bilgiler hazır olup kullanıcıya aksettirilebilir (sunulabilir).

Veri madenciliği belirli temel bileşenlere sahiptir, bunlar :

** Veri Tabanı: Ulaşmak istediğimiz bilgininde bulunduğu veri kümesidir.

** Veri Tabanı Teknikleri: Verileri elekten geçirerek kayda değer hale getiren tekniklerdir

** Bilgi Tabanı: Elekten geçirdiğimiz verilerin muhafaza edildiği yer.

** Veri Madenciliği Motoru: Karar verme mekanizmaları, Yapay Zeka ve Yapay Sinir Ağları bilgisi gerekmektedir. Bilgisayarın karar vermesi için bilgisayarın eğitilmesi gereklidir.

** Örüntü Değerlendirme: Sonuca ulaştığımız bölümdür.

**Kullanıcı Arayüzü:             Elde ettiğimiz bilgilerin girileceği yer ve bilgisayarın yinelediği yanıtların aksettirileceği bölümdür.

      

        Veri madenciliğinde kullanılan Algoritmalar ;

n  Bulanık Kümeler

n  Genetik Algoritmalar

n  Yapay Sinir Ağları

n  Kural Çıkarımı

n  Duruma Dayalı Nedensellik

n  İstatistik Teknikler

n  Karar Ağaçları

         Veri madenciliğinde kullanılan Yöntemler ;

n  Kümeleme

n  Sınıflama

n  Birliktelik Kuralları

n  Tahminleyici Modelleme

n  Değişim Ve Sapma Tespiti Analizi

n  Veri Görselleştirme

          Veri Madenciliği Hangi Alanlarda Uygulanılır ;

n  Sağlık Sektörü

n  Haberleşme Sektörü

n  Finans Sektörü

n  Devlet Uygulamaları gibi vs. alanlarda uygulanır.

      VERİ MADENCİLİĞİNİN GÜNLÜK YAŞAMDA KULLANIMLARI

 

Ø  Kaçak enerji kullananları tespit eden ve olası kaçak kullanımları tahmin etmeyi sağlar. Düşük maliyetlidir ve kaçak kullananlara karşı mücadele etmeye imkan sağlamaya yardımcı olur.

Ø  Tedavi isteklerinin zamana, bölgeye ve ihtiyaca göre değerlendirilip ortaya çıkabilecek  salgın hastalık olasılığının tespiti , kontrol altına alınması planlama açısından yararlı olur.

Ø  Kredileri tahsil ederken ödeyememe riski olan kişilerin tespit edilip ortaya çıkabilecek kredi mağduriyetini minimize eder.

      VERİ MADENCİLİĞİ HANGİ AMAÇLARLA KULLANILIR ?

        Veri  madenciliği bir çok alanda çok gerekli bilgilere ulaşmak için kullanılır. Bu bilgiler ‘’ bir ülkeye tehdit unsuru oluşturabilecek kişilerin gözlemlenmesinden’’ tutun da  ‘’ firmaların pazarlama stratejilerini  belirlemesinde ’’ kullanılır. Örneğin ;  ABD’ de FBI’ ın siber güvenlik birimi  ABD’ de yaşayan insanların gönderdiği e- postalardan tutun da sosyal ağlardan paylaştığı durum güncellemelerine kadar her bir bilgiyi takip ederek, belli süzgeçlerden geçirerek gözetim altına alabiliyor

Aktüerya Nedir? Aktüeryanın Tarihçesi Nedir? Aktüer Maaşları nedir? Türkiye'de Aktüerlik

***Aktüerya Kelimesinin Kökeni ve Tarihçesi***

   Aktüerya kelimesinin kökeni, Roma Senatosu’nda yöneticiler adına kullanılan actuarius kelimesinden doğmuştur.

    İlk ölüm tablosu milattan sonra 220 tarihinde Domitius Ulpinos tarafından, veraset vergilerinin hesaplanması için kullanılmıştır.

    1821 tarihinde İngiltere, ilk olarak aktüerlik mesleğini ulusal borçların azaltılması amacıyla kurulan komisyon için kullanmıştır.

    1848 yılında, Londra’da Aktüerlik Enstitüsü açılmıştır.

    2012 yılında, Forbes ve  CarreerCast.com tarafından Aktüerlik yılın en iyi mesleği seçilmiştir.

***Aktüerya hangi alanlarda kullanılmaktadır?***

·         Hayat sigortaları

·         Mal ve kaza sigortaları

·         Emeklilik planlarının yönetimi

·         Bankacılık

·         Finansal kuruluşlar

·         Denetim şirketleri

·         Sigorta ve banka kuruluşlarından sorumlu kamu kesimi

·         Adalet sisteminde tazminat ve destekten mahrum kalma davalarında

***Aktüer Kimdir?***

     Aktüer, istatistik ve olasılık yolları ile sigorta risklerini ve primlerini tespit eden ve geleceğe yönelik tahmin ve stratejik değerlendirmelerde bulunan, sigorta sözleşmelerinin ilkelerini belirleyen uzmandır.

***Aktüerlerin İstihdamı***

ABD için;

-Sigorta Şirketleri: 5.358

-Danışman: 4.580

-Sigorta Komisyoncusu: 51

-Devlet ve Yerel Yönetimler: 97

-Diğer Hükümet Çalışanları: 151

-Üniversiteler: 108

-Yatırım Danışmanları: 239

-Yazılım Grubu: 162

-Sigorta Şirketlerinde Diğer Organizasyonlar: 123

-Diğer: 213

-Emekli Sayısı: 1.281

-Bağımsız Şirketler: 703

-TOPLAM= 13.066

*Almanya’da aktüer sayısı 2.424’tür.

*İngiltere’de aktüer sayısı 16.337’dir

*Yunanistan’da aktüer sayısı 90’dır

*İsveç’te aktüer sayısı 350’dir.

**Türkiye’de ise aktüer sayısı son verilere göre; 109 stajyer aktüer,  127 sicile kayıtlı aktüer olarak totalde 236 aktüere sahiptir.

***Türkiye’de Aktüerlik Eğitimi***

• ·         Karabük Üniversitesi İşletme Fakültesi Aktüerya ve Risk Yönetimi (Lisans)
• ·         Marmara Üniversitesi Bankacılı ve Sigortacılık Yüksekokulu Aktüerya Bölümü(Lisans)
• ·         Hacettepe Üniversitesi Aktüerya Bilimleri(Lisans)
• ·         ODTÜ (Yüksek Lisans)
• ·         Bahçeşehir Üniversitesi (Yüksek Lisans)·   
•            Hacettepe Üniversitesi (Yüksek Lisans)
• ·         Yaşar Üniversitesi (Yüksek Lisans)
• ·         Marmara Üniversitesi (Yüksek Lisans)

***Bir Aktüerde Bulunması Gereken Özellikler Bütünü***

  o   Analitik düşünce yapısı

  o   Matematiğe ve ekonomiye karşı ilgili olma ve bu alanları sevme

  o   Hesaplamalardan sıkılmamalı

  o   Sabırlı olmalı

  o   İletişim becerileri yüksek olmalı

***Aktüerya Bölümünün İş Olanakları***

  §  Sigorta şirketlerinde istihdam sağlayabilirler

  §  Devlet bankalarında ve özel bankalarda istihdam sağlayabilirler

  §  Kişisel bürolarını açabilirler

  §  Sosyal güvenlik kuruluşlarında istihdam sağlayabilirler

  §  Akademik kariyer yapabilirler.

***Aktüerya Çalışanlarının Maaşları***

Aktüer maaşları 7.000 ile 10.000 TL arasında seyir etmektedir.  Aktüerlerin bu denli yüksek bir maaşla çalışmalarının sebebi ise; elde ettikleri matematiksek verileri üst yönetime sunması ve bu belgelere attıkları imzanın sorumluluğunun büyük olmasıdır.

----

SİLİKON VADİSİ (SİLİCON VALLEY)

SİLİKON VADİSİ

       Silikon Vadisi , Amerika’nın Kaliforniya eyaletinde San Francisco vadisinde yer almaktadır. Silikon Vadisi adını , bölgede fazlaca üretilen silikon çip üretiminden almaktadır. Silikon vadisi 1800’lerden bu yana kendini sıkça göstermektedir. Bölgede yoğun olarak altın rezervleri bulunmaktaydı ve altın avcılarının ilgi odağı konumunda yer almıştı. Sonrasında ise bölgede Stanford Üniversitesi açılmıştır ve üniversite etrafında bir şirket kurulmuştur. Daha sonrasında ise tüm teknoloji şirketleri bu bölgeyi devralmıştır. İlk mikroişlemci, ilk bilgisayar, Yahoo, Google ve Facebook bu bölgede ortaya çıkmıştır. Silikon Vadisi tüm ülkelerin ilgi odağı haline gelmiştir.

      Silikon Vadisi çalışanlar için bir laboratuvar görevi görmektedir. Google’dan ayrılan bir çalışan , Yahoo’da çalışmaya devam edebilir. Fikirleri olan girişimcilere destek sağlayarak tüm dünyaya yayılmak Silikon Vadisinin amacıdır. Silikon Vadisinde çalışanlar işlerini severek ve tatlı rekabetlerle yapmaktadırlar. Bu da Silikon Vadisinin aktif kalmasına olanak sağlamaktadır.

     Silikon Vadisi çalışanlarının yıllık gelirleri ortalama 80.000 $ civarındadır. Silikon Vadisinde yaklaşık 250.000 kişi vardır. Ev kiraları fazlaca yüksek olmasına karşın , çalışanların çalıştıkları firmaların sundukları teklifler çok caziptir. Örneğin ; yüzme havuzları, masaj salonları, ücretsiz yemek vs alternatif kaynakları mevcuttur.

     Silikon Vadisinde ürünler senelerce araştırmadan geçmemektedir, bir ay , bir hafta içerisinde ürün ortaya konabilmektedir. Yanlış bir durumda tüm plandan vazgeçip yeni ve geliştirilmiş bir plan üzerinde çalışabilirler.

     Silikon Vadisinde ilk kurulan şirketler ; General Electric ve  Eastman Kodak şirketleridir.

SİLİKON VADİSİNDE BAŞARILAR

* 1994 yılında Jerry Yang, Stanford Üniversitesi’nde bir karavanın arkasında ilk arama motoru olan YAHOO’yu geliştirmiştir.

** Stanford mezunları ; Sergie Prin ve Larry Page 1998 yılında Mountain View’da bir garajda GOOGLE arama motorunu geliştirmişlerdir.

*** Mark Zuckerberg Harvard Üniversitesi’nde okurken 2004 yılında FACEBOOK’u kurdu ve Palo Alto’ya taşıdı.

**** Xerox’un Palo Alto’daki araştırma merkezinde teknoloji mühendisleri lazer yazıcıyı icat etmişlerdir.

***** Silikon Vadisinin ilk Nobel Ödülü ; William Shockley, John Bardeen ve Walter Brattain’in ilk yarı iletken transistörüne verilmiştir.

SİLİKON VADİSİNDEKİ ŞİRKETLER

Silikon Vadisinde  200 ü aşkın şirket bulunmaktadır. Başta gelenler aşağıdaki gibidir.

*APPLE

*GOOGLE

*MİCROSOFT

*ORACLE

*İNTEL

*AMD

*ATI TECHNOLOGİES

*NVİDİA

*CİSCO SYSTEMS

*e-Bay

*ADOBE SYSTEMS

*HP(HEWLETT-PACKARD)

*ELECTRONİC ARTS

*SYMANTEC

*LİNKEDlN

*YAHOO

*SYNAPTİCS

*SANDİSK

*TESLA MOTORS

*ZYNGA

Algoritmaya Genel Bir Bakış (ÖRNEKLİ)

Algoritma’nın Tarihçesi

     Algoritmanın icatçısı Türkistanlı alim Ebu Abdullah Muhammed bin Musa el Harezmi’dir. Harezmi; 9. Yüzyılda  ‘’CEBİR’’ adında bir kitap oluşturmuş ve algoritmik çalışmaların temelini  ortaya koymuştur. Bu kitabın aynı zamanda matematiğe de çok büyük katkıları olmuştur. Bu kitap bir çok dile çevrilmiştir. Cebir kitabı Avrupa’da çok büyük ilgiyle karşılaşmıştır fakat Avrupalılar hem kitabın ismini hem de yazarın ismini telaffuz edemedikleri için , ‘’algorizm’’ sözcüğünü kullanmışlardır. Algorizm kelime kökeni olarak ; ‘’Arap sayıları kullanılarak problemlerin çözümü’’ anlamına gelmektedir. Zaman içerisinde Algorizm sözcüğü , Algoritma sözcüğünün gerisinde kalmıştır.

      Algoritmanın sözlük anlamı ; bir sorunu ya da problemi çözmek veya bir amaca ulaşmak için izlenmesi gereken yolların, sıralı ve mantıksal adımlarının tümüne verilen addır. Yani problemde izlenecek adımlara Algoritma denmektedir. Kısaca algoritma elde olan bilgilerden yararlanarak sonuca ulaşma yöntemidir. Programlamada en önemli ve aynı zamanda en zor kısım , problemin çözümü için algoritma hazırlayabilmek ve geliştirip simüle etmektir.

Algoritma Nedir?

*Algoritma; problemde izlenecek yol anlamına gelmektedir.

*Tüm programlama dillerinin temelinde algoritma yatmaktadır.

*Programcı olabilmek için iyi derecede algoritma bilgi birikiminin olması gerekmektedir.

*Algoritmanın 3 temel bileşeni bulunmaktadır:

1   1.     Değişkenler

2   2.     Algoritma

3   3.     Akış Diyagramı

ÖRNEK: Akış Diyagramı

1          1.     Değişkenler

Birinci sayı : X

İkinci sayı   : Y

İki sayının toplamı : toplam      

       2. Algoritma

Adım 1 : Başla.

Adım 2 : Birinci sayıyı oku, X değişkenine aktar.

Adım 3 : İkinci sayıyı oku,   Y değişkenine aktar.

Adım 4 : X ve Y sayılarını topla, sonucu toplam değişkenine aktar.

Adım 5 : Toplam değerini ekrana yazdır.

Adım 6 : Dur.

      3.  Akış Diyagramı

İşlem sonlanmıştır.

Not: Akış diyagramı çözümüm şekiller ile gösterilmesi durumudur.

Algoritmanın Özellikleri

·        Hiçbir şekilde rastsal değerlerden yararlanılmamalıdır.

·        Tüm adımlar son derece belirleyici ve açıklayıcı olmalıdır.

·        Belirli adım sayısında algoritma sonlandırılmalıdır.

·        Algoritmalar ortaya çıkabilecek tüm olasılıkları karşılayabilecek potansiyelde olmalıdır.

Algoritmanın Sağlaması Gereken Kriterler

1    1.     Girdi

2    2.     Çıktı

3    3.     Açıklık

4    4.     Sonluluk

5    5.     Etkinlik

Örnek : İki sayının farkını ve bölümünü veren algoritma .

A: Birinci sayı

B: İkinci sayı

C: İki sayının farkı (A-B)

D: İki sayının bölümü (A/B)

*****ALGORİTMASI*****

Adım 1 : Başla

Adım 2 : A’yı oku

Adım 3 : B’yi oku

Adım 4 : C = A-B

Adım 5 : D = A/B

Adım 6 : C’yi ekrana yazdır

Adım 7 : D’yi ekrana yazdır

Adım 8 : Dur

*****Akış Diyagramı*****

Algoritma’nın Kullanım Alanları

      Çoğu algoritmalar, bilgisayar programları için tasarlanmıştır. Gerçek hayatta ise ; insan beyninin hesap yapması, bir böceğin yemek araması, elektrik devresi ve mekanik cihazlar olarak karşımıza çıkmaktadır.

Algoritmaların Gerekliliği

     ** Günümüzde kullanılan telefon rehberlerinin altyapısında algoritma bulunmaktadır ve telefonlar için büyük bir gereklilik arz etmektedir.

     ** e-ticaret işlemlerinde , sağa genişleme ve sola genişleme bir algoritma yapısıdır ve e-ticaret için bir gerekliliktir.

     ** Öğrencilerin internette not kontrolü yaparken ; ‘’geçtiniz, kaldınız’’ yazısını görmesi bir algoritma tabanıdır. Örneğin 50’nin üstünde ise ‘’geçtiniz’’, 50’nin altında ise ‘’kaldınız’’ yazısını görmesi algoritma işlevidir.

***

Bert KAPLAN-Akıl Hastalarının İç Dünyası (ücretsiz e-kitap)

Bert KAPLAN-Akıl Hastalarının İç Dünyası ücretsiz e-kitabına ulaşmak için aşağıdaki linki tıklayınız.

Bert KAPLAN-Akıl Hastalarının İç Dünyası

Prof. Dr. Atalay Yörükoğlu-Çocuk ve Ruh Sağlığı (ücretsiz e-kitap)

Prof. Dr. Atalay Yörükoğlu-Çocuk ve Ruh Sağlığı ücretsiz e-kitabına ulaşmak için aşağıdaki linki tıklayınız.

Prof. Dr. Atalay YÖRÜKOĞLU-Çocuk ve Ruh Sağlığı

Theodor REİK-Aşk ve Şehvet Üzerine (ücretsiz e-kitap)

Theodor REİK-Aşk ve Şehvet Üzerine ücretsiz e-kitabına ulaşmak için aşağıdaki linki tıklayınız.

Theodor REİK-Aşk ve Şehvet Üzerine