AÖF Soru Bankası

Veri MadenciliğiÜnite 8 Özeti

Web Madenciliği ve Sosyal Medya Madenciliği

1. Kaynakların Tespiti: İlgilenilen konuda bilgi Veri Madenciliği ve WEB Madenciliği içeren web dokümanlarının belirlenmesi ve elde

Veri madenciliği, veri mühendisliği ve bilgi keşfi edilmesi. alanlarında son zamanlarda oldukça günceldir. Temelde 2. Bilgi Seçimi ve Ön İşleme: Elde edilen veri madenciliği, e-ticaret uygulamalarındaki işlem kaynaklardan ihtiyaç duyulan bilginin otomatik verileri ya da biyoinformatik alanında genetik ifadeler gibi olarak seçilmesi ve kullanılabilir hâle getirilmesi. farklı veri türlerinden oluşan büyük miktarda veri yığını 3. Genelleştirme: Bireysel web sitelerindeki örüntü içerisinden, anlamlı ve yararlı bilginin ortaya çıkarılması (pattern) veya kuralların otomatik olarak anlamına gelir. Verinin türü ne olursa olsun veri çıkarılması ve diğer web siteleri ile madenciliğinin temel amacı, mevcut veri yığını karşılaştırarak genellenmesi. içerisindeki gizli veya daha önce fark edilmemiş bilginin 4. Analiz: Elde edilen genel örüntü veya kuralların açığa çıkarılması yani keşfedilmesidir. İlişki kuralları, doğruluklarının onaylanması ve / veya sıralı örüntü madenciliği, denetimli ve denetimsiz yorumlanması. öğrenme algoritmaları son yıllarda yaygın olarak kullanılan ve üzerinde yoğun araştırmalar yapılan veri WEB Madenciliği Veri Kaynakları

madenciliği alanlarıdır. Web madenciliğinde kullanılabilecek veriler genel olarak, sunucu (server), istemci (client) ve vekil (proxy) sunucu Son on yılda veri madenciliği, web belgeleri de dâhil gibi farklı kaynaklardan elde edilirler. Farklı kaynaklardan olmak üzere web nesneleri, web bağlantı yapısı, web elde edilecek veriler de farklı yapılara sahip olmaktadırlar. kullanıcı işlemleri, web semantik vb. gibi birçok web veri Web madenciliğinde kullanılan verileri dört başlıkta yönetimi araştırmalarında başarılı bir şekilde incelenebilir. uygulanmaktadır. Çeşitli web verilerinden elde edilen anlamlı ve yararlı bilgiler, web nesneleri arasındaki 1. İçerik verisi: Web sayfalarında kullanıcının ilişkileri anlamamızı ve keşfetmemizi sağlamakta ve web erişimine sunulan verilerdir. Bunlar şekil, resim, veri yönetiminin geliştirilmesi için kullanılmaktadır. Web grafik, görüntü ve ses dosyaları gibi gerçek madenciliğinde kullanılan yöntemler sayısal zekâ olarak verilerin yanı sıra, tanımlayıcı kelimeler, etiketler da bilinen ve genel olarak veritabanı, veri madenciliği, ve doküman özellikleri gibi verilerden otomatik öğrenme ve bilgi çıkarsama vb. gibi geniş bir oluşmaktadır. uygulama alanına sahip akıllı hesaplama yaklaşımlarına 2. Yapı verisi: Bir web sitesinin içeriğinde yer alan dayanmaktadır. Web madenciliği kullanıcıların aradıkları sayfaların birbirleri ile veya diğer web siteleri ile cevaba hızlı ve doğru bir şekilde ulaşabildikleri devrim olan bağlantılarının, tasarımını yapan kişi niteliğinde bir süreçtir. tarafından nasıl düzenlendiğine dair bilgilerdir. Yapı verisi, bir web sayfasının oluşturulmasında Veri madenciliği, kullanılan HTML veya XML etiketleri gibi veri i. Verinin elde edilmesi yapıları olabileceği gibi, sayfalar hatta siteler ii. Verinin saklanması ve yönetimi arası bağlantıları sağlayan linkler şeklindeki veri iii. Veri erişiminin sağlanması yapıları da olabilir. iv. Verinin analiz edilmesi 3. Kullanım verisi: Kullanıcıların web kaynaklarına v. Analiz sonuçlarının anlaşılır bir biçimde erişimleri sırasında sunucu ya da tarayıcılar sunulması, tarafından kayıt altına alınan verilerdir. 4. Kullanıcı profil verisi: Bir web sitesine kayıt temel adımlarından oluşan bir süreçtir. olma sürecinde kullanıcılar tarafından sağlanan

WEB Madenciliği Süreci demografik bilgilerin yanı sıra kullanıcıların ilgi ve tercihlerinden oluşan verilerdir. Web madenciliği web veri yönetimi kapsamında akıllı hesaplama tekniklerinden birisidir. Genel olarak web WEB Madenciliğinin Sınıflandırılması madenciliği, webdeki veri yığınları içerisinden veri Web madenciliği, veri madenciliği ile çok güçlü bir ilişki madenciliği yöntemleri aracılığı ile yararlı bilgilerin içerisinde olmasına rağmen farklı bir alandır. Çünkü web ayıklanması ve sonuç çıkarılması işlemleri olarak madenciliği sürecinde çeşitli kategori ve biçimlerdeki tanımlanabilir. Web madenciliği araştırmaları özellikle internet verileri farklı alanlarda uygulanan analiz veri madenciliği, bilginin keşfi ve otomatik öğrenme tekniklerinin kombinasyonu teknikler kullanılarak analiz (machine learning) alanlarının yanı sıra veritabanı edilirler. Web madenciliği web doküman ve yönetimi, bilgi erişimi ve yapay zekâ vb. gibi alanlarda servislerindeki yararlı bilgileri otomatik olarak ayıklamak çalışan birçok akademisyen ve mühendisin ilgisini ve elde etmek için veri madenciliği tekniklerini kullanır. çekmektedir. İnternette yer alan bilgiler farklı veri türlerini İnternet ortamından yararlı bilginin keşfi için, web barındırdıkları için web madenciliği, veri madenciliği madenciliği sürecini dört temel adımda ele alabiliriz. sürecinde kullanılan web verilerinin türüne göre Web İçerik Madenciliği, Web Yapı Madenciliği ve Web Kullanım Madenciliği şeklinde sınıflandırılır.


Web İçerik Madenciliği: Web içerik madenciliği temel v. Sosyal medya hizmetleri, bir kullanıcı ile diğer olarak web sayfalarında kullanıcıya sunulan içerik kullanıcılar ve/veya gruplar arasında bağlantılar verilerinden yararlı bilginin ortaya çıkarılması, kurarak çevrim içi sosyal ağlar oluşturulmasını keşfedilmesi olarak tanımlanabilir. İçerik verileri kolaylaştırır. genellikle metin şeklindeki dokümanların yanı sıra tablo, Günümüzde insanlar birçok nedenden dolayı sosyal şekil, resim, grafik, ses ve videolardır. Metin şeklinde medyayı kullanmaktadır. Etkin bir şekilde kullanılmakta sunulan içeriğin analizi metin madenciliği olarak olan sosyal medya hizmetlerinin hangi amaçlar için adlandırılır ve günümüzde en çok araştırılan web içerik kullanıldığını belirleyebilmek için insanların birbirleriyle madenciliği alanlarından birisidir. Resim, ses ve görüntü çevrim içi etkileşim nedenlerini tüm yönleriyle ele almak vb. gibi kaynaklardan yararlı bilginin çıkarılması ise gerekir. Dolayısıyla günümüzde kullanılmakta olan sosyal multimedya madenciliği olarak ifade edilmektedir. Bu medya hizmetlerini temel olarak izleyen biçimde alanda da başta görüntü işleme olmak üzere birçok teknik sınıflandırmak mümkündür. geliştirilmektedir. 1. Genel amaçlı veya arkadaş tabanlı: Bu hizmetler Web Yapı Madenciliği: Web yapı madenciliği, web belirli bir konu üzerine odaklanmayan arkadaşlık sitesinin yapısal özetini yani kendi içerisindeki sayfalarla temeline dayanan paylaşım hizmetleridir. ve diğer sitelerle olan bağlantı yapılarını elde ederek, bu 2. Bilgilendirici: Bu hizmetlerin amacı günlük yapılardan yararlı bilginin ortaya çıkarılması olarak sorunlara yanıtlar sunmaktır. tanımlanabilir. Bu sayede web sayfaları sınıflandırılabilir 3. Mesleki: Bu hizmetler kariyer veya meslek ve farklı web siteleri arasındaki benzerlik ve ilişkiler planlamasında yeni fırsatlar edinmek için ortaya çıkarılabilir. Böylece web sitelerinin verimlilik ve kullanılır. kullanışlılık değerlendirmeleri yapılabilir. Web yapı 4. Eğitim: Bu hizmetler öğrencinin deneyimini madenciliği ile internet ortamında birçok insan tarafından geliştirmek için kullanılır. başvurulan ve alanında otorite olarak nitelendirilen önemli 5. Hobiler: Bu hizmetler aynı şeylere ilgi duyan web sayfaları da belirlenebilmektedir. insanlar için bir buluşma noktasıdır. Web Kullanım Madenciliği: İnternette herhangi bir 6. Akademik: Bu hizmetler akademik ve bilimsel kaynağa erişim sağlandığında tarayıcı veya sunucular çalışmalar için güncel bilgi kaynağına erişim tarafından bir takım veriler kayıt altına alınır. Bunlar sunan hizmetlerdir. sunucular tarafından depolanan kullanıcı erişim kayıtları, 7. Haberler: Bu hizmetler tüm toplumu ilgilendiren tarayıcı kayıtları, kullanıcı profilleri, çerezler, fare haber yayıncılığına ilişkin hizmetlerdir. tıklamaları, sayfa kaydırmaları, sayfa içerik özellikleri vb. Dolayısıyla bu bölümde sosyal medya hizmetleri gibi kayıtlardır. Web kullanım madenciliği, kullanıcıdan içerisinde en çok kullanıcı kitlesine sahip olan elde edilen bu bilgiler aracılığı ile kullanıcıların internet uygulamalardan Twitter ve Facebook kullanıcı verilerine gezinme alışkanlıklarını analiz ederek kişiye özel modeller nasıl erişilebileceği ve R programı ile temel bazı oluşturmayı amaçlar. analizlerinin nasıl gerçekleştirileceğine dair uygulamalara Sosyal Medya Madenciliği yer verilmiştir. Sosyal medya uygulamalarının bireyler Geniş bir açıdan ele alındığında web madenciliği, web tarafından bu kadar ilgi görmesi, bu konuda hizmet içerisinde yer alan tüm bilgi ve belgelerin belirli bir amaç vermekte olan firma sayısını da arttırmaktadır. Her geçen için taranarak sınıflandırılması işlemlerini kapsamaktadır. gün sayısı hızlı bir biçimde artmakla beraber hâlen 50’nin Son yıllarda hızla artış gösteren bir internet kullanım üzerinde sosyal medya uygulaması varlığını biçimi ise sosyal medya kullanımıdır. Sosyal ağ hizmetleri sürdürmektedir. En çok bilinen ve kullanılan bu sosyal olarak da adlandırılan sosyal medya, insanların medya uygulamalarından Facebook, WhatsApp, Facebook birbirleriyle daha kolay etkileşim, iletişim ve paylaşımda Messenger, Google Plus, QQ, WeChat, Qzone, Tumblr, bulunmalarını, kısaca sosyal ilişkiler kurmalarını sağlayan Instagram, Twitter, Baidu, Tieba, Skype ve Viber ilk akla internet tabanlı uygulamaları kapsayan bir platform olarak gelenler olarak sayılabilir.

tanımlanabilir.

i. Sosyal medya olarak adlandırılan tüm bu hizmetler izleyen ortak özelliklere sahiptir. ii. Sosyal medya hizmetleri, (günümüz koşullarında) Web 2.0 internet tabanlı uygulamalardır. iii. Sosyal medya hizmetleri, kullanıcı tarafından oluşturulan ve değiştirilebilen bir içeriğe sahiptir. iv. Sosyal medya hizmetlerinde, site veya uygulama için güvenliği, tasarımı ve bakımı hizmet sağlayıcı tarafından sağlanan bireysel veya grup profilleri oluşturulabilir.

Bu ünitenin sorularını uygulamada çözŞıklar, doğru cevaplar ve süreli sınav modu AÖF Soru Bankası uygulamasında