Big Data’ya Dair – 1 (Konuk Yazar)
Büyük Veri nedir? Nasıl elde edilir? Büyük veriyle neler yapılabilir?
“Big Data” ya da Türkçe’de yaygın bir biçimde kabul gören adıyla “Büyük Veri” klasik data işleme yöntemlerinin yetersiz kalacağı kadar büyük boyutlardaki, yapılandırılmış veya yapılandırılmamış data setlerine verilen genel addır. Büyük verinin son zamanlarda önem kazanmasının nedenlerinin başında ise her gün oluşturulan data miktarının inanılmaz boyutlara ulaşması (2015 tahmini rakamı 10 trilyon gigabyte ve her 2 yılda bir ikiye katlanarak artması bekleniyor) ve bu dataların bilim adamları, hükümetler, medya, reklam sektörü ve araştırmacılar tarafından insan davranışlarını öngörebilmek, hastalıkları önleyebilmek, finans, hava durumu veya kategorisel performans faktörlerini analiz edebilmek gibi çeşitli sebeplerle yapılandırılmaları, işlenmeleri ve görselleştirilmeleridir.
Kaynak: IDC’s Digital Universe Study, sponsored by EMC, December 2012
Son birkaç yılda mobil teknoloji ve sosyal medyadaki gelişmeler ile birlikte gerçek zamanlı datanın önemi artmış, datanın hacminin yanında çeşitliliği ve data artış hızı da bu gelişmelerden etkilenmiştir. Akıllı telefonların kullanım oranındaki artış, internete 7/24 erişim olanağı sağlamasının yanı sıra Whatsapp gibi online mesajlaşma uygulamaları ile Facebook, Twitter ve Instagram gibi sosyal medya aplikasyonları, anlık mesaj, fotoğraf ve video paylaşımlarını artırmış, GPS teknolojisi sayesinde ise lokasyon bazlı data üretimini mümkün kılmıştır. DOMO’nun her yıl yayımladığı Data Never Sleeps raporunun 2014 versiyonunda açıklanan rakamlara göre dakikada 277.000 tweet atılırken, Instagram’da 216.000 yeni fotoğraf yükleniyor ve Youtube’a 72 saatlik video kullanıcılar tarafından upload ediliyor. Data üretimindeki artışın boyutlarını daha net olarak anlamak için aynı raporun 2011 rakamları incelenirse, dakikada yaklaşık 100.000 tweete karşılık Instagram’da sadece 3600 fotoğraf yüklendiği ve Youtube’a yaklaşık 48 saatlik video upload edildiği görülebilir.
Büyük Veri neden önemli?
Büyük veri bugün Türkiye’de de çok popüler ve herkes büyük veriden bahsediyor. Ancak büyük verinin önemi verinin büyüklüğünden değil bu büyük veriyi nasıl değerlendirdiğimizden geçiyor. Büyük veri doğru analiz edildiğinde markaların tüketicilerini en doğru şekilde segmente ederek ürün ve hizmetleri tekrar dizayn etmesinden tutun da gelişmiş analizler yardımıyla karar verme mekanizmalarının geliştirilmesine, risklerin minimalize edilmesine ve faydalı olabilecek içgörülerin ortaya çıkarılmasına faydalı olabilir. Birçok farklı kaynaktan gelen ve farklı zamanlarda güncellenen farklı kırılımlara sahip dataların dashboard’lara aktarılması ve yönetici ve karar vericilerin önüne gerçek zamanlı ve anlaşılabilir formatlarda sunulması da büyük veri analizi yapabilen tool’lar yardımıyla kolaylıkla yapılabilmektedir.
Visokio Omniscope – Cajun Sugar Consultant Report Screenshot
Büyük veriyle ilgili zorlukların başında ise farklı kaynaklardan toplanan datalarda yaşanabilecek olan tutarsızlıklar ve dataların kalitesinin yanı sıra yapılandırılmamış veri kaynaklarının karmaşıklığı ve farklı database ve sistemlerinin birbiri ile konuşmaması geliyor. Aşağıdaki tablodan görülebileceği gibi büyük verinin yapılandırılması ve analiz edilmesi aşamasında birbirinden farklı birçok tool, aplikasyon, sistem ve database var.
Türkiye’de ve dünyada bu sistemler ve tool’lar hakkında yeterli bilgi ve donanımına sahip yetenekli iş gücü ne yazık ki çok yetersiz durumda. Google’ın baş ekonomisti olan Hal Varian’ın veri bilimcilerini (data scientists) önümüzdeki 10 yılın en seksi iş dalı olarak göstermesi de piyasadaki artan ihtiyaca karşılık çok az uzman veri bilimcisi olmasından ve bu veri bilimcilerinin istatistik, program dili ve bilgisayar yetenekleri kombinasyonunun az rastlanılır olmasından dolayı kaynaklanıyor.
Detaylı bilgi için Starcom MediaVest Group Business Intelligence – Senior Supervisor Ahmet Baş’a mail ahmet.bas@smvgroup.com.tr veya telefonla (+90 212 315 9999) ulaşabilirsiniz.
Kaynakça:
IDC’s Digital Universe Study, sponsored by EMC, December 2012
https://hbr.org/2012/10/data-scientist-the-sexiest-job-of-the-21st-century/
http://en.wikipedia.org/wiki/Big_data
http://www.techradar.com/news/internet/web/how-important-is-big-data–1233196