Büyük veri kavramı, 21. yüzyılın başlarında ortaya çıkmış olsa da büyük veri kümelerinin kökenleri, ilk olarak 1600’lü yıllarda veriden istatistik yöntemler ile anlamlı sonuçlar çıkarmaya dayanmaktadır. büyük verinin tarihsel gelişimini özetlersek:
- 1960’lar: Büyük veri kavramı ilk olarak, hükümetlerin ve büyük şirketlerin topladığı verilerin artmasıyla ortaya çıktı.Bu veriler, kartların üzerine delikler açılarak ve büyük veri merkezlerinde depolanarak saklandı. Ancak, bu verilerin kullanımı sınırlıydı ve genellikle manuel olarak işlenirdi.
- 1970’ler: IBM, veri yönetimi sistemleri konusunda lider bir şirket haline geldi ve büyük verinin depolanması ve yönetimi için kullanılan öncü teknolojileri geliştirdi.
- 1990’lar: İnternetin ortaya çıkması ve web sitelerinin yaygınlaşmasıyla birlikte, büyük veri oluşmaya başladı ve web trafiğinin analizi ve yönetimi için yeni teknolojiler geliştirildi.
- 2000’lerin başları: Büyük veri kavramı, o zamanlar “yığın bilgi” olarak adlandırılıyordu ve genellikle Google, Yahoo ve Amazon gibi büyük internet şirketleri tarafından kullanılıyordu.
- 2008: Apache Hadoop, büyük veri işleme için açık kaynaklı bir yazılım çözümü olarak piyasaya sürüldü. Hadoop, büyük verileri işlemek için dağıtık sistemler kullanır ve büyük veri analizi yapmak için gerekli olan altyapıyı sağlar.
- 2010: IBM, büyük veri analizi için IBM Watson adlı yapay zeka tabanlı bir sistem piyasaya sürdü.
- 2012: Harvard Business Review, büyük verinin “21. yüzyılın en önemli iş fırsatlarından biri” olduğunu ve iş dünyasını dönüştüreceğini iddia eden bir makale yayınladı.
- 2015: Verilerin depolanması ve işlenmesi için bulut tabanlı hizmetler yaygın hale geldi ve büyük verinin işlenmesi için daha fazla araç ve teknoloji geliştirildi.
Günümüzde, büyük veri, yapay zeka, makine öğrenimi ve diğer teknolojilerle birleştirilerek, farklı sektörlerde kullanılmaktadır. Büyük veri, sağlık, finans, e-ticaret, lojistik, telekomünikasyon, tarım ve diğer birçok sektörde faydalı olmaktadır. Verilerin doğru bir şekilde toplanması, saklanması, işlenmesi ve analiz edilmesi, işletmelerin karar verme süreçlerini iyileştirerek daha verimli hale getirmektedir.