Ana içeriğe atla

Kayıtlar

Ocak, 2011 tarihine ait yayınlar gösteriliyor

Netbeans & Hadoop ile Kelime Sayma Programı Wordcount with Hadoop in Netbeans

Özet Ubuntu 9.10 üzerinde gerekli olan java kurulumlarını yaptıktan sonra hadoop'un en son sürümü olan hadoop 0.20.02 sisteme entegre edelim NetBeans 6.7.1 de karmasphere hadoop application güncellemesini ayarlamakla başlayalım.Daha sonra birçok sistemde kullanışlı olan wordcount uygulamasını build ederek ;sonradan hadoop job oluştururken kullanılacak jar dosyamı oluşturup.Wordcount job uygulamasını run ederek daha önceden oluşturduğum input dizinindeki text dosyaları işlenerek output dizini altında hangi kelimeden kaç tane kullanıldığını test edelim. Keywords WordCount, Hadoop, NetBeans, MapReduce, Karmasphere, Job 1. Giriş İlk olarak hadoop nedir ile projeye başlamak istiyorum. Dağıtık sistemlerde en çok kullanılan program Apache'nin Hadoop ’udur. Hadoop, Java programlama dilinde yazılmış framework’tür. Amacı Google Dosya Sistemi teknolojisi olan Map- Reduce algoritmasını birçok bilgisayara dağıtarak uygulamayı sağlamaktır. Google, Yahoo ve Facebook gibi büyük internet sitel...