Teknolojilerin kesiştiği nokta!

Hortonworks ve Cloudera güncellendi

Büyük veri dünyasının iki büyük oyuncusu Hortonworks ve Cloudera geçtiğimiz hafta ürünlerini güncellediler.

Cloudera ürünü olan Cloudera Enterprise 5 veri yönetim platformunu genel kullanıma açarken, Hortonworks Data Platform 2.1 teknik önsürüm olarak sunuldu.

Bu iki firma (MapR de bu gruba katılabilir) dikkate değer gelişme gösteren büyük veri pazarında üstünlüğü ele geçirmek için çalışıyorlar ve zaman zaman birbirlerinin önüne geçiyorlar. Her iki ürün de farklı yaklaşımlar geliştirmiş durumdalar. Hortonworks temel Hadoop ürünlerini geliştirmeye odaklamışken, Cloudera ise “kurumsal veri havuzu” oluşturmaya yarayan bir ürün paketi sunmaya odaklanmış halde.

Aslında, Cloudera Enterprise 5 sürümünü “sade bir Apache Hadoop dağıtımından bir kurumsal veri havuzuna evrilme” olarak tanımlıyor. Bu yeni sürğn yeni bileşen ve geliştirmeler de içeriyor.

Bu yeni bileşenler içinde Apache Spark; Apache Crunch; Parquet; Kite SDK ve Apache Avro’nun son sürümleri de yer alıyor. Sürüm Apache Hadoop 2.3.0 dağıtımı üzerine yapılandırılmış ve Hadoop Dağıtık Dosya Sistemi (HDFS) önbellekleme ve NFS ağgeçidi desteğini de içeriyor. Yeni sürümde yer alan diğer teknolojiler ise YARN ve MapReduce, Apache HBase, Impala, Apache Hive gibi bir çok teknolojiyi içeriyor.

“Çözümleme platformları bir çok kişiliği dikkate alırlar” diyor Cloudera’dan baş analist Tony Baer. “Cloudera Enterprise 5 geniş çözümleme stilleri desteği ile etkileşimli SQL, arama ve bellek içi hesaplama konusunda MapReduce’u aşan yapısıyla tamamen bu eğilimde ilerliyor. Cloudera Enterprise 5 aynı zamanda güvenlik, veri yönetimi ve denetimden ödün vermeden Hadoop’un footprint özelliğini genişletiyor.”

Hortonworks’e baktığımızda ise yeni Hortonworks Data Platform (HDP) 2.1 ürününü “Hadoop camiasından gelen en yeni iyileştirmelerle bezenmiş tümleşik, test edilmiş ve tamamıyla açık bir kurumsal veri platformu” olarak tanımlıyor. Firmaya göre yeni geliştirmeler Kurumsal Hadoop’un veri yönetimi, veri erişimi, bütünleşme, denetim, güvenlik ve operasyon alanlarını tam anlamıyla kapsıyor.

Dikkate değer bileşenlerden biri de Stinger Girişimi olarak göze çarpıyor. Bu proje Hadoop’ta Apache Hive ve SQL sorgularının başarımını artırmak üzere oşuşturulmuş. Firmaya göre “Hadoop kullanıcıları ve geliştiricileri artık Apahce Hive’de petabyte seviyesinde native etkileşimli SQL sorgulama olanağına kavuştular”.

Veri denetimi geliştirmeleri konusunda ise Hortonworks açık kaynak kodlu Apache Falcon’u öne çıkartıyor. Falcon projesi, Hadoop’ta veri akışı için güvenilir, basit ve tekrarlanabilir bir framework olarak tasarlanmış.

Güvenlik alanında gelindiğinde ise Apache Knox ile tek noktadan clusterlarda kimlik doğrulama ve erişim kontrolü sağlanıyor. Diğer güvenlik önlemleri ise HDFS için erişim kontrol listesi ve Apache Hive için erişim verme ve iptal etme gibi özellikler arası çoklu katmanlarda güvenli operasyonları garanti altına almak olarak belirtilmiş.

Firma ayrıca Apache Storm aracılığıyla akış işleme, Apache Solr ile Hadoop verisi içinde arama ve Apache Ambari ile ileri düzey işlemçer gibi geliştirmelere de dikkat çekmiş.

Hortonworks HDP’nin tek sanal makine sürümünün indirilebilir olduğunu, Linux ve Windows için tam sürümlerin ise ay sonuna doğru kullanıma sunulacağını belirtmiş.

Kaynak: ADTMAG

Links

Adres

Maslak Mahallesi, Maslak Meydan Sk. No:5. Spring Giz Plaza. Maslak/İstanbul

+90 212 282 7700

info@bilginc.com