مرور برچسب

آپاچی

با آپاچی فلینک بیشتر آشنا شوید

آپاچی فلینک یک پردازنده جریان داده ای است که به صورت متن باز ارائه شده است؛ فلینک سرعت، کارآمدی و دقت را برای پردازش داده های ها بسیار حجیم فراهم میکند و میتواند به صورت پردازش دسته ای و یا حتی پردازش مستقیم و جریانی عمل کندFlink اولین…

خلاصه ای از تاریخچه آپاچی هدوپ + اینفوگرافیک

هدوپ توسط آقای Doug Cutting اختراع شده است، ایشان پیش تر Apache Lucene را که به عنوان یک کتابخانه پرکاربرد جستجوی متن می باشد، ایجاد کرده است. اصل هدوپ به Apache Nutch ، موتور جستجوی تحت وب متن بازی که خودش قسمتی از پروژه Lucene است،…

تجزیه و تحلیل داده ها بصورت هوشمند ارزشمندتر است

داده ها با ارزش ترین منابع یک سازمان هستند. داده ها هرگز از بین نمی روند در هر ثانیه داده های زیادی از میان وب سایت ها و تلفن ها و سنسور ها و... ساخته می شوند. این داده ها را ما برای آینده ذخیره می کنیم. به این اعداد نگاهی بیاندازید، ما…

خلاصه ای از ۱۰ سال آپاچی هدوپ

خلاصه ای از 10 سال آپاچی هدوپ در April سال 2008 هدوپ رکورد جهان را شکست و سریعترین سیستمی شد که توانست 1 ترابایت داده را ظرف 202 ثانیه و با استفاده از 910 نود کلاستر پردازش کند. این رکورد در سال قبل با 297 ثانیه ثبت شده بود. در November…

هشت گرایش بیگ دیتا در سال ۲۰۱۶

استفاده گسترده از تجزیه و تحلیل داده ها، همراه با پردازش ابری و هدوپ (Hadoop)، منجر به ایجاد تغییرات و هیجان گسترده ای در صنعت و کسب و کار شده است که برخی کسب و کار ها با این تغییرات همراه خواهند شد و از آن سود می برند و برخی دیگر آن را…

چه کسی از اسپارک برای تجزیه و تحلیل داده ها استفاده می کند و چرا؟

در اوایل سال 2015، به عنوان بخشی از مرکز تکنولوژی اسپارک، IBM  آپاچی اسپارک را به عنوان سیستم عامل تجزیه و تحلیل داده ها و اطلاعات معرفی کرد. اسپارک توان بالقوه ای در سه ناحیه کلیدی دارد: سادگی طراحی، داده های قدرتمند، سرعت در نوآوریچه…

مروری بر ابزارهای SQL بر روی هدوپ و کلان داده

اس کیو ال به عنوان روش استاندارد کار با داده های رابطه ای، سالهاست که در تمام تار و پود دنیای فناوری اطلاعات نفوذ کرده است و بنابراین دور از انتظار نیست که برای داده های بدون ساختار یا نیمه ساختیافته در حوزه کلان داده هم به فکر استفاده از…

کدام موتور پردازشی هدوپ را باید استفاده کنیم ؟

امروزه و در میانه سال ۲۰۱۵ دیگر پردازش ها در حوزه کلان داده محدود به HDFS‌ و رهیافت نگاشت و تجمیع (Map Reduce)‌ نیست بلکه اکوسیستمی کامل از فناوریهایی مختلفی شده است که برای تحلیل انواع داده در مقیاس وسیع به آنها نیاز داریم و مجموعه وسیعی…

پیاده سازی پلت فرم پردازش داده های اسپارک در آپاچی توسط آی بی ام

آی بی ام قصد دارد در پلت فرم آپاچی سیستم جدید اسپارک را پیاده سازی کند که به وسیله آن تجزیه و تحلیل ترافیک داده های بزرگ به کمک محاسبات خوشه ای انجام میشود. آی بی ام برای راه اندازی اسپارک از 3500 محقق و توسعه دهنده در بیش از 12…