مرور برچسب

هدوپ

مرور اخبار داده کاوی در هفته ای که گذشت (۲۰ تیرماه ۹۵)

در این پست قصد داریم خلاصه اخبار و مقالاتی که در هفته ی گذشته در رابطه با داده کاوی رخ داده است را برای شما عزیزان باز گو نماییم. پس فراموش نکنید اگر این مقاله برای شما مفید بود آن را با دیگران به اشتراک بگذارید.1- گیمیفیکیشن و اینترنت…

خلاصه ای از تاریخچه آپاچی هدوپ + اینفوگرافیک

هدوپ توسط آقای Doug Cutting اختراع شده است، ایشان پیش تر Apache Lucene را که به عنوان یک کتابخانه پرکاربرد جستجوی متن می باشد، ایجاد کرده است. اصل هدوپ به Apache Nutch ، موتور جستجوی تحت وب متن بازی که خودش قسمتی از پروژه Lucene است،…

تجزیه و تحلیل داده ها بصورت هوشمند ارزشمندتر است

داده ها با ارزش ترین منابع یک سازمان هستند. داده ها هرگز از بین نمی روند در هر ثانیه داده های زیادی از میان وب سایت ها و تلفن ها و سنسور ها و... ساخته می شوند. این داده ها را ما برای آینده ذخیره می کنیم. به این اعداد نگاهی بیاندازید، ما…

خلاصه ای از ۱۰ سال آپاچی هدوپ

خلاصه ای از 10 سال آپاچی هدوپ در April سال 2008 هدوپ رکورد جهان را شکست و سریعترین سیستمی شد که توانست 1 ترابایت داده را ظرف 202 ثانیه و با استفاده از 910 نود کلاستر پردازش کند. این رکورد در سال قبل با 297 ثانیه ثبت شده بود. در November…

اسپارک یا هدوپ – کدام تکنولوژی را باید در بیگ دیتا بیاموزیم؟

در دهه های اخیر، حجم و نوع اطلاعات ثبت شده به طور چشمگیری افزایش یافته است. ابزارهای ذخیره سازی و پردازش داده های موجود، قادر به پردازش چنین مقدار زیادی از اطلاعات هستند که پس از انقلاب اینترنتی ایجاد کرده ایم. با ظهور پروژه های بزرگ داده…

مهارتهای مورد نیاز مهندسین داده در سال ۲۰۱۶

سایت crowdflower  پژوهشی راجع به موردنیازترین مهارتهای مهندسین داده در سال ۲۰۱۶ انجام داده است. مبنای جمع آوری داده های آنها نیز سایت معتبر لینکدین و بررسی ۳۵۰۰ فرم جذب نیرو در حوزه تحلیل و پردازش داده و استخراج مهارتهای موجود در هر فرم و…

۸ روند بیگ دیتا در سال ۲۰۱۶

استفاده گسترده از تجزیه و تحلیل داده ها، همراه با پردازش ابری و هدوپ (Hadoop)، منجر به ایجاد تغییرات و هیجان گسترده ای در صنعت و کسب و کار شده است که برخی کسب و کار ها با این تغییرات همراه خواهند شد و از آن سود می برند و برخی دیگر آن را…