کمک فوری:کارروی big data بااستفاده از روش های یادگیری ماشین
 

سلام دوستان
کسی در مورد big data چیزی میدونه؟
اطلاعاتی داره که به درد بخوره
برای سمینارم یک ماه بیشتر وقت ندارم اولش رفتم سمت وب کاوی بنظرم کمی مبحث سخت اومد
الان به سرم زده موضومو عوض کنم
شخصی موضوع big data را بهم معرفی کرده. خواستم بدونم کسی اطلاعی در این زمینه داره؟
میشه 1 ماهه ازش سمیناری تهیه کرد
لطفا منو راهنمایی کنید خیلی داغونم:17:

سلام

روی چه حوزه ای میخواید کار کنید؟
big data میتونه در زمینه پردازش داده های پزشکی، پردازش تصویر، وب کاوی و ... باشه.
به عنوان مثال پردازش داده های بیان ژن از نوع مسائل big data هستش چرا که ابعاد داده های بیان ژن بسیار زیاد می باشد. یا مثلا دسته بندی تصاویر در بعضی دیتاست ها که تعداد تصاویر بسیار زیاد می باشد از نوع big dataمحسوب می شود.
اگه بخواید ۱ماه میشه سمینار رو تهیه کرد اما باید خیلی فشرده و هدفمند کار کنید.

موفق باشید

سلام دوست من

big data مفهومی هستش که برای توصیف داده ها در حجم های زیاد استفاده میشه. به طور مثال داده هایی که google مورد جستجو قرار میده.
پایگاه های داده متنوعی برای این کار طراحی و توسعه داده شده اند که از تکنیک های NoSQL برای handle کردن این داده ها استفاده میکنن.
در این نوع از پایگاه های داده برخلاف DBMS های رایج (مانند oracel , sqlserver, ...) خاصیت ASID به طور کامل رعایت نمیشه و همین دلیل باعث افزایش سرعت بازیابی اطلاعات میشه.

از جمله معروفترین این پایگاه های داده میشه به casandra بر پایه hadoop اشاره کرد که در facebook استفاده میشه. یا CoachDB از شرکت apache که به صورت key/value اقدام به ذخیره سازی داده ها میکنه.
همچنین انواع دیگری به صورت پایگاه های داده بر مبنای گراف وجود داره که میشه به Neo4j اشاره کرد

من یکسری اطلاعات در مورد این موضوع در لینک های زیر قرار دادم که امیدوارم واسه شما مفید باشه.

شرکت نماد ارتباط سبز - مفهوم داده های حجیم و چالش های آن

شرکت نماد ارتباط سبز - پایگاه‌های داده مناسب برای ذخیره کلید/مقدار (Key/Value)

موفق باشید

سلام ممنون بابت راهنماییتون
حداقل چون هیچ اطلاعی دراین زمینه ندارم نمیدونم چه حوزه هایی داره
ولی با توضیحاتی که فرمودید فکر کنم از نظر سختی کار خیلی با وب کاوی فرقی نکنه
من وب کاوی کمی مطالعه کردم و به نظرم web usage mining جالب اومد
شما دراین زمینه اطلاعی دارین؟

سلام دوست من

web usage mining شاخه ای از وبکاوی هستش که مربوط به استفاده کاربران از صفحات وب و ارائه پیشنهاد صفحات وب به کاربران کاربرد داره.
البته در کاربرد های دیگه ای مثل load balancing سرور ها ویا سیستم های caching میتونه استفاده بشه.
متداول ترین داده ها برای این کار log های سمت سرور، کلاینت و یا پروکسی هستند.
کلا مقوله خیلی جالبی برای کارهای تحقیقاتی و کاربردی هست و به نظرمن آینده وب بر روی این زمینه شکل خواهد گرفت. کما اینکه تا به امروز کارهای خیلی خوبی توسط شرکت هایی مثل google و ... انجام شده.
البته این نکته رو در نظر بگیرید که عموما در این زمینه با مساله big data سروکار دارید و استفاده از پایگاه های داده no sql میتونه خیلی توی این زمینه کاربرد داشته باشه.

موفق باشید