داده کاوی مفهوم و کاربردهای آن
45 صفحه قابل ویرایش
قیمت فقط 5000 تومان
چکیده
اخیراً تواناییهای ما در ایجاد و جمعآوری داده با سرعت زیادی افزایش یافته است. استفادة گسترده از بارکدها برای بیشتر تولیدات، کامپیوتری شدن بیشتر تجارتها و تراکنشهای بانکی و پیشرفتهایی که در ابزارهای جمعآوری داده ایجاد شده است، ما را با حجم گستردهای از داده روبرو کرده است. میلیونها پایگاهداده در مراکز مختلف مثل بانکها، دانشگاهها و مراکز دولتی استفاده میشوند. تعداد چنین پایگاهدادههایی با سرعت افزایش مییابد که این به دلیل در دسترس بودن و قوی بودن سیستمهای پایگاهدادهای است. علاوه بر این وب که امروزه از مراجع مهم اطلاعاتی به شمار میرود، در حال حاضر از صدها تریلیون بایت تشکیل میشود و همچنان به سرعت در حال رشد است و این در حالیست که تنها بخش کوچکی از اطلاعات وب مربوط به شماست و یا برای شما مفید است! چنین رشد عظیمی در داده و پایگاههای داده یک نیاز فوری به تکنیکها و ابزارهایی که بتوانند به صورت خودکار و هوشمند داده را به اطلاعات و دانش مفید تبدیل کنند، بوجود آورده است.
دادهکاوی که با عنوان کشف دانش از پایگاههای داده هم شناخته میشود، فرایندی برای استخراج دانش مفید از قبل ناشناخته (مثل قوانین، محدودیتها و…) از داده در پایگاههای داده میباشد.
کشف و استخراج اطلاعات و دانش از پایگاهدادههای بزرگ برای بسیاری از محققان به عنوان یک موضوع تحقیقاتی کلیدی در سیستمهای پایگاهداده و یادگیری ماشین شناخته میشود. در بسیاری از شرکتهای صنعتی هم دادهکاوی به عنوان مسئله مهمی که فرصتهای حیاتی سودآوری را برای شرکت فراهم میکند، مطرح میباشد. دانش کشف شده میتواند در مدیریت اطلاعات، پردازش پرس و جوها، تصمیم سازی و کاربردهای مختلف دیگری بکار گرفته شود. محققان در زمینههای مختلفی به مسئله دادهکاوی علاقه نشان دادهاند و کارهای مختلفی در راستای بکارگیری آن انجام شده است. بعضی از کاربردهای آن عبارتند از: کاربردهای دادهکاوی درایجاد اطلاعات برای ساخت پایگاهدادههای تحلیلی و سرویسهای بر خط اینترنت و استفاده از تکنیکهای دادهکاوی برای فهم بهتر رفتار کاربر، سرویسدهی بهتر و افزایش فرصتهای تجاری.
شبکة گستردة جهانی هم که یک سرویس مرکزی عظیم است و به صورت گستردهای توزیع شده است، دارای اطلاعاتی دربارة اخبار، تبلیغات، آنچه مشتریان باید از محصولات مختلف بدانند، مدیریت مالی، آموزش، دولتها، تجارت الکترونیکی و ... است و علاوه بر این دارای یک مجموعة غنی و پویا از پیوندها برای دسترسی به صفحات وب و استفاده از اطلاعات است، که این مجموعه در کل یک منبع غنی برای دادهکاوی ایجاد میکند.
فهرست
مقدمه.............................................................................................................................................................1
سابقه داده کاوی............................................................................................................................................2
مفهوم داده کاوی...........................................................................................................................................3
دانش داده کاویdata mining)).............................................................................................................4
کاربرد...........................................................................................................................................................4
رابطه داده کاوی با آنالیز آماری..................................................................................................................5
مراحل اصلی داده کاوی..............................................................................................................................5
مثال تفهیمی در مورد داده کاوی...............................................................................................................5
تفاوت داده کاوی و آنالیزهای آماری..........................................................................................................6
فواید و نقش داده کاوی در فعالیت شرکتها...............................................................................................7
تاریخچه داده کاوی.....................................................................................................................................7
تحلیل داده کاوی........................................................................................................................................8
مفاهیم اساسی در داده کاوی....................................................................................................................9.
مثالی کلاسیک از کاربرد داده کاوی...........................................................................................................10
فرآیند دادهکاوی.........................................................................................................................................12
نرمافزارهای دادهکاوی................................................................................................................................12
دادهکاوی و مدیریت دانش..........................................................................................................................13
مروری بر مفاهیم و الگوریتم های داده کاوی.............................................................................................13
طبقه بندی روشهای داده کاوی..................................................................................................................15
زیربنای داده کاوی......................................................................................................................................15
تکنولوژی ها ی مرتبط با داده کاوی ..........................................................................................................16
داده کاوی و مفهوم اکتشاف علومK.D.D)) ............................................................................................19
چه نوع دادههایی میتوانند مورد کاوش قرار گیرند؟.................................................................................20
چه نوع اطلاعاتی مناسب داده کاوی است؟...............................................................................................22
نگاهی مختصر به دو نمونه از الگوریتمهای داده کاوی..............................................................................25
کاربرد علم آمار و روشهای آماری در داده کاوی.......................................................................................26
کاربرد دادهکاوی در آموزش عالی..............................................................................................................28
کاربردهای داده کاوی در کتابخانه ها و موسسات دانشگاهی...................................................................29
مدیریت و خدمات کتابخانه........................................................................................................................33
مدیریت موسسات دانشگاهی....................................................................................................................34
داده کاوی و کاربرد آن در کیفیت داده ها.................................................................................................35
استفاده از روشهای داده کاوی در تشخیص نفوذ به شبکه های کامپیوتری ...........................................35
سیستم های تشخیص نفوذ -( IDS ).......................................................................................................36
داده کاوی و کاربرد آن در کشف نفوذ.......................................................................................................37
تکنیک ها داده کاوی و الگوریتم های آن..................................................................................................37
گام های انجام تحقیقات.............................................................................................................................38
مجموعه داده KDDCup99...................................................................................................................39
چهار دسته حمله در KDD99..................................................................................................................40
انتخاب روش برچسب گذاری.....................................................................................................................41
انتخاب معیار های ارزیابی کارائی..............................................................................................................41
نحوه نمایش نتایج.......................................................................................................................................42
تکنیک های داده کاوی در روابط عمومی الکترونیک...............................................................................42
داده کاوی در روابط عمومی الکترونیک.....................................................................................................44
منابع............................................................................................................................................................45
فهرست جداول
جدول 1......................................................................................................................................................33
جدول 2......................................................................................................................................................36
فهرست شکلها و تصاویر
فرایند داده کاوی (شکل-1)......................................................................................................................12
روش های داده کاوی (شکل-2).................................................................................................................17
سیستم های تشخیص نفوذ (شکل-3)......................................................................................................36
IDS (شکل-4)...........................................................................................................................................36
) Building Data Mining Modelsشکل-5(...................................................................................37
الگوریتم های بررسی شده (شکل-6).......................................................................................................38
شمایی از شبکه ایجاد شده برای جمع آوری داده های KDD99 (شکل-7).........................................40
چهار دسته حمله در KDD99 (شکل-8)................................................................................................40
معیار های ارزیابی کارائی (شکل-9)..........................................................................................................41
داده کاوی مفهوم و کاربردهای آن