داده کاوی
داده کاوی چیست؟
1. مقدمه
- 1.4.1 خلاصه سازی داده های چند بعدی
- 1.4.2 استخراج الگوهای مکرر، انجمن ها و همبستگی ها
- 1.4.3 طبقه بندی و رگرسیون برای تجزیه و تحلیل پیش بینی
- 1.4.4 تجزیه و تحلیل خوشه
- 1.4.5 یادگیری عمیق
- 1.4.6 تجزیه و تحلیل داده های پرت
- 1.4.7 آیا همه نتایج معدن جالب است؟
- 1.5.1 امار و داده کاوی
- 1.5.2 یادگیری ماشین و داده کاوی
- 1.5.3 تکنولوژی پایگاه داده و داده کاوی
- 1.5.4 علم داده و داده کاوی
- 1.5.5 سایر علوم و داده کاوی
2. داده ها، اندازه گیری ها و پیش پردازش داده ها
داده کاوی چیست؟
ما در دنیایی زندگی میکنیم که حجم عظیمی از دادههابه طور مداوم و سریع تولید میشود.
“ما در عصر اطلاعات زندگی میکنیم” یک ضرب المثل رایج است که امروزی آن را زیادی در حوزههای اطلاعات و تکنولوژی میشنویم. با این حال، ما در واقع در عصر داده زندگی میکنیم. هر روز ترابایت یا پنابایت داده به شبکههای رایانه ای، شبکه جهانی وب یا WWW، انواع دستگاههای تجارتی، خبرگذاریها، جامعه، علم، مهندسی و تقریبا هر جنبه دیگری از زندگی روزمره سرازیر میشود. این رشد انفجاری حجم دادههای موجود نتیجه کامپیوتری شدن جامعه ما و توسعه سریع ابزارهای قدرتمند محاسباتی، سنجش و جمع آوری داده، ذخیره سازی و انتشار است.
کسب و کارها در سرتاسر جهان مجموعه دادههای غول پیکیری تولید میکنند، از جمله معاملات فروش، سوابق معاملات سهام، توضیحات محصول و غیره. همچنین در حوزههای دیگر همچون عملکرد سیستم، مشاهدات مهندسی و نظارت بر محیط، تحقیقات زیست پزشکی، صنعت بهداشت و … دادههای حجیم و خیلی بزرگی تولید میشوند. بنابراین فهرست منابعی که حجم عظیمی از داده را تولید میکنند بی پایان است.
این حجم خیلی عظیم از داده که در حال رشد است، زمان ما را به عصر داده تبدیل میکند. برای اینکه اطلاعات ارزشمند از این مقادیر عظیم داده کشف شود و این دادهها را به دانشی ارزشمند تبدیل کرد، نیاز هست تا از ابزارهای قدرتمندی استفاده کرد. این ضرورت به این نوع ابزارها منجر به تولد دادهکاوی شده است.
در واقع تعریف داده کاوی، این است که دادهکاوی فرآیند کشف الگوها، مدلها و سایر انواع دانش در مجموعه دادههای حجیم و بزرگ است. البته اصطلاح دادهکاوی یا Data Mining، به معنی این است که برای کاوش یا استخراج داده به کار میرود. زیرا وقتی در اصطلاحهای معدن کاری به فرض مثال Gold mining میگوییم، منظور این است که به استخراج طلا میپردازیم. در واقع دادهکاوی باید به طور دقیق تری دانشکاوی از داده نامیده میشد که در واقع به این معنی است که یک فرآیندی است که مجموعه کوچکی از قطعات گران بها (دانش) را از مقدار زیادی مواد خام(دادهها) پیدا میکند. بنابراین چنین نام یک نام گمراه کنندهای از نظر اسمی است ولی به یک انتخاب محبوب تبدیل شده است. همچنین دیگر اصطلاحهایی هستند که معنایی مشابه با دادهکاوی دارند. مثلا، دانشکاوی از داده یا knowledge mining from data (KDD)، کشف الگو، استخراج دانش، باستان شناسی داده، آنالیز داده، و برداشت اطلاعات.
نویسنده:
دکتر محمدرضا عاطفی
رییس هیات مدیره گروه ناب
عضو هیئت علمی دانشگاه
بینش های مرتبط
استراتژی, رقابت
پنج روند اقتصاد جهانی
گزارش رقابت جهانی 2019 یک قطب نمای اقتصادی بسیار ضروری است، که 40 سال ...
استراتژی
سرمایهگذاری مخاطرهآمیز
صدها شرکت درحال مقدمه چینی برای توسعه سرمایهگذاریهای مخاطره آمیز به امید ...
استراتژی
از استراتژی اقیانوس آبی تا رهبری اقیانوس آبی
آیا بین استعداد و انرژی بالقوه و استفاده نشده کارکنان از یک طرف و ...
استراتژی
تئوری رهبری اقیانوس آبی
هنگامی که افراد برای اقدامات رهبری شما ارزش قائل هستند، در واقع رهبری شما
...
استراتژی
استراتژی اقیانوس آبی – مطالعه موردی تلفنهای همراه سامسونگ
مبدا فعالیتهای سامسونگ لوازم الکترونیکی نبود. در سال 1938 بنیانگذار سامسونگ، بیونگ چول ...
استراتژی, نوآوری
حرکت به سمت آینده، نه ماندن در گذشته
رهبران سازمانها خود را برای عملیات پس از پاندمی آماده میکنند. احتمالا ...
استراتژی
سیاست اقیانوس آبی: پیروزی ترودو در انتخابات
ترودو، با توجه بیشتر به افراد غیر رأی دهنده، در خلاف جهت سیاسیون سنتی
...
استراتژی
چشم انداز ارتش آمریکا برای سال ۲۰۲۸
مشکلات امروز اغلب به عنوان پیامدهای ناخواسته راه حلهای دیروز به وجود می ...
استراتژی
حرکت به سمت استراتژی اقیانوس آبی
سال ۲۰۰۵، استراتژی اقیانوس آبی و در سال ۲۰۱۵ ویرایش جدید آن انقلابی در ...
استراتژی
تفاوتهای کلیدی رهبری اقیانوس آبی نسبت به رویکردهای رهبری سنتی
برنامههای توسعه رهبری و استراتژیهای رهبری با این فرض ضمنی که در ...
استراتژی
نقشه ذهنیِ رهبری اقیانوس آبی
رهبری اقیانوس آبی میتواند به سازمانها در آزاد کردن و تحقق اقیانوس ...
استراتژی
آیا میتوان از رهبری اقیانوس آبی برای استارتاپها استفاده کرد؟
رهبری اقیانوس آبی به طور یکسان برای سازمانهای بزرگ، متوسط و کوچک اثربخش ...
استراتژی, نوآوری
ضرورت استراتژی نوآوری
هر سازمان موفقی در تلاش برای نوآوری است اما غالبا شرکتها از رویکردهای ...
استراتژی
تصمیمات نوکیا
اقداماتی که منجر به نزول نوکیا شد، یک داستان هشدار دهنده برای شرکت های ...
استراتژی
عملیاتی کردن رهبری اقیانوس آبی
رهبران اقیانوس آبی برنده میشوند، زیرا وقت و تلاش آنها از فعالیتهای
...
استراتژی
رابطه میان پایداری زیست محیطی و اجتماعی
کیفیت محیط زیست و ساختار یک جامعه به شدت به هم وابسته است. از
...