داده‌ کاوی چیست؟

داده‌ کاوی (Data Mining) علم استخراج الگوها، اطلاعات و تحلیل از مجموعه داده‌های خامی است که در یک سازمان و یا یک جامعه یا هر مجموعه دیگری تولید شده است. سالیان پیش که حجم داده‌های تولیدی بسیار ...

به خواندن ادامه دهید

نمونه گیری (Sampling) از مجموعه داده های بزرگ — راهنمای کاربردی

در «یادگیری ماشین» (Machine Learning) و «داده‌کاوی» (Data Mining)، اغلب نیاز به آموزش دادن مدل با یک «مجموعه داده» (Data Set) بسیار بزرگ حاوی هزاران و یا حتی میلیون‌ها رکورد است. هر چه اندازه مجموعه داده بزرگ‌تر باشد، «معناداری آماری ...

به خواندن ادامه دهید

تجسم داده (Data Visualization)، ابزاری برای بیان بهتر اطلاعات و تحلیل

هدف اصلی نیز تسهیل شناسایی الگوها، روندها و نقاط پرت در مجموعه داده‌های بزرگ است. ... را ارائه داد یا اینکه گاهی ممکن است یک تجسم اشتباه طراحی شده باشد یا طراحی مبهم آن موجب اتخاذ تصمیماتی ...

به خواندن ادامه دهید

مجموعه داده های عمومی برای داده کاوی و هوش مصنوعی — راهنمای کاربردی

این مجموعه داده می‌تواند برای بررسی صحت عملکرد الگوریتم مناسب باشد. ... نمونه ۱۲۰ K تا ۳.۶ M است و طیفی از مسائل دودویی تا ۱۴ کلاسی را دارا است. مجموعه داده‌های این مجموعه از DBPedia، آمازون، Yelp ...

به خواندن ادامه دهید

علم داده چیست و چه کاربردی دارد؟ – به زبان ساده – فرادرس

«علم داده یا دیتا ساینس» (Data Science) یکی از شاخه‌های «هوش مصنوعی» (Artificial Intelligence | AI) محسوب می‌شود که امروزه مورد توجه بسیاری از افراد قرار گرفته است. مدیران و افراد فعال در حوزه کسب و کار نگاه ویژه‌ای به این حوزه دارند و از ...

به خواندن ادامه دهید

مجموعه تک عضوی چیست؟ + ویژگی های مجموعه یکانی، حل تمرین و مثال

در این مطلب از مجموعه آموزش‌‌های مجله فراردس، با مجموعه تک عضوی آشنا می‌شویم و ویژگی‌‌های مختلف آن را بیان خواهیم کرد. ... بنابراین مجموعه تهی زیرمجموعه‌ای از هر مجموعه است. ممکن است از خود ...

به خواندن ادامه دهید

مفاهیم کلان داده (Big Data) و انواع تحلیل داده — راهنمای جامع

صحت (Veracity): صحت به کیفیت داده‌های ثبت شده که ممکن است به شدت متنوع باشند و درستی تحلیل‌ها را دستخوش تغییر کنند اشاره دارد. در همین راستا،‌ تکرارپذیری امری حیاتی برای انجام تحلیل‌های صحیح است.

به خواندن ادامه دهید

کاربرد یافتن داده‌های پرت (Outlier Detection) در داده‌کاوی

این کار یک عملِ غیر طبیعی (برای کارتِ شما) است، و اگر یک الگوریتمِ تشخیص داده‌های (یا همان فرآیندهای) پَرت در شبکه‌ی شتاب موجود باشد، احتمالاً می‌تواند این عملیات را شناسایی کرده و کارتِ ...

به خواندن ادامه دهید

راهنمای شروع داده های آموزشی هوش مصنوعی: تعریف، مثال، مجموعه داده ها

تخصص. هوش مصنوعی بهداشتی از قدرت تبدیل داده های پیچیده به بینش عملی استفاده کنید.. هوش مصنوعی مکالمه مدل سازی گفتارهای دارای هوش مصنوعی با مجموعه داده های چند زبانه ساختار یافته غنی سازی کنید.. چشم انداز کامپیوتر مدل های ...

به خواندن ادامه دهید

جامعه آماری – انواع داده و مقیاس‌های آن‌ها – فرادرس

از نوع داده‌های کیفی هستند. البته گاهی در مورد مقدار هر یک از ویژگی‌های کیفی ممکن است سلیقه نیز موثر باشد و برای یک عضو از جامعه آماری دو یا چند مقدار برای ویژگی کیفی آن بدست آید.

به خواندن ادامه دهید

تحلیل داده چیست ؟ – از کاربرد تا اهمیت و انواع به زبان ساده

تحلیل داده چیست ؟. «تحلیل داده»، فرایندی است متشکل از گام‌هایِ «بررسی» (Inspecting)، تمیز کردن یا «پاک‌سازی» (Cleansing)، «تبدیل» (Transforming) و «مدل‌سازیِ» (Modeling) داده‌ها که با هدف کشف و استخراج اطلاعات ...

به خواندن ادامه دهید

آزمون دیکسون و شناسایی نقاط پرت | به زبان ساده – فرادرس

آزمون دیکسون و شناسایی نقاط پرت. «آزمون کیو دیکسون» (Q Dixon Test)، یا به طور خلاصه آزمون Q، راهی برای یافتن نقاط دورافتاده یا پرت در مجموعه داده‌های بسیار کوچک است که به طور نرمال توزیع یا از یک ...

به خواندن ادامه دهید

پیش پردازش داده ها در داده کاوی — به زبان ساده – فرادرس

استفاده از یک مقدار ثابت: در این روش تمام مقادیر ناموجود در مجموعه داده، با یک مقدار ثابت و از پیش تعیین شده پر می‌شوند.این روش از دقت بالایی برخوردار نیست؛ به ویژه اگر تعداد داده‌های ناموجود زیاد باشد، ممکن است این ...

به خواندن ادامه دهید

دیتاست (مجموعه داده) به چه معناست؟

در یادگیری ماشین و یادگیری عمیق، دیتاست (مجموعه داده) مجموعه ای از نمونه های داده است که برای آموزش مدل های یادگیری ماشین استفاده می شود.هر نمونه داده شامل یک یا چند ویژگی است که ویژگی های داده را توصیف می کند.

به خواندن ادامه دهید

علم داده یا دیتا ساینس (Data Science) چیست و چه کاربردهایی دارد؟

علم داده یا دیتا ساینس چیست؟ علم داده یا دیتا ساینس (data science) ترکیبی از ابزارها، الگوریتم‌ها و اصول یادگیری ماشین مختلف با هدف کشف الگوهای پنهان از داده‌های خام است و با داده کاوی رابطه تنگاتنگی دارد.

به خواندن ادامه دهید

ضرب دکارتی مجموعه ها و مختصات دکارتی — به زبان ساده

در نظریه مجموعه‌ها، ضرب دکارتی از اهمیت خاصی برخوردار است. زیرا مفاهیم دیگر مثل رابطه و تابع براساس آن بنا نهاده شده‌اند. البته به عنوان تعمیم ضرب دکارتی دو مجموعه، می‌توان از ضرب دکارتی n مجموعه نیز صحبت کرد. مطالعات ...

به خواندن ادامه دهید

پایگاه داده توپوگرافی

پایگاه داده توپوگرافی مجموعه داده ای است که زمین تمام فنلاند را به تصویر می کشد. اشیاء کلیدی در پایگاه داده توپوگرافی عبارتند از: شبکه راه ها، ساختمان ها و ساختمان ها، مرزهای اداری، نام های ...

به خواندن ادامه دهید

کاربردهای علم داده | همه چیز درباره علم داده (Data Science)

کاربردهای علم داده. علم داده ممکن است الگوهایی را در داده‌های ظاهراً بدون ساختار شناسایی کند و امکان نتیجه‌گیری و پیش‌بینی در این داده‌ها را فراهم کند. کسب‌وکارهای فعال در حوزه فناوری که ...

به خواندن ادامه دهید

مجموعه داده های عمومی برای داده کاوی و هوش مصنوعی — راهنمای کاربردی

به خواندن ادامه دهید

آیا مجموعه داده‌های هوش مصنوعی Hyperscale کمتر از خود اینترنت بدتر

دامنه laion-400m ادعا می‌کند که تصاویر مجموعه داده‌ها «تحت حق چاپ خود هستند» – یک مکانیسم «عبور» که عمدتاً توسط احکام دادگاه‌ها و دستورالعمل‌های دولتی در سال‌های اخیر فعال شده است که به طور گسترده‌ای خراش دادن وب را ...

به خواندن ادامه دهید

چگونه در یک سازمان داده‌ها را جمع آوری کنیم؟(نحوه جمع آوری داده‌ها

۱. نظرسنجی‌ها و پرسشنامه‌ها: محققان پرسشنامه ها یا نظرسنجی‌های ساختار یافته‌ای را برای جمع آوری داده ها از افراد یا گروه‌ها طراحی می‌کنند. این موارد را میتوان از طریق مصاحبه حضوری، تماس ...

به خواندن ادامه دهید

مجموعه داده‌ها (Data Collection) چیست و چه کاربردی دارد؟ | شبکه

هوش مصنوعی. کارگاه. مجموعه داده‌ها (Dataset) به گروهی از اطلاعات یا نمونه‌ها داده‌ها گفته می‌شود که به صورت ساختار یافته یا فاقد ‌ساختار برای تحلیل، استفاده و مدل‌سازی در زمینه‌های مختلف ...

به خواندن ادامه دهید

هوش مصنوعی قابل توضیح ممکن است داده‌های محرمانه را به راحتی تسلیم کند

تست. در آزمایش این سیستم، محققان آن را در برابر سه مجموعه داده به کار بردند: iCV-MEFED حالات چهره؛ CelebAو ارقام دست نویس MNIST.برای تطبیق اندازه مدل مورد استفاده توسط محققان، اندازه سه مجموعه داده به ترتیب به 128×128، 265×256 و 32×32 ...

به خواندن ادامه دهید

دیتا ساینس (Data Science) چیست؟ همه‌چیز درباره‌ی علم داده

همه‌چیز درباره‌ی علم داده. دیتا ساینس (Data Science) چیست؟. همه‌چیز درباره‌ی علم داده. با ورود جهان به عصر کلان‌داده، نیاز به ذخیره‌سازی داده‌ها نیز افزایش یافت. تا سال‌ها، چالش و دغدغه‌ی اصلی ...

به خواندن ادامه دهید

مجموعه داده‌هایی با ابعاد زیاد (High Dimensional) | چیستیو | علوم داده

اما ممکن است یک مجموعه‌ی داده دارای ابعاد بیشتری نیز باشد که می‌خواهیم در مورد آن، در این درس صحبت کنیم. ... بایستی از این مجموعه‌ی داده، یادگیری را انجام دهد تا بتواند داده‌های جدید‌تر را ...

به خواندن ادامه دهید

داده های کمی چیست؟ (با روش ها، مزایا و مثال ها) | ایوسی

این اغلب یکی از انواع ساده‌تر داده‌های کمی است، زیرا ممکن است به ابزار خاصی نیاز نداشته باشد. به عنوان مثال، تعداد افراد در یک اتاق یا تعداد انگور در یک کاسه، دو موردی هستند که می توانید برای ...

به خواندن ادامه دهید

دیتاست (مجموعه داده) به چه معناست؟

در یادگیری ماشین و یادگیری عمیق ، دیتاست ( مجموعه داده) مجموعه ای از نمونه های داده است که برای آموزش مدل های یادگیری ماشین استفاده می شود. هر نمونه داده شامل یک یا چند ویژگی است که ویژگی های ...

به خواندن ادامه دهید

مدیریت داده‌های نامتناسب

سنجش خطا برای مجموعه داده‌های نامتناسب. در بخش قبلی به این نتیجه رسیدیم که داشتن یک ارزیابی عددی جهت سنجش الگوریتم با آن بسیار ضروری است. در این بین موردی وجود دارد که ساختن یک ارزیابی عددی ...

به خواندن ادامه دهید

جابجایی داده‌ها — بررسی یک مشکل رایج در دنیای علم داده‌ها

به طور خاص، در این مقاله به توضیح یک نوع بخصوص از تغییر در مجموعه داده‌ها (تغییر متغیر کمکی)، روش‌های موجود برای حل این نوع مشکل و تشریح یک روش خاص برای تصحیح این مشکل می‌پردازیم. 1. «جابجایی ...

به خواندن ادامه دهید

توصیف الگوهای ساختار یافته در داده‌کاوی — تشریح مفهوم با یک مثال ساده

مجموعه مذکور، کامل (بدون مقادیر از دست رفته یا Missing Values) و فاقد نویز است. همچنین، برچسب‌دار و دارای ۲۴ نمونه (هر سطر از مجموعه داده) است که برای هر یک چهار خصیصه بیان شده و از سال ۱۹۹۰ به صورت آزاد در دسترس عموم قرار گرفت.

به خواندن ادامه دهید

نمونه برداری در علم داده به چه معناست؟

مزایای نمونه برداری داده ها. افزایش سرعت: نمونه‌برداری در مورد مجموعه‌های داده‌ای حجیم، بسیار کارآمد است. برای نمونه، در برنامه‌های کاربردی تجزیه و تحلیل داده‌های حجیم یا نظرسنجی‌ها ...

به خواندن ادامه دهید

علم داده چیست؟

اگر این فرضیه توسط داده‌ها در تضاد نباشد، آنها ممکن است بتوانند یک نظریه یا مدلی در مورد نحوه عملکرد این پدیده بسازند، که می‌توانند بارها و بارها با مشاهده اینکه آیا برای سایر مجموعه‌های ...

به خواندن ادامه دهید

انواع روش های بصری سازی داده (ِData Visualization) و نحوه انتخاب بهترین

وقتی نقاط مختلف داده وجود دارد باید از آن استفاده شود و یا می‌خواهید شباهت‌های مجموعه داده را برجسته کنید. این موضوع در هنگام جستجوی پرتال یا درک توزیع داده‌های شما مفید است.

به خواندن ادامه دهید

پرکردن ،حذف یا جایگزینی داده های گم شده missing value | دیپ تیپ

تقریباً همه مجموعه داده های دنیای واقعی مقادیر از دست رفته missing value دارند، برای حذف، پر کردن یا جایگزینی داده های گم شده شناسایی نوع آن از دست رفتن داده مهم است و این یک مشکل جدی است که باید پاسخگوی آن باشیم.

به خواندن ادامه دهید

راهنمای الگوریتم K-Nearest Neighbors در Python و Scikit-Learn

مجموعه داده های مسکن کالیفرنیا Scikit-Learn. ما قصد داریم از مجموعه داده مسکن کالیفرنیا برای نشان دادن روش عملکرد الگوریتم KNN. مجموعه داده از سرشماری سال 1990 ایالات متحده به دست آمده است.

به خواندن ادامه دهید

مجموعه داده های رایگان و قابل دانلود برای علم داده و یادگیری ماشین

Kaggle (): یک سایت در حوزه «علم داده» (Data Science) و حاوی مجموعه داده‌های متنوع و جالب توجهی است که توسط مشارکت‌کنندگان گوناگون فراهم شده‌اند.می‌توان …

به خواندن ادامه دهید

داده کاوی چیست ؟ – توضیح Data Mining به زبان ساده

ممکن است نیاز باشد از چندین منبع مختلف داده‌های مورد نیاز مسئله را گردآوری کنیم. به‌علاوه، باید زمان آماده‌سازی داده‌ها را نیز مشخص کنیم. ... مجموعه آموزش‌های داده‌کاوی و یادگیری ماشین ...

به خواندن ادامه دهید

پاکسازی داده ها چیست و چه مراحلی دارد؟

پس از انجام فرآیند پاکسازی داده ها ، یک مجموعه داده باید با سایر مجموعه داده‌های مشابه در سیستم سازگار باشد. ناسازگاری‌های شناسایی شده ممکن است به علت خطاهای ورود کاربر و خرابی در انتقال یا ...

به خواندن ادامه دهید

علم داده در مقابل علوم کامپیوتر: تفاوت های کلیدی

مفاهیم مختلفی در حوزه فناوری و هوش مصنوعی وجود دارد. دو مفهوم از این قبیل علم داده و علوم کامپیوتر هستند که ارتباط نزدیکی با هم دارند. این دو مفهوم اغلب یکسان تلقی می شوند، اما اینطور نیست. مهارت های مورد نیاز برای حرفه ...

به خواندن ادامه دهید