متن کاوی و بررسی روشهای متن کاوی و ارزیابی این روشها

متن کاوی و بررسی روشهای متن کاوی و ارزیابی این روشها

دانلود تحقیق متن کاوی
فرآیند متن کاوی
مهمترین متد های متن کاوی
بررسی روشهای متن کاوی
ارزیابی روشهای متن کاوی
کاربردهای متن کاوی
روش های پیش پردازش کردن اطلاعات با متن کاوی
روش های پیش رده بندی اطلاعات با متن کاوی
روش های استخراج اطلاعات با متن کاوی

رفتن به سایت اصلی

 

متن کاوی و بررسی روشهای متن کاوی و ارزیابی این روشها

 

 

چکیده

    رشد فزاینده پایگاه داده ها در تقریبا هر ناحیه از فعالیت انسان باعث شده است که نیاز برای ابزارهای قدرتمند جدید برای تغییر دادن داده به دانش مفید افزایش یابد. برای برآوردن این نیاز محققان در ناحیه های مختلف مانند یادگیری ماشین ، شناسایی الگو، آنالیز داده آماری، بصری سازی داده ، شبکه های عصبی، اقتصاد سنجی، بازیابی اطلاعات، استخراج اطلاعات و….. روش ها و ایده هایی را کاوش کرده اند. ذات غیرساخت یافته ی این متون، اعمال همان روشهایی را که ما در مورد پایگاه داده های غیرمتنی بکار می بریم، غیر ممکن می سازد. بنابراین روش ها و الگوریتم-های پردازش (پیش پردازش)خاصی برای استخراج الگوهای مفید موردنیاز است. متن کاوی اطلاعات متنی غیرساختیافته را استفاده می کند و آنرا برای کشف ساختار و معناهای ضمنی پنهان در متن بررسی می کند. 

 

در این مقاله ما به بررسی یکی از جدیدترین زمینه-های مورد تحقیق در داده کاوی، متن کاوی می پردازیم. در این مقاله روش های موجود برای پیش پردازش کردن، رده بندی ، استخراج اطلاعات ، روش های یافتن روابط شرح داده می شوند در پایان هر بخش ارزیابی و مقایسه ای روی روش های بیان شده در آن بخش صورات می-گیرد و در پایان تعدادی از کاربردهای متن کاوی بیان می گردند.

 

 

کلمات کلیدی:

متن کاوی

داده کاوی

استخراج اطلاعات

یکپارچه  کردن داده کاوی

دسته بندی و مرتب سازی داده ها

 

 

 

مقدمه

   بخش قابل توجهی از اطلاعات قابل دسترس در پایگاه داده های متنی (یا پایگاه داده های سند ) كه شامل مجموعه بزرگی از اسناد منابع مختلف (مثلا مقالات خبری، paperها، كتاب ها، ایمیل ها و صفحات وب) ذخیره شده اند. پایگاه داده های متنی به علت افزایش مقدار اطلاعات موجود به فرم الكترونیكی سریع رشد می كنند. امروزه بیشتر اطلاعات در صنعت، کسب و کار  و سازمان های دیگر به صورت الكترونیكی و به فرم پایگاه داده متنی ذخیره شده اند.   داده های ذخیره شده در بیشتر پایگاه  داده های متنی، داده های نیمه ساختاریافته هستند چون نه به طور كامل غیرساختیافته هستند و نه به طور كامل ساختیافته هستند. 

 

برا ی مثال یك سند شامل تعدادی فیلد ساختیافته مانند عنوان، نویسندگان، تاریخ انتشار، رده  و ….. و از طرف دیگر شامل برخی كامپوننت های متنی غیرساختاریافته مانند چكیده و محتویات است. تكنیك های بازیابی اطلاعات مانند (متدهای ایندکس کردن متن ) برای هندل كردن سندهای غیر ساختاریافته ایجاد شده اند. تكنیك های بازیابی اطلاعات قدیمی برای مقدار زیادی داده متنی كه به طور فزاینده افزایش می یابند، ناكارآمد هستند. بدون دانستن محتویات سندها، فرمول بندی كردن Queryهای مناسب برای آنالیز كردن و استخراج كردن اطلاعات مفید از داده، مشكل است.

 

 كاربرها نیاز به ابزارهایی برای مقایسه سندهای مختلف، مرتب كردن سندها بر اساس موبوط بودن آن ها و یافتن الگوها دارند.  بنابراین یکی از جدیدترین زمینه های مورد تحقیق در داده کاوی، متن کاوی برای این منظور گسترش یافت. متن کاوی یعنی جستجوی الگوها در متن غیرساختیافته. متن کاوی برای کشف اتوماتیک دانش مورد علاقه یا مفید از متن نیمه ساختیافته استفاده می شود. چندین تکنیک برای متن کاوی پیشنهاد شده است عبارتند از ساختار مفهومی ،کاوش association ruleها درخت تصمیم گیری، روش های استنتاج قوانین ، همچنین تکنیک های بازیابی اطلاعات برای کارهایی مانند تطبیق دادن سندها، مرتب کردن کردن، کلاسترینگ و…..

 

 

فهرست مطالب

چکیده 

1 مقدمه

1.1 کشف دانش و ارتباط آن متن کاوی

2.1 تعاریف متن کاوی

3.1 ناحیه های سرچ مرتبط

2 روش ها پیش پردازش کردن متون

1.2 مدل فضای برداری

2.2 پیش پردازش زبان شناختی

3 روش های متن کاوی …

1.3 فازهای اصلی فرآیند کتن کاوی…

2.3 رده بندی …

1.2.3 انتخاب ترم ایندکس

2.2.3 رده کننده Naïve Bayes

3.2.3 رده بندی کننده نزدیکترین همسایه

4.2.3 درخت تصمیم گیری

5.2.3 متدهای هسته و SVM

6.2.3 ارزیابی رده بندی کننده ها

3.3  استخراج اطلاعات

1.3.3 رده بندی برای استخراج اطلاعات

2.3.3 مدل مارکوف پنهان

3.3.3 فیلدهای رندم شرطی

4.3.3 مقایسه روش های استخراج اطلاعات

2.2 پیش پردازش زبان شناختی

4.3 روش ها ترکیبی

1.4.3 روش های dicsotex

1.1.4.3 مقدمه

2.1.4.3 یکپارچه  کردن داده کاوی و استخراج اطلاعات

3.1.4.3 سیستم dicsotex

2.4.3روش textminer

1.2.4.3 مقدمه

2.2.4.3 استخراج اطلاعات

3.2.4.3 الگوریتم خوشه بندی

3.4.3 یافتن روابط

4.4.3 مقایسه روش های ترکیبی

4 کاربردهای متن کاوی

5 نتیجه گیری و کارهای آینده

6 مراجع

 

 

 

 

 

مقاله ادبیات چیست؟

مقاله ادبیات چیست؟ تعریف شعر غنایی انواع ادبی منظومه های حماسی دانلود مقاله ادبیات درآمدی بر ادبیات فارسی برون مرزی منظومه های حماسی سیستم همکاری در فروش فایل فایلینا همکاری در فروش فایل همکاری در فروش فروش فایل انجام پایان…

مبانی نظری و پیشینه تحقیق یادگیری سازمانی

مبانی نظری و پیشینه تحقیق یادگیری سازمانی مبانی نظری یادگیری سازمانی دانلود مبانی نظری یادگیری سازمانی پیشینه تحقیق یادگیری سازمانی ادبیات نظری یادگیری سازمانی فصل دوم پایان نامه یادگیری سازمانی مبانی نظری و پیشینه تحقیق یادگیری سازمانی ادبیات و مبانی…

نظریات نوین تعهد سازمانی و ویژگیهای شغلی و ارتباط این دو

نظریات نوین تعهد سازمانی و ویژگیهای شغلی و ارتباط این دو سطوح مختلف تعهد سازمانی مفهوم جدید برای تعهد سازمانی نظریات نوین تعهد سازمانی و ویژگیهای شغلی و ارتباط این دو نتایج مطلوب و نامطلوب سطوح مختلف تعهد سازمانی و…

ویژگی ها و تعیین کننده های خودکارآمدی و مراحل رشد آن

ویژگی ها و تعیین کننده های خودکارآمدی و مراحل رشد آن ویژگی ها و تعیین کننده های خودکارآمدی و مراحل رشد ان رفتن به سایت اصلی خودکارآمدی  یکی از ویژگی های شخصیتی و باور درونی می باشد که بر طرز…

ارزیابی اثرات تنش خشکی بر صفات فیزیولوژیک آنیسون

ارزیابی اثرات تنش خشکی بر صفات فیزیولوژیک آنیسون تاثیر تنش خشکی بر فتوسنتز تأثیر تنش خشکی بر گیاه اثرات تنش خشکی بر صفات فیزیولوژیک گیاهان تأثیر تنش خشکی بر فتوسنتز گیاه آنیسون تأثیر تنش خشکی بر محتوای نسبی آب گیاه…

فصل دوم پایان نامه و پیشینه نظری حل مسئله اجتماعی

فصل دوم پایان نامه و پیشینه نظری حل مسئله اجتماعی کلمات کلیدی : فصل دوم پایان نامه حل مسئله اجتماعی مبانی نظری حل مسئله اجتماعی پیشینه تحقیق حل مسئله اجتماعی پیشینه داخلی حل مسئله اجتماعی پیشینه خارجی حل مسئله اجتماعی…

پروپوزال بررسی خشونت علیه زنان از نگاه قرآن و احادیث

پروپوزال بررسی خشونت علیه زنان از نگاه قرآن و احادیث خشونت علیه زنان خشونت علیه زنان از نگاه قرآن خشونت علیه زنان از نگاه احادیث دانلود پروپوزال خشونت علیه زنان بررسی خشونت علیه زنان از نگاه قرآن و احادیث نمونه…

مبانی نظری و پیشینه تحقیق عوامل موثر بر ارزش ویژه برند سبز 128 صفحه

مبانی نظری و پیشینه تحقیق عوامل موثر بر ارزش ویژه برند سبز 128 صفحه کلمات کلیدی : مبانی نظری ارزش ویژه برند پیشینه تحقیق ارزش ویژه برند مبانی نظری ارزش ویژه برند سبز پیشینه تحقیق ارزش ویژه برند سبز مبانی…

آثار شرط ضمان در عقود اذنی

آثار شرط ضمان در عقود اذنی شرط ضمان عقود اذنی اثر شرط ضمان بررسی قاعده کل ما یضمن بصحیحه یضمن بفاسده در عقود اذنی شرط ضمان مبتنی بر قاعده علی الید شرط ضمان مبتنی بر قاعده علی الید در عقود…

ماهیت سبک های رهبری و بررسی نظریه ها و مدل های رهبری

ماهیت سبک های رهبری و بررسی نظریه ها و مدل های رهبری کلمات کلیدی : نظریه های رهبری مدل های رهبری سبک های رهبری انواع نظریه های رهبری انواع سبک های رهبری سبک های نوین رهبری مالی رفتن به سایت…

تاثیر عوامل اقتصادی، فردی و سازمانی بر بروز فساد اداری

تاثیر عوامل اقتصادی، فردی و سازمانی بر بروز فساد اداری مولفه های فساد اداری عوامل موثر بر فساد اداری عوامل موثر بر کاهش فساد اداری فساد اداری سازمانهای دولتی فساد اداری در سازمان های دولتی عوامل موثر بر فساد اداری…

افزایش سرسام‌آور مصرف مواد مخدر

افزایش سرسام‌آور مصرف مواد مخدر اعتیاد قاچاق مواد مخدر دانلود مقاله افزایش سرسام‌آور مصرف مواد مخدر اعتیادات مجاز و غیر مجاز اعتیاد به مواد مخدرچیست ؟ درمان های روانی چیست و اصول آن بر چه پایه ای استوار است ؟…

بررسی اقلیم شناسی و تاثیر آن بر اشکال فرسایشی

بررسی اقلیم شناسی و تاثیر آن بر اشکال فرسایشی اقلیم شناسی اشکال فرسایشی حوضه آبخیز رودخانه سقز اشکال فرسایشی حوضه آبخیز رودخانه سقز اقلیم شناسی حوضه آبخیز رودخانه سقز بررسی اقلیم شناسی و تاثیر آن بر اشکال فرسایشی دانلود پایان…

بررسی تطبیقی علم قاضی در اثبات دعوی

بررسی تطبیقی علم قاضی در اثبات دعوی ادله اثبات دعوی علم قاضی در اثبات دعوی علم قاضی در اثبات دعوی در قوانین مصر علم قاضی در اثبات دعوی در قوانین ایران طریقت ادله اثبات دعوی و علم قاضی موضوعیت داشتن…

مبانی نظری و پیشینه تحقیق رابطه عزت نفس و پیشرفت تحصیلی

مبانی نظری و پیشینه تحقیق رابطه عزت نفس و پیشرفت تحصیلی مبانی نظری عزت نفس پیشینه تحقیق عزت نفس دانلود مبانی نظری عزت نفس مبانی نظری رابطه عزت نفس و پیشرفت تحصیلی مبانی نظری پیشرفت تحصیلی پیشینه تحقیق پیشرفت تحصیلی…

وب کاوی در صنعت

وب کاوی در صنعت داده کاوی جایگاه داده کاوی داده کاوی و OLAP رگرسیون درخت تصمیم دانلود مقاله رشته کامپیوتر و IT دانلود مقاله معرفی داده وب کاوی در صنعت دانلود پایان نامه داده وب کاوی در صنعت رفتن به…

پاورپوینت استخوان بندي بدن انسان

پاورپوینت استخوان بندي بدن انسان کلمات کلیدی : پاورپوینت استخوان بندي بدن انسان پاورپوینت استخوان بندي بدن انسان لل پاورپوینت استخوان بندي بدن انسان لل لل پاورپوینت استخوان بندي بدن انسانلل لل پاورپوینت استخوان بندي بدن انسان پاورپوینت استخوان بندي…

پروپوزال شناسایی و بکارگیری عوامل مدیریتی مختلف موثر در بهره وری سازمان

پروپوزال شناسایی و بکارگیری عوامل مدیریتی مختلف موثر در بهره وری سازمان بهره وری سازمان عوامل موثر بر بهره وری سازمان اولویت عوامل موثر بر بهره وری سازمان نقش رهبری در بهره وری سازمان نقش سازماندهی در بهره وری سازمان…

ادبیات نظری و پیشینه تجربی سلامت روان

ادبیات نظری و پیشینه تجربی سلامت روان کلمات کلیدی : مبانی نظری سلامت روان دانلود مبانی نظری سلامت روان پیشینه تحقیق سلامت روان دانلود پیشینه تحقیق سلامت روان پیشینه داخلی سلامت روان پیشینه خارجی سلامت روان پیشینه پژوهش سلامت روان…

چارچوب نظری و پیشینه پژوهش افسردگی در نوجوانان

چارچوب نظری و پیشینه پژوهش افسردگی در نوجوانان کلمات کلیدی : مبانی نظری افسردگی پیشینه تحقیق افسردگی پیشینه تحقیق افسردگی در ایران پیشینه تحقیق در مورد افسردگی پیشینه داخلی و خارجی افسردگی فصل دوم پایان نامه افسردگی در نوجوانان مبانی…

مبانی نظری و پیشینه تحقیق خطاهای شناختی 25 صفحه

مبانی نظری و پیشینه تحقیق خطاهای شناختی 25 صفحه کلمات کلیدی : فصل دوم پایان نامه خطاهای شناختی مبانی نظری خطاهای شناختی پیشینه تحقیق خطاهای شناختی پیشینه داخلی خطاهای شناختی پیشینه خارجی خطاهای شناختی پیشینه پژوهش خطاهای شناختی پیشینه نظری…

مبانی نظری بررسی ارتباط بین سرمایه فکری شرکت های عضو بورس اوراق بهادار تهران و توسعه انسانی

مبانی نظری بررسی ارتباط بین سرمایه فکری شرکت های عضو بورس اوراق بهادار تهران و توسعه انسانی سرمایه فکری در شرکت های بورس شاخص توسعه انسانی در شرکت های بورس تاثیر سرمایه فکری بر شاخص توسعه انسانی ارتباط سرمایه فکری…

پرسشنامه فرسودگی شغلی

پرسشنامه فرسودگی شغلی کلمات کلیدی : پرسشنامه فرسودگی شغلی مسلش پرسشنامه فرسودگی شغلی ماسلاچ پرسشنامه فرسودگی شغلی ماسلاچ و جکسون پرسشنامه فرسودگی شغلی مسلش doc پرسشنامه فرسودگی شغلی مسلش (mbi) دانلود پرسشنامه فرسودگی شغلی مزلاچ تفسیر پرسشنامه فرسودگی شغلی مسلش…

بحران هویت جنسی

بحران هویت جنسی هویت جنسی نسخ پذیری جنسی دانلود مقاله بحران هویت جنسی سیستم همکاری در فروش فایل فایلینا همکاری در فروش فایل همکاری در فروش فروش فایل انجام پروژه و پایان نامه رشته روانشناسی fileina فروشگاه ساز فایلینا فروشگاه…

بررسی طراحی یک دستگاه آزمون جریان گردابی و کاربردهای آن

بررسی طراحی یک دستگاه آزمون جریان گردابی و کاربردهای آن مدارپروب جریان گردابی آزمون های غیرمخرب دستگاه جریان گردابی دستگاه ترک یاب سطوح فلزی القای مغناطیسی و اندوكتانس‌ بررسی طراحی یک دستگاه آزمون جریان گردابی و کاربردهای آن دانلود پایان…

پاسخی بگذارید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *