LOGIN
ثبت نام یا ورود
Avatar
هنوز ثبت نام نکرده اید؟

هم اکنون عضو پلاک آبی شوید .و به اطلاعات وب سایت ما دسترسی داشته باشید

تنظیم مجدد کلمه عبور - نام کاربری را فراموش کرده ام

نام کاربری
کلمه عبور
مرا به خاطر بسپار

placabi articles

تکنیک Web Scraping

  • مهسا المعی نژاد نوشته شده توسط مهسا المعی نژاد
  • Update: 10/08/1395
  • این مورد را ارزیابی کنید
    (12 رای‌ها)

تکنیک Web Scraping ،روشی برای استخراج و پاکسازی داده های آنلاین است.  جمع آوری داده از وب سایت های گوناگون یکی از گام‌های آغازین بسیاری از پروژه های داده کاوی است.

برخی اوقات داده های مورد نیاز را می‌توان  به راحتی  در فرمت جدول در اینترنت یافت. اما بسیاری از مواقع، داه های مورد نظر در فرمت‌های استاندارد موجود نیستند. به بیان دیگر شما قادر نخواهید بود که به راحتی داده هایی را که می بینید، ذخیره کنید. برخی اوقات داده های مورد نیاز در وب پیج های گوناگون قرار گرفته است.
در چنین مواردی، به مهارت کافی برای استخراج این داده ها نیازمندیم. اینجاست که استفاده از تکنیک‌های Web Scarping امکان جمع‌آوری میلیون‌ها رکورد داده ای را در زمان بسیار کوتاه میسر می‌سازد.

برای انجام Web Scarping شما نیاز به دانش مقدماتی از زبان HTML خواهید داشت.
در این روش، داده ها با استفاده از اجزای مختلف در یک صفحه مانند CSS و xpath شناسایی و استخراج می‌شوند. فرآیند جمع‌آوری داده با استفاده از یک زبان برنامه‌نویسی مانند R کدنویسی خواهد شد و در نهایت به منظور استفاده در پروژه های داده کاوی در دسترس کارشناسان قرار داده خواهد شد.

 پیش ثبت نام دوره آموزش Web Scraping  

موارد کاربرد Web Scraping:

تکینک های استخراج داده از وب کاربردهای گوناگونی در صنایع مختلف دارد که از میان آن ها می توان به موارد زیر اشاره کرد:

  • استخراج اطلاعات مربوط به یک محصول از وب سایت تولیدکننده یا فروشنده خرد به منظور استفاده در وب سایت های دیگر. یکی از معروف ترین کاربردها در این زمینه مقایسه قیمت یک محصول می باشد.
  • استخراج اطلاعات اشخاص از وب سایت های کسب و کار مانند لینکداین به منظور یافتن افراد مرتبط با یک شغل خاص و پیشنهادات شغلی توسط منابع انسانی سازمان ها.
  • استخراج نظرات افراد در خصوص یک سازمان مانند بیمارستان. این گونه استخراج داده عموما همراه با پروژه ها آنالیز احساسات (Sentiment Analysis) صورت می گیرند که در آن افراد به دنبال داده هایی هستند که بتوانند با استفاده از آن ها به سازمان خود امتیاز دهند و تا حد امکان موجب بهبود کسب و کار خود گردند. از دیگر کاربردهای Web Scraping در این زمینه می توان به استخراج نظرات افراد در خصوص پزشکان اشاره نمود. در این گونه پروژه ها افراد عموما به دنبال شناسایی نظرات دروغ و متقلبانه هستند.
  • استخراج اخبار روز از وبسایت های مختلف به منظور انجام تحلیل های گوناگون و همچنین گلچین کردن اخبار برای بازدیدکنندگان.
  • یکی از مهمترین کاربردهای Web Scraping  استخراج ایمیل از وب سایت ها گوناگون است. سازمان ها با استخراج ایمیل افراد می توانند مشتریان خود را بهتر شناسایی کنند و در نهایت با شناسایی مشتریان تاثیرگذار قادر به اعمال استراتژی های مناسب برای این دسته از افراد باشند.

خواندن 1004 دفعه آخرین ویرایش در دوشنبه, 22 آبان 1396 23:42
برچسب‌ها
  • هیچ نظری یافت نشد

نظر خود را اضافه کنید.

ارسال نظر به عنوان مهمان

0
نظر شما به دست مدیر خواهد رسید
 تماس با ما

شهرک غرب، بلوار فرحزادی، خیابان تربیت معلم،
انتهای خیابان گلبان،
مجتمع موج، واحد 105
کد پستی: 1998963193
تلفن: 5 - 88560784
فکس: 88560786
پست الکترونیک:
info @ p l a c a b i . com
ibig @ p l a c a b i . com

 

We use cookies to improve our website. By continuing to use this website, you are giving consent to cookies being used. More details…