مقاله ترتیب اولویت بندی موتورهای جستجو در اینترنت

اختصاصی از یارا فایل مقاله ترتیب اولویت بندی موتورهای جستجو در اینترنت دانلود با لینک مستقیم و پرسرعت .

فرمت فایل : word(قابل ویرایش)

تعداد صفحات:183

فهرست مطالب:

چکیده

سرگذشت اینترنت 5
اینترنت چیست ؟ 5
وب جهان پهنا WORLD WIDE WEB 19
URL یا مکان یاب منافع عمومی چیست ؟ 29
پست الکترونیک چیست ؟ 30
اختلاف بین اینترنت و شبکه های روی خطی تجاری چیست ؟ 32
اتصال ppp چیست ؟ 34
گپ با اینترنت چیست ؟ 34
گروه خبری چیست ؟ 36
قرار داد انتقال فایل چیست ؟ 37
زبان آرایش فرامتن چیست ؟ 38
درخواست 40
کالبد شکافی نشانی وب 42
انواع پایگاههای اینترنت 44
وب یا تارگسترده 45
دیدن پایگاهها 46
پروتالها 49
پایگاههای  ftp 51
یوزنت 52
پایگاههای TELNET 55
جستجوی گسترده وب با پایگاههای جستجو گر فراگیر 59
پایگاههای جستجو گر تخصصی 62
میدانهای موردعلاقه 63
جستجوی هوشمندانه وب 64
جستجوی ساده روی خطی ( online) 67
برنامه Bulls Eye 69
برنامه Compenic 99 70
برنامه Serchpad 71
برنامه Webferret PRO 71
 مبانی تحلیل الگوریتم 74
بیان الگوریتم 77
ارزیابی کارایی الگوریتم 80
جدول1-1 : زمان لازم برای حل مسائل به وسیله الگوریتم های متفاوت 88
دایرکتوری های تحت اختیار انسان 92
قسمت یک موتور جستجو   محور 94
موتورهای جستجوی اصلی : همانند ، اما متفاوت 95
Deep Crawl 98
frames support (پشتیبانی کادر ها ) 99
نقشه های تصویری Imaga maps 99
Paid inclusion 101
stmming  ریشه یابی 103
Ranking    یا رده بندی 103
موتور جوستجوی اصلی 107
هات بات   110
موتورهای جستجوی جهانی دیگر   
محل ، محل ، محل ، …و تکرار 117
چاشنی در خوراک پزی 118
جایگزینی موتور جستجو چیست ؟ 122
رتبه بندی بالا در   کلید شماره 2 128
جمع بندی 130
قسمت های یک موتور جستجوی   131
((الگوریتم رنکینگ یاهو)) 138
تسلیم به پروژه دایرکتوری باز: 158
شاخص گذاری: 164
دایرکتوری ها چیست؟ 164
چگونه موتورهای تحقیق کار می کنند؟ 165
طراحی یک پایگاه دانش : 170
مقالات: موتورهای جستجو /نکات رنکینگ Google 171
به زبان Google: 176
 
 منابع و مآخذ:
 

چکیده :
موضوعی که در این مجموعه مورد بررسی قرار گرفته است ترتیب اولویت بندی موتورهای جستجو در اینترنت می باشد موارد Search شده در Search engine به ترتیب های خاصی از بالا به پایین قرار می گیرند وهر موتور جستجو برای این اولویت بندی الگوریتم خاصی را درنظر می گیرد که این یک راز و رمز تجاری برای طراحان آن می باشد .
ما در این مجموعه در ابتدا به توضیح مختصری درباره تاریخچه web پرداخته و پس از آن مفهوم الگوریتم را توضیح داده ایم .
دربخش بعدی با جستجو به وسیله موتورهای مختلف در ابتدا طریقه کارکردموتورهای جستجو را بیان کرده و قسمتهای مختلف یک موتور جستجو را توضیح داده ایم و سپس متذکر شده ایم که همه موتورها از یک سری کلی پیروی می کنند اماهر یک الگوریتم خاص خود را بپردازند .
پس از آن به توضیح بیشتر نمونه الگوریتمهای ارائه شده توسط چند موتور جستجو از جمله  Google , Yalooپرداخته ایم .
 سرگذشت اینترنت
برای مردمی که تحت بمباران رسانه ها قرار گرفته اند گویی اینترنت زادگاهی نداشته است . سالها ، مودمهای خفته کار کمی داشتند و فقط گاه باbbs  ارتباط برقرار می کردند . سیستمهای  در آن روزها سیستمهای فقط متنی و بدون گرافیک بودند وکلمه online ( روی خطی ) و اینترنت کلمه های شناخته شده ای نبودند اینترنت فقط برای دانشمندان علوم کامپیوتر ، دانشگاهیان و پژوهشگران تجهیزات جنگی که درباره پژوهشهای جدید بحث می کردند ، کلمه ای آشنا بود .
همه اینها در چند سال گذشته روی ، داد اینترنت امروز به کاربران این امکان را می دهد که عقاید خود را برای میلیونها نفر ا زمردم جهان ابراز کنند . اینترنت با فراهم ساختن امکانات انتقال هر چیزی از نرم افزار و موسیقی گرفته تا تصاویر گرافیکی ، چهره دنیای کامپیوتر را تغییر داده است . اینترنت تقریبا همه جاهست . و تقریبا هر چیزی را می توان در آن پیدا کرد .
 
اینترنت چیست ؟
با آنکه همه روزه خبرهایی درباره اینترنت از رادیو ، تلویزیون و روزنامه ها می‌بینیم، تعداد کمی از مردم آن را کاملا می شناسند . اصطلاحاتی چون ( ابر بزرگ اطلاعاتی ) و (وب جهان پهنا ) اغلب معادل اینترنت به کار برده می شود ، اما اینترنت در واقع هیچ کدام از اینها نیست . اینترنت یک مکان با یک مقصد نیست . یک شبکه است مکانیسمی برای انتقال داده ها از یک کامپیوتر به سایر کامپیوترها ست .
از بعضی جهات ، مانند شبکه کامپیوتری یک سازمان کوچک است اما در مقیاس جهانی ، تنها چیز جادویی درباره آن اندازه بسیار بزرگ آن است .
اینترنت جهانی را می توان مانند سیستم تلفن جهانی در نظر گرفت . اگر شخصی در تهران به شخص دیگری در پاریس تلفن بزند . سیگنال صوتی از طریق تعدادی از خطوط تلفن و وایستگاههای مخابراتی شرکتهای مختلف ( که کامپیوتر های سوئیچ کننده دارند ) عبور می کند همه شرکتها از استانداردهای خاصی پیروی می کنند ( که پروتوکل نامیده می شود ) به گونه ای که هر دستگاه موجود در مسیر بتواند بایک نوع سیگنال سر وکار داشته باشند . وقتی شخص واقع در تهران با تلفن صحبت می کند صدایش با استفاده از کامپیوترها ، خطوط تلفن ، ماهواره ها وسایر وسایل الکترونیکی ازمرزها و دریاها عبور می کند وبه مقصد می رسد .
اینترنت نیز شبکه ای از خطوط تلفن و سایر انواع رسانه ها ، کامپیوتر های ویژه و وسایل سوئیچ کننده است . اینترنت به جای انتقال مکالمات صوتی نقطه به نقطه ، برای انتقال داده های دیجیتالی کامپیوتری بکار می رود . بخشهایی از یک پیام پست الکترونیکی می تواند از طریق کامپیوترها وخطوط متعلق به دهها فرد یا شرکت عبور کند . از همین روست که گفته می شود اینترنت متعلق به هیچ کس نیست . در حقیقت، اینترنت متعلق به بسیاری از افراد ناشناس است که همگی مالک تکه هایی از آن هستند .
بنیانی که باعث شده است سیستم اینترنت کار کند ، علت اینکه بسیاری از کامپیوترهای آن می توانند با یکدیگر صحبت کنند . آن است که همگی یک زبان را می دانند . از لحاظ داخلی کامپیوتر های مختلف از سیستم عاملهای مختلفی بهره می گیرند و پردازنده هایشان نیز متفاوت است از لحاظ خارجی ، همگی آنها می توانند آنچه را که به tep/ ip مشهور است ترجمه کنند این استاندارد ارتباطاتی به هر کامپیوتر متصل به اینترنت امکان می دهد که داده ها را با هر کامپیوتر دیگری مبادله کنند یعنی نوعی زبان اسپرانتوی دیجیتال است شاید بهترین زبان یا قشنگترین زبان ممکن نباشد اما استانداردی است که اکثر کامپیوترها میتوانند آن را بکار بگیرند واز نرم افزار مناسب ان یاری بطلبند.
ازarpanet  تا اینترنت
ریشه های اینترنتی که امروزه می شناسیم به یک پروژه مربوط به سال 1969 در وزارت دفاع امریکا بر می گردد . که براساس آن چندمرکز کامپیوتری در سراسر امریکا
باید به هم وصل می شدند .
پنتاگون شبکه ای می خواست که در صورت تخریب بخشی از آن بر اثر بمباران یا حوادث طبیعی بتواند باز هم به کار خود ادامه دهد . این شبکه که به arpanet شهرت یافت از ابتدا طوری طراحی شد که یک بخش مرکزی نداشته باشد ودر نتیجه در صورت حمله وتخریب هر بخش آن باز هم بتواند به کار خود ادامه دهد  شبکه ای که همچون یک تار عنکبوت شکل گرفت وهر کامپیوتر آن از مسیرهای مختلف می توانست به همتایان خود داده های خود را بفرستد حتی اگر یک یا دو کامپیوتر روی شبکه یاپیوند بین آنها کاملا از کار می افتاد بقیه بازهم می توانستند از طریق مسیر های صدمه ندیده دیگر باهم ارتباط برقرار کنند .
این شبکه به دسته هایی از داده ها که به وسیله کامپیوترهای مختلف ارسال می شدند اتکا داشت .
اطلاعات درهر انتقال به وسیله کامپیوتر میزبان براساس استاندارد پروتوکل اینترنت به بسته های کوچک تقسیم می شد بسته ها ، که هر کدامشان نشانی کامپیوتر مقصد را نیزباخود داشت ، از طریق شبکه انتقال می یافت ، کامپیوترهای واقع درمسیر ، نشانی موجود دربسته ها را می خواندند وبسته ها را به نزدیکترین کامپیوتر بعدی در مسیر کامپیوتر مقصد هدایت می کردند بسته ها از کامپیوتر هاو خطوط ارتباطی مختلف می گذشتند درنهایت ، بسته ها به کامپیوتر مقصد می رسیدند وبالاخره در آنجا به هم وصل می شدند تافایل اولیه به وجود بیاید .
پس از آنکه آزمایشها سودمندی آن را اثبات کردند سایر بخشهای دولتی ودانشگهای پژوهشی تمایل خود را به وصل شدن به آن شبکه بیان کردند ارتباطات الکترونیکی به صورت روشی موثر برای دانشمندان و دیگران به منظور استفاده مشترک از داده ها در آمد ، درهمان زمان کهarpanet  درحال رشد بود ، تعدادی شبکه پوشش محلی در نقاط مختلف امریکا به وجود آمد مدیران lan نیز به هم وصل کردن کامپیوتر های شبکه های خود به شبکه های بزرگتر اقدام کردند . پروتوکل اینترنت ARPANET زبان استاندارد حکمفرما برای برقراری ارتباط کامپیوتر های شبکه های مختلف به یکدیگر شد .
در دهه 1980 وقتی بنیاد ملی علوم یک شبکه پایه ارتباطی جدید وسریعتر براساس   IPساخت تا دانشگاهها وموسسات پژوهشی را با پنج مرکز ابر کامپیوتری در نقاط مختلف امریکا ارتباط بدهد ، اینتر نت بزرگتر و بی درو پیکر تر شد رشد روز افزون اینترنت در ابعاد بین المللی امروز هم ادامه دارد همه کشورها به اینترنت وصل نشده اند اما به هر کشوری که بخواهد خوش آمد گفته می شود .
تا اکتبر سال 1995 بخشهایی از nsfNET که تا آن موقع به وسیله کمک مالی دولت
اداره می شد فروخته شد یابه صورت شرکتهای خصوصی تجدید سازمان گرفت . اینترنت کنونی مجموعه ای وسیع از شبکه های بزرگ است که عمدتا به وسیله شرکتهای مخابرات معظم مانند sprint, mci اداره می شود و چند نقطه اصلی تعداد بسیاری از شبکه های کوچک را به خود متصل کرده اند جزئیات مربوط به آن برای کسانی که از پست الکترونیکی اینترنت بهره می گیرند خیلی مهم نیست .
 
اینترنت وحشی می شود
از اوایل دهه 1990 رشد استفاده از اینترنت به صورت تصاعدی افزایش یافت ، یکی از علل چنین استقبالی ابزار جستجویی مانند  archie , gopherبوده است اما اینها در سال 1991 تحت الشعاع ( وب جهان پهنا ) قرا رگرفتند که به وسیله gern آزمایشگاه فیزیک هسته ای اروپا ساخته شد . باآنکه وب جهان پهنا از ابتدا طوری بود که مبادله اطلاعات برای تازه واردان بسیار ساده باشد بزرگترین جهش در وب در سال 1993 با عرضه نرم افزار موزائیک که نخستین برنامه مرور گر وب گرافیکی بود به وجود آمد.
برنامه موزائیک محصول تلاش دانشجویان واستادان بخش ( مرکز علمی کاربردهای ابر کامپیوتر ) در دانشگاه ایلینویز امریکا بود برای نخستین بار موزائیک امکانات اشاره وتقه را فراهم کرد کاربران می توانستند صفحاب وب یامجموعه ای از متن و گرافیک را کنارهم بگذارند تا هر کسی که می خواست آنها را بتواند روی اینترنت ببیند . وقتی با موش روی کلمه ها یا تصاویر خاصی ، که فراپیوند نامیده می شوند ، تقه ای زده می شد برنامه موزائیک به طور خود کار یک صفحه دیگر را باز می کرد . بهترین بخش این سیستم آ‎نجا بود که فراپیونند ها می توانستند به صفحاتی روی همان کامپیوتر یا کامپیوتر دیگراینترنت  یا خدمات وب اشاره کنند . صفحات جدید وب همه روزه ظاهر می شدند ومفهوم ( موج سواری ) روی وب متولد شد .
اواسط سال 1994 بیش ازسه میلیون کامپیوتر به اینترنت وصل شده بود ، ودر آن هنگام اجرای عملیات آهسته نشده بود صفحات وب که حاوی همه چیز بودند از اسناد رسمی دولتی یا داده های با ارزش تحقیقاتی گرفته تا تصاویر مدلهای جدید البسه درسراسر دنیا چند برابر شد . موزائیک و جانشینان آن مانندnavigator  محصول شرکت ( نت اسکیپ ) اینتر نت را از قلمرو علمی و فنی به میان مردم آوردند .
امروزه فقط در امریکا بیش از 10 میلیون نفر از اینترنت بهره می گیرند طبق بررسیها ، بیش از 51 درصد از کاربران اینترنت ازسال 1995 به بعد وارد این محیط شده اند .
میلیونها انسانی که از خدمات روی خطی اینترنت بهره می گیرند نیازی ندارند که نکات فنی اینترنت مانند TCP / IP را بفهمند دسترسی به اینترنت زمانی به معنای این بود که استفاده کننده بخشی از یک موسسه بزرگ مانند دانشگاه یایک مرکز پژوهشی است امروزه ، موسسات مختلفی ( فراهم کننده خدمات اینترنت ) هستند .
دست کم بعضی از مبالغه ها درباره اینترنت تعدیل شده است ،رشد روزافزون آن وساده تر شدن استفاده آن همچنان ادامه دارد . هر چه مردم بیشتری به اینترنت رجوع می کنند تعداد شرکتهای نرم افزاری سازنده برنامه های اینترنت نیز بیشتر می شوند .
با آن بعضی از عاشقان اینترنت ، آن را نوعی سبک زندگی می دانند درنظر بیشتر استفاده کنندگان منبع سرگرمی ،اطلاعات ، وارتباطات است پر استفاده ترین خصوصیت اینترنت پست الکترونیکی آن است که یکی از ابزار های ارتباطی کار آمد به شمار آمده است پیامها به سرعت از یک کامپیوتر به دیگری پرواز می کنند ودر آنجا می مانند تا دریافت کننده وقت برای خواندن آنها پیدا کند .
وب امکانات خوبی نیز برای کپی کردن نرم افزارهای مجاز از لحاظ کپی فراهم می کند .
اینترنت برای پشتیبانی فنی شرکتهای کامپیوتری نیز مفید است این شرکتها می توانند نرم افزار های رایگان خودبه ویژه دستگاه رانها را از این طریق به مشتریان خود برسانند . همه نرم افزارهای موردنیاز برای استفاده ازاینترنت را تقریبا به رایگان می توان از خود اینترنت دریافت کرد . فقط انها که اولین بار ازاینترنت می خواهند استفاده کنند به نرم افزار مخصوص نیاز دارند .
درجامعه اطلاعاتی امروز اینترنت خبرهای روزانه خوبی دارد ، آخرین اخبار جهان اخبار هوا شناسی ، وعکسهای ماهواره ای نتایج مسابقات ورزشی ، وتفسیر درباره همه چیز علاوه بر مسائل جدی اینترنت سرگرمی نیز فراهم می کندگفتگوهای همزمان باافراد مختلف ، بازی ، جلوه های صوتی و ... دهها میلیون صفحه در وب وجود دارد برای هر کسی چیزی دارد .
طراحان اولیه اینترنت اصلا چنین  وضعی را پیش بینی نمی کرده اند اما انعطاف پذیری یکی از برجسته ترین مشخصات اینترنت است همروزه اصطلاحات جدید ، امکانات جدید ونسخه های جدیدی از نرم افزارهای اینترنت به وجود می آید امروزه می توانید به صدای زنده رادیوها از روی اینترنت گوش بدهید . قطعات کوچک و آهسته بعضی از برنامه های تلویزیونی را ببینید ، ویا با دیگر کار بران اینترنت در سراسر جهان کنفرانس برقرار کنید . یک زبان برنامه سازی جدید به نام جاوا آینده ای را نوید می دهد که در آن برنامه های کار بردی به طور خودکار از اینترنت وارد کامپیوتر استفاده کننده شوند وخودشان را براساس کامپیوتر میزبان پیکر بندی کنند واجرا شوندوقتی کارشان ناپدید شد پراکنده شوند .