با توجه به نتایج بدست آمده از ضریب همبستگی بین متغیرهای تحقیق می­توان گفت بین متغیرهای تحقیق رابطه معناداری وجود دارد.
۳-۳-۴ ارزیابی بخش اندازه ­گیری مدل
در ارزیابی بخش اندازه ­گیری مدل محقق باید به بررسی روابط بین متغیرهای نهفته و متغیرهای آشکار مدل بپردازد. در اینجا هدف تعیین اعتبار یا روایی و اعتماد یا پایایی اندازه ­گیری­های مورد نظر است. در بحث اعتبار یا روایی این مسئله مطرح است که آیا شاخص ­ها یا متغیرهای آشکار همان چیزی را اندازه ­گیری می­ کنند که مدنظر محقق است یا چیز دیگری را. در مقابل مسئله اعتماد یا پایایی با این موضوع سروکار دارد که شاخص­ های مورد استفاده با چه دقتی موضوع مورد نظر را اندازه ­گیری می­ کنند (کلانتری، ۱۳۸۸؛ ۱۳۶).
به منظور تحلیل ساختار درونی پرسشنامه و کشف عوامل تشکیل دهنده هر سازه یا متغیر مکنون، از ابزار تحلیل عاملی تاًییدی استفاده می­ شود. همچنین در این بخش با بهره گرفتن از تحلیل عاملی تاًییدی معادلات اندازه ­گیری شده مربوط به هر سازه (متغیر مکنون) استخراج و تفسیر می­شوند (دانشگر،۱۳۹۰؛۱۱۳) تحلیل عاملی تاًییدی سازه های تحقیق به صورت زیر ارائه می­شوند.
شکل ۵-۴ مدل تحلیل عاملی تاییدی متغیرهای تحقیق (تخمین استاندارد)
شکل ۶-۴ مدل تحلیل عاملی تاییدی متغیرهای تحقیق (معناداری ضرایب)
نتایج تحلیل عاملی مندرج در اشکال (۵-۴ و ۶-۴) نشان می­دهد که تمامی شاخص­ های مربوط به متغیرهای تحقیق به جز q16 مربوط به متغیر ریسک ادراک شده و q22 مربوط به متغیر واکنش پس از خرید از مقادیر تی (بیشتر از ۹۶/۱) و بار عاملی (بیشتر از ۳/۰) مورد قبولی برخوردارند و برای متغیرهای تحقیق شاخص­ های مناسبی محسوب می­شوند. بنابراین شاخص­ های Q22 , q16 حذف می­شوند و مدل اصلاحی دوباره اجرا می­ شود.

(( اینجا فقط تکه ای از متن درج شده است. برای خرید متن کامل فایل پایان نامه با فرمت ورد می توانید به سایت feko.ir مراجعه نمایید و کلمه کلیدی مورد نظرتان را جستجو نمایید. ))

شکل ۷-۴ مدل اصلاحی تحلیل عاملی تاییدی متغیرهای تحقیق (تخمین استاندارد)
شکل ۸-۴ مدل اصلاحی تحلیل عاملی تاییدی متغیرهای تحقیق (معناداری ضرایب)
جدول ۱۴-۴ نتایج تحلیل عاملی تائیدی متغیرهای تحقیق

متغیر

شاخص

بار عاملی

آماره t

حس لذت

Q1

۷۶/۰

۳۰/۱۵

Q2

۶۴/۰

۴۶/۱۲

Q3

۵۵/۰

۳۱/۱۰

Q4

۴۶/۰

۴۸/۸

انگیختگی

Q5

۳۳/۰

۱۲/۶

Q6

۶۵/۰

۶۰/۱۲

Q7

۷۶/۰

پریالت و جروم^[۴۱]

خدمت، کاری است که فردی برای فرد یا افراد دیگر انجام میدهد.

( اینجا فقط تکه ای از متن فایل پایان نامه درج شده است. برای خرید متن کامل پایان نامه با فرمت ورد می توانید به سایت feko.ir مراجعه نمایید و کلمه کلیدی مورد نظرتان را جستجو نمایید. )

لمپ^[۴۲] و همکاران

خدمت، نتیجه تلاش فرد برای دیگران است که بصورت کار، فعالیت یا ایفای نقش ظاهر میشود.

کاتلر و آرمسترنگ

خدمت، فعالیت یا منفعتی است که یک طرف به طرف دیگر عرضه میکند. خدمت اساساً نامحسوس است و مالکیت چیزی را در بر ندارد.

هاروی^[۴۳]

خدمت، نتیجهای است که مشتریان خواستار آن هستند.

منبع: (شریف زاده و خانباشی، ۱۳۸۷)
ویژگیهای خدمات
خدمات دارای چهار ویژگی مهم میباشد که عبارتند از: (چیهیو^[۴۴]، ۲۰۰۹، طالقانی و میرموسوی، ۱۳۸۹).
ناملموس بودن
مقصود از نامشهود بودن خدمات این است که هنگام خرید نمیتوان خدمات را با چشم دید، مزه آن را چشید، آنها را احساس نمود، شنید یا از بوی آنها آگاه شد. خریداران برای کاهش دادن عدم اطمینان می‎کوشند در مورد کیفیت نوع خدمت به نشانههایی دست یابند. از این رو، وظیفه یا تخصّص کسی که خدمتی را ارائه میکند این است که این خدمت را به گونهای قابل لمس نماید. در حالی که بازاریاب‎های محصول میکوشند در سایه تلاشهای مشهود بر میزان نامشهودی اقلام عرضه شده بیفزایند، بازاریاب‎های خدمات میکوشند بر میزان مشهود بودن اقلام نامشهود یا ناملموس بیفزایند.
غیر قابل تفکیک بودن
کالاهای فیزیکی تولید میشوند، آنها را در انبار میگذارند، سپس به فروش یا در نهایت به مصرف میرسند. برعکس، خدمات را نخست میفروشند، آنگاه (به صورت همزمان) آنها را تولید و مصرف میکنند. مقصود از تفکیک ناپذیری خدمات این است که نمیتوان خدمات را ازکسی که آنها را ارائه میکند جدا کرد، چه اینکه ارائه کنندۀ خدمت انسان یا دستگاه (ماشین) باشد. اگر کارگر یا کارمندی خدمتی را ارائه کند، در آن صورت وی بخشی از این خدمت به حساب میآید. از آنجا که مشتری هم هنگام تولید خدمت حضور دارد، یکی از ویژگی های خاص بازاریابی خدمات این است که رابطۀ متقابل بین ارائه کننده خدمت و مشتری وجود دارد. ارائه کننده خدمت و مشتری، هردو بر نتیجۀ حاصل از خدمت اثر میگذارند
گوناگون بودن
مقصود از متغیر بودن خدمت این است که کیفیت خدمت به عوامل زیر بستگی دارد: ارائه کننده خدمت، زمان، مکان و شیوهای که این خدمت ارائه میشود.
غیر قابل نگهداری بودن
این که میگویند خدمات غیرقابل نگهداری یا به بیان دیگر فاسدشدنی است، بدین معنی است که نمیتوان خدمات را در انبار گذاشت و پس از مدتی آنها را فروخت یا به مصرف رسانید. اگر میزان تقاضا ثابت و پایدار باشد، مسأله غیرقابل نگهداری بودن خدمت حل می‎شود ولی هنگامی که تقاضا نوسان داشته باشد، سازمان های ارائه کننده خدمات با مسائل و مشکلاتی رو به رو میشوند. از این رو سازمان‎های خدماتی میکوشند استراتژی هایی تدوین نمایند که بین عرضه و تقاضا رابطه بهتری برقرار شود.
نگاهی به مفهوم کیفیت
جدول ۲-۲ تعاریف مختلف کیفیت از دیدگاه صاحبنظران این رشته

محقق

تعاریف

کروسبای

کیفیت، هیچ معنا و مفهومی به جز هر آنچه مشتری واقعاً میخواهد، ندارد. به عبارت دیگر، یک محصول، زمانی با کیفیت است که با خواسته ها و نیازهای مشتری انطباق داشته باشد. کیفیت باید به عنوان انطباق محصول با نیاز مشتری تعریف شود.

کاتلر و آرمسترانگ

کیفیت یعنی مجموع کل ویژگیها و خصوصیات یک محصول یا خدمت که بتواند نیازهای مشتری را برآورده کند.

گاروین^[۴۵]

کیفیت، مجموعهای از خصوصیات و مشخصات یک کالا یا یک خدمت است که احتیاجات و رضایتمندی مصرفکننده را تامین میکند و توسط مشتری تعیین میشود نه توسط تولیدکننده.

اعرابی و اکرمی

کیفیت یک محصول یا خدمت، درجه تطبیق آن با استاندارد تعریف شده برای آن محصول یا خدمت است.

استونسون^[۴۶]

کیفیت در سازمانهای خدماتی عبارت است از حدی که خدمات ارائه شده، انتظار مشتری را برآورده میسازد.

مدیرانی که برای دوره معینی عضو هیأت مدیره بوده اند ، حاکمیت بهتری را درخلال کسب اطلاعات اضافی از شرکت و آشنا شدن بیشتربا امورشرکت پیاده سازی کرده اند ، بنابراین قادر به نظارت مؤثرتر برعملکرد مدیریت هستند. تجربه عضویت در هیأت مدیره به مدیران بیرونی این اجازه را می دهد تادرک بهتری از شرکت و کارکنان پیدا کنند وآنان را قادر می سازد تا کفایت حاکمیت بهتری پیدا کنند(خسرو نژاد، ۱۳۸۸).

( اینجا فقط تکه ای از متن فایل پایان نامه درج شده است. برای خرید متن کامل پایان نامه با فرمت ورد می توانید به سایت feko.ir مراجعه نمایید و کلمه کلیدی مورد نظرتان را جستجو نمایید. )

۳-۴-۱۰-۲-۲. تعداد اعضای هیأت مدیره
استقلال هیأت مدیره بستگی به اندازه آن دارد ، زیرا یک هیأت مدیره با تعداد اعضای کم ممکن است توسط بالاترین مقام اجرایی و براساس زمینه انسجام اجتماعی آسانتر کنترل شود، در حالیکه نفوذ وسیطره بالاترین مقام اجرایی بریک هیأت مدیره با تعداداعضای بیشتر ، دشوارتر است.
مدیرعامل می تواند تعداد اعضای کمتر را از طریق روش های مختلف کنترل کند .برای مثال ممکن است ازراهبردهای سیاسی مانند اطلاعات کانالیزه شده خاص برای اعمال نفوذ و اداره کردن استفاده کند (رودپشتی و نیکومرام ،۱۳۸۵).
۵-۱۰-۲-۲. تفکیک وظایف اعضای هیأت مدیره
یکی از محورهای تحولات اخیر درمبحث حاکمیت شرکتی ، تأثیر قانون ساربنز اکسلی۱( به عنوان مکانیزم برون سازمانی ) دربرجسته شدن نقش نظارتی مکانیزم های داخلی آن است . تفکیک دقیق وظایف مدیرت اجرایی از مدیریت غیر اجرایی ، برجسته ترشدن نقش نظارتی مدیریت غیراجرایی و تعیین حوزه های مسئولیت آنها وضرورت داشتن دانش حسابداری و مالی به عنوان یکی از شرایط احراز پست درمورد حداقل یک نفر ازمدیران غیر اجرایی وآگاهی بقیه اعضاء ازمسائل حسابداری ومالی ،برخی از تحولات اخیر است. افزون براین ،نقش کمیته های هیأت مدیره (شامل مدیران غیراجرایی ) در مورد کنترل های داخلی ، ارتباط با حسابرسان داخلی و مستقل و… بسیاربرجسته شده و از وظایف مدیران اجرایی بطور کامل تفکیک گشته است (سیدی، ۱۳۸۶ ).
۶-۱۰-۲-۲. استقلال اعضای هیأت مدیره
سطح استقلال هیأت مدیره معمولاً به یکی از دو طریق زیر اندازه گیری می شود: یکی تصدی یا عدم تصدی هم زمان دوپست سازمانی توسط مدیرعامل ، به این معنا که آیا پست های ریاست هیأت مدیره و بالاترین مقام اجرایی (مدیرعامل) هردو توسط یک نفر اشغال شده است یا خیر ودیگری تعداد اعضای هیأت مدیره (پورزمانی ، ۱۳۸۵).
۷-۱۰-۲-۲. جلسات هیأت مدیره
جلسات هیأت مدیره مکان بسیارمناسبی است تا مدیران اجرایی و اعضای هیأت مدیره اطلاعات خود را درمورد عملکرد شرکت ، سیاست ها و طرح های آن مطرح و به اشتراک بگذارند.جلسات متعدد به برقراری ارتباط بهتر میان مدیران واعضای هیأت مدیره کمک می کند. با وجوداین ،جلسات بیش از حد باعث انحراف مدیران شرکت ازمسئولیت های عملیاتی وروزمره خود می گردد.حال سوالی که مطرح می شود این است که آیا حد بهینه ای برای تعداد جلسات وجود دارد؟
تحقیق وافیاس۱پیشنهاد می کند که هیأت مدیره می بایست تعادلی میان هزینه – منفعت تعداد جلسات برقرار کند و تمایل به افزایش دادن تعداد جلسات زمانی باشد که موقعیت و وضعیت موجود ، نظارت و دخالت قابل ملاحظه هیأت مدیره را ایجاب کند(سیدی، ۱۳۸۶) .
۱۱-۲ ساختار مالکیت
۱-۱۱-۲ . مالکیت پراکنده
در یک بنگاه استاندارد ازنظر برل ومینز^[۱۶]۴ (۱۹۳۲) ،سهامداران پراکنده حاکمیت شرکتی را به وسیله رأی مستقیم درموضوعات حیاتی مثل ادغام ها ، انحلال ، تغییرات بنیادی در استراتژی تجاری و با انتخاب هیأت مدیره اعمال می کنند تا منافع صاحبان را تأمین کنند وبرتصمیمات بیشمار مدیریت نظارت کنند. قراردادهای تشویقی۵ سازو کاری عمومی برای همسوکردن منافع مدیران با سهامداران است. هیأت مدیره ممکن است برای قراردادهای جبران خدمت مدیریت که این مسئله را با دستیابی به نتایجی خاص پیوند می دهد ، مذاکره کنند. این قراردادها می تواند شامل مالکیت سهام ، اختیار خرید و فروش سهام و دیگر سازو کارهای جبران اقتضایی ۶ شوند . دراین حالت ، سهامداران پراکنده از مالکیت پرتفولیوی دارایی های متنوع سود می برند، درحالی که حاکمیت شرکتی را ازطریق حق رأی وهیأت مدیره اعمال می کنند (برادران خسروشاهی،۱۳۸۷ )^۷.
با این وجود عوامل متعددی سهامداران پراکنده را از اعمال کنترل شرکتی م‍ؤثر بازمی دارد. عدم تقارن اطلاعات زیادی بین مدیران و سهامداران کوچک وجود دارد. متعاقباً سهامداران کوچک فاقد تخصص وانگیزه برای نزدیک کردن شکاف اطلاعات به صورتی قابل ملاحظه هستند. همچنین هیأت مدیره اغلب منافع سهامداران اقلیت را نمایندگی نمی کند ودر عوض ممکن است توسط مدیریت جذب شود.هر چه قدر مدیریت بتواند ، هیأت مدیره رابه خود جذب کند احتمال اینکه قراردادهای تشویقی مشکل حاکمیت شرکتی را حل کند ، کاهش می یابد. درواقع قراردادهای تشویقی فرصت‌های فراوانی را برای مدیران جهت واردمعامله شدن با شخص ثالث به وجودمی آورند، به ویژه اگراین قراردادها به جای سرمایه گذاران بزرگ ،با هیأت مدیره ای باانگیزه ای ضعیف بسته شده باشد (همان منبع)^۱.
تفکیک مالکیت ومدیریت،مالکیت پراکنده،کنترل توسط گروه کثیری ازسهامداران،عدم انتقال ثروت ازسهامداران اقلیت به سهامداران اکثریت‌ وحمایت ازسرمایه گذاردراساسنامه شرکت ازویژگی های مالکیت پراکنده است (رهنمای رودپشتی و نیکومرام،۱۳۸۵)^۲.
۲-۱۱-۲. مالکیت متمرکز
یک مکانیزم حاکمیت شرکتی برای جلوگیری انحراف مدیران ازمنافع مالکان ، مالکیت متمرکز است. سرمایه گذاران بزرگ برای بدست آوردن اطلاعات ، کنترل مدیران و اعمال حاکمیت شرکتی بر تصمیمات مدیریت انگیزه کافی دارند . درضمن ، سهامداران بزرگ می توانند نمایندگان خود را در هیأت مدیره انتخاب کنند و مانع از کنترل مدیریت برهیأت مدیره شوند. سهامداران بزرگ دراعمال حق رأی خود نسبت به سرمایه گذاران کوچک مؤثرتر خواهندبود(برادران خسروشاهی،۱۳۸۷)^۳.عدم تفکیک مالکیت و مدیریت به طوری که مشکلات نمایندگی به ندرت دیده می شود، تمرکز مالکیت دریک گروه با تعداد اعضای کم ازسهامداران (اعضای مؤسس، شرکت مادر،مالکیت دولتی )، انتقال ثروت از سهامداران اقلیت به سهامداران اکثریت ، حمایت ضعیف از سرمایه گذار دراساسنامه شرکت وامکان سوء استفاده ازقدرت توسط سهامداران اکثریت از ویژگی های این نوع ازمالکیتمی باشد (رهنمای رودپشتی و نیکومرام ، ۱۳۸۵)^۴.
مالکیت متمرکزچندان به سیستم قانونی اتکا نمی کند وعموماً از نظر سهامداران عمده به گروه های با مالکیت و کنترل بانک ، مالکیت نهادهای مالی ، مالکیت خانوادگی ، مدیران ، شرکت های دولتی وسایر اشخاص حقیقی و حقوقی عمده قابل طبقه بندی است(برادران خسروشاهی ، ۱۳۸۷ )^۵.
۳-۱۱-۲. اهمیت ساختار مالکیت شرکت ها و تعامل آن بارشد اقتصادی
مطالعات تجربی اخیر عوامل متعددی را درارتباط با رشداقتصادی مورد آزمون قرارداده اند. برخی از آنها آموزش ، ساختارمالی ، آزادی تجارت و اندازه شرکت هارا درحوزه مطالعات رشد اقتصادی بررسی نموده اند.لیکن بیشتر تجزیه وتحلیل ها به ویژه درحوزه حاکمیت شرکتی ، موضوعات ساختار مالکیت وساختار سرمایه را موردتوجه قرارداده اند . دراین بررسی ها فرض می شود که بین سهامداران وسایر ذینفعان ارتباطی وجود ندارد. ازنظر مفهومی وتجربی نیز آنچه درادبیات موضوعی تحقیقات ، درسالهای اخیرمورد توجه وتأکید قرارگرفته است تأثیرساختار مالکیت درسطح شرکت بررشداقتصادی است (احدی سرکانی ، ۱۳۸۵).
مزیت عمده تمرکز مالکیت ، نظارت برعملکرد مدیران است .اما این مالکیت در شرکت ها مشکلات کاهش نقدینگی و افزایش ریسک را به همراه دارد ، در حالیکه توزیع مالکیت ، انباشت نقدینگی بیشتر و تخصیص کارایی منابع رادرپی خواهد داشت.گرچه حضور بازار سرمایه با قابلیت نقدینگی بالا در یک اقتصاد ترجیحات مربوط به مصرف و پس انداز را درجهت سرمایه گذاری موفق هدایت می نماید، اما باید توجه داشت که حتی درصورت وجود یک بازار سرمایه با قابلیت نقدینگی بالا این امکان وجود دارد که توزیع نامناسب مالکیت امکان سرمایه گذاری بلند مدت را که لازمه افزایش بهره وری ظرفیت های موجود است از اقتصاد سلب نماید (همان منبع ).
زمانیکه سرمایه یک شرکت بین سهامداران خرد توزیع می شود این امکان برای مدیریت فراهم می گردد که در خلاف جهت منافع سهامداران عمل نماید. درچنین شرایطی حتی قرارداد منعقد شده بین سهامداران و مدیر، درغیاب مشاهده مستقیم رفتار مدیران توسط سهامداران نمی تواند مانع از انجام عملیات هزینه زا توسط مدیران گردد. درچارچوب ملاحظات اخلاقی ، قدرت مالکیت باید بتواند مدیران را وادار به انجام اموری نماید که درجهت حفظ منافع سهامداران صورت پذیرد. از سوی دیگر اقتدار ناشی از مالکیت همچنین می تواند مدیران را درجهت افشاء‌اطلاعات محرمانه پیرامون توانایی ایجاد جریانات نقدی ملزم نماید (همان منبع ).
۴-۱۱-۲. ارتباط بین ساختار مالکیت و عملکرد درسطح شرکت
جنسن ۱ (۱۹۸۹-۱۹۸۶) استدلال نموده است که پراکندگی مالکیت منجر به ناکارایی عمده درشرکت های آمریکایی شده است.
درمقابل لین۲ بیان نموده است که تمرکز مالکیت هزینه های بسیاری به همراه می آورد. با این وجود لازم است بدانیم که تمرکز مالکیت نه تنها انگیزه قوی تری برای به حداکثر رساندن ارزش شرکت ایجاد نمی کند بلکه هزینه های بیشتری را که ناشی از تمرکز مفرط ریسک واختیارات بالقوه برای سلب مالکیت ازسهامداران اقلیت می باشد به شرکت تحمیل می نماید.بنابراین سطح پایینی ازتمرکز مالکیت ،اثرات انگیزشی مثبتی برعملکرد اقتصادی شرکت ها خواهد داشت. در سطوح بالاتر تمرکز مالکیت، ممکن است مکانیسم های کنترلی خنثی و بی اثر شوند. درچنین شرایطی سهامداران اقلیت به ندرت قادرند در سیاست های شرکت مداخله نمایند و بالاخره مدیریت درجهت به حداکثر رساندن مطلوبیت های شخصی خود برنامه ریزی می نمایند واین بدان معناست که بین تمرکزمالکیت و عملکرد شرکت همبستگی منفی ایجاد می شود(رجبی،۱۳۸۶).
۵-۱۱-۲. ارتباط بین ساختار مالکیت و عملکرد درسطح کشور
ساختار شرکت ها درسطح بین المللی همگون ومشابه نمی باشند. وجود چنین ناهمگونی درسطح ساختار شرکت ها دارای اثر مستقیم برانگیزه های اقتصادی و اثرغیرمستقیم برفرهنگ تجاری است. به منظور تشریح تنوع و پیچیدگی آنها درشرایط واقعی ، نمونه ای ازاین ساختارها را مورد تحلیل قرار می دهیم.
درکشور آمریکا نوعی ساختار مالکیت بربرخی شرکتها حاکم است که براساس آن مالکیت بین تعداد زیادی از سهامداران خرد توزیع می گردد وبیشتر مواقع مدیریت دائمی به صورت خانوادگی برشرکت کنترل دارد (احدی سرکانی ، ۱۳۸۵).
در ژاپن نوعی سیستم مالکیت با عنوان کرتسو۱ وجود دارد که درآن گروهی از شرکتها با مجموعه ای از سهامداران ثابت ارتباط دارند. یک شرکت مادر که اغلب یکی از بانک های مهم این کشور است نیز به عنوان ناظر عمل می نماید. بنابراین تغییرات مهم در محیط عملیاتی بانک ها مانند تجدید نظر در قوانین ، گسترش طرح های جهانی سازی و افت قیمت دارایی ها همچنان که در دهه ۱۹۹۰ اتفاق افتاد و بحران بانکی ژاپن را به همراه داشت،کارکرد های سیستم کرتسو رامختل نمود (همان منبع).
در کشور آلمان استانداردهایی دربخش تجارت تدوین گردیده است که صرفاً صد شرکت پذیرفته شده دربورس این کشور را شامل می شود. عملیات این کشورها تحت کنترل هیأت نظارت قرار دارد واین استاندارد منحصراً به آن دسته از شرکت هایی مربوط می شود که دارای بیش از ۲۰۰۰ کارمند می باشند به طوری که نیمی از هیأت نظارت توسط این شرکتها انتخاب می شوند . بانک های آلمانی نیز به عنوان بانک های عمومی قادرند درسهام شرکتها سرمایه گذاری نمایند.
از سوی دیگر ساختار مالکیت شرکت های بزرگ درکشور آلمان تا حد زیادی به صورت متمرکز اداره می شوند. ادواردز و نیبلر۱ درسال ۲۰۰۰ نشان داده اند که حاکمیت شرکتی درکشور آلمان بیش از آنکه ناشی از نقش بانکها باشد برگرفته از مسئله تمرکز مالکیت درشرکت های این کشور است. (همان منبع ).
۱۲-۲. سرمایه گذاران نهادی
۱-۱۲-۲. نقش سرمایه گذاران نهادی
دردودهه اخیر بازارهای سرمایه شاهد حضور ذینفعان جدیدی درجمع مالکین شرکتها بوده اند، که درادبیات مربوط نام سرمایه گذاران نهادی به آنها داده شده است . حضور این گروه درعرصه مالکیت با توجه به میزانی از سهام که نزد ایشان متمرکز می شود توجه پژوهشگران را در دوحوزه متفاوت به خود جلب کرده است.
حوزه نخست ، مبتنی برنقشی است که حضور سرمایه گذاران نهادی می تواند در محدود کردن مشکلات ناشی از نمایندگی و بیشینه سازی منافع سهامداران بازی کند. حوزه دیگر این نقش در گستره عملکرد اجتماعی شرکتها و قالب ذینفعان سازمانی دنبال می شود. (داداشی،۱۳۸۸).
درنیمه دوم قرن بیستم سرمایه گذاران نهادی اگرچه از نقش اساسی برخوردار نبودند ، لیکن تأثیر قابل ملاحظه ای در تعیین ترکیب بازار سرمایه داشته اند. به عنوان مثال در آمریکا مجموع مالکیت سرمایه گذاران نهادی از ۱/۶ درصد درسال ۱۹۵۰ به ۵۰درصد درسال ۲۰۰۲رسیده است. هر چند حضور سرمایه گذاران نهادی به عنوان یک پیش شرط درایجاد بازار و توسعه خصوصی سازی عمل نمی کند، لیکن نقش قابل ملاحظه ای درانباشت منابع مالی وفعال سازی بازار سرمایه ایفا می نماید.
به عنوان مثال درکشور شیلی وجوه بازنشستگی که ازانباشت منابع مربوط به سرمایه گذاران جزء حاصل شده است سهم بسزایی دربازار سرمایه دارد، اما با این وجود حجم فعالیت های مربوط به نهادهای سرمایه گذار دراقتصادهایی که برتوزیع حاکمیت تأکید دارند متفاوت است(رجبی،۱۳۸۶).
اغلب نهادهای مالی وشرکت های سرمایه گذاری با فروش سهم خود وجوهی را جمع آوری کرده وسپس از محل منابع تأمین شده به خرید مجموعه ای از اوراق بهادار ودارایی های مالی دیگر اقدام می کنند. درواقع این نهادها ، سرمایه گذاران کوچک و متوسط را در بازار نمایندگی می کنند، که نوعاً نمایندگی افراد متخصص برای غیر متخصصان است. از این منظر حضور سرمایه گذاران نهادی در بازارهای مالی دونقش مهم را ایفا می کند .نخست آنکه با متنوع ساختن دارایی های مالی خریداری شده وایجاد ترکیب مناسب ازآنها ، ریسک خود را به حداقل می رسانند. سرمایه گذاران کوچک خود از چنین امکانی برخوردار نیستند وبا ریسک به مراتب بیشتری در صحنه این بازار به بازی می پردازند.دیگر آنکه ، نهادها به علت برخورداری از تخصص های لازم برای نقد و بررسی فعالیت و عملکرد مدیران شرکتها توانایی به مراتب بیشتری درکنترل مدیران دارند(داداشی،۱۳۸۸).
۲-۱۲-۲. دلایل رشد سرمایه گذاران نهادی
نکته قابل توجه درمورد سرمایه گذاران نهادی ، رشد روزافزون آنهاست.علت رشد سرمایه گذاران نهادی رادر عواملی باید جست که در عرضه و تقاضای موجود برای خدمات این نهادها ریشه دارند. برای نمونه کارآیی بیشتر آنها درارائه خدمات درمقایسه با سهامداری مستقیم ، سرمایه گذاری ازاین طریق را برای خانوارها تسهیل می کنند. توانایی نهادها درمتنوع سازی ، قدرت نقدینگی زیاد ، اعمال کنترل های سازمانی مناسب و قدرت بهره وری از پیشرفت های تکنولوژی عواملی هستند که در عرضه خدمات توسط ایشان مؤثر می افتند.از ناحیه تقاضا نیز عواملی مانند تغییرات جمعیت ، آگاهی و آشنایی بیشتر سهامداران جزء با بازارهای مالی ورشد سطح ثروت جامعه ، بستر را برای رشد فعالیت نهادها فراهم می آورند.
عوامل فوق موجب رشد این نهادها در بازارهای مالی بوده اند ، لیکن وجه متمایزکننده این نهادها در امکانی است که برای تجمیع یا یک کاسه کردن ریسک ۳ فراهم می آورند. وظیفه اصلی نهادها ، تجمع ریسک های سرمایه گذاران کوچک است.
دراین حالت ریسک برای مجموعه برابر با جمع جبری ریسک هریک از سرمایه گذاران منفرد نیست، بلکه به مراتب ازآن کمتر است .بدین سبب سرمایه گذاران نهادی را می توان ابزاری برای کاهش ریسک سرمایه گذاران جزء دربازار دانست و درمقایسه با سرمایه گذاری های مستقیم توسط سرمایه گذاران کوچک این روش به تبادل مناسب تری از ریسک- بازده می انجامد.معمولاً شرکت های سرمایه گذاری، صندوق های سرمایه گذاری مشترک^[۱۷]، شرکت های بیمه ،صندوق های بازنشستگی، بانک های سرمایه گذاری وشرکتهای خصوصی رادرزمره سرمایه گذاران نهادی ذکرکرده اند. دریک تقسیم بندی دیگر، نهادهای مالی را دردوگروه سپرده پذیر،مانند بانکها واتحادیه های اعتباری ونهادهای مالی غیرسپرده پذیر شامل شرکت های سرمایه گذاری و شرکت های بیمه و صندوق های بازنشستگی قرار می دهند (همان مأخذ)^۲.
۳-۱۲-۲.سرمایه گذاران نهادی وارزش شرکت
درخصوص تأثیر سرمایه گذاران نهادی برشرکت ها دیدگاه های مختلفی وجود دارد. بارتووسایرین۳ معتقدند که مالکان نهادی ، سرمایه گذاران حرفه ای بوده که دارای تمرکز بلند مدت هستند . با توجه به حجم سرمایه گذاری و کاربلد بودن مالکین نهادی ، حضور آنها موجب نظارت برمدیریت می شود. این موضوع می تواند به جای تمرکز براهداف کوتاه مدت سودآوری ، موجب توجه به حداکثر سازی ارزش بلند مدت شرکت شود(حساس یگانه و مرادی، ۱۳۸۷)^۴.
شلیفرو ویشنی۵بیان کردند که وجود سرمایه گذاران نهادی بزرگ به دلیل افزایش نظارت مؤثر ، اثر مثبت برارزش شرکت خواهد داشت . پیش بینی اثر مثبت سرمایه گذاران نهادی عمده برارزش شرکت ناشی از این فرض است که این سرمایه گذاران انگیزه وتوانایی نظارت کارآمد برافراد درون سازمان رادارند .این نظارت کارآمد احتمال اخذ تصمیمات غیر بهینه ازسوی افراد درون سازمان را کاهش می دهد (همان منبع)^۶.
۴-۱۲-۲. سرمایه گذاران نهادی و حاکمیت شرکتی
از دیدگاه نظری ، جایگاه سرمایه گذاران نهادی درحاکمیت شرکتی بسیار پیچیده است . از یک دیدگاه ،سرمایه گذاران نهادی یکی دیگرازسازوکارهای حاکمیت شرکتی نیرومند رابازنمایی می کنند ، زیرا هم می توانند یرمدیریت شرکت نفوذی چشمگیرداشته باشند وهم می توانند منافع مدیریت را با منافع گروه سهامداران همسو کنند. هرروز براهمیت نقش نظارتی سرمایه گذاران نهادی افزوده می شود،زیراآنان بسیار بزرگ وبا نفوذ شده اند ودرعین حال تمرکز مالکیت^[۱۸] قابل ملاحظه ای را بدست آورده اند . البته در نوشته های حاکمیت شرکتی ازتمرکز مالکیت به عنوان سازوکاری مهم یاد می شود که مشکلات کارگزاری را کنترل می کنند با این وجود چنین تمرکزی می تواند اثرات منفی هم داشته باشد، مانند دسترسی به اطلاعات محرمانه که سبب ایجاد ناقرینگی اطلاعاتی^[۱۹] بین آنان و سهامداران کوچکتر می گردد.
سرمایه گذاران نهادی هم چنین می توانند تضادهای کارگزاری را به واسطه وجودشان درمقام کارگمارعمده، که مشکل برخاسته از جدایی مالکیت و کنترل را کاهش می دهد، وخیم تر کنند.اگرچه با رشد تمرکز مالکیت این مشکل هم برطرف می شود (حساس یگانه و پوریانسب، ۱۳۸۴)^۳.
۳-۲. گفتار دوم : مدیریت سود
۱-۳-۲. مفاهیم مدیریت سود

۲-۱۵ نتیجه گیری ۵۲

فصل سوم: معماری خزنده وب و استراتژی های خزش ۵۳

۳-۱ مقدمه ۵۴

۳-۲ معماری خزنده های وب ۵۴

۳-۳ انتخاب صفحه ۵۶

۳-۴ اهمیت صفحه ۵۷

۳-۵ چالش های اجرای یک خزنده ۵۷

۳-۵-۱ انتخاب صفحات برای دانلود ۵۷

( اینجا فقط تکه ای از متن فایل پایان نامه درج شده است. برای خرید متن کامل پایان نامه با فرمت ورد می توانید به سایت feko.ir مراجعه نمایید و کلمه کلیدی مورد نظرتان را جستجو نمایید. )

۳-۵-۱ انتخاب صفحات برای دانلود ۵۷

۳-۶ پیچیدگی های فرایند خزیدن ۵۸

۳-۶-۱ استرات‍ژی های سنجش انتخاب صفحات ۵۸

۳-۶-۱-۱ معیار مبتنی بر گرایشات کاربران ۵۸

۳-۶-۱-۲ معیار مبتنی بر شهرت صفحات ۵۸

۳-۶-۱-۳ معیار مبتنی بر محل قرار گرفتن صفحات ۵۸

۳-۷ چگونگی آغاز و ختم فرایند استخراج و ذخیره سازی صفحات وب ۵۹

۳-۷-۱ خزش و توقف ۵۹

۳-۷-۲ خزش و توقف مبتنی بر مقدار آستانه ۵۹

۳-۸ استراتژی های روزآمدسازی صفحات ۶۰

۳-۸-۱ سیاست روزآمد سازی یکپارچه ۶۰

۳-۸-۲ سیاست روزآمد سازی نسبی ۶۰

۳-۹ به حداقل رساندن بار روی وب سایت های بازدید شده ۶۰

۳-۱۰ موازی سازی روند خزنده ۶۰

۳-۱۱ ساختار وب ۶۱

۳-۱۲ استراتژی های خزش ۶۲

۳-۱۲-۱ جستجوی ناآگاهانه ۶۲

۳-۱۲-۱-۱ حرکت اول عمق ۶۲

۳-۱۲-۱-۲ حرکت اول سطح ۶۳

۳-۱۲-۱-۳ جستجو با هزینه یکنواخت ۶۵

۳-۱۲-۲ جستجوی آگاهانه یا اکتشافی ۶۶

۳-۱۲-۲-۱ حرکت بهترین-شروع ۶۷

A 69

۳-۱۲-۳ جستجوی محلی ۶۹

۳-۱۲-۳-۱ جستجوی تپه نوردی ۷۰

۳-۱۲-۳-۲ جستجوی پرتو محلی ۷۰

۳-۱۲-۳-۳ جستجوی شبیه سازی حرارت ۷۱

۳-۱۲-۳-۴ الگوریتم آستانه پذیرش ۷۲

۳-۱۲-۳-۲ جستجوی پرتو محلی ۷۰

۳-۱۳ نتیجه گیری ۷۳

فصل چهارم: تجزیه و تحلیل نتایج حاصل از تحقیق ۷۴

۴-۱ مقدمه ۷۵

۴-۲ مرحله اول: بررسی روش اول سطح ۷۵

۴-۳ مرحله دوم: بررسی روش اول عمق ۸۰

۴-۴ مرحله سوم: بررسی روش ترکیبی ۸۶

۴-۴-۱ ترکیب اول: پیمایش اولین سطح به صورت BFS 86

۴-۴-۲ ترکیب دوم: پیمایش اولین و دومین سطح به صورت BFS 86

۴-۴-۳ ترکیب سوم: پیمایش اولین و دومین و سومین سطح به صورت BFS 86

۴-۵ مرحله چهارم: بررسی روش بهترین-شروع ۸۶

۴-۶ مرحله پنجم: بررسی روش تپه نوردی ۸۷

۴-۷ نتایج تجربی بدست آمده ۸۸

۴-۸ تعداد صفحات دانلود شده برای هر پرس و جو ۹۰

۴-۹ نتیجه گیری ۹۱

فصل پنجم: نتیجه گیری و ارائه پیشنهادات ۹۷

۵-۱ نتیجه گیری و جمع بندی نهایی ۹۳

۵-۲ پیشنهادات و کارهای آینده ۱۰۰

منابع ۱۰۱

فهرست جداول

عنوان صفحه

جدول ۴-۱ میزان مرتبط بودن صفحات با بهره گرفتن از روش های اول سطح، اول عمق، بهتـرین- شروع و تپه نوردی ۸۸

جدول ۴-۲ میزان مرتبط بودن صفحات با بهره گرفتن از روش های ترکیبی اول، دوم و سوم ۸۹

جدول ۴-۳ تعداد صفحات خزش شده برای هر پرس و جو در الگوریتم های مختلف ۹۰

فهرست اشکال

عنوان صفحه

شکل ۲-۱ درصد تغییرات صفحه ۸

شکل ۲-۲ متوسط تغییرات صفحه در هر ۱۰ روز ۸

شکل ۲-۳ موتور جستجوی یاهو ۱۶

شکل ۲-۴ معماری موتورهای جستجو ۲۰

شکل۲-۵ کدهای HTML سازنده یک صفحه وب ۲۳

شکل۲-۶ خزش در وب ۲۴

شکل۲-۷ ماتریس اطلاعات کلیدواژه ها ۲۵

شکل ۲-۸ نحوه استخراج و شاخص دهی ۳۲

شکل ۳-۱ معماری خزنده وب ۵۵

شکل ۳-۲ الگوریتم پایه خزنده وب ۵۶

شکل۳-۳ نمایی کلی از ساختار وب ۶۱

شکل۳-۴ ساختار گراف وب ۶۱

شکل۳-۵ حرکت خزنده در بین صفحات با بهره گرفتن از الگوریتم اول عمق ۶۲

شکل۳-۶حرکت خزنده در بین صفحات با بهره گرفتن از الگوریتم اول سطح ۶۳

شکل۳-۷ یک خزنده با استراتژی اول سطح ۶۳

شکل ۳-۸ الگوریتم خزنده با استراتژی اول سطح ۶۴

شکل ۳-۹ محاسبه پیچیدگی زمانی یک درخت جستجوی دودویی با بهره گرفتن از جستجوی اول سطح ۳۳

شکل ۳-۱۰ مراحل رسیدن به هدف با بهره گرفتن از روش UCS 66

شکل ۳-۱۱ یک خزنده با استراتژی بهترین-شروع ۶۸

شکل ۳-۱۲ الگوریتم خزنده با استراتژی بهترین-شروع ۶۹

شکل ۳-۱۳ شبه کد جستجوی تپه نوردی ۷۰

شکل ۳-۱۴ شبه الگوریتم پرتومحلی ۷۱

شکل ۳-۱۵ شبه الگوریتم شبیه سازی حرارت ۷۲

شکل ۴-۱ لینک های استخراج شده سطح اول با بهره گرفتن از تکنیک BFS ۷۵

شکل ۴-۲ لینک های استخراج شده سطح دوم با بهره گرفتن از تکنیک BFS 76

شکل ۴-۳ لینک های استخراج شده سطح سوم با بهره گرفتن از تکنیک BFS 77

شکل ۴-۴ مسیر طی شده در اولین هسته از پرس و جوی Computer networks در روش اول سطح ۷۷

شکل۴-۵ مسیر طی شده در دومین هسته از پرس و جوی Computer networks در روش اول سطح ۷۸

شکل۴-۶ مسیر طی شده در سومین هسته از پرس و جوی Computer networks در روش اول سطح ۸۰

۸۱

شکل ۴-۸ محتوای a₁ S₁ ۸۱

۸۱

۸۲

۸۲

شکل ۴-۱۲ مسیر طی شده در اولین مرحله از روش اول عمق ۸۲

شکل ۴-۱۳ مسیر طی شده در nامین مرحله از روش اول عمق در هسته اول ۸۴

شکل ۴-۱۴ مسیر طی شده در اولین مرحله از روش اول عمق ۸۴

شکل ۴-۱۵ مسیر طی شده در nامین مرحله از روش اول عمق ۹۰

شکل۵-۱ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی”Computer networks“ ۹۴

شکل ۵-۲ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی”Artificial Intelligence“ ۹۴

شکل ۵-۳ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی“Web crawler“ ۹۵

شکل ۵-۴ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی”Search engine“ ۹۵

شکل ۵-۵ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی ”Cloud Computing“ ۹۶

شکل ۵-۶ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی ”Software engineering“ ۹۶

شکل ۵-۷ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی”Data mining“ ۹۷

شکل۵-۸ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی ”Computer architecture“ ۹۷

شکل ۵-۹ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی”Operatin system “ ۹۸

شکل۵-۱۰ نمودار ستونی درصد مرتبط بودن صفحات در پرس و جوی”Wi-Fi“ ۹۸

فهرست نشانه ها(فرمول ها)

…………………………………………………………………………………………………………………………………………… ۶۷

Sim(q , p) = ………………………………………………………………………………………………………………… 68

h(n)≤h*(n)

h(n)≥۰ …………………………………………………………………………………………………… ۶۹

۰ ≤h(n) ≤h*(n)

فهرست اختصارات

BFS Best First Search

DFS Depth First Search

DNS Domain Name System

FTP File Transfer Protocol

HTTP Hyper Text Transfer Protocol

IP Internet Protocol

PPC Pay Per Click

SA Simulated Annealing

TA Threhsold Acceptance

URL Uniform Resource Locator

TFIDF ………………………….………………Term Frequency Inverse Document Frequency

چکیده

در عصر اطلاعات، وب امروزه به یکی از قدرتمند ترین و سریع ترین ابزارهای ارتباطات و تعـامل میان انسان ها بدل شده است. موتورهای جستجو به عنوان برنامه های کاربردی وب به طور خودکار پهنه وب را پیمایش نموده و مجموعـه ای از اسناد و مـدارک بروز موجـود را دریافـت می کننـد. فرآینـد دریافت، ذخیره سازی، رده بندی و شاخص دهی بر اساس الگوریتم های نیمه هوشمند به صورت خودکار انجـام می شود. اگر چه بسیاری از حقایق در مورد ساختار این برنامه های کاربردی به عنـوان اسـرار تجاری پنهان باقی مانـده است، ادبیات تحقیق در شاخه ی موتورهای جستجو و ابزارهای بازیابی اطلاعات تلاش در یافتن بهترین راهکارها برای عملکرد بهینه ی هر ماژول در ساختار موتورهای جستجو دارد. با توجه به زمان محدود کاربران وب امروزی، ارائه مرتبط ترین و تازه ترین اسناد به آنها اغلب مهمترین چالشی برای موتورهای جستجو می باشد. برای انجام این مهم، هر ماژول در معماری موتور جستجو باید به گونه ای هوشمند طراحی شود که نه تنها اسناد مرتبط را ارائه دهد بلـکه به پاسخگویی در سریع ترین زمان ممکن بپردازد. در میـان این ماژول ها بخش حساس و حیاتی به نام خزنده وجود دارد. یکی از مسائل قابل بحث در بهینه سازی عملکرد موتورهای جستجو این است که، سیاست خزیدن پیکربندی مجـدد گردد به طریقی که لینک های خارجی مرتبطی که به محتوای مرتبط با صفحات منبع پیوند می خورند دنبال گردد. ماژول خزنده مسئول واکشی صفحات برای ماژول رتبه بندی است. اگر صفحات با کیفیت بالاتر با انحراف موضوع کمتر توسط خزنده نمایه سازی شوند، رتبه بندی سریع تر انجام خواهد شد.

با در نظر گرفتن ساختار وب به صورت گراف، نحوه ی پیمایش وب به صورت روش های جستجوی گرافی می باشد. در این پژوهش، با بکار بردن تجربی روش های مختلف جستجوی گراف و ترکیبات مختلف آنها و با صدور پرس و جوهایی به موتور جستجوی گوگل جهت اندازه گیری کیفیت صفحات دریافتی و با ثابت در نظر گرفتن فاکتور عمق پیمایش به شناسایی بهترین روش با پیچیدگی زمانی و فضایی معقول به منظور بکار گیری در بخش خزنده در معماری موتور جستجو پرداخته خواهد شد.

کلمات کلیدی: خزنده وب، پیمایش گراف، موتورهای جستجو، انحراف موضوع.

فصل اول

کلیات

۱-۱ مقدمه

بدون وجود موتورهای جستجوگر تقریباً وب جهان گستر بدون فایده است. اما سؤال این است که موتورهای جستجوگر چگونه در میان این همه وب سایت اطلاعات مورد نیاز ما را پیدا می کنند. اینترنت بسیار وسیع است و کاربران وب در حدود دو میلیارد برآورد می شوند. در این میان حداقل ۲۵۰ میلیون وب سایت اینترنتی وجـود دارد که در مجمـوع چیزی در حدود ۳۰ میلیارد صفحه وب را در خود جـای داده اند. گشتن در محیط وب^[۱] زمانی که بسیار کوچک و وب سایت ها بسیار کم بودند معمولاً اختصاص به پژوهشگران و اساتید دانشگاه داشت و می توان گفت که کار دشواری نیز به شمار می رفت[۹].

با توسعه وب و زیاد شدن حجم اطلاعات و وب سایت ها نیاز به ابزاری جهت یافتن اطلاعات در این اقیانوس اطلاعات بیش از پیش احساس می شد. در همین حال در اوایل دهه نود میلادی بود که اولین موتورهای جستجوگر به نام آرچی^[۲] پا به عرصه حضور گذاشتند. یک موتور جستجوگر در قدم اول و قبل از آنکه بخواهد نتایجی را به کاربر نمایش دهد بایستی اطلاعات را جمع آوری و طبقه بندی کرده باشد. بنابراین موتورهای جستجو باید تا حد امکان وب سایت ها را مرور کنند و آدرس صفحات را با چکیده ای از محتویات صفحه ذخیره و طبقه بندی کنند. این وظیفه بسیار سنگین است و توسط خزندگان وب^[۳] انجام می شود[۵۳].

این برنامه ها به صورت خودکار در وب به جستجو پرداخته و محتویات صفحات وب سایت ها را برای تحلیل بعدی ذخیره می کنند. از آنجا که تعداد صفحات و حجم آنها بسیار بالاست از این رو این کار در مقیاس بسیار بزرگی انجام می شود و به زمان و پهنای باند بالایی نیاز دارد. موتورهای جستجوگر معروف مخزن بسیار بزرگی را در صفحات وب ایجاد کـرده اند اما خزندگان جدیدتر باید این کار را از صفر شـروع کنند. خزنده ها برای شروع معمولاً به سراغ دایرکتوری های معروف می روند چون از طریق آنها می توانند به لیست بزرگی از سایت های مرتبط دسترسی پیدا کنند و با مرور این وب سایت ها خزنده وب هر چه بیشتر در فضای داخلی وب سایت ها فرو می رود و اطلاعات بیشتری بدست می آورد. تمامی این اطلاعات در مخزن ذخیره می شوند تا بعداً مورد تجزیه و تحلیل قرار گیرند[۴۴].

یک خزنده با طراحی خوب می تواند محتوای صفحـات وب را با سرعت بالایی مرور کند و در عین حال همگی خزندگان با کمک یک برنامه هماهنگ کننده اقدام به جستجو در وب می کنند تا این عمل دوباره تکرار نشود. این هماهنگ کننده باعث می شود که فاکتور تازگی صفحات حفظ شود تا جدیدترین نسخه آنها در بانک اطلاعاتی موتور جستجو قرار گیرد[۴۶].

پس از آنکه خزندگان اطلاعات را در صفحات وب جمع آوری کردند این اطلاعات باید بر روی سرورهای سایت جستجوکننده ذخیره شوند. ذخیره و ایندکس کردن صفحات فراوان و بی شمار در وب یک چالش بزرگ است اما از آن مهم تر این است که موتور جستجو بداند که کاربرانش به دنبال چه چیزی هستند. هر چه قدر اطلاعات نمایـش داده شده توسط یک موتـور جستجو با عبارت جستجـو شده توسـط کاربر منطبق تر باشد، موتور جستجو عملکرد و محبوبیت بهتری دارد.

اما آنچه که یک وب سایت را در نتایج جستجوی یک موتور جستجوگر در رتبه ی بالاتری قرار می دهد در واقع نوع الگوریتم موتور جستجوگر در رتبه بندی صفحات یافت شده است. این الگوریتم مجموعه ای پیچیده از قواعد و ملاحظات گوناگون است که البته مدام در حال بهینه سازی است تا نتایج بهتری را در معرض نمایش کاربران قرار دهد. هر چقدر الگوریتم یک موتور جستجوگر بهتر عمل کند آن وب سایت نیز نتایج بهتری را به کاربران ارائه می دهد و از همین رو ضامن موفقیت یک موتور جستجوگر همان معماری و نوع الگوریتم جستجوی آن است. موتورهای جستجو همگی کل صفحات را بر اساس کلمات موجود در آن مورد ارزیابی قرار می دهند. اهمیت یک وب سایت هم در رتبه آن تاثیر مهمی دارد و اگر سایت های زیادی به یک صفحه خاص لینک دهند، موتور جستجو با وزن دهی^[۴] متوجه می شود که آن صفحه مهم است و به آن صفحه توجه بیشتری می کنـد. هر چه تعـداد لینک ها از سایت های دیگر به یک سایت بیشتر باشد یعنی آن وب سایت مهمتر و معتبرتر است.

حال اگر وب سایتی که رتبه بالایی دارد به وب سایت دیگری لینک دهد، آن لینک ارزش بیشتری نسبت به چندین لینک خواهد داشت[۳۵].

۱-۲ بیان مسأله

یک خـزنده وب برنامـه ای است که صفحـات وب را عمـوماً برای یـک موتور جستجـوی وب دانلـود می کند. خزنده های موتورهای جستجوی بزرگ مانند گوگل، آلتاویستا و … از بخش قابل توجهی از صفحات وب متنی به منظور ساخت شاخص های محتوا استفاده می کنند. خزنده های دیگر همچنین ممکن است صفحات زیادی را مشاهده کنند و تنها برای نوع خاصی از اطلاعات مانند آدرس ایمیل مورد استفاده قرار گیرند. در انتهای دیگر این طیف، خزنده های شخصی سازی شده وجود دارد که صفحات مورد علاقه یک کاربر خاص را به منظور ساخت یک حافظه نهان در دسترس سریع پیمایش می کنند. طراحی یک خزنده خوب چالش های بسیاری را به دلیل گسترده بودن وب به همراه دارد و به طور دائم باید بروز باشد. بر طبق مطالعـات مختلف بیش از یک میلیون صفحه در دسترس در وب وجود دارد و پیش بینی می شود که این نرخ رشد همچنان ادامه یابد. گذشته از این، صفحاتی که به تازگی ایجاد شده اند به طـور مداوم در

حال بروز رسانی می باشند[۵].

دشـواری پیاده سـازی خزنده وب کارآمد به روشنـی بیان می کند کـه پهنای باند برای انجام عمـل خزیدن نه بی نهایت است و نه آزاد. بنابراین، ضروری است که عمل خزیدن در وب را نه تنها در یک مقیاس، بلکه به صورت یک روش کارآمد انجام دهیم به طوریـکه میزان قابل قبولی از کیفیت و یا تازگی صفحـات وب حفظ شود پس مجری یک خزنده وب باید رفتارش را تعریف کند. بنابراین خزنده باید مشخص کند که از چه الگوریتمی جهت دانلود صفحات با کیفیت بالاتر استفاده می نماید و چگونه صفحات، جهت بروز رسانی و جلوگیری از ایجاد سربار در وب سایت ها انتخاب می شوند.

با توجه به اندازه فعلی وب، ضروری است که خزنده روی کسری از وب که از کیفیت محتوایی بالاتری برخوردارند عمل خزیدن را انجام دهد. حتی موتورهای جستجوی بزرگ امروزی نیز عمل خزیدن را فقط روی کسری از صفحات موجـود در وب انجام می دهند اما خزنده باید عمل خزیدن را روی کسری از صفحات که با موضوع موردنظر مرتبط هستند انجام دهد نه فقط روی صفحات تصادفی یعنی صفحات باید بستـه به اهمیتشـان انتخاب شـوند. اهمیـت یک صفحـه وب وابسته به تعداد لینک ها یا ملاقات ها آنها می باشد [۲۳].

خزنده وب برای اینکه بتواند صفحات را با توجه به اهمیتشان ملاقات کند باید بتواند از یک استراتژی خوب و قوی جهت تشخیص کیفیت صفحات بهره ببرد. در این پژوهش، برای انتخاب یک استراتژی مناسب، کلیه استراتژی های پیمایش گراف و خزش مورد آزمایش قرار داده شد. این تحقیق ضمن بررسی روش هـای مختلـف موجود در تشخیص اهمیـت پیونـدها به ارائه ی راهـکار و الگوریتمـی به منظور بهینه سازی روش های شناخت اهمیت پیوندها پرداخته است.

۱-۳ اهمیت و ضرورت انجام تحقیق

شبکه اینترنت در سایه وب جهان گستر، به یکی از قدرتمندترین و سریع‌ترین ابزارهای ارتباط و تعامل میان انسانها تبدیل گشته است. اینترنت به عنوان شاخص ترین نماد عصر اطلاعات با سرعتی حیرت انگیز در طی دهه اخیر رشد کرده است. یکی از امکانات وسیع اینترنت که سریع ترین رشد را نسبت به سایر امکانات اینترنت داشته است، وب است که بی تردید یکی از اصلی ترین عوامل رشد این شبـکه به شمار می آید.

با توجه به اینکه بهترین موتورهای جستجو دارای پایگاه داده ای حدوداً ۵۰ درصد صفحات موجود در وب هستند از این رو مستقر شدن پیوندهای با اهمیت بیشتر و الگوشناسایی و کشف آنها در کارایی موتورهای

جستجو و تامین رضایت کاربران بسیار حیاتی است[۱۵].

یکی از راههایی که موتورهای جستجو، برای کاهش زمان جستجو به کار می برند، پیش پرداش محتوای وب سایت هاست. به این ترتیب که وقتی کاربر درخواست یک پرس و جو را می دهد. به جای این که این پرس وجو به میلیون ها وب سایت فرسـتاده شـود، با داده از پیـش پردازش شـده در یـک سـایت مقایسـه می شـود و مطابقت صـورت می پذیـرد. پیش پـردازش به کمـک برنامه نرم افزاری به نام خـزنده انجام می گیرد. خزنده موظف است صفحات وب را برای تحلیل و ایجاد شاخص در یک روال منظم، سریع و جامع استخراج کرده و تحویل انباره صفحات بدهد[۱۰].

با توجه به مطالب ذکر شده، بررسی و بهینه نمودن موتورهای جستجو و به خصوص چگونگی دانلود صفحات و نوسازی آنها و هم چنین کم کردن بار به وجود آمده بر روی وب سایت ها و غیره، همگی مواردی هستند که ضرورت بحث را به طور واضح نشان می دهند.

۱-۴ ساختار پایان نامه

در این پایان نامه، در فصل دوم به بیان مبانی و مفاهیم پایه ای درباره انواع موتورهای جستجو، معماری و اجزای آن ها، همچنین نحوه ی عملکرد هر یک از اجزا خواهیم پرداخت و در ادامه مراحل کار موتورهای جستجو، الگوریتم های رتبه بندی و دسته بندی موتورهای جستجو از لحاظ کاربرد مورد بررسی قرار خواهند گرفت. در فصل سوم، معماری خزشگرهای وب، سیاست ها و استراتژی های انتخاب صفحات، چالش های اجرای یک خزنده وب بیان خواهد شد و در ادامه استراتژی های خزیدن به همراه الگوریتم های هر یک از آنان به طور کامل تشریح خواهد شد. در فصل چهارم نیز نتایج تجربی که بر روی برخـی از الگوریتـم های خـزش مورد کاربـرد در موتورهای جستجوی امروزی صورت گرفته، بیان و نمودارهای هر یک ترسیم و توضیح داده شده است و در آخر در فصل پنجم نیز نتایج حاصل شده بیان می گردد.

فصل دوم

مبانی و مفاهیم پایه

۲-۱ مقدمه

دنیای امروز دنیای اطلاعات است و سریع ترین راه انتقال اطلاعات استفاده از فضای وب می باشد. با وجود آن که پیدایش وب موجب تحول شگرفی در فراگیری اخبار و اطلاعات علمی شده است اما همانطور که در شکل های ۲-۱ و ۲-۲ مشاهده می شود افزایش زیاد حجم اطلاعات در جهان مشکل یافتن اطلاعات ارزشمند و معتبر را از میان میلیون ها صفحه اطلاعاتی در سراسر جهان به دنبال داشته است به همین دلیل امروزه مسئله بازیابی اطلاعات از مهم ترین مباحث مورد توجه در حوزه مطالعات فضای وب است. برای حل این مسئله ابزارهای مختلفی به وجود آمده است، کارآمدترین و محبوب ترین ابزار بازیابی اطلاعات، موتورهای جستجو می باشد. موتورهای جستجو، طبقه بندی و دسترسی به اطلاعات را ساده می‌سازند. وب منبع عظیمی‌از اطلاعات است که روز به روز بر حجم آن افزوده شود. وب محلی برای ترافیک و رد و بدل اطلاعات در موضوعات مختلف است. با عمومی شدن استفاده از صفحات وب نیاز به پیدا کردن این صفحات یک مساله جدی برای کاربران اینترنت شده است. در حال حاضر میلیونها صفحه که اطلاعات فراوانی از موضوعات مختلف را در بر دارند بر روی سرویس دهنده های مختلف وجود دارند و این در حالی است که هر روز نیز بر حجم این اطلاعات افزوده می‌شود. [۴۴]

شکل۲-۲ متوسط تغیرات صفحه در هر ۱۰ روز]۶۱[

شکل۲-۱ درصد تغیرات صفحه]۹[

جنبه مثبت وب این است که اطلاعات فراوانی را در موضوعاتی بسیار گسترده، ارائه می‌دهد اما جنبه منفی آن این است که اگر کاربری دنبال موضوعی خاص باشد، کدام صفحه را بخواند و از میان میلیونها صفحه موجود، کدام صفحه و یا صفحات نیاز او را برآورده می‌کند. در چنین مواقعی کاربران سراغ موتورهای جستجوگر می‌روند. آمارهای رسمی‌نشان می‌دهد که افراد بسیاری سفر در دنیای وب را با موتورهای جستجوگر آغاز می‌کنند.

شبکه جهانی اینترنت در اواخر دهه ۱۹۶۰ پا به عرصه ظهور گذاشت، اما تا سال ۱۹۹۰ ابزارهایی برای کاوش اطلاعات موجـود در آن وجـود نداشت. با مروری اجمالی بر تاریخچـه ابزارهـای کاوش در وب می توان دریافت که تقریباً کلیه پیشرفتها در این زمینه توسط دانشجویان و طرحهای پژوهشی آنها صورت گرفته است. در سـال ۱۹۹۰ اولیـن ابـزار کاوش تـوسـط آلان اِمتیـج^[۵] در دانشـگاه مـک گـیل^[۶] تحـت عنـوان آرچـی^[۷] توسعه یافت. این ابزار کاوش تنها می توانست فایلهای اینترنتی، نه متن و اسناد موجود در اینترنت را بازیابی کند[۵۳].

در سال ۱۹۹۳ در دانشگاه نوادا برای بازیابی اسناد و متون در سرورهای گوفر^[۸] نظامی موتور جستجویی مشابه آرچی طراحی شد که ورونیکا^[۹] نام داشت. در واقع ورونیکا برای اولین بار امکان جستجو و بازیابی متن و اسناد ساده بدون تصویر یا پیوندهای فرامتنی را در اینترنت فراهم کرد[۵۰].

آرچی و ورونیکا، پدر و مادر تمام ابزارهای کاوش امروزی به شمار می آیند. بعدها دو ابزار کاوش برای جستجوی اطلاعات در محیط وب توسعه یافتند که عبارت بودند از آلی وب^[۱۰] و شبکه جهانی وب واندر^[۱۱]. شبکه جهانی وب واندر که توسط ماتئوگری^[۱۲] در دانشگاه ام آی تی توسعه یافت از روبات ها به تعبیر دیگر برنامه های کامپیوتری برای جستجو و نمایه سازی صفحات وب استفاده می کرد. به این ترتیب اولین موتور کاوش پا به ظهور گذاشت و پایگاه موتور کاوش تحت عنوان وندکس^[۱۳] شکل گرفت[۵۳].

در اوایل سال ۱۹۹۴ دو دانشجوی دوره دکتری مهندسی برق دانشگاه استانفورد به نامهای دیوید فیلو^[۱۴] و جری^[۱۵] یانگ فهرستی از سایتهای وب مورد علاقه و منتخب را تهیه و در محیط وب ارائه کردند . سپس به منظور جستجو در پایگاه اطلاعاتی گرد آوری شده از سایتها، نرم افزار کاوشی به آن افزودند و آن را یاهو نام نهادند. پس از مدتی، حجم اطلاعات موجود در یاهو افزایش یافت و روزانه هزاران نفر به آن مراجعه کردند[۱۸].

در دسامبر ۱۹۹۵ آلتا ویستا^[۱۶] به عنوان یکی از شناخته شده ترین موتور های کاوش ظهور پیدا کرد و به دلیل ویژگیها و نوآوری هایی که در آن پیش بینی شده بود، به سرعت به عنوان یکی از بهترین ابزارهای کاوش اینترنت مطرح شد به طوری که توانایی انجام روزانه میلیون ها جستجو را بدون کاهش سرعت بازیابی اطلاعات به همراه داشت[۵۳]. آلتا ویستا اولین موتور کاوشـی بـود که از زبان طبیعی «مانند جستجوی جمله آب و هوای تهران چطور است؟» و عملگرهای بولی برای بازیابی اطلاعات در محیط وب استفاده کرد.

در مـاه مـی ۱۹۹۶ هات بات^[۱۷] بــه عنــوان یـکی دیـگـر از ابـزارهـای مهــم کـاوش ابـداع شـد که روبات آن قـادر بـود روزانـه حـدود ۱۰ میلیـون صفحـه در محیـط وب را در پایــگاه خـود نمایه کنـد. در سـال ۱۹۹۵ اولیــن متا کراولر^[۱۸] توسـط سلبـرگ ظهـور پیـدا کرد. این ابـر موتـور کاوش می توانست در پایگاه شش موتور کاوش و راهنمای موضوعی به طور هم زمان به جستجو بپردازد. در اواخر سال ۱۹۹۷ یکی از بزرگترین و مهمترین ابزارهای کاوش امروزی یعنی موتور جستجوی گوگل^[۱۹] از طریق طرح تحقیقاتی دانشگاه استانفورد ظهور یافت. گوگل تلاش کرد که در نظام رتبه بندی نتایج کاوش خود مبتنی بر میزان ارتباط آنها با کلید واژه های جستجو، تحول اساسی به وجود آورد که از طریق استفاده از معیار میزان استناد به یک سایت مشخص توسط سایت های دیگر صورت می گیرد[۵۳].

پیرولی^[۲۰] در سال ۱۹۹۷ به مطالعاتی درباره ی رابطه بین “شرایط مطلوب” یک صفحه و طول عمر آن پرداختند. از آنجا که بسیاری از خزنده^[۲۱] ها تنها می توانند زیر مجموعه کوچکی از وب را دانلود کنند، خزنده باید به دقت تصمیم بگیرید که کدام صفحات را دانلود کند. بنابراین بررسی می کنیم که چطور یک خزنده می تواند پیوند “مهـم” را خـیلی زود کشـف و شناسایی کند[۱۸].

ادوارد^[۲۲]، ریچارد^[۲۳] و دوستانشان در سـال ۱۹۹۸ مطالعـاتی در مورد «چگونگی زمانبندی یک خزنده وب برای بهبود نوسازی صفحه» انجام دادند. نتیجه این مطالعات به این صورت بود که در آن خزنده های وب به منظور حفظ صفحات به روز شـده، صفحات دانلـود شـده را به صـورت دوره ای به روز می کنند.

فرد^[۲۴]، آنجا فلدمن^[۲۵] و بالاچاندر^[۲۶] در سال ۱۹۹۹ مطالعات تجربی درباره چگونگی تغییر صفحات وب را انجام دادند. کمیته علوم کامپیوتر دانشگاه استانفورد در سال ۲۰۰۱ پژوهشی را با عنوان «پیمایش وب: کشف و نگهداری مقیاس بزرگی از داده های وب» انجام دادند[۵۳].

موتور جستـجوگر با گرفتن عبارتـی مختصـر، کاربر را با لیستـی از سایتها روبه رو می‌کنـد که به موضـوع مـورد عـلاقه او مرتبـط اسـت. موتـور جستجـوگـر برای کمـک به کاربـران در یافتـن اطلاعات موجـود در سایـر سایتهـا طراحی شده اسـت. بسیاری از آن ها در ابتـدا تنهـا پـروژه های دانشـگاهی بـوده اند نظیـر: Google, Inktomi, Yahoo.

وقتی یک کاربر عبارتی را جستجو می‌کند، موتور جستجوگر لیستی از سایتها را نشان می‌دهد که تعداد آنها از چند مورد تا میلیونها صفحه متغیر است. سایتهایی که موتور جستجوگر به عنوان نتایج جستجویشان نشان می‌دهند بر حسب میزان ارتباط با موضوع جستجو شده به ترتیب نزولی لیست می‌شوند. به عبارت دیگر سایتی که به عنوان اولین نتیجه جستجو معرفی می‌شود، مرتبط ترین سایت به عبارت جستجو شده از دید آن موتور جستجوگر بوده است[۵۹].

هر چه بر محبوبیت وب افزوده می‌گردد نیاز به بایگانی کردن اطلاعات آن نیز بیشتر می‌شود. افرادی که دستی در تجارت الکترونیک دارند اذعان می‌کنند که آوردن بیننده به سایت ضروری ترین شرط موفقیت برای سایتهای تجارت الکترونیک است. فرقی نمی‌کند که سایت چه کالا و خدماتی را ارائه می‌کند، هر سایت اگر خواهان کسب در آمد و محبوبیت است، باید بیننده داشته باشد. موتور جستجو نیز باید اطلاعات را به سرعت در اختیار کاربران قرار ‌دهد. بدون موتور جستجوگر، وب تنها به بخش کوچکی از موفقیت امروزی خود دست می‌یافت، زیرا موتور جستجوگر وب را به رسانه ای قابل استفاده برای همه تبدیل کرده است چرا که از هیچ کس توقع نمی‌رود که آدرسهای بسیاری از سایتهای مختلف را به یاد داشته باشند. آنچه که تمام موتورهای جستجو گر با درجات متفاوتی از موفقیت انجام می‌دهند، فراهم آوردن یک وسیله جستجوی ساده است[۱۲ و ۴۵].

موتورهای جستجـو همیشـه به عنوان بخشی از طرح های تجـاری شرکت ها پدید می آیند و فلسفه تأسیس این شرکت ها در اصل ایجاد نظام های جستجوی رایگان برای کاربران اینترنت نیست. شرکت های مذکور این موتورهای جستجو را به دلایل مختلفی از جمله برای تبلیغ نام یک محصول، فروش فضای تبلیغـاتی، تبلیغ یک محصول نرم افزاری یا سخـت افزاری، ارتقاء یک خـدمت اطلاعاتی پیوستـه یا مشـتری یابی برای یک سایت وب تهیه می کنند. لازم به ذکر است به طور مستقیم از یک موتور جستجو سودی به دست نمی آید، بلکه سود حاصل، ناشی از مشتری هایی است که آنها به خود جلب می کنند.

ممکن است در نگاه اول این امر برای افراد عادی به راحتی قابل هضم نباشد و به دلیل رایگان بودن جستجو، افراد دیگر ضرورتی نمی بینند که به نیات واقعی فراهم کنندگان خدمات جستجوی اطلاعات توجه نمایند. برای جلب توجه بیشتر مشتریان و در نتیجه رقابت میان موتورهای جستجو، آنها به طور دائم در تلاش هستند که خدمات خود را ارتقا بخشند و اطلاعات خود را بروز نمایند اما کاربران باید به این نکته توجه نمایند که نیت واقعی فراهم کنندگان خدمات جستجو، کسب سود بیشتر است، اگر در کوتاه مدت هـم این مدنظر نباشـد، به طور حتم در دراز مدت هـدف همین است. تنها موتورهای جستجـویی می توانند کسب سود مناسب را در دراز مدت تضمین نمایند که قابلیت جوابدهی بیشتر و مناسب تر را به سؤالات مختلف کاربران داشته باشند[۴۵].

تعداد بینندگان هر سایت، در برگیرنده آن در دنیای وب است. سایتی که بیننـده ندارد بدون شک مرگی آنلاین را تجربه می‌کند. آمارهای رسمی‌ به خوبی نشان می‌دهند که موتورهای جستجوگر ابزار مناسبی هستند که کاربران آنها خدمات و اطلاعات مورد نیاز خود را می‌یابند. البته تنها رتبه های بالای نتایج جستجو است که مورد توجه کاربران قرار دارد و آنها به سایتهای لیست شده در این رتبه ها مراجعه می‌کنند. کاربران هنوز هم علاقه دارند که ده سایت اول در نتایج جستجو را مرور کرده از بقیه سایتها صرف نظر کنند. این رفتار کاربران پیام بسیار واضحی دارد: «سایتهایی که در رتبه های بالا قرار نمی‌گیرند، بینندگان چندانی هم نخواهند داشت»[۳۱].

با دقت در این رفتار کاربران اهمیت کسب رتبه های بالا در موتورهای جستجوگر روشن تر می‌شود. نکته دیگر آنکه بینندگانی که بدین ترتیب از طـریق موتورهای جستجـوگر روانه سایت ها می‌شوند عمـوماً علاقه مندان به آن سایت هستند و این در حالی است که هزینه چندانی صرف آوردن آنها به سایت نشده است. امورزه تجارت الکترونیک خود را با مسئله رتبه بندی در موتورهای جستجوگر هماهنگ کرده است زیرا رتبه های بالاتر مستقیماً به فروش بیشتر تعبیر می‌شوند. طبق آمارهای ارائه شده در ابتدای سال میلادی ۲۰۰۳ نزدیک به ۹۳ درصد بینندگان سایتهای فعال در زمینه ارائه هدایای کریسمس را موتورهای جستجوگر فراهم کرده اند که در این بین گوگل با ۲۷ درصد در صدر ایستاده است. هر روزه سایت های بسیاری در وب منتشر می‌شوند که دارندگان آنها به امید کسب در آمد و موفقیت به این تجارت نوین وارده شده اند اما تنها تعداد معدودی از آنها با بهره گرفتن از تکنیک های موثر کسب درآمد و با تکیه بر تخصص خود در این بین به موفقیت دست می‌یابند[۳۱ و ۴۵].

امروزه بازاریابی در اینترنت روش های بسیاری را برای کسب در آمد هر چه بیشتر در اختیار سایت های قرار داده است اما انتخاب اول تمامی‌سایت ها رتبه های بالا در موتـورهای جستجوگر است. موتورهای جستجوی اولیه به کاربـران امکان می دادند که فقط بخشی از وب را جستجـو نمایند اما امـروزه با پیشرفت های اخیر و افزایش قابلیت های آنها، می توانند دیگر بخش های اینترنت را نیز کاوش نمایند. به طور خلاصه می توان گفت که موتور جستجوگر ابزاری است که کاربران اینترنت به کمک آنها سایت ها و اطلاعات مورد علاقه خود را می‌یابند. نتایج جستجوی تمام موتورهای جستجوگر دقیق نیست. بسیاری از کاربران دریافته اند که در اغلب موارد ۱۰ رتبه اول نتایج جستجوی موتورهای جستجوگر می‌تواند خواسته آن ها را برآورده کند. تجارت الکترونیک به شدت خود را با مسائل رتبه بندی در موتورهای جستجوگر هماهنـگ کـرده است و همه سایـت ها برای کسب رتبه های بالا تلاش می‌کنند[۴۵].

در بخـش اول این فصـل، جهت آشـنایی بیشتـر با مـوتورهای جستجـو و اجـزای آن، مفاهیم اولیه مـربوط به موتورهای جستجو و انواع آن را بیان نموده و نحوه عملکرد هر یک شرح داده می شود.

۲-۲ انواع موتورهای جستجو

موتورهای جستجو از لحاظ نحوه عملکرد و نوع انجام جستجو به چندین دسته زیر تقسیم می شوند:

• موتورهای جستجوی کلید واژه ای^[۲۷]
• موتورهای جستجو بر اساس فهرست راهنمای موضوعی^[۲۸]
• موتورهای جستجوی مبتنی بر خزنده^[۲۹]
• موتورهای جستجوی ترکیبی^[۳۰]
• موتورهای جستجوی متا^[۳۱]
• موتورهای جستجوی هوشمند ^[۳۲]
• موتورهای جستجوگر مبتنی بر پرداخت^[۳۳]

۲-۲-۱ موتورهای کلید واژه ای

این جستجوگرها دارای کادر مشخصی برای تایپ کلمه یا عبارت مورد جستجو هستند. کاربران با تایپ عبارت مربوط به موضوع از طریق موتور جستجو، کلیه سایت ها و صفحاتی که آن کلمـه یا عبارت را در بر دارند بازیابی می کنند. این موتورها با سرعت زیاد، حجم انبـوهی از منابع مرتبـط با موضوع مشـخص شده را به ترتیـب ارائه می کنند. این موتورها به دلیل دقیق و تخصصی نبودن سایت های بازیابی شده، گاهی اوقات نتایج نامرتبط به موضوع مورد نظر را به کاربر برمی گرداند و معمولاً برای جستجوی عمومی یک موضوع خاص مورد استفاده قرار می گیرند[۷ و ۵۰].

۲-۲-۲ موتورهای جستجو بر اساس فهرست راهنمای موضوعی

این موتورها تنها سرفصل‌ها و عناوین موضوعات را جستجو می‌کنند مانند یاهو. این جستجو، ‌شبیه جستجو در فهرست یک کتاب است. این جستجوگرها دارای فهرست موضوعی خاص خود می باشند. با کلیک کردن بر روی هر موضـوع، زیر مجمـوعه آن موضـوع در اختیار کاربـر قـرار می گیـرد و به همین ترتیب تا دقیـق ترین سایت های مربوط به موضوع مورد جستجو مشخص می شوند.

این نوع جستجو با دخالت مستقیم و نظارت صاحبان اسناد و مستندات وب ثبت و سازماندهی می شود. به

طور مثال کلیه اسناد در چندین شاخه از قبیل: هنر، ورزش، تفریح، خبر و … تقسیم بندی شده و تمامی این شاخه ها نیز به چندین زیر شاخه تقسیم می شوند. مثلاً شاخه هنر به زیرشاخه های موسیقی، سینما، نقاشی و… تقسـیم می شود و خود این زیرشاخه ها نیز به زیرشاخه های دیگری تقسیم می شوند.

صاحب یک سند موظف است آن را با توضیحـات کافی که در ویراستارهـای ویژه درج می شود در فهرسـت دایرکتوری متناسب با آن سند درج کند. در این روش، کاربران شانس بیشتری برای یافتن نتیجه مطلوب خواهند داشت. این روش ممکن است برای برخی کاربران آماتور راضی کننده نباشد زیرا این کاربران علاقه ای به جلو رفتن در میان شاخه ها و زیرشاخه ها را ندارند[۷].

برخی از مزیت های موتورهای جستجو بر اساس فهرست راهنمای موضوعی عبارتند از[۷ و ۵۰]:

• کیفیت بهتر اطلاعات به علت نمایه سازی آنها توسط انسان
• دسترسی بهتر به اطلاعات مرتبط
• صرف زمان کمتر برای دسترسی به اطلاعات
• سهولت مرور و بازیابی اطلاعات

این موتورهای جستجو دارای نقاط ضعفی نیز می باشند که می توان به موارد زیر اشاره نمود[۷ و ۵۰]:

• در سازماندهی اختیاری منابع که روش اصلی موتورهای راهنما است، یک موتور راهنما ممکن است منابع را به گونه‌ای طبقه‌بندی کند که متفاوت از موتور راهنمای دیگر باشد. به این ترتیب نمی‌توان از یک الگوی واحد در همه موتورهای راهنما برای ارزیابی استفاده کرد.
• انتخاب، رتبه‌بندی و طبقه‌بندی صفحات وقت‌گیر و هزینه زیادی را تحمیل می‌کند. به این ترتیب نه‌تنها نمی‌توان منابع جدید را به سرعت اضافه نمود، در نتیجه منابع بازیابی شده از موتورهای جستجو روزآمد نیستند.
• افراد با ذهینت خود در رابطه با مفید بودن یا نبودن منابع تصمیم‌گیری می‌کنند، به این ترتیب آنچه که از طرف یک نفر ممکن است مفید باشد از طرف شخص دیگر ممکن است مفید نبوده و در راهنما قرار نگیرد.
• پایگاه های اطلاعاتی آنها اندک است.
• روز آمدی آنها نسبتا دیر انجام می شود.
• پوشش کم اطلاعات موجود در وب.
• نیاز به آگاهی از ساختار سلسله مراتب موضوعی علوم.

تعداد موتورهای راهنما در مقایسه با سایر موتورهای جستجو زیاد نمی‌باشد ولی مهم ترین آن‌ها عبارتند از:

• Galaxy (http://galaxy/.Com)
• HotBot Directory (http://hotbot/. Lycos.Com)
• LookSmart (http://www/.looksmart.Com)
• Open Directory Project (http://dmoz/.Org)
• Yahoo! (http://www/.yahoo.Com)
• Google Directory (www. google.Com)

۲-۲-۳ موتورهای جستجوی مبتنی بر خزنده

در این نوع از موتورهای جستجوگر، کار جمع آوری اطلاعات بر عهده خزنده ها است. در حالت کلی زمانی که صحبت از موتور جستجو می‌شود مقصود این نوع آن است. این نوع از موتورهای جستجو در واقع به صورت هوشمند پهنه وب را پیمایش، مجموعه اسناد و پرونده ها را دریافت و رده بندی می کنند. بررسی آیتـم های مـورد جستجـو کاربران بر اسـاس شاخـص های تهیه شده صـورت می گیرد. فرایند های دریافـت، ذخیـره، رده بنـدی و شاخص دهی بر اسـاس الگوریتـم ها و به صـورت خودکار انجـام می شود.

پایگاه داده این نوع از موتورهای جستجوگر بزرگتر از سایر انواع است و اطلاعاتی را که آنها ارائه می‌دهند معمولاً بروزتر می‌باشد. عملیات بروز رسانی و گستـرش پایگاه داده موتور جستجـوگر از یک هفتـه تا چند ماه به طول می‌ انجامد. خزنده ها، هیچ گاه از کار نمی‌ایستند و به طور مداوم به جمع آوری اطلاعات مشغول هستند. ممکن است اطلاعات جمع آوری شده توسط آن ها از صفحات جدیدی باشد و یا اطلاعات بروز شده از صفحاتی باشد که قبلا هم به آنها مراجعه کرده اند[۵۰ و ۳۱].

موتورهای جستجوی مبتنی بر خزنده در مقایسه با راهنماهای موضوعی دارای پایگاه های اطلاعاتی بزرگی هستند. این نوع از موتورهای جستجو، بهترین گزینه برای جستجوهای ترکیبی محتوا/کلیدواژه هستند و اطلاعات روزآمدی را در اختیار کاربران قرار می دهد. محدودیت جستجو بر اساس تاریخ، نوع قالب، رشته و …، جستجوی حجم عظیمی از اطلاعات در مدت زمان اندک و کنترل در طول جستجو که در موارد لزوم بتوان عبارات جستجو را ترکیب نمود، را می توان از دیگر مزایای این نوع از موتورهای جستجو به شمار آورد.

موتورهای جستجوی مبتنی بر خزنده دارای معایبی نیز می باشند که می توان به مواردی از قبیل: دشواری یافتن موارد موردنـظر به دلیل نداشتن دسته بنـدی های موضوعـی، بازیابی های نامرتبـط، متفـاوت