برنامه نویسی موتور جستجو

سلام
من می خواهم یک موتور جستجو بنویسم.
با توجه به اینکه با PHP کار می کنم می خواهم با همین زبان این کار را انجام بدهم.
لطفا اگر اطلاعاتی دارید در اختیار من قرار بدهید.
مثلا من الان برای گرفتن اطلاعات از یک وب سایت از تابع Curl استفاده می کنم. آیا برای موتور جستجو هم باید از همین دستورات استفاده کنم یا راه بهتری وجود دارد؟
سوال کلی تر اینکه با PHP بهتر است نوشته شود یا زبان دیگری؟

ممنون