CRAWLER

[tsachi2301]

CRAWLER

היי מה המצב
אני בונה מערכת שסורקת את האינטרנט
הייתי מעוניין לשמוע הצעות/כיוונים לאינדוקס המידע
או אם משהו יודע איך בונים ארכיטקטורה של טבלאות שמכילות את המידע של כל אתר
כדי שאחר כך משתמש יוכל להזין מילות חיפוש ולקבל רשומות של אתרים
תודה

 

[i t a i b]

פירוט

על מנת שנוכל לסייע לך , מציע שתפרט יותר על המידע שאתה רוצה לשמור ב- DB.

 

[tsachi2301]

מידע

אני רוצה לאנדקס את התוכן
אני לא מדבר על TITLE ותגיות META
&nbsp
אני רוצה לקחת את התוכן של העמוד ולפזר אותו ב DB
ככה שמתי שמשתמש מכניס מילות חיפוש אני יוכל להריץ בדיקה בטבלאות שייצרתי
ולתת לו רשימה של דומיינים
&nbsp
&nbsp

 

[tsachi2301]

הקפצה

מה המצב חברה יש למשהו כיוון?

תודה

 

[i t a i b]

FTS

מה דעתך על FTS?
https://msdn.microsoft.com/library/ms142571.aspx