פיתוח Web Crawler / זחלן

העולם עובר היום שינוי בקצב מסחרר בזכות או בגלל מהפיכת המידע העצומה שעוברת עלינו. הנגישות למידע גדלה ללא הרף, המידע מגיע ליותר ויותר לקוחות וכמות המידע פשוט אין סופית. בעולם כזה איתור מידע שרלוונטי לנו על פי המודל העסקי שלנו, מיון שלו עריכה שלו לתצורה הרצויה לנו להתראות דוחות או אוטומציה של תהליכים שונים שיאפשרו לנו תגובה מהירה ויעלה לנתונים שאותרו – כל אלה הופכים להיות צורך לעיתים קיומי של עסקים רבים חוצי גבולות כי בעולם של היום, בכפר הגלובלי של המידע והצרכנות, אם לא נדע להתאים את עצמנו נשאר בשוליים או לא נשאר בכלל

מה צריך לשאול כדי לבחור נכון בתכונות crawler מתאים

מה המודל העסקי שלנו – נברר ראשית מה המודל העסקי שלנו ואיזה מידע רלוונטי עבורו. האם המיזם שלנו עוסק במידע? באספקה שלו כשירות? במכירה שלו? או שאנחנו זקוקים ליכולת מיפוי ותגובה מהירה מול מתחרים? המחירים שלה? ההצעות שלהם? או שאנחנו זקוקים למידע מפולח לגבי הלקוחות שלנו, לאתר אותם, לפנות אליהם, לטייב את ההצעה אליהם בזמן אמת, לסרוק את המדיה כדי לבדוק את יעילות הפרסום שלנו ומה הם חושבים עלינו? או שילוב של כל אלה? לאחר שנחדד את כל ההיבטים הללו נוכל להתקדם לשאלה הבאה

מה אנחנו רוצים או צריכים לעשות עם המידע שנאתר?

את הידע שנאתר צריך להמיר לפעולה. לעיתים נסתפק מהערכת התראות שגורם אנושי יטפל בהן. למשל במערכת שמאתרת הפרת זכויות יוצרים נרצה לקבל התראה ונחליט איך לטפל. כך גם לגבי סוגי מידע אחרים כמו מידע עלך תחרות או מידע על לקוחות. במקרים אחרים נרצה מערכת שיודעת גם להגיב, ויכולות להיות רמות שונות של תגובה. יכולה להיות תגבוה של מיון והכוונת מידע – למשל מערכת אתר חדשות מקומיות שיודעת לאתר חדשות ולשבצם כמעט אוטומטית באתר ממוין. יכולה להיות פעולה יזומה של תגובה בזמן אמת – למשל אנחנו סורקים מחירי מתחרים וזמן אמת מעדכנים את מחירי המוצרים באתר שלנו בהתאם להתפתחות רלוונטית. ויכולה להיות פעולה מתוחכמת יותר כמו למשל מלוי דוחות אוטומטי והנעה לפעולה (למשל במקרה של איתור איום)  או פעולה פחות דרמטית אבל נפוצה והיא פניה אוטומטית ללקוח שאותר על פי המאפיינים שונים תוך משלוח הצעות או פרסום ממוין. כלומר לאחר שנאתר את המידע נזקק להגדיר היטב מה אנחנו רוצים שהמערכת תעשה איתו עבורנו.

מה היא הטכנולוגיה והמבנה הטוב ביותר לבצע את מה שצריך

פה אנחנו נכנסים – לאחר שהגדרנו היטב איזה מידע צריך ומה אנחנו רוצים לעשות איתו אנחנו נדאג להעמיד עבורכם את הטכנולוגיה הרלוונטית והכלכלית ביותר לשם איתור המידע והמרתו לפעילות הנדרשות בצורה היעילה ביותר שהגדרנו. ואת כל זה נעטוף בממשק משתמש וממשק ניהול יעיל ונוח לשימוש הן בצד שלכם כאדמיניסטרטורים ומנהלים והן ברמת הלקוח אם נחשף למידע