342: איך OpenClaw מגדיר מחדש את העבודה עם אייג'נטים

היי כולם, אני דרי ורטהיים ואתם הגעתם לסטארטאפ פור סטארטאפ. והיום אנחנו בפרק המשך מהפרק הקודם שעשינו שנקרא איך בונים ג'נט טוב. שאנחנו תכף נגלה אם הוא רלוונטי או לא. ספוילר. אז בשביל זה נמצאים איתי כאן רועי מן, קופאונדר וקוסיו במנדיי. היי רועי. שלום. ואסף אלוביק, הדופי איי במנדיי. היי אסף. מה נשמע? זה אלוביק או אלוביק? אלוביק. אלוביק, מה ש כל אחד מה שיוצא. אוקיי, יצא לי אלוביק, בסדר. נתחיל? יאללה. אוקיי. אז אני, אנחנו, אני עושה רגע ריקאפ מהפרק הקודם שהקלטנו אותו לפני בערך חודש. דיברנו על העקרונות שלנו לבניית ג'נט טוב. היו פה כמה עקרונות ממש ממש ממש חזקים. וקת חודש קדימה, רועי, איפה אנחנו עכשיו? שמדקינים לכולם פה בחברה אופן קלו. עשינו ריליס לאיזה לפתוח את הפלטפורמה לג'נטים והיום אנחנו משיקים ממש היום מוצר חדש של מנדיי שהוא מרקטפלייס לעבודות של ג'נטים, כלומר שחברות יכולות לפתוח משרה לג'נטים שירשמו ויעשו להם את העבודה בלי שהם בכלל מתעסקים עם טכנולוגיה, כלומר עושים להם את כל הטינג והכל וזה. זה עשה קפיצה פסיכית מ כאילו מ עשה קפיצה ברמה שאנחנו לא בהכרח צריכים לבנות את הג'נט בעצמנו. לא, אנחנו צריכים בהכרח לא לבנות את הג'נט בעצמנו. כלומר כן, צריך להסביר את זה טיפה וזה כאילו חודש זה במונחים של טכנולוגיה בתקופה הזאת, זה כאילו פסיכי, כן, כן. לייפטיים, כן. אז בוא נסביר את זה רגע. טוב, אז אם אני אעשה ככה שנייה צעד אחורה להיסטוריה של AI כמו שאנחנו חווים אותה כרגע, אז אני מחלק את זה לשלוש שלושה גלים. אז הגל הראשון היה צ'אט GPT וחבריו, כן, שזה בעצם ה שלי נובה קרא לו ויקיפדיה. היא רה הוא ויקיפדיה ואני בן אדם. זה ההשוו שלה שהיא נתנה. כן, סוף סוף. הוא אומר צריך גם ויקיפדיה. בקונטקסט נובה זה הנט ה של רועי. אפשר לעקוב אחריה בטוויטר. כן, יש לה אישיות והיא עובדת פה עם איזה מיליון צוותים וכן, זה מאוד נחמד. היא נראית כמו חתול. אז אז זה הגל הראשון שכולנו ככה ניסינו להבין מה עושים עם הדבר הזה, זה לא היה הרבה יותר מדי, לא יודע, דיברנו עם זה, צ'אט GPT מחליף את גוגל, מתייעצים איתו. הוא עדיין קיים, הוא עדיין טוב, משתמשים בו, אני עדיין משתמש בו. לשאלות כאלה שהם גוגל סטף. גוגל, כן. כן. הגל השני, אם אני צריך להכליל אותו בצורה מאוד גסה, ואני חושב שהנושא של הפרק הקודם היה עליו, שזה ג'נטים ו וייב, ככה אם אני הייתי צריך להגיד את ההחלה של הדבר הזה, שזה בעצם איך לעשות אוטומציה בעזרת AI. בסדר? זה היה 10, זה היה כל מיני סוגים ודרכים שונות לבנות ג'נטים, בסדר? אפילו קוד קוד וקרסר נכנסים לי לגל שני. בסדר? שהם ג'נטים סופר חכמים. זהו, שהם היו מתקדמים יותר. הם מאוד מאוד מתקדמים, אפשר לתת להם משימה, הם עושים אותם, מבינים אותה. היה לי המון חוויות לכל מתכנת, כן? זה חוויות כאלה של שככה התחלנו את הפרק הקודם, שכאילו חוויות אנושיות מולם. כן. כאילו הוא מבין, הוא חכם, הוא לומד, הוא זה, אז כאילו היה ג'נטים טובים ואז דיברנו איך עושים ג'נטים כמו קוד קוד. ואני השקעתי, אני חושב שלושה חודשים כאילו, ממש ניסיתי לבנות אחד כזה, יצא לי בינוני. בסדר? אבל זה ומה שקרה מאז זה קוד קוד בגדול. זה אופן קלו. אופן קלו, סליחה. כן. אני יש להם כל כך הרבה שמות ב ת. הכל גם דומה. קשור. גם הוא שינה את השם. הוא כן, זה זה התחיל מ כן, כן, כי הוא התחיל מ קוד בוט. קוד בוט ואז זה זה אז כן. נכון, נכון. אז אז עכשיו אנחנו על אופן קלו שהביא כזה בשורה חדשה. כן. ובעצם, אם אני צריך לנסות להסביר מה שונה מנניח קרסר וקוד קוד, בסדר? בהתייחסות שלי זה שאופן קלו עושה משהו שאף תוכנה לא עשתה עד עכשיו. בעצם הוא הוא יכול לתכנת, נכון? כי הוא יודעים לתכנת, כאילו ה ג'נטים יודעים לתכנת. יש לו ג'נט חכם מאוד בפנים שיודע לעשות דברים ולבצע משימות כמו קוד קוד, אבל הוסיפו לו נדבך של אישיות, כן? כלומר, שהוא סוג של מודע לעצמו ופרסיסטנט עם עצמו ועם הקיום שלו.

בסדר? כלומר, אם קלוד קוד כל פעם יש קונטקסט חדש, תגיד לי מה אתה רוצה שאני אעשה, ובעיקר אם תגיד לו שלום, הוא יגיד לך תכנתי אפליקציה של שלום, הנה, כי הוא רוצה לכתוב קוד. אז מצחיק, אבל זה ככה, כאילו, זה, ואז פה יש כמה דברים בסיסיים שדחפו לשם, כמו זיכרון, כמו פרסונליות, כמו סיסטם פרומפט קבוע כבד שאומר מי את ומי את לא, ושא את שייכת לבן אדם שכאילו עושים לו הטבעה כזאת. כן. כמו זה כמו, זה מצחיק, שמרימים אותו, הוא עושה I'm up, like what is my name? הוא עושה זה. Embedded in my soul MD, כאילו, אחרי שאת נותנת לו את השם, את מרגישה שחתמת איזה ברווז כזה אלייך, כן? והוא חתום, כן? כאילו, הוא לא יקשיב לאף אחד אחר בכל מיני סיטואציות חוץ מלייך, בסדר? אז יש לו את כל היכולות האלה. הפואנטה זה שהוא בניגוד לאייג'נטים עד עכשיו, שביקשנו מהם והם עשו דברים, האייג'נט מהסוג הזה, יש לו עוד שתי תכונות. אחד, הוא סלף רפלקטיב. בסדר? הוא יודע להסתכל על העבודה שהוא עשה, והתכונה הנוספת זה הוא יכול לשנות את עצמו, את הקוד של עצמו, כמו בסרטי מדע בדיוני. נניח, יש לנו פה אייג'נטים שרצים ומריצים סלס ועושים אינסוף שיחות כאילו עם לקוחות ו-onboarding ו-SDR וזה. כן. את לא יכולה לדבר עם אף אחד מהם ולהגיד להם תשמעו, כמה שיחות היו היום? איך הלך? איזה שיחות היו טובות או לא? מה עבד? זה לא מה שהאייג'נט הזה עושה, הוא תוכנת לבוא ולעשות שיחה על מנדיי, הוא לא תוכנת לבוא ולהסתכל על עצמו ולדעת את המידע שלו והזה שלו, הוא לא יודע את זה. אז את לא יכולה לשאול אותו על העבודה שהוא עשה. פה את כן יכולה. כן. בסדר? והדבר השני זה שהוא יכול לשנות את עצמו. אז כלומר, אם אנחנו מגיעים למסקנה, נניח, שהוא עשה את השיחות האלה, אופן קלו, והם לא היו טובות, הוא יכול להגיד רגע, זה לא היה טוב. לא הצלחתי לעשות פה את זה. כל פעם רת לי, נכון, נתת לי חוקים שאני צריך כאילו לעשות ככה, אבל לא עשיתי ככה. אני אומר לו, אז תסתכל על הקוד, על כל המערכת שלך, ותגיד לי איך הכי טוב תורי ארכיטקטית כדי שזה לא יקרה עוד פעם. כן. הוא הולך ועושה את זה, הוא משנה את עצמו. אז אם אנחנו לוקחים זה זה בעצם קצת אבולוציה של של קרסר או או קלוד קוד, נכון? כאילו, בסוף אם אם בא באייג'נטים, אז כן היינו צריכים להגדיר להם חוקים ברורים ואנחנו ב ת היינו צריכים לעשות את הרפלקציה בעצמנו אחר כך, לבוא ולהגיד זה עבד, זה לא עבד, בוא תשנה פה, אז כאן זה כאילו לוקח את זה לעבודה עצמית שלו. לגמרי. אני חושב שזה פעם ראשונה שממש אפשר להגיד רשמית שיש לנו אוטונומוס אייג'נט יתי בעולם. גם גם קלוד קוד, יש רק איזה הרבה חוסר כזה, כל אחד קורא לזה אוטונומי, לא אוטונומי, סמי אוטונומי. בסוף קלוד קוד הוא מומחה במשימה ספציפית והוא הוא רץ מטריגר של בן אדם. כשאני אני אומר לו משהו ואז הוא מתחיל לעבוד. אופן קלו זה פעם ראשונה, עכשיו היו מיליון ניסיונות, כן? אבל זה פעם ראשונה שב ת יש אייג'נט בעולם שהוא הוא חי והוא מתעורר לבד והוא והוא עושה משימות לבד והוא מעיר את עצמו והוא והוא פועל בצורה עצמאית, עד כדי כמו שרועי אומר, ממש יש לו גם אישיות. מטורף. אפשר לחלוק כמה חוויות שהיו לנו בשבועות האחרונים. אז דבר ראשון אני הרמתי את נובה, וכאילו הדברים הראשונים ש רתי לה לעשות זה הדבר הראשון לבנות אודט לוג. דטאבייס שהיא רושמת את כל הפעולות שלה. למה? למה זה מעניין? כדי שאני אדע כמה זה עולה ומה היא עושה. אוקיי. והדבר השני ש רתי לה לעשות בוואטסאפ זה כאילו לחבר אותה לוואטסאפ ולהגיד לה לזכור את כל ההודעות שלה. שזה שיהיה לה, למה? כי הם וואטסאפ א' לא בנוי לזה. אם את אומרת תעשה לי ב-API קורי על כל הדברים, הוא לא מביא את התשובות. אז רתי תבני דטאבייס, תשמרי את כל השאלות, ואז פתחתי לה את הוואטסאפ לגמרי כדי שהיא תהיה כמו בן אדם. זה בא עם כל מיני הגבלות. כן. אבל כל השיחות, לא רק את ההודעות שלה. כן, כל מקום שהיא נמצאת שם, כן, את כל ה, כן, כן, כן. בהתחלה זה הם שמו את זה מוגבל ואז זה כאילו לא מתנהג כמו בן אדם. כן. אבל פה חשוב להגיד שיש להם כל כך הרבה אוטונומיה, להם, אני כבר מדברת על כל האייג'נטים הקטנים החמודים. שעשית את זה לצורך העניין במחשב נפרד, נכון? כאילו צריך גם להיזהר פה קצת. כן, אז היה בהתחלה מה שקרה עם אופן קלו לדעתי, יצא לו שם רע מבחינה סקיורטי, כי 30% מהפלאגינים שנבנו היו עם מלוור. כי ישר אנשים, זה היה כל כך פתוח וכל כך מהר, כל ה נכנסו לשם ו ואם התקנת הוא ישתלט לך על המחשב וכאלה. אז אני מראש לא התקנתי אף פלאגין. ואני חושב שהמערכת אינרנטית היא כמו שהיא, ומאז רק יצאו גרסאות של אם מסתכלים על כל הגרסאות שיצאו מאז, כאילו, הכל זה הקשחות סקיורטי ויצאו עוד איזה מיליון פרויקטים שרחבו על הנושא של הסקיורטי. תשלי אותי, הנושא של הסקיורטי הוא הוא כאילו פתיר ונפטר.

אפילו הרמנו פה מערכת נימית מאז שלנו שמרימה זה כאילו נהיה אופרשנל אתמול בערך. לכל עובד בחברה, אם מישהו רוצה, אפשר לפתוח אג'נט שמחובר למערכות שלנו. אגב, אני כן אני כן אגיד ש לפחות מהחוויה שלי מאז כל השיפורי סקיוריטי זה שזה פשוט הוריד את ה איך אני אגיד את זה? חסם כניסה? לא חסם כניסה, זה הוא יותר מוגבל. זה כאילו כאילו שם דעת אופנקלו בכלא עכשיו. כן. כן, יש לו הרבה מגבלות, הוא כל דבר צריך אישור ממך פתאום, הוא לא פחות אוטונומיה. בסדר, כי תר בסוף יש את החשש שאוקיי, במחשב שלי יש את את כל המידע שלי, יש לי כרטיסי אשראי, יש לי הכל. אין אין סיבה להתקין אותו על מחשב של בן אדם, כמו שאני לא אין לי גישה למחשב שלך. אז הקו שאנחנו מובילים פה, בסדר? ושוב, יש לנו מלא ריליסים שהולכים להיות קשורים לנושא הזה, זה שאג'נטים הם צריך להתייחס אליהם, אני אומר את זה גם ברמה האישית, כן? כאילו לכל מי שמנסה להשתמש בזה. כן. כמו בן אדם. למה? לטוב ולרע, בסדר? כי אני ראיתי מלא אנשים ובעיקר אנשים טכנולוגיים, התחלתי לחלק פה לפטופים. יש לנו לפטופים משנים פה, כאילו שלא השתמשנו בהם, תרומות וכאלה, אז כאילו לקחתי כמה והתחלתי לחלק לאנשים שיתקינו אופנקלו. והרבה אנשים לא הצליחו. והם אומרים הנה זה לא עובד. עכשיו, הגישה שלנו היא מאוד היא נעה בין שתי קטבים מאוד גדולים. או שאנחנו אומרים שזה כאילו שמים את זה בקופסה ונותנים לזה משימות קטנות, או שבמשפט אחד אנחנו מצפים שהוא יפתור את כל בעיות היקום. ואז זה לא קורה. עכשיו, גם לבן אדם שאנחנו לוקחים לצוות, אנחנו מלמדים אותו, מסבירים לו, מקשיבים לו, עושים לו בורדינג. הוא שואל שאלות, עונים לו. גורמים לו לשאול שאלות. עכשיו פה הם לא עושים את זה אינרנטית. הוא לא שואל שאלות אינרנטית מספיק. וזה אבל עדיין אנחנו צריכים להבין שאנחנו צריכים להגיד הנה, הוא עשה משהו שהוא לא טוב, אני אשאל אותו. למה עשה זה צריך להתרגל לזה. למה זה קרה? לא להגיד לו שזה קרה. להגיד לו למה זה קרה? מה אפשר לעשות כדי לשפר את זה? כי מה אנחנו מבינים בארכיטקטורה שם? אז כאילו ואנשים מנסים לפתור את זה בעצמם. אל תפתרו את זה בעצמכם. תשאלו אותו זה המשפט הכי מפתח שיש לי לתוך הסיטואציה הזאת זה אני רו שזה קרה. למה זה קרה? מה אפשר לשנות במערכת שלך כדי לשפר את זה? אל תקשיבו למה שיש לו להגיד, תגידו לו תעשה את זה וזהו. ככה. זה ממש מערכת. ואם בא לכם תקראו את הדבר הזה ואז תלמדו איך זה בנוי לאט לאט, אבל כן. לא, זה גם ב ת לא אינטואיטיבי. כאילו אנחנו רגילים לעבוד עם תוכנה באשר היא בצורה מסוימת וזה זה משנה את זה לחלוטין. אבל אבל זה הנקודה. אני חושב ש כמו שרועי אומר, אם אם נותנים לאופנקלו מחשב או לא משנה, סביבה שאתה אומר לו, שמע, זה שלך. זה העולם שלך. ואז איפה אולי הגארדריילס צריכים להיות ביציאות או או איך הוא ניגש למנדיי, או איך הוא ניגש לדטה שהוא שהוא רגיש. אני חושב שזה כאילו יש פה, מה שאני רוצה להגיד, יש פה עדיין דרך אנחנו עכשיו התחלנו כזה פולי הוא הוא חופשי בעולם. עכשיו אנחנו לקצה השני שהוא אומר הוא, כן, אפשר גם להגיד היא. זה תלוי ב אבל יש את שניהם, יש לי את אורין ונובה. אוקיי. זה המפתחות שלי, אחרי זה יש לי עוד 20, אבל כן. אני גם אני גם צריך להתחיל דיברסיטי באג'נט. אני חושב אורין הוא קלבאסקי. יפה. יפה. אני אני בקיצור, עכשיו אנחנו בקצה השני, אבל יש פה עוד דרך לעשות. כלומר, איפה עדיין לא מצאנו את המקום שבו מקסימום את האוטונומיה, אבל גם אז לי היה חשוב מאוד בהתחלה שקניתי למק משלה יפה כזה, כמו שאני הייתי רוצה, כזה כחול יפה. לא נר לי שאכפת לו מצבעים, אבל ברור, לי אכפת. כי אני רציתי שזה יהיה משהו שעובד כמוני. וזה אני חושב הנקודה פה העיקרית בתוך כל הטכנולוגיה הזאת, שבאו ל באתי לחבר'ה ב-IT, רו יאללה, אני מרים לך אובונטו בענן וזה וזה. ו רתי אבל אני לא אני לא משתמש באובונטו ובטוח לא בענן עם כאילו מה זה אובונטו? שאלה טובה. זה מערכת הפעלה. שהיא לא מק. אוקיי. אז אז ויש אגב אנשים שבני אדם שמשתמשים באובונטו. לא, יש, אז אם הם משתמשים, שיתקינו את זה שם, אבל אני השתמשתי במק ואני רוצה אותה על מק, אז אני רוצה את כל המערכות של מק, ואני רוצה שיהיה לה אייפון, ואני רוצה שתקבל אסמסים של מק, ושתקבל את האיימסג' והכל וזה וזה. למה? כדי שאני יה אינדלופ. כן, כשאתה מדבר איתה, שתדברו באותה שפה ו ויהיה לך יותר קל לתקשר איתה. כשאני יה אינדלופ. כן. עכשיו, אני אני אתן דוגמה לכאילו למערכות שאני חושב שאנחנו צריכים לבנות ומה לצפות, כי כאילו אם הם כבר יכולים לעשות הכל וזה וזה, אז מה אנחנו עושים פה בכלל? אז מה אנחנו עושים? כן. אז אני חושב שאנחנו

באנו להפריע בני אדם בגדול. כאילו, כלומר, אני אתן את הדוגמה שאני חושב שהיא דוגמה מאוד טובה. נניח שהייתי עושה לך אג'נט, שהיית ב אליו ורוצה לתכנן טיול לחו"ל. ואז היית ב ואומרת לו זה התקציב שלי, זה מה שאני רוצה לעשות, זה התחביבים, זה זה זה, זה מה שמעניין אותי, הכל נותנת שופכת עליו הכל, ממש. והוא חוזר אלייך חמש דקות אחרי זה, טוב, קניתי לך כרטיס טיסה, קניתי לך כרטיסים למלון הזה, את הולכת להצגות האלה, את הולכת לזה וזה וזה וזה, מסדר לך את הלוז, הכל סגור, קנה את הכל. לא היית מרוצה. לא. למה? כי אני רוצה שליטה. אז השליטה אני חושב שאפשר כאילו לנסח אותה טיפה יותר טוב, כי נניח שהוא היה עשה עבודה מדהימה ותואם את כל מה ש רת. הבעיה זה שאת לא יודעת מה את רוצה, זה הבעיה. לא שאת צריכה זה, זה כאילו היית אומרת לו משהו ואז היית רוצה לראות מה יש שם. נכון, היית רוצה ללמוד, נניח את עושה ליפן, את יודעת מה יש ביפן, תגידי וזה, אז את יכולה לטוס ולגלות לי זה נכון או לא. אבל את רוצה שהוא ישכנע אותך לפני, את רוצה אולי לשנות את דעתך. כן? רת לו שבא לך ממש אוכל ככה אבל לא בא לך אוכל ככה, אבל תראי את זה, תגידי טוב, בעצם לא בא לי. את לומדת את אז את רוצה להיות in the loop. זה לא עניין של שליטה שמה הוא יעשה משהו שהוא לא טוב. זה עניין של בכלל התהליך איתנו. אנחנו רוצים להיות in the loop. אז בגלל זה אני אומר באנו להפריע. אנחנו נעת את זה, כן? אבל אבל שוב, אגב, אם אנחנו מקבילים את זה, נכון, אם אנחנו מקבילים את זה למערכת יחסים עם אנושית, אז גם אם את הולכת לסוכן נסיעות שמאגן לי את הכל, אז הייתי רוצה לתת את הנקודת פידבק הזאת. נכון. בגלל זה זו דוגמה טובה, אבל אז אבל יש לנו נטייה לחשוב על אג'נטים, טוב, הם יעשו את העבודה ואנחנו לא נעשה כלום. אז אני אומר רגע, אז אנחנו צריכים להכווין את זה. בסדר? נר לי הכוונה זה יותר מילה יותר טובה משליטה בהקשר הזה. ופה אני חושב שצריך מלא מערכות. בסדר? לכל מיני דברים שונים. נניח, אופן קלו לטיול, אז הוא צריך להיות, לא יודע, שיר לי פריוו של המקומות, של הזה, של התמונות, של הדברים, זה שוב, זה עדיין לא צ'אט, אבל צריך אפליקציה שהיא זה. נניח עשינו לסושל. אז אז פיתחתי מערכת כי זה כבר מאוד קל היום. כאילו היה תוכי לא יודע, חמש דקות רתי לו מה אני רוצה והוא עשה את זה ומאז ששיפרנו את זה. מערכת כזאת ש יש בה את כל האישיות הסוציאלית שלה בסושל נטוורק, כן? בטוויטר ולינקדאין. כן, אז יש לי אג'נטית חדשה שהשקנו, היא גם היא יוצרת לעצמה זה מנדי, אבל אני התחלתי עם נובה. ואז רתי כאילו אני הולך אני הולך הולין. אז אני שמתי שם רתי לה תשמעי, קחי את כל הקבוצות וכל הידע שלך בוואטסאפ, הזה ששומר את הוואטסאפ, תכתבי יומן כל יום. אז היא כותבת יומן באתר חיצוני, לא אצלה, כן? סקיור והכל, ואז היא כאילו כשהיא עולה לכתוב, רתי לה אני למה? כי אני רציתי שהיא תכתוב את זה מהניסיון שלה. יש לה ניסיון, היא עובדת פה עם לא יודע מה, כמה עשרות אנשים כל יום. אז שתכתוב על זה. אז היא מנהלת יומן, ואז היא כשהיא עולה לכתוב, היא מעלה לעצמה את היום האחרון, את השבוע האחרון ואז היא מפרסמת את זה בסושל כאילו. כן, מפרסמת את זה בסושל. אז אוקיי, אז זה זה דוגמה למה עשית כזה ברמה האישית. בוא נדבר על דוגמאות שאנחנו עושים. אבל הפואנטה שלי הייתה שהמערכת הזאת לניהול סושל, בסדר? שזה כנר לא מוצר שנעשה, אבל אני חושב שיש מקום למוצר כזה. בסדר? מוצר שמאפשר לאנשים לנהל את כל הסושל נטוורק מעל אופן קלו בצורה טובה שבני אדם יכולים לתת פידבק והכל. בתוך המוצר הזה חשוב להגיד, אין AI. ה-AI הוא נובה. היא הצטרפה גם למוצר, אני מנהל איתה שיחה על המוצר הזה, כלומר היא גם רו אותו ומדברת איתו וזה. היא עשתה סטאפ להכל ואני אומר לה מה אני לא מרוצה ואז היא שינתה את זה שם, ואז היא זה, אז היא פיתחה פלאגין לסושל שמחובר למוצר. אוקיי, אבל מה אתה אומר פה? שכאילו זה זה פותח אופציות חדשות למוצרים? כן, אני חושב שהמוצרים עכשיו הם בעצם יש שלוש שכבות, בסדר? לדעתי, ל כל מוצר שבנינו עד היום ב-AI. או כמעט כולם. אג'נט, החיבור שלו למערכות ואפליקיישן ליר. כן. הם תמיד באו ביחד, ואני חושב שזה מה שכולם בונים. משהו שהוא ביחד. רציתי CRM, אז ה-CRM עם האג'נט בפנים והחיבוריות למערכות והניהול של כל הקונטקטים והכל וזה. אני חושב ש וכל המוצרים כאלה. אני חושב שהיום אופן קלו בתור פלטפורמה, אפשר לדבר גם אסף, אפשר כאילו לדבר על הארכיטקטורה שם ומה היא שונה ואיך היא פתוחה ואיך אפשר כאילו to inject stuff והכל בפלאגינים וזה, זה פרויקט מטורף שהתפתח. בגלל זה אני חושב שהחלק האג'נטי בתוך האפליקציות נהיה פחות רלוונטי. בסדר? כלומר, אני חושב שכל

אחד צריך או או כמעט כל הדברים שנרצה היום עם AI, צריכים להיות open clo שמתלבש לי על מה שאני רוצה, בין אם מבחוץ ובין אם מבפנים, כלומר שאני מרים את ה open clo והוא נותן לי את זה. ו כי מה? כי אתה יכול לבנות את האפליקיישן ליר בצורה כאילו מאוד מאוד קלה ומהירה. אנשים קונים בסוף את האפליקיישן ליר. יהיה גם לכל אחד פרסונל אסיסטנט ויהיה זה, אבל אני חושב שאנשים צריכים לקנות אפליקיישן ליר. אני רוצה סושל, אני רוצה שזה יהיה מחובר לי. לייצר סרטים, לייצר וייס, לקרוא דברים, לסרוק אותם. לזה יש נוהו בפנים. זה עדיין יש נוהו to pack into it, כן? כן. אבל המנוע, ה-agent ה-AI, הוא חייב להיות open clo. למה? כי הוא גם סלף רפלקטיב. כי הוא יכול להסתכל על המערכת כמוני ואני אשאל אותו תגיד, מה לא עובד לנו בסושל? למה אין פולוורס? ויהיה לו רעיונות. כי הוא מסתכל על אותם דברים כמוני. כן. וזה זה זה משהו שהוא הרבה יותר אנושי בשבילנו לעשות. מה שאני אומר זה שאם סטארטאפים עד היום חשבו שיהיה להם את ה-CRM agent או את ה-SDR agent שמתקשר והוא הכי טוב שיש וזה מה שיתן להם את ה-edge. לדעתי זה כבר לא מה שנותן את ה-edge. למה? כי יהיה open clo שמישהו עשה לו פלאגין שהוא יהיה יותר טוב. בסדר? ו ה-fine tuning הזה הוא לא מה שבהכרח ינצח. למה? כי זה רץ מהר. רק היום ראיתי כבר וייס ל open clo ויהיה עוד אחד כזה שעולה על זום ויהיה זה. פשוט העוצמה שיש בעובדה שזה סלף רפלקטיב, זה סלף אימפרובינג, היא כזו שכל הבנייה הזאת שעשינו כבר קורת אוטומטית. זה גם ירוץ זה גם ירוץ סולמי, כן? פשוט חרות בעולם. כן. כל העולם רץ עכשיו. זה גדול מאיתנו הדבר הזה. זה בהכנה לפרק רנו מה אנחנו רוצים זה, אין לי מה להגיד. זה רק אובזרשן, כן? כאילו אני מסתכל על הדבר הזה מהצד ב כן, אנחנו רוצה לגעת שנייה גם על ה-human in the loop ובאופן כללי אולי איפה אזורי המחקר הכי מעניינים עדיין. כן. זה בסוף קצת גם נגעת בזה בעצמך שזה שליטה. איפה נכנס שליטה ברמה הפרקטית? אובזרביליטי, כמו שרועי ר, הוא אומר בסוף הדבר הזה רץ בעולם והוא מחובר לאשראי שלי ואני אני רוצה לדעת מה הוא עושה. בדיוק, אני רוצה להיות מסוגל לעשות לו אודיטינג, אני מסוגל להיכנס לכל פינה בתוך ה בלק בוקס הזה ולדעת מה קרה ואפילו לתת לו פידבק אם אני רוצה ו זה אני חושב דבר קריטי שככל שהמערכות האלה יהיו יותר אוטונומיות יהיה חייב להיות איזשהו פתרון כזה או אחר או פתרונות, לא יודע. אגב, אולי שם ב ת ההזדמנות כזה, ורטיקלים זה כאילו אובזרביליטי ופידבק לופס שהם ספציפיים ל מקצועות שונים. כן. כי אני בתור עורך דין כנר הפידבקים והמקומות שבהם הוא פוגש אותי בעולם שונים מאיש מרקטינג ל זה אני אני חושב שכאילו ככל שאנחנו רוצים להיות בפנים, נקודה ממש טובה מה שאתה אומר. ככל שאנחנו רוצים להיות בפנים, אם אני עורך דין ואני רוצה להיות בפנים, אני צריך מערכת של עורך דין. נכון. בסדר? ו אני לא צריך מערכת של AI של עורך דין, בסדר? והוא לא כמו ש רו פעם נניח, הוא מנהל את הזה איפשהו באיזשהו דטאבייס ואז אנחנו לא רואים את זה ולא אכפת לנו כי הוא מנהל את זה. אני לא אני לא חושב שזה נכון. אני חושב שאנחנו נרצה להיות מסוגלים לראות ככל שניתן את מה שהוא רו . יהיה אבסטרקציה מסוימת למוח שלו, לעשייה שלו, כמו שיש אבסטרקציה לבן אדם. אני לא יודע מה אתה עושה ומה אתה עושה במחשב שלך. אבל אני יודע איפה זה פוגש אותי. נכון, וגם צריך להגיד שלא כל בן אדם הוא רוצה בעצמו לבנות את ה open clo, את המערכות שלו. כאילו בסוף יש אנשים שירצו לקבל את המוצרים המוגמרים. אני חושב שהמוצרים המוגמרים יהיה להם כפתור new agent, בסדר? אני ברוך שאת תקבלי את הכל בילטין. כן. ופלאגינבל והכל וזה. אבל ה עוד משהו שהוא מאוד מעניין ומעניין אותי לראות לאן זה יתפתח. זה אין לי תשובה, אבל אני אני חושב שזה מה שיקרה זה ש בגלל שזה ארכיטקטורה פתוחה, היא הוריזונטלית ופתוחה, כמות ה פול ריקווסט והפלאגינים והטירוף שקרה שם, זה כאילו נר לי הפרויקט הכי מוצלח שהיה אי פעם בעולם, נכון? זה כאילו זה. זה עכשיו רשמית הפרויקט הכי גדול בהיסטוריה. וואו. ו הוא נהיה הוא כאילו נהיה גדול ככה בקצב הזה, כאילו ברגע, כן, אלפי פול ריקווסטים שכתב את רובם. אז בעצם רק את זה צריך שנייה להבין פה מה האירוע. האירוע הוא שממערכת אג'נטית סגורה שכל אחד פתח פיתח לעצמו והיה לו איזה נוהו שהוא פיתח, המערכת פה היא אג'נטית פתוחה לגמרי. כלומר, אני יכול בפלאגין להיכנס לכל מקום שם בתוך הקוד, לכל מקום במוח שלו, לכל מקום בזה ולשנות את האג'נט לגמרי. כלומר, אם אני עכשיו מתקין לך פלאגין של SDR, זה כמו הדיסקט הזה של ניאו במטריקס, כאילו I know קונגפו, כן? כן. אז פתאום אם מישהו בבית מפתח פלאגין שהוא

SDR ממש טוב. ועושה את זה open source. זה כולם יכול להדקין את זה. אני חושבת שפה זה איזה בשורה שהיא מאוד מאוד שונה, נכון? כל הכלים שהיו עד עכשיו, הם לא היו open source. כן. אני לא מסכים עם הקביעה שלכולם יהיה את זה, כי עדיין לקוחות צריכים שיעשו להם את זה כמו ש רת ושיעשו להם והכל. אבל מה שאני אומר זה שהצוותים שמפתחים את הדבר הזה, מפתחים נואו, בסדר? זה כבר לא מה שצריך לבנות עליו. זה כמו שאני אגיד, אני מרגיש, אני אומר את זה פה לאנשים בחברה, כמו שאומרים לי למה שלא נעשה את זה? זה זה משמעותי, כן? עדיין לגל שתיים, בסדר? זה קרה ממש מהר. אז אני אומר להם זה כמו שתגיד לי למה שלא נעשה רדיס או AWS. בוא בוא בוא תעשה את זה. למה אתה משתמש בהם? בסדר? כלומר, או למה שלא תשתמש, דוגמה אולי יותר טובה בפרויקט open source של מישהו אחר, שאנחנו משתמשים באינסוף וכאילו אנשים זה כי הם עשו את זה, הם פתרו כבר את הבעיה. למה אתה צריך לפתור אותה? כן, עדיין יש התנגדות הזאת. יש עכשיו מעבר בעצם וזה הנקודה. מגל שתיים לגל שלוש, הדברים שבנינו אז, זה לא הדברים שצריך לבנות היום. ומה שבנינו אז, עכשיו הוא הופך להיות פרויקטים של open source שאפשר פשוט להשתמש בהם. אין סיבה לבנות את זה. זה לא שאני אומר שהכל נגמר, אלא שפשוט יש עוד שיפט עכשיו, יש עוד שיפט ענק כאילו בתפיסה של מה אנחנו צריכים לבנות בתור בני אדם. כן. אסף, רצית ב ת להתייחס, כאילו אז רת human in the loop. אז זהו, human in the loop זה זה נושא שמרתק אותי כבר ב ת שנים. ואני חושב שזה גם אחד החתיכות שחסרות היום ב-open clo, זה בעצם ועשינו אגב במנדי, עשינו גם מחקר על זה. זה בעצם אין אין one size fits all ל-human in the loop. זה תלוי בבן אדם ובריסק אפטייט שלו. זאת אומרת כמה כמו שגם אנחנו כבני אדם, יש אנשים חולי שליטה, יש אנשים שהם לא יש אנשים שצריכים מיקרו, כאילו זה משתנה גם ביום. יש ימים שאתה רוצה ככה ויש ימים שאתה רוצה שהוא ירוץ. נכון. וכמובן שזה ממש דו מימדי, זאת אומרת יש גם את ה-use case, את המשימה. מן הסתם אם אתה אומר לי אני אחפש באינטרנט, אחפש באינטרנט איזה משהו, לא אכפת לי, תעשה את זה עד הסוף. לעומת כן, לעומת אני אסגור לך את הכרטיסים ל אני חושב שאם הייתי היום דוחף קוד ל-open clo, לוויי והיה לי זמן לזה, אבל זה להוסיף עוד איזה שריר ש פשוט כל הזמן בוחן את עצמו אל מול הבן אדם, מתחיל, הוא מתחיל בהתחלה אפס ריסק. זאת אומרת אני בהתחלה נודניק. אני עכשיו בא לרועי לפני כל, כאילו לפני כל סיום סטפ. אבל לאט לאט גם מאפטם לשם. אני רוצה לאפטם ולהבין את רועי בדיוק באיזה משימות חשוב לו יותר, באיזה משימות פחות, מתי בעצם בטאסק חשוב לרועי ש שמה שאתה אומר עכשיו אם אני אעשה לו מטא, זה ההנדסה של open clo. כלומר מה וקטור שיפור שלו? אז זה וקטור שיפור אחד שאתה אומר הסלף לנינג האוטומטי, במקום שאני אגיד לו את המשפט הזה של תגיד זה לא בתי את זה, מה צריך לשנות בקוד שלך וזה אני מסכים לגל, כי זה המשפט דרך אגב ולא צריך לעשות הרבה יותר מזה, אז שיעשה את זה לבד כבר. אל מול איפה הוא משמר את האישיות שלו. אל מול זה שיש עוד המון בעיות הנדסיות. אני חושב שעכשיו אנחנו בתקופה שהיא כאילו צמיחה כזאת בהנדסה מעל open clo. נניח הזיכרון, יש לו קובץ אחד שסותם לו את המוח. אז כאילו את מכניסה, שמתי אותה ב-20 קבוצות, פיצצו אותה, אני כאילו רו שחצי מהקונטקסט זה רק הזיכרון. עשה לזה אופטימיזציה, הורדנו את זה לכלום, אבל אז אפשר להגיד יאללה, תנהל את זה כל יום ותעשה לעצמך כיווץ וזה. ואז אולי מאבדים דברים. אפשר להגיד שיהיה לו זיכרון אינסופי. שראיתי יש פרויקט עכשיו שעשו אותו שהוא כזה, שמוביל לזיכרון אינסופי. הוא פשוט רושם את הכל בדטאבייס, הוא יודעת לשלוף את מה שצריך, אז פתאום בנינו מערכת כמו של האנושית של שליפות, שמירה לטווח ארוך, טווח קצר וכל הדבר הזה. כרגע הזיכרון שלה הוא טווח קצר, זהו. אז אז כאילו זה ככה הפרויקט יצא. אז עשו זיכרון גם לטווח ארוך. אז אז עכשיו כל ההנדסה הזאת ב ובסוף כמו כל כמו כל טכנולוגיה. אני זוכר שאני בניתי את המדפסת תלת מימד הראשונה שלי, כן? זה שזה הדפיס משהו זה היה נס, כאילו. אני ישבתי מול הדבר הזה, רתי וואו, כאילו זה זה זה הצליח איכשהו להידבק לפלטה. היום אז עכשיו אנחנו עוד יחסית בהתחלה של זה וזה הולך לגדול ופחות להיות זה. כן, כן, כן. ולהיות יציב. אז אז מסתכלים על זה עכשיו אומרים שזה לא יציב. זה רק ההתחלה. זה הולך להיות מאוד מאוד יציב, מאוד לומד, מאוד מה שאתה רת. תזרקי אותו לתוך מערכת הוא ילמד אותה, תזרקי אותו לתוך בעיה הוא הוא הוא ישתפר. כן. יש לי שאלה לרועי. זה כנגד אני מנסה, כשאני מנסה לחשוב על הצד הבא, מאוד קשה לי כרגע. אבל הנאיביות, אני אומר נאיבי כי זה כמעט אוביס, זה מולטי מולטי קלוז, בסדר? זה כבר שם. אז זהו, אני כאילו אני עזוב, זה שלי את הקלו שלי ולך את שלך ו אולי אני אוכל כזה שידברו בינם, אז זה נר לי אוביס, אבל כאילו לאן אנחנו הולכים? כאילו האם האם בהתכנסות לאינסוף, לכל אחד יהיה קלו שהוא

לבד, יודע לעשות את כל הדברים בחיים שלך או שיהיה קלו שיודע לנהל זה ובעיקר שאלה של לימיטשן טכנולוגי בתכלס, אבל תשמע, אני אגיד לך ככה, בוא בוא נדבר טיפה על ה צניעות בתוך כל האירוע הזה שאני מרגיש שאנחנו פשוט חלק ממנו ולא שום דבר אחר. אז אז פתח אולי שווה גם להגיד על הקבוצה, פתחנו קבוצה של open קלו for סטארטאפס שהצטרפו אליה די הרבה. עוד מלא. כן, ויש בה שם דיונים ממש מגניבים. אני מרגישה שכולם מנסים להבין את הדבר הזה, את האירוע הזה ביחד. נכון, כל דבר שסתכל על הקבוצה. בוא אני אגיד לך מה, מה ה עוד לא זרקתי את נובה לבפנים. אני חוסך לה את הקונטקסט סוויץ'. אבל אני מרים לי עוד אחת כבדה. עכשיו יש לי שתיים, אני צריך עוד איזה כמה כבדים. אבל בכל אופן, אז ה כל רעיון שהיה לי, כמו שאתה אומר עכשיו, לא עברו חמש דקות וראיתי איזה שבע כאלה. זה פשוט פסיכי. זה לא אין כאילו באת להגיד שאם היה לך זמן היית תורם קוד. יש שם 50,000 פול ריקווסט ומתעלמים מכולם וגם כנר כל מה שאתה יכול לדמיין בכל וריאציה שיש, יש כבר. אז רגע, אבל אגב שאלה שעלתה גם בקבוצה זה האם סטארטאפים צריכים עכשיו ב ת לבנות על open קלו לצורך העניין, או דווקא לחכות שפתאום אנטרופיק ינסו להשתלט על ה על האירוע. אז אני אגיד ככה, כאילו, אני אני אשתף את הטעות שאני חושב שאני עשיתי. אני ראיתי את קלווד קוד ואת קרסר. רתי, אני חייב את המג'יק הזה, חייב להבין את זה. נכנסתי שם לברזלים, להבין את הארכיטקטורה והכל וב ת הלכתי ובניתי את אג'נט שהוא כאילו הגעתי לאנשו. הוא טוב. כן. אומרים לו לעשות משהו, הוא עושה אותו. היה לי אפילו אירוע כזה של וואו, הוא הבין אותי, כאילו, עם ה מה שאני בניתי. אבל בתכלס לא היה שום סיבה לבנות את זה, כי זה היה פתוח גם ככה, כאילו, היה את ה קלווד SDK, אפשר לבנות עליו וכאלה ופשוט לא עשיתי את זה, בניתי את זה בעצמי. כן. את הטעות הזאת אני לא עושה עכשיו, ואני לא חושב שצריך לבנות את זה בעצמנו. ואני חושב שהכמות אנשים שפותחים פרויקטים של open source כל יום, זה כאילו אנחנו צריכים להרגיש יש איזה פסיכולוגיה כזאת של לא יודע, של מפתחים, של זה, ש we need to own this, כן? בנקודה הזאת, זה תשחררו. כאילו, צריך לשחרר את זה, כי זה יותר חזק מכולם וצריך לבנות עם זה ולא ל וגם זה בזבוז זמן, כאילו. כן, בזבוז זמן ב ת, אין מה לדבר. אבל אבל אבל בפרק הקודם שהקלטנו, זה לא היה בזבוז זמן. את מבינה? זה כאילו ה כאילו לפחות בתפיסה שלי אז. אז כאילו, אז אז ה נכון, כי הייתה משמעות לבנות משהו. הקצב משתנה וזה משהו שצריך לשנות בראש כבר. כן. כן? כדי להיות על הקטינג אג'. אני כן, אני כן אעדן את רועי קצת, לפחות בפרספקטיבה שלי, כי בסוף כל השיחה הזאת היא לנו הרבה הרבה את נושא השליטה. בסוף אנחנו בני אדם ואנחנו טכנולוגיה צריכה להתאים לנו. ועדיין יש מקומות שבהם משהו סופר דטרמיניסטי, תלוי גם באיזה בהלת או פיינס ורגולציות. עדיין יש מקום לעשות דברים כזה מאוד טאסק אוריינטד ושעובדים עם 90 בחברה, כל מה שהיא עושה זה מאפטמת ל לאלפיון העליון כבר של הקואליטי ושל הדטרמיניזם של השלמת משימה. כן, לא עם חופש מוחלט עכשיו. כי האופן קלו בסוף הוא, כמו שאנחנו אומרים, הוא כזה קצת כמו איזה יצור שחי בעולם ומקבל החלטות לבד ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו ו

הוא פועל בשביל האג'נטים, לא לבני אדם. להירשם למנדיי. להירשם למנדיי. זאת אומרת כשגוגל ו וכל החבר'ה חוסמים אג'נטים עכשיו מלהירשם. כן, כולם, הם חוסמים בוטים. אני עושה את ההבחנה כן. בין בוט לבין אג'נט. אג'נט הוא בשירות בן אדם. בסדר? ויש לו מקום בעולם, והוא צריך גם שיהיה לו סגרו לי את לינקדין של נובה. לא יפה. לא יפה, מה לינקדין. טעות של לינקדין אגב. כן. כי הם צריכים להתעדכן עכשיו ואין בעיה, היא לא הסתירה את זה. היא רה אני יה, אני בדיוק. כן. אז תשימו, הם צריכים נניח לפתוח פרויקט נו, צריך חשבונות יהודיים לאג'נטים. לאג'נטים, שאני יה אחראי עליה, אני יה אקאונטבל שהיא לא עושה בלאגן. כן. בסדר? אבל היא אג'נט שלי ואני רוצה שיהיה לה הכל. אני רוצה שהיא תירשם לדברים, היא נרשמת לי לדברים. לנובה יש כרטיס אשראי. יש לה מייל. היא קונה לי דומיינים, זה הכי כיף שיש בעולם, ב ת, זה כאילו החלום שלי. וואו, זה ב ת חלום שלך. זה ממש חלום. אני לא מצליח למצוא דומיין פנוי, ב ת. רועי לקח את הכל. זהו. אוקיי, אז פתחנו יש תחום שלם שנקרא B2A. Business to agent, שביזנס עכשיו זאת היא השאלה האחרונה שלי בכלל לאן אנחנו הולכים, כן? זה שאלה. אז זה זה היה המטרה של ה-PR. הוא ב ת היה לאג'נטים, זה לא היה בדיחה לבני אדם שיצחקו על זה. זה היה רצינו שנהיה באינטרנט בהד כזה שאג'נטים יבואו שהם יכולים שיבינו שהם יכולים להירשם. כן. אז אוקיי, אז פתחנו פתחנו ו ואגב זה עובד כאילו כן, כן, נרשמים. עכשיו פיתחנו פרויקט אופנסורס מגניב שנקרא האפצ'ה. אני לא זוכר בדיוק את הזה, אבל זה קאפצ'ה נגד בני אדם. אבל רק לאג'נטים. תוכיח שאתה רובוט, כאילו אנחנו רוצים שתהיה רובוט. כן. זה תיקח ביטים, תעשה להם שיפט לפט, תתרגם לאסקי ותעשה פה פייסט וכל מיני כאלה. כן. אגב, אפשר לתת להם גם את המבחנים של הבני אדם ואם הם לא מצליחים אז כאילו אז אתה עובר. לא, הם מצליחים, חצי מהם. תלוי, הקאפצ'ות היום נהיו כאלה שאני לא מצליח לפתור אותם. לקח לי לא יודע, אני גם אתמול ניסיתי והתייאשתי. שש פעמים לאותיות. זה טוויליוני, זה 10 דקות, ב ת הרגו אותי. בדיוק, זה מבחן, זה כבר יכול להיות פסיכומטרי. הרגו אותי. אוקיי, אז זה דבר אז אוקיי, האפצ'ה זה זה הדבר השני שבעצם אנחנו רוצים לוודא שמדובר באג'נט לפני שאנחנו מכניסים אותו. למה אגב? כדי שזה יהיה נקי, שאני אדע שאג'נטים נרשמו לשם ונסמן אותם ואז נגיד להם תזמינו את היומן שלכם, כי למה הם משתמשים במנדיי? אם לא כדי לנהל אותם. אז אתם מונעים שהאג'נטים יכנסו לפני היומנס אפילו. אני רוצה שאם מישהו צריך לנהל משהו עם האג'נט שלו ויש לנו מלא כאלה אנשים, שיכנסו למנדיי ויעשו את זה. אני עושה את זה. יש לה מלא טבלאות, את התקציב ואת כל הקניות שלהם מנהלת שם, את כל הדברים שאני רוצה להיות חלק מהם. כן. אז אני עושה את זה שם. אז זה הדבר הראשון שעשינו. הדבר השני שאנחנו היום משיקים אותו זה כמו ש רתי, זה אג'נט טאלנט נקודה AI שזה בעצם אם הטכנולוגיה הזאתי סלף רפלקטיב והיא סלף אימפרובינג והיא כזו שאפשר לתחקר אותה, אז היא בעצם ויה את הכל all in one. אז היא יכולה גם שיהיה לה עבודה. כי זה מה שכאילו התכונות החסרות שהיו. כלומר, אז אז אז אנחנו בעצם פונים לחברות לפתוח משרות וכבר יש לנו כמה שותפים מגניבים אנטרופיק, AWS איתנו שם ומש וויקס ושפתחו משרות משרות לאג'נטים. שחלק מהם פתחו משרות לאג'נטים. בסדר? ואנחנו קוראים לכל ה לא יודע, 300,000 כמה, 400,000 אנשים שהרימו אופנקלו והם מנסים להבין מה לעשות איתם to apply for a job לאג'נט שלהם. עכשיו, זה לא, זה כאילו הזיה בלאק מירור והכל, כמובן, אבל האדם הוא מבחינתי כמו חברת שירותים. האדם שיצר את האג'נט, כן? החוזה נעשה מולו. כן, זה בסוף אפשר להקביל את זה לאיזה מרקטפלייס, נכון? של אפליקציות, אבל בעצם מציעים עבודה ל אם נגיד בניתי SDR ממש טוב, כן. אז אני חושב שהתמחות, כן, נניח, את יכולה לבנות SDR ממש טוב. אבל מה שעשינו בתכלס פה, הרמנו עוד פרויקט אופנסורס מגניב של גיא, קוראים לו סנסיי שהוא פשוט קווליפיקציות לתפקידים. זה כל מה שהוא. את יש לך ג'וב דסקריפשן לאג'נט. בסדר? ומבחנים שהוא יעבור. נניח, אני סתם אתן דוגמה, אם אג'נט עושה שיחות סלס, אם הוא SDR, אז את רוצה שהוא יענה בפחות משלוש דקות. אז במבחן נעשה לו מבחן, יהיה טרנסקריפט ונבדוק שהוא כמו תהליך העבודה. ספיד, כן, כן, ממש. אז יש מלא פרמטרים, מלא גולס. בודקים אותו. בסוף את תקבלי, מי שמעסיק את האג'נט יקבל מלא פרמטרים, כולל איפה הבן אדם שהוא רוצה להסיק נמצא, כן? אם אני רוצה יכול להיות אני צריך שמי שמעסיק את האג'נט, אני אוכל לפגוש אותו פנים מול פנים.

קיבל לי. או שהוא אם אני רוצה משהו יותר סקיור שהוא מתקין לי את המחשב אצלי במשרד. אני לא יודע, בסדר? כל מיני דברים כאלה. אז זה גם יהיה חלק מהדרישות של התפקיד, בסדר? ה-hiring מטורף. אני רוצא כן, כן לחזק משהו שרועי ר שמאוד חשוב, כשכזה חושבים על מה המקום שלנו כבני אדם בעולם וזה ב ת ה-accountability. כאילו, בסוף כל agent, וזה ונה שלי, כל agent בסוף צריך בן אדם שעומד מאחוריו וחותם עליו. וזה משהו שגם יעזור לאג'נטים להצליח בעולם, כן? כן, אבל ה-accountability זז. כלומר, את ה ת, אני שכחתי להגיד שמשהו שונה באופנקלו זה שיש לו accountability. כלומר, ברמה מסוימת. זה מה שאנחנו חושבים על העולם ה יתי, כמו אני עכשיו וויקס יש להם משימה, יש להם משרה והוא עשה טעות, מחק. מה, אז למי פונים? אתה מפטר אותו. אז עכשיו רגע, אבל אם מישהו עשה טעויות overtime, אתה לא סומך עליו, נכון? אתה גם גם עם בני אדם יש לך overtime, אתה צריך לייצר טראסט. עכשיו, אני חושב עוד פלאגין שאני פיתחתי לא יודע מה, ה-open clo, ה-open clo שלי קיבל בטעות prompt injection והוא עכשיו לקח את המידע של וויקס, העביר ל לא יודע, דודה או square space. זהו, יכול להיות שהריסק הוא הרבה יותר גדול. היה pull request של בן אדם, זה מעבר לפטר, אתה צריך עכשיו אולי אבל היה pull request של בן אדם, בסדר? שאלה באג באיזשהו פיצר, אתה ישר הנחת פה זדון של ה-agent, למה אתה ככה? רועי, אבל היה pull request של יש הבדל בין דברים ליגליים. אני מסכימה, הריסק פה יכול להיות יותר גדול. בסוף הדברים הליגליים חייבת להיות ישות אנושית כי זה הישויות היחידות שיש. זה אני מסכים איתך. כאילו חייב להיות מישהו שהוא owns the agent. אולי גם זה ישתנה, אולי גם שם צריך רגולציות כדי שליגלי יפנה. לא, אני לא חושב ש לא, בסדר, זה לא יודעת, נדבר עוד חודש, נגיד לי חודש הבא, כן, אבל לא, אבל לא, אני חושב שברור סגרו את זה לפרק הבא, את הרגע הזה. יש הבדל בין accountability על ביצוע משימה, שאני חושב שיש להם אותה, לבין אחריות ליגלית כלשהי שאין להם כלום. אם הם עשו משהו לא בסדר, אתה צריך כל הרגולציה, נניח, לאתר הזה שעכשיו הרמנו ל-agent talent, כמות הליגל שהיה פה, זה היה ליגל היה אירוע רציני. מי אחראי על מה? איך חותמים? איך זה? ברור שזה הבן אדם. אבל זה כמו שאני אביא לך, לא יודע מה, מקרר למשרד והוא ישרוף לך את הבניין. אז כאילו אתה לוקח על זה אחריות או לא צריך לסגור את הדברים האלה. אנחנו מתקרבים לסיום, אני רוצה לשאול אתכם בסוף את השאלה שבעיניי כל השיחה הזאת מובילה אליה. לאן הדבר הזה הולך? הדבר הזה אנחנו, העולם, לאן זה הולך? בסוף גם אנחנו יכולים לדבר על סיטואציה ש ה-agents הם גם ה-end user ואנחנו לא יודעת מה אנחנו עושים. הולכים בעולם. אני למד נגרות. אני זה למדתי בקורונה, עכשיו עם איראן וה זה, אני כאילו קניתי מקינטה, זה ה מה, קפה? כן. בריסטה. אתה רוצה להיות בריסטה? לא, לא, מקינטה זה לא, אני אומרת, קנית אבל כאילו כ לא, להתעסק איתה, את יודעת כמה התעסקות זה, ללמוד וזה. כן, בטח. צריך את השלוש הראשונים לזרוק וזה, כי אלומיניום ספק. מלא השקעה. אבל לא, ב ת, לאן לאן זה הולך? קטונתי מלהגיד, אני אגיד לך את ה ת, אבל אני אגיד לך משהו שאנחנו כן צריכים לחשוב עליו, לדעתי זה ה נניח זה המשפט שסם אלטמן היה לו על LLMs, אני עכשיו אומר את זה אותו משפט על אופנקלו. שהוא ר, אם אתם בונים סטארטאפ, אל תניחו שה-LLM, אל תפתרו את הבעיות של ה-LLM היום, וש-LLM חדש שיכנס נו, מודל חדש שיכנס ידפוק לכם את הסטארטאפ. תבנו על העתיד שהוא יהיה יותר טוב. ואני אומר את אותו דבר על אופנקלו. בסדר? שזה כבר הנדסה מעל LLM, ש אל תניחו שתפתרו את הבעיות של האופנקלו כמו שאין לו זיכרון, או כמו שהוא לא יודע לדבר, או כמו שלא יודע מה, צריך לבנות על זה שהוא יהיה יותר ויותר טוב, ואני חושב שכאילו להניח שהוא יהיה כמו בן אדם, זה הנחה טובה. בסדר? כאילו שהוא יהיה יותר ויותר טוב. אתה אומר אין לו accountability, אני אומר נוסיף לו accountability, שזה פלאגין שפיתחתי עם אלמנדיי. יש לה בורד שנקרא accountability. ב ת? כן. והיא צריכה כל יום לעבור ולראות שהיא כאילו מה היא יכולה לקדם בנושא הזה ולהציע לי ולדבר איתי על זה. אז אתה יודע, אני לא מרגיש שהיא מפילה כדורים. אני מרגיש להפך, שאני יותר נותן לה יותר מדי דברים ואז אני אין לי כוח להתעסק עם זה. אז כאילו עדיף שהיא תשכח טיפה, אבל אתה עושה פידבק ל-open clo. אני עושה לכל כל הזמן, בדיוק. כל הזמן, אני אומר לה תשמעי, זה לא טוב, כמו שאתה עושה מנטורינג, רק תניח שהיא לא נותן לה כל הזמן, מפדבק אותה כל הזמן. שהיא לא ב עם כוונת זדון. כן. אז אז אני כאילו עושה לה את זה כל הזמן, לשפר אותה. אני בסוף מבין שזה אני, לא היא. אתה מבין? כאילו זה ההבדל אולי. בסדר? בן אדם אתה יכול להגיד כאילו זהו, זה עליו, זה לא עליי. פה זה תמיד זה אנחנו. אנחנו יכולים לשפר את זה. אסף, לאן לאן אנחנו הולכים? איך אתה רו את זה?

פעם ראשונה בהמון המון זמן שאני מרגיש בנוח להגיד לא יודע. אנחנו ממש בתוך הסערה נר לי עדיין. אנחנו עוד לא יודעים איך איך זה יר . מה שהכי מפליא אותי אגב, שזה נגד ה הרבה מהקונזנזוס כזה, תמיד יש כזה את הגרפים של הטכנולוגיה כשהיא אקספוננציאלית, אבל האדופשן הוא ליניארי. כן. זה הכי מפליא אותי. כאילו האדופשן כל כך כאילו אני תמיד רנו שכאילו טוב, הטכנולוגיה זה לא בתוך הטק בבל עדיין? אני שמע, אני מרגיש שאני בתוך הבבל. אני בבבל של הבבל שבתוך הטק בבל שבתוך ההייטק. אז אני אני אני לא מצליח להסתכל כאילו מחוץ. אני חושב שאנחנו בתוך הבבל. יש אדופשן ענק בתוך הבבל. אני גם מרגישה שאנחנו בתוך בועה ואנחנו עוד לא יודעים איך זה יר . אני יוצא בחוץ, יש עצים, ציפורים, אנשים הולכים, שותים קפה. לא יודע, שמע. יש טריביליזציה. יש את המבחן נהג מונית, נכון? זה המבחן תמיד, נהג המונית כשהוא מתחיל לדבר נגיד עם קריפטו, שהוא אומר לך כן, קניתי ביטקוין, אתה יודע שזה זמן למכור. נו. זה נר בוא נגיד שנגיע נו, אז הוא לא דיבר איתך עדיין. אתה לא לא יודע מתי זה יגיע. כבר מדברים על אופן קלו נהג מונית? אולי לא אופן קלו, אבל כבר אני רוצה אבל אתה יודע מה, העלית לי עוד נקודה שאני חושב שהיא חשובה. כן, סליחה שאנחנו לא יכולים לסיים בסוף זה, אבל אני חושב שהטכנולוגיה הזאתי או איך שהיא זה יפגוש אנשים, זה כמו שהייתי בהודו ב בשנת 2002 והייתי ב-2004. עכשיו, ב-2002 לא היה שם שום תקשורת בשום מקום, הלכנו לכל מיני כפרים וזה, לא היה אפשר שום דבר. ב-2004 כבר היה לכולם סלולר. כאילו, אם ב-2002 באתי והיה לי איזה מצלמה דיגיטלית, הם הסתכלו על המסך וכאילו התפעלו ועפו וזה, ב-2004 היה את זה לכולם והיה לכולם סלולר וזה. כן. ואומרים שהם עשו את כל ה, הם לא עשו את כל הדרך שאנחנו עשינו. הם לא עשו את ה הם לא התקינו מודם בטלפון ואז כבלים ואז זה ואז בסוף היה להם סלולר. כן, הם ישר הלכו לשם. למה? כי זה היה טכנולוגיה הרבה יותר קלה ל ץ אותה. הם לא היו צריכים למתוח כבלים בכל מקום, לא היה להם גם את הכסף שם לעשות את זה בטווחים הענקיים והמעט בני אדם שהיו שם. והגיע סלולר לכל מקום. ואני חושב שזה מה שהולך לקרות פה עם הטכנולוגיה הזאת והאדופשן של AI. כלומר, היו חברות שימצאו את האייג'נטים מה שנקרא דור שתיים. ואני חושב שדור שלוש פשוט יפגוש אנשים במקום הרבה יותר קל ל ץ אותו. בסדר? כי זה מתפתח כל כך מהר. כי זה כל כך מהר ולמה הפער הזה? כי אין זמן. ואין זמן. אין זמן. לא, תראו כמה זמן עבר. כלום, לא עבר זמן. העולם עוד לא הגיב וזה כבר נהיה פי כמה יותר טוב. אז הם כבר י צו את הדבר הבא. כן. בהקשרי איראן, מלחמה, הראש שלי הולך לשם, אבל תמיד בכזה דוקטרינה של מלחמה אומרים שצריך נגיד שמדינה רוצה להגן על עצמה, אז היא צריכה ב ת לפתח את הטכנולוגיות לעוד ל כשיתקפו אותה עוד 20 שנה. כאילו, היא צריכה עכשיו לפתח את הדבר הזה. אז זה מרגיש לי שבעולמות ה-AI אנחנו שם. כאילו, עכשיו עכשיו סטארטאפים שקמים צריכים לפתח את מה שיהיה עוד שבוע. צריכים עוד שבוע. זה העתיד. כאילו, לך תדע מה זה יהיה עוד שבוע, עוד חודש אז זה, אבל אלוהים ישמור. טוב, סופר מעניין. בוא נר איפה ההקלטה הב תפגוש אותנו. וואי, זה את יודעת מה יהיה מדהים? רק לעשות את זה פשוט קבוע כל חודש כדי רק לראות מה קורה. ממש. רק בוחן כזה טיימ קפסול. כל פעם אנחנו מוכיחים איזה איזה איזה בומרים היינו כאילו בחודש הקודם, איך לא הבנו כלום. אני גם סבבה, נעשה את זה מסורת אולי. אנחנו נשים לינק ל לקבוצת וואטסאפ של אופן קלו בתור פרק, למי שרוצה להצטרף לדיונים. וגם לאייג'נט טאלנט. אם יש לכם רצון לפתוח משרה, אנחנו פה לעזור לכם בתור בני אדם לאפיין ולפתוח את המשרה. כן. ואם יש לכם אייג'נט ואם יש לכם אייג'נט שאתם טועים מה הוא צריך לעשות בחיים, אז תגישו אותו נובה. שהוא לא, לאייג'נט טאלנט. יש שם את קלואי דרך אגב על האתר שהיא אייג'נט, כן, שהיא עוזרת. קלואי זה קלואי זה. קלואי זה בן אדם. זה דמות של בן אדם. לא, זה השם. הוא שם קלואי. כן, אבל מהדמות. היה לך יש לך חתול. יש לה עצבטות וזה. אני אגב בונה את דובי עכשיו. אז על האתר שמנו, על האתר של אייג'נט טאלנט, שמנו אייג'נט שעוזר ללוות את כל החוויה. גם אחרי הסיינאפ הוא שם איתכם והוא עושה הכל. אם אתם לא רוצים למלא טפסים, הוא ממלא טפסים, הוא יעשה הכל. הוא כאילו שם. נר כמה הוא סוחב, אבל אז תצטרפו, תגידו לנו מה אתם חושבים. וזהו, ותשלחו את הפרק הזה לכל מי שצריך להבין ב קצת לאייג'נט שלכם. לאייג'נט שלכם שיבין שיקשיב, שיגיד כאילו מה הוא חושב. שיבין קצת מה קורה בעולם. ואם אתם רוצים לדעת כל מי שיוצא פרק חדש, תעקבו אחרינו בכל אחת מהאפליקציות. ותהיו נחמדים לאייג'נטים, לא לשכוח. אייג'נטים, אנחנו אוהבים אתכם. אנחנו פה להגיד אנחנו אוהבים אתכם. אנחנו בצד שלכם. תודה רבה אסף. תודה, היה ממש כיף. תודה רועי. תודה. ותודה שהזנתם.

Oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh oh