Gal Kenigsfield retweeted
לפי הבנצ׳מארק להלן דיפסיק 4.1 פלאש החדש מנצח את GPT-6 Sol ביכולות התקפיות.
מחכה לתגובת האיש שלנו באירוע (@alono88)
We found DeepSeek V4.1 Flash 1017 beats GPT 6 Sol on our multi-step offensive cybersecurity task. Sol was tested via the Daybreak trusted access program.
We have been building a cybersecurity benchmark based on simulated corporate networks. This is a valuable indicator for the cyber-risk a model poses if in the hands of a bad actor. We plan to make the full evaluation public in the coming weeks but wanted to share our first immediate finding here.
אז אני התכוננתי לשבוע של 15 מעלות כי זה מה שהיה כשיצאתי לדרך הגעתי לאוסטרליה יומיים אחרי ויש שרב
כיף
צוקרברג אמר משהו בדרך אגב בראיון לאחרונה אשתדל לצטט
יש לנו תשתית משלנו וכרטיסים של h100 הם לך עדיין תשתית מאוד רלוונטית גם למודלים הנוכחיים
יתרה מכך מי שרוצה היום לעשות סרבינג למודלים בגודל של 9 מיליארד פרמטרים נניח יכול לעשות את זה על כרטיס בשם l4 עם ביצועים לא רעים
ממתי הוא? 2023
אם הביצועים לא כאלה חשובים אפשר גם על t4 וזה גבולי
וזה בכלל כרטיס מ 2019
ולשאלתכם אלה הכרטיסים המובילים היום בכל ספקיות הענן לכל האפליקציות קצה
אז עצירה של הקאפאקס היא גם הגיונית וגם עם היתכנות גבוההה אם הביקוש יעלה לאט יותר
לפי JPM, הקאפקס של ההיפרסקיילרס צפוי להגיע לכ־1.5 טריליון דולר ב־2027, צמיחה של כ־70%, עם ״בור״ מימוני של כ־430 מיליארד דולר ב-2027 יחד עם בור נוסף של כ־370 מיליארד דולר ב-2028, מדובר בפער מימוני מצטבר של כ־800 מיליארד דולר.
בהמשך הם מניחים גידול של 19% בלבד בקאפקס, למרות שהחברות ממשיכות לדבר בשיחות הוועידה על המשך גידול משמעותי בהשקעות. עדיין נשארו כמה שאלות פה, 1: האם באמת נראה האטה כל כך חדה בקצב הצמיחה, או שהתחזיות עדיין שמרניות מדי? וכמובן, מאיפה יגיע הכסף? התזרים מפעילות כבר לא מכסה את מלוא ההשקעות, עליית התשואות מייקרת את החוב, וגם גיוסי הון הם אתגר.
מרגש 💕🇮🇱
הכירו את בוריס שטונדה -
שלוש שנים לאחר שנפצע אנושות בלחימה בבית חאנון ואיבד את רגלו הימנית מעל הברך, בוריס שטונדה חצה היום (ראשון) את קו הסיום של אליפות העולם באיש ברזל בקונה, הוואי, כשהוא עטוף בדגל ישראל.
שטונדה השלים את אחת מתחרויות הסבולת המאתגרות בעולם בזמן כולל של 16:33:54 שעות, והפך לישראלי קטוע הרגל הראשון שמסיים את המסלול בקונה.
גאווה ענקית! 🇮🇱
אחת הבעיות הקשות שצורת העבודה החדשה מייצרת היא אובדן היכולת לחשיבה ביקורתית
אה בוא נקבל את מה שקלוד אומר בתור האורים והתומים שלנו
אנשים שלא יראו חשיבה ביקורתית הם אנשים שיאבדו את עבודתם ראשונים
יצא לכם לפגוש דבר כזה
חבר מנסה לערבב את אופוס אחרי שהוא חסם אותו
אז ההארנס אומר, טוב עם 5.5 לא יעבוד בגלל הסייפגארדס בוא נעבור ל 4.8 ואני אעזור לך
תראו את ההבדל בין תל אביב לחיפה
מבחינת איכות החיים תל אביב יותר גבוהה, לא חושב שבכזה הרבה, לא יודע מה המידה בגרף
מבחינת עלות חיפה עיר ממוצעת בישראל
כלומר כמובן לא זול פה וגם האיכות חיים שלנו לא בטופ
אבל לא כל מקום בארץ הוא בטופ מחירים בעולם כמו שחושבים
אגב באמת לא יודע מה המדדים לאיכות חיים פה, אבל מנסיון ברלין עיר פי מאה יותר נוחה מתל אביב וגם הרבה יותר זולה
אז מעניין אותי פרמטרי המדידה
חודש לתוך התהליך
שלושה אימוני ארבע על ארבע בשבוע
ועוד אחד או שניים של 30 דקות הליכת אינטרוולים ועלינו טיפה
שוב ברור לי שהמספר לא מדוייק, אבל למכשיר יש קליברציה כלומר המגמה פה היא החשובה
המטרה שלי היא להיות מעל 50 עד שאני חוזר מהפציעה עוד 3-4 שבועות
נכנסתי למאורת ארנב אתמול עם הצ׳אט על העץ המשפחתי שלי
ידעתי שהמשפחה שלי בגרמניה הייתה מאוד עמידה ושלטה במפעלים ליצור נייר
הצ׳אט הפתיע אותי ושלף לי תיעוד שהסבא רבא שלי ואחיו היו בעלים של חברת כריה ו…חכו לזה…
רכבות במזרח גרמניה באזור שחיבר בין גרמניה לפולין
יותר מזה הוא מצא תיעוד של החרמה של החברה ב 1938
ברכות על הגיוס
אבל הגנות על אייג׳נטים ומפני אייג׳נטים לא תגיע רק דרך ניטור הפרומפטים והתוצרים של המודל וההארנס
במיוחד לא בעידן של צמיחה במודלים הפתוחים
"כולם הסתכלו על קלוד קוד ו-Cursor, ופתאום צץ תחום חדש": הסטארטאפ שמגייס שוב תוך פחות משנה
geektime.co.il/rein-security…
אני באירוע השקת בית הלוחם אשדוד
מתחם מדהים לשיקום פצועי מלחמות ישראל בדרום
נתון אחד מעניין שעולה שוב ושוב
מלחמת חרבות ברזל הביאה איתה גידול של 50% בפצועים בגוף ובנפש
אני אחד מהם
אחד מיני רבים וטובים ששילמו כדי שעתידנו במדינה הזאת יהיה טוב יותר
אתמול נמנעת מהרשתות החברתיות כי שביעי לאוקטובר
כולי תקווה שזה לא יהיה לחינם ושהבנות שלי ושלכם יגדלו פה בשלום
🇮🇱❤️
Gal Kenigsfield retweeted
Three years ago today:
1,200 murdered. 251 taken hostage. The deadliest day for Jews since the Holocaust.
Since then, antisemitism hasn't returned. It's exploded. Attacked in the streets. Hunted on campuses. Murdered from Washington to Sydney. For one reason: being Jewish.
October 7th didn't create this hatred, it revealed it.
I'm raising my daughters to be proud Jews.
Loud. Visible. Unapologetic.
We will not hide 💙
אפשר לתת הרבה פרשנויות למהלך הזה
בסוף מי שמקשיב לאילון יודע שהמטרה שלו היא לייצר super app
והוא קנה את טוויטר כרשת הפצה
אני מפרש את השימוש בכמה דרכים
1. עם תשתית נכונה אילון בונה פה מערכת זיקוק מידע עבור גרוק שיאפשר לו להתגבר על הפיגור שלו בדאטה, הוא יעשה a/b עם שאילתות יקבל דאטה מדורג עבור מודלים ויוכל בסוף להשתמש בזה לבנות עוד מודל משל עצמו
2. הוא מבין שפיתוח מודל הוא מירוץ לתחתית והוא צריך לשלוט על מקומות אחרים בפירמידה
יש לו תשתית חומרה חזקה, יש לו רשת הפצה טובה יחסית למשתמשים, יש לו אקוסיסטם גם בטוויטר וגם ברכבי טסלה ויש לו סינדיקציה של מפרסמים באיקס
בסופו של דבר בלחיצת כפתור הוא יכול להתחיל תהליך דיסטילציה, לשפר את גרוק ולהחליף את המודלים הקיימים
או שהוא יכול לנהל איתם משא ומתן על המחיר כדי להוריד עלויות כי הוא שולט על הפצה גדולה יחסית
בכל מקרה אם גרוק בוט תופס אילון מנצח
אני חושב שבסופו של דבר עבור הספקיות ענן והמעבדות צריכות הזיכרון לא ירדו
עבור סרבינג של מודלי open source בסוף הן יגיעו לסטורציה
עכשיו נשאלת השאלה כמה אפליקציות חומרתיות יקומו ויצרכו Dram
If the market paid $MU the same multiple it pays $NVDA (15x Forward) then..
Micron would simply be at $3,210 today.
But the market is holding two beliefs at once:
AI processors keep growing for years but..
The memory packaged right next to them collapses.
Both can't be true. And it's not just $NVDA. If memory demand falls hard, $AMD CPUs and $AVGO ASICs fall hard with it. You can't ship one without the other. They are literally bonded together in the same substrate.
Here's what the market doesn't realize.
AI isn't just compute (not your desktop PC). It's an actual Intelligence (Basically Your Brain x Amplified). It thinks, and better thinking needs more context. Longer memory and bigger windows let it think bigger and more intelligently across more knowledge domains.
We have plenty of compute. What we don't have is enough memory bandwidth to feed it.
Think of your brain. Compute and memory have to balance each other. You can't accelerate one part of your brain and expect the whole thing to perform accordingly. What do you think happens memory shortage on your brain?
Basically, Alzheimer's in worst cases.
אני מאוד מסכים עם האמירה הזאת
שם גם לדעתי נמצא בסיכון הכי גדול שלנו
מי שבין תהליכי דיסטילציה מבין את החשש שלי
Yann LeCun deyir: ən qabaqcıl AI modellərini öyrətmək çox baha başa gəlir, amma onları distillə edib kiçik versiya çıxarmaq ucuzdur. Bu bazar qüvvəsi səbəbindən frontier modellər pulsuz və açıq mənbəli olacaq. Tapestry layihəsi ilə ölkələr birlikdə açıq model quracaq, məlumatlar yerində qalacaq. Gələcəkdə AI daha açıq, suveren və əlçatan olacaq.
אז בנושא הזה יש בלוג פוסט מאוד מעניין של אירגולר
בו הם מראים שמודלים יודעים לבנות לעצמם דאטה לאימון ולאמן את עצמם אם יש להם גישה למשקולות שלהם
לכן אני לא רואה סיבה שהם לא יצליחו לייצר לעצמם גם את ההארנס
לכן אני חושב שהמודל והבטיחות שלו הם עדיין הליבה
מצרף לינק לבלוג בתגובה הראשונה
ביליתי כמה שעות אצל אנטרופיק בסאן פרנסיסקו (פגישות מעוררות מחשבה),ובואו נדבר על ההארנס מול המודל.
זה לא סוד שאני לאחרונה חושבת יותר ויותר שהשכבה הנכונה להשקיע בה היא ההארנס, ושהיא חשובה יותר מהמודל עצמו. מחקרים כמו זה של ברקלי שמראים ששכבת ההארנס משפיעה עד 70 אחוז יותר מהמודל על האיכות והמחיר לדוגמא מחזקים את המחשבה שלי.
אנטרופיק מצידם חושבים שהנקודה בזמן שאנחנו נמצאים בה היא כמו פרומפט אנגנירינג של לפני שנה וחצי, רק עם הארנסים וknowledge graph. לטענתם, בדיוק כמו שנוצר לרגע מקצוע של פרומפט אינגנירינג ומהר מאוד המודלים הפכו להיות אלו שכותבים את הפרומפטים הכי טוב, כך יקרה גם עם השכבות הנוספות שאנחנו כרגע מדגישים (זכרון, קונטקסט וכלים). קרי, ההארנס הולך ״להיבלע״ לתוך המודל.
מודה שהם גרמו לי לתהות מחדש, צריך לזכור שהם רואים חצי שנה קדימה לפחות, ואני מאמינה שהם רואים את ההשפעה על ההארנסים שהם בעצמם בנו (כמו קלוד קוד).
יאללה טוויטר, מה דעתכם?




























