Tomasz Sierański (@TSieranski) header
Tomasz Sierański (@TSieranski) profile picture

PhD in Chemical Sciences, enthusiast of computational chemistry and AI applications in science.

Lodz, Poland
Joined March 2020
Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)Photo by Tomasz Sierański (@TSieranski)
Deepseek rządzi 💪
🚨 Kimi K3.1 Scores Below DeepSeek Flash - seems to be bench-maxxed on public benches - competitive on price per task - it's not Fable or Astra class - Deepseek is still king of open-source This is on LiveBench
180
I’m sticking with OpenAI models. GPT-6.1 Sol is better and much cheaper than the new Gemini model. I fully trust LiveBench - it hasn’t led me astray yet ;)
🚨 Gemini Argon 4 Falls Behind Fable And Astra, But Is Ahead of Open Source - Argon 4.0 falls short of GPT 6.1 Sol - ahead of open-source (Deepseek Flash) - much better than Muse Wonder - Muse is marginally better than DeepSeek This is all on our new benchmark, which can't be benchmaxxed easily and reflects real-world usage - LiveBench 2.0
246
Completely agree. I’ve said this many times: using AI to write a text does not mean that human thought is absent from it(!), and it tells us nothing about its quality. AI can simply help express, structure, and refine our own ideas more clearly. What matters is the thinking and the content, not the tool used to put it into words.
Almost 100% of the academic text that I write is AI generated and would be flagged as such. It is not a thoughtless text, prompted to be very precise about my thoughts and then carefully edited. It saves me a lot of time and effort and saves the reader from my poor English.
1
268
Zgadza się. Tym czasem w Łodzi tropią AI w interpelacjach! Nie wiem na jakiej podstawie, bez żadnej walidacji, bez niczego - ot tak. Mają dużo pracy to trzeba sprawdzać czy czasem coś nie jest napisane za pomocą AI. Nawet gdyby rzeczywiście było to chyba nie o to chodzi? Liczy się treść pisma a nie czym zostało napisane / poprawione / wygładzone. tulodz.pl/wiadomosci-lodz/um…
Krótko: Pangram (i większość detektorów) to obecnie bardziej marketing niż rzetelne narzędzie. Daje poczucie bezpieczeństwa, ale generuje fałszywe oskarżenia.
1
518
Once a leader in open-weight AI, now increasingly a European inference platform for Chinese models. GLM-5.3 is the latest example. So much for “European AI”. But I guess that’s one way to go 👀
GLM 5.3, hosted on Mistral, is now in Vibe Code, and the default in the web app. 1M context window and generous limits included. Happy 🛳️!
1
430
Nie wiem czy rozwiązanie tego problemu jest większego czy raczej sposób w jaki został on rozwiązany. Jest on szalony. Użyto niewydanego jeszcze modelu, który OpenAI opisuje jako znacznie mocniejszy od GPT-6 Astra, i systemu około 10 000(!) współpracujących agentów. Sam atak na Naviera–Stokesa trwał około 88 godzin, agenci wymienili około 2,7 mln wiadomości i wygenerowali około 130 miliardów tokenów. Mindfuck
We’re sharing a solution to the Navier-Stokes Millennium Prize Problem, one of the deepest problems at the frontier of mathematics. The proof was produced by a group of agents, using an OpenAI next-generation model significantly more capable than GPT-6 Astra. The problem concerns whether the description of smooth three-dimensional fluid motion modeled by the Navier-Stokes equations can break down. It has remained unresolved for roughly 90 years.
1
1
527
👀
🚨 GPT 6-Astra Is AWESOME, But Is Slightly Below Fable 5.1 - much cheaper and faster than Fable 5.1 - worse on long-running agentic loops - much better at browser use and 3D renders OpenAI is back in the game! Available now on ChatLLM and Abacus AI Agent
2
361
It looks like Astra is available in ChatGPT Chat as a Pro model. It just appeared for me 👀
2
290
GPT-6 Astra wygląda dziwnie w AAI: 61 → 61, mimo wyraźnej poprawy w obniżeniu halucynacji, kodowaniu i długich zadaniach agentowych. Z drugiej strony spada w m.in. GDPval(!), SciCode i AA-LCR. Tutaj jednak uwaga: AAI nie pokazuje całego postępu ponieważ redukcja halucynacji ma małą wagę oraz część testów agentowych w ogóle nie wpływa na końcowy wynik AAI. Więc benchmark może nie doceniać Astry. W każdym razie regresje są(!) i nie pasują za bardzo do mocnej tezy „AGI era” 🫢 Tak czy siak samemu modelem pobawić się niestety jeszcze nie można…. Btw. na ARC-AGI bym nie patrzył. To wg mnie ciekawostka. Benchmark jest bardzo specyficzny i mega wąski. W kontekście AGI nie wiem co on mierzy i czemu się tak w ogóle nazywa 👀
GPT-6 Astra makes significant gains in the Artificial Analysis Coding Agent Index, scoring equal to Fable 5 at lower cost. In the Intelligence Index, it uses fewer tokens than GPT-5.6 Sol for similar performance, but this is outweighed by higher prices Pricing is 2.5x GPT-5.6 Sol’s current prices across the board, up from $4/$20 to $10/$50 per million input/output tokens, with the same 90% discount for cache reads and 25% premium for cache writes. We see distinct stories across our two flagship Indices. In the Artificial Analysis Coding Agent Index, GPT-6 Astra equals Fable 5 at less than half the cost, driven by significant token efficiency gains. In the Artificial Analysis Intelligence Index, GPT-6 Astra is more token efficient than its predecessor for similar performance, but this is offset by the price increase. Artificial Analysis Coding Agent Index - key takeaways: ➤ Rivals top models: In Codex, GPT-6 Astra scores 67 in the Index - approximately equal to Claude Opus 5 and Fable 5 in Claude Code, and Muse Spark 1.3 in Muse Code. Fable 5.1 in Claude Code leads the Index with a score of 70. ➤ 70% more token efficient than GPT-5.6 Sol: GPT-6 Astra sees a substantial improvement in token efficiency, using one third of the tokens compared to GPT-5.6 Sol (max) in the Codex harness, and one fifth of the tokens of Claude Opus 5 (xhigh). Various effort levels of the model occupy the Pareto frontier of token efficiency. ➤ Leads Coding Agent Index cost efficiency frontier: At max effort, GPT-6 Astra costs about the same as GPT-5.6 Sol (max) while scoring 2 points higher on the Index. Per task, the model is less than half the cost of Claude Fable 5, for the same score. Artificial Analysis Intelligence Index - key takeaways: ➤ Sits beside GPT-5.6 Sol in Intelligence: GPT-6 Astra scores equal to GPT-5.6 Sol in the Index at 61. This is 5 points lower than Claude Fable 5.1 (max with fallback). The model also trails Meta’s newly released Muse Spark 1.3 (max). ➤ ~10% fewer output tokens, offset by price increase: GPT-6 Astra defines a new Pareto frontier for Intelligence Index vs Output Tokens per Task - with a ~10% reduction in token use at max effort compared to GPT-5.6 Sol. However, due to the 2.5x increase in price, the model is 75% more expensive per task than its predecessor at max effort. ➤ Hallucinates half as much as GPT-5.6 Sol: GPT-6 Astra sees a large jump in AA-Omniscience, our knowledge and hallucination benchmark. This is driven by a significant decrease in hallucination rate from 92% to 51% at max effort. Unlike some models, this improvement does not come at the cost of accuracy - Astra increased accuracy by 4 points at the same time. ➤ ~80 point gain in AA-Briefcase Elo: GPT-6 Astra improves ~80 points in AA-Briefcase, our frontier long-horizon knowledge work evaluation. Models are tested on multi-week projects, with many linked tasks and thousands of source files. Astra sees a significant increase in both rubric scores and Analytical Quality Elo in AA-Briefcase compared to its predecessor. In the other direction, we observe a reduction in Presentation Quality Elo, where GPT-5.6 Sol (max) still leads all models. ➤ Mixed progress on other evaluations: The model sees a 6 point gain in Humanity’s Last Exam, a long-standing evaluation with emphasis on mathematics, science, and humanities. This is offset by a drop of ~80 Elo points in GDPval-AA v2 - a benchmark we adapted from OpenAI’s dataset measuring economically valuable tasks across 44 occupations. We also observe 2-3 point regressions on other evaluations across a mix of capabilities, including reductions in τ³-Banking (customer support), SciCode (Python problems in a scientific domain), and AA-LCR (long context reasoning over large documents). Congratulations @OpenAI and @sama on the launch!
1
357
Co właściwie ma znaczyć „oznaczanie pism generowanych przez AI”? Czy tylko po to, by je dyskredytować? Właśnie dlatego wymuszanie znaków wodnych to bardzo zły pomysł. Stwarza to realne ryzyko, że wartościowe pismo, które nosi ślady użycia AI, zostanie odrzucone lub rozpatrzone z opóźnieniem. youtube.com/shorts/xLBhF-Lyk…
2
430
Zgadzam się w stu procentach! MIT jest na szczęście ogarnięte. Brawo @WWJedrzejczak za głos rozsądku 💪
MIT rekomenduje zaprzestanie korzystania z detektorów AI! Mam nadzieję, że to pierwszy krok w kierunku końca histerii i rozsądnego korzystania z AI. Wszyscy, którzy próbowali użyć takich detektorów, wiedzą, jak często się one mylą. Oczywiste jest, że musimy opracować jakieś sposoby radzenia sobie z oszustwami z wykorzystaniem AI. Natomiast w rzetelnych zastosowaniach liczy się efekt, a nie to, jaka technologia została do niego zastosowana. Np. w przypadku filmów nie ma znaczenia, jak film został zrobiony, czy efekty to makiety, miniatury czy efekty komputerowe. Liczy się, czy film jest dobry i realistyczny. Technika pozostaje ciekawostką, o której mogą dyskutować zainteresowani. Problem detekcji AI w tekstach to moim zdaniem ukrywanie problemu, że nie chce nam się tekstu czytać. Ważne, aby tekst był wartościowy. To, czy jakiś istotny wynik naukowy został uzyskany z pomocą AI, lub czy ktoś poprawił tekst za pomocą AI, to właśnie taka ciekawostka. W przypadkach, kiedy z jakiegoś powodu istotne jest, aby tekst powstał samodzielnie, można zaproponować prostsze rozwiązania, które to zagwarantują...
1
2
504
Nowy model, ox-alpha-max, względem którego pojawiają się opinie mówiące, że dorównuje GPT-5.6 sol i Fable 5, są raczej zdecydowanie przesadzone. Model zdaje się być znacznie słabszy. Nawet ograniczając benchmark wyłącznie do kodowania ;) Btw. prawdopodobnie to jakiś wariant GLM.
254
Brawo! Tylko nie wiem tak naprawdę jaka jest użyteczność benchmarków ARC-AGI i co one właściwie sprawdzają. Wiadomo, że żadne z tych benchmarków, mimo swojej nazwy, nie jest w stanie zaklasyfikować modelu jako AGI. Osobiście wolę np. Livebench - dzięki niemu jestem w stanie sprawdzić użyteczność modelu w interesujących mnie zastosowaniach.
Our general-purpose coding agent just scored 100% on the ARC-AGI-3 interactive reasoning benchmark. NVIDIA AVO completed all 183 levels across all 25 public environments, figuring out what to do with no instructions, explicit rules, or stated goals.
206
That’s right! We look at everything by anchoring our perspective in the progress and science we have experienced over the last few decades. So, it's hard to shift your mindset. It will also be difficult for some scientists to accept the change in how science will be conducted from now on ;)
The biggest mistake made by almost everyone who claims that curing every disease within a decade, or accomplishing other insanely difficult things like reversing aging in such a short time, is impossible, is assuming that progress over the next 10 years will look something like the past 20 years, perhaps just a little faster. Yet, it will be radically different: the next decade will bring more technological progress than the entire past century. Just think of all the progress we had since 1900 to today happening in the next 10 years or so. That means many things people assume are still 100 or 200 years away could become possible within the next 10–15 years. By 2050, we will likely see more scientific and technological advancement than humanity experienced during the previous 5,000 years of civilization combined! This is the essence of the technological singularity: progress stops feeling linear and becomes so rapid, compounding, and transformative that the future becomes extraordinarily difficult to extrapolate from the past. And that is precisely why the concept is so difficult for people to comprehend, or accept, and also why some of us have such a conviction to keep claiming the impossible!
2
274
A rather unusual release. Gemini 3.7 Flash hasn’t been integrated into the Gemini app in the usual way and is currently only accessible there through Spark. You can ofc, test the model directly in Google AI Studio. Since the model is already available for production use this looks more like a deliberate product decision than a technical limitation. Google may increasingly want to separate its consumer chatbot from its newest agentic models, while also making products such as Spark, and paid AI subscriptions, more attractive. It could also simply reflect how 3.7 Flash is being positioned: less as another general-purpose chatbot model and more as a workhorse for agents, coding and multi-step workflows. Either way, quite an “interesting” rollout strategy 👀
Replying to @Google @GeminiApp
Gemini 3.7 Flash is rolling out today for: 🔵 Developers: Gemini API, @Antigravity, @GoogleAIStudio & @AndroidStudio 🔵 Enterprises: Gemini Enterprise Agent Platform and the Gemini Enterprise app 🔵 Individuals: Gemini Spark for Google AI Pro & Ultra subscribers in the @GeminiApp on desktop and mobile web in countries where Gemini Spark is available *Introductory pricing for Gemini 3.7 Flash expires on December 31, 2026. Starting January 1, 2027, $1.50/1M input tokens and $7.50/1M output tokens will apply. Learn more → goo.gle/4wC9HHq
357
Ludzie oczekują od Google Gemini 3.5 Pro. Ale czy Google musi wypuszczać szybko ten model? W ogóle nie musi tego robić. Może spokojnie pracować nad 4 pro a rozwijać w międzyczasie modele flash i flash lite. Są to modele przyzwoite. Do wielu zadań przeciętnej populacyjnej to co oferują całkowicie wystarcza. Napisanie jakiegoś pisma / stworzenie cv / wygenerowanie grafiki / rozwiązanej jakiegoś zadania z matmy etc. Do tego Google ma AI mode, które do wielu podstawowych rzeczy również jest enough. Nie każdy pracuje w Codex / ChatGPT Worku cz Claude Code.
1B+ people are now using @Geminiapp every month to spark new ideas and get things done. It’s our fastest growing product ever, and our 14th to hit the 1B-user mark. Kudos to @JoshWoodward & the entire Gemini team, and thank you to everyone who has been on this journey with us - much more to come!
1
415
I mamy oficjalny announcement. Dostępny także w web (expert mode). Wg livebench (livebench.ai/#/ ) uogólniając, jest na poziomie zbliżonym do Groka 4.6. Wypada więc gorzej niż Kimi K3 oraz Qwen 3.8 Max. Topka w postaci Fable 5 i GPT-5.6 Sol trzyma się dalej mocno.
We’re launching DeepSeek-V4-Pro today! 🚀 🔷 Major Agent upgrades with strong production gains! 🔷 Flexible reasoning effort for V4-Pro & V4-Flash: low for simple tasks, high for daily Agent workflows, max for complex tasks. 🔷 Native OpenAI Responses API support, optimized for Codex with one-click setup. V4 Pro is now available on app/web. Try it via “Expert Mode”. V4 Pro is also available via API. Model names remain unchanged—please refer to the API docs for setup details.
157
Nie tylko Grok 4.6 jest out, chociaż jeszcze nie w apce. But… mamy “nowego” Deepseek’a ;) Witamy model v4-pro-0813 🥳 Trzeba poczekać na oficjalny announcement. Wg przecieków z benchmarków boost względem v4 preview jest spory, podobnie jak to było w przypadku modelu v4 flash (z preview do 0731). Wygląda, że Kimi K3 nie przebije. Cenowo może jednak zdecydowanie powalczyć - o ile nie zmienią się niedługo ceny API (a już announcement o tym było).
84
What’s the practical value of text watermarking beyond regulatory compliance? Presumably, the point is not to give teachers a magic detector to check whether a student used AI 😅 A watermark may only show that a model touched the text, even if the human wrote it and AI merely edited, translated, or polished it. It also tells us nothing about whether the text is true, misleading, high-quality or responsibly reviewed!
Anthropic says new Claude models will embed invisible watermarks in all generated text, everywhere Claude is offered. The watermark is part of the text, it isn't metadata: "it will travel with the text when it's copied and pasted elsewhere, and may persist through some editing." This starts with models launched on or after August 2, 2026, under an EU AI Act code Anthropic signed. Anthropic is still working on adding it to current models. The rollout is worldwide.
157