AVeriTeC (NeurIPS 2023): 4,568 real-world fact-checked claims, web-retrieved evidence, four-way labels, temporal-leak-free split.

Two structural gaps: gold answers are frozen but the retrieval surface isn't (two systems a year apart hit different Google), and the not-enough-evidence class rewards weak retrievers — predicting NEI when retrieval fails matches gold by coincidence.

https://benjaminhan.net/posts/20260507-averitec/?utm_source=mastodon&utm_medium=social

#Paper #Benchmark #FactVerification #NeurIPS #AI

Муравьи против трансформеров: старый алгоритм 1992 года, который вернулся

Начну с признания: истории формата «природа оптимизирует лучше людей» меня обычно раздражают, слишком уж часто это все притянуто за уши. Но с муравьями история действительно странная, и мне ее захотелось проверить. Короткая справка по нашему герою. Аргентинский муравей Linepithema humile в миллиметр длиной, с глазами у него все плохо, а в мозге около 250 000 нейронов (у нас, напомню, 86 млрд). Карты местности он не помнит. В 1989 году четверо бельгийских биологов поставили этим муравьям простой эксперимент — гнездо, еда, два мостика, где один длиннее другого в два раза. Через несколько минут вся колония сошлась на короткой ветке в 100% прогонов. И все это без координатора, без плана и без голосования. Через три года этот эксперимент превратится в Ant Colony Optimization — алгоритм, который я сегодня натравлю на классический TSP-бенч и получу 0,10% отставания от оптимума. А в 2023, через 34 года после наблюдений в Брюсселе, тот же алгоритм вернулся на NeurIPS в качестве бэкбона для графовых нейросетей. Что же, приступим.

https://habr.com/ru/companies/selectel/articles/1031574/?utm_source=habrahabr&utm_medium=rss&utm_campaign=1031574

#ACO #задача_коммивояжера #DeepACO #комбинаторная_оптимизация #NeurIPS #графовые_нейросети #стигмергия #selectel #ai #ml

Муравьи против трансформеров: старый алгоритм 1992 года, который вернулся

Начну с признания: истории формата «природа оптимизирует лучше людей» меня обычно раздражают, слишком уж часто это все притянуто за уши. Но с муравьями история действительно странная, и мне ее захотелось проверить. Короткая справка по нашему герою. Аргентинский муравей Linepithema humile в миллиметр длиной, с глазами у него все плохо, а в мозге около 250 000 нейронов (у нас, напомню, 86 млрд). Карты местности он не помнит. В 1989 году четверо бельгийских биологов поставили этим муравьям простой эксперимент — гнездо, еда, два мостика, где один длиннее другого в два раза. Через несколько минут вся колония сошлась на короткой ветке в 100% прогонов. И все это без координатора, без плана и без голосования. Через три года этот эксперимент превратится в Ant Colony Optimization — алгоритм, который я сегодня натравлю на классический TSP-бенч и получу 0,10% отставания от оптимума. А в 2023, через 34 года после наблюдений в Брюсселе, тот же алгоритм вернулся на NeurIPS в качестве бэкбона для графовых нейросетей. Что же, приступим.

https://habr.com/ru/companies/selectel/articles/1031574/

#ACO #задача_коммивояжера #DeepACO #комбинаторная_оптимизация #NeurIPS #графовые_нейросети #стигмергия #selectel #ai #ml

MetaSPO meta-learns a task-agnostic system prompt via a bilevel loop: outer tunes system prompt across tasks, inner tunes per-task user prompts. Generalizes to 14 unseen tasks across 5 domains.

The decomposition is the contribution. Once prompts split into task-agnostic (system) vs task-specific (user), meta-learning follows. System-prompt optimization transfers; user-prompt doesn't.

https://benjaminhan.net/posts/20260430-metaspo-system-prompt-meta-learning/?utm_source=mastodon&utm_medium=social

#LLMs #AI #PromptEngineering #KAIST #NeurIPS

Nature: Boycott of major AI conference exposes a growing US–China divide . “A key Chinese research organization is set to boycott the prestigious NeurIPS conference, which is run by a US-based non-profit organization, after a row over a policy that initially seemed to exclude many Chinese researchers.”

#AIResearch Is Getting Harder to Separate From #Geopolitics

A policy change announced by #NeurIPS ,the world’s leading #AI #research conference, drew widespread backlash from #Chinese researchers this week and then was quickly reversed.
#china #artificialintelligence #politics

https://www.wired.com/story/made-in-china-ai-research-is-starting-to-split-along-geopolitical-lines/

#NeurIPS paper by Merlijn Krale, Eline Bovy, Maris Galesloot, Thiago Simão, and Nils Jansen: On Evaluating Policies for Robust Partially Observable Markov Decision Processes #POMDPs

https://repository.ubn.ru.nl/bitstream/handle/2066/324616/324616.pdf

#TIL about #GPTZero that has built a hallucination check tool which found 100 hallucinated references in #NeurIPS 2025 accepted papers https://gptzero.me/news/neurips/

... and NeurIPS organizers just brushed it off! (sorry for the substack link) https://stevensalzberg.substack.com/p/an-embarrassing-scandal-for-ai-research

#AI #AIslop