Взгляд изнутри: как эффективно управлять большими языковыми моделями
![Анализ весов внимания после softmax для задачи анализа тональности SST-2 демонстрирует, что правильно классифицированные примеры позитивной тональности проявляют выраженную концентрацию внимания на поздних промежуточных слоях ([latex]L17-L28[/latex]), в то время как примеры с негативной тональностью характеризуются концентрацией весов внимания на слоях эмбеддингов и финальном слое ([latex]L0, L28[/latex]), что указывает на различия в стратегиях обработки информации в зависимости от тональности и корректности предсказания.](https://arxiv.org/html/2601.13288v1/x3.png)
Новое исследование предлагает метод выборочного анализа внутренних состояний языковых моделей для быстрой и экономичной классификации и модерации контента.
Обучение агентов на опыте: к пониманию мира
Новый подход позволяет искусственным интеллектам улучшать свою ориентацию в физическом мире и планировать действия, основываясь на накопленных знаниях и исправлении ошибок.
Беркшир и ИИ: Что увидел Баффет, а что увидим мы?
В общем, Berkshire Hathaway, его инвестиционный фонд, скупил акций Alphabet почти на 6 миллиардов долларов. Вроде бы, немного, учитывая размеры фонда, но достаточно, чтобы заставить нас, аналитиков, приподнять брови. Он всегда говорил, что инвестирует только в то, что понимает. И вот вопрос: понимает ли он ИИ? Или он просто решил, что если все вокруг сходят с ума по искусственному интеллекту, то и ему нужно в этом участвовать? Ну, знаете, как в плохом фильме, где все делают глупости, и тебе приходится делать то же самое, чтобы не выделяться.
Децентрализованная оптимизация в условиях шума: новый алгоритм для сложных сетей
![На неориентированной сети Эрдеша - Реньи сравнительный анализ алгоритмов DNSGDm, DSGT и GTNSGDm демонстрирует, что при [latex]n=8[/latex] и [latex]K\in\{1,2,3\}[/latex], а также при [latex]n\in\{1,2,4,8\}[/latex] и [latex]K=1[/latex], наблюдается различная эффективность предложенных методов оптимизации.](https://arxiv.org/html/2601.11435v1/x14.png)
Исследование представляет новый алгоритм DNSGD-PD, позволяющий эффективно оптимизировать распределенные системы даже при наличии сильных помех и сложных связей между узлами.
Гавайские Электрические Акции: Что за Неприятность?
Похоже, господин Jefferies, а точнее его подмастерье, господин Julian Dumoulin-Smith, решил, что пришло время избавиться от акций Hawaiian Electric. Словно он увидел там не золото, а какую-нибудь гавайскую грязь. Вместо рекомендации «покупать», он вдруг решил, что лучше «продавать». Что ж, право каждого.