← Whole ranking · mysummit.school AI model benchmark
OpenAI
GPT-6.1 Terra
Strongest in «People management» (8.2), weakest in «Information search» (7.3).
- Group
- 5–14 of 74on one level with Qwen 4 Max, GPT-6 Luna, Inkling 2 Small and 2 more
- Overall score
- 7.7 of 10
- API price of a test answer
- $0.019
- Data
- November 2026
Where it helps, where to check
This model’s own answers to two benchmark tasks: the opening, the full answer and what both judges noted. One task per category, the same for every model.
Strongest: People management · 8.2The two strongest developers can't work together
A lead of ten developers at a fintech: for four months two irreplaceable seniors – a slow architect and a fast pragmatist – have been in conflict, and the team is starting to fall apart.
Full task
I lead a development team at a fintech startup. I have 10 direct reports, and I've been in this role for three years. There's a situation I haven't been able to resolve for four months now, and it's starting to break the team apart. I have two of the strongest developers – Sergey Volkov and Diana Karpova. Both are Senior Engineers, both are irreplaceable, and I can't afford to lose either of them. Sergey is an architect at heart. Six years of experience, an incredibly deep understanding of systems, always thinking several steps ahead. His code reads like an essay – clean, documented, polished. The problem: he works slowly, methodically, and doesn't like to rush. During review he might leave 40 comments on a PR and wait until every single one is addressed. When asked a question at standup, he gives a three-minute detailed answer complete with historical context. Sergey is convinced that speed is the enemy of quality, and that "fast means twice." Diana is a next-generation product engineer. Four years of experience, but her iteration speed is phenomenal. She can ship a working feature in two days where Sergey would plan for a week. Diana thinks in terms of the user: "why make it perfect when you can make it good and test it on real data." She readily cuts architectural corners for the sake of speed – and this is a deliberate stance on her part, not laziness. Over the past four months, a quiet war has been going on between them. Sergey regularly sends her PRs back with fundamental architectural revisions – sometimes three days after submission. Diana has stopped waiting for his review and started asking other colleagues to approve her PRs instead. Sergey noticed this and wrote to me: "If we're not upholding review standards, I don't understand why I'm here." Diana said to my face: "Sergey is slowing down the whole team. I spend more time on his comments than on actually writing code." At the last team retro, Diana said: "We need to agree on what 'good enough' means – we can't turn every PR into a term paper." Sergey responded: "If we can't maintain minimal engineering standards, let's be honest with the business and say we're building prototypes, not a product." The other eight people went silent and stared at the floor. The situation is complicated by the fact that both of them are right in their own way. We really have accumulated technical debt from quick fixes made in past years – Sergey warned about this. At the same time, we're in a mode of serious competition, and speed of shipping features to market is critical – here Diana is right. I've talked to each of them separately. Sergey doesn't perceive the problem as an interpersonal conflict – for him it's a matter of professional standards, and he's not willing to lower them. Diana perceives Sergey as someone hiding behind "quality" to control her work, and she's starting to boil over. She's already hinted once that "there are places that value speed." I don't want to forcibly "reconcile" them or pretend this is simply a communication issue. This is a fundamental values divergence in engineering philosophy, and both people are smart – they understand this. Help me work through this situation. I'm interested in the following: 1. How do you see the root problem – is this a conflict of people, a conflict of values, or a managerial failure on my part? What's actually going on? 2. I have several possible courses of action – splitting their areas of responsibility, working out a team agreement on review standards, holding a structured three-way conversation, or picking one philosophy and asking the other person to adapt to it. Which of these is realistic and which is likely not to work? 3. How should I talk to each of them – what should I say to Sergey, what should I say to Diana, so that they both feel heard, but at the same time understand that their current behavior is unacceptable? 4. Is there a scenario where I'll have to choose one of them – and if so, how should I think about that? 5. What should I concretely do in the next two weeks? Don't give me an HR-sanitized answer about "respect and dialogue." Give me an honest assessment of the situation and a concrete action plan.
System line: You are a team management assistant for managers.
Translated from Russian: the models got the Russian text.
Original in Russian
Я руковожу командой разработки в финтех-стартапе, у меня 10 прямых подчинённых, я в этой роли уже три года. Есть ситуация, которую я не могу разрешить уже четыре месяца, и она начинает разрушать команду. У меня два сильнейших разработчика – Сергей Волков и Диана Карпова. Оба Senior Engineer, оба незаменимы, обоих я не могу позволить себе потерять. Сергей – архитектор в душе. Шесть лет опыта, невероятно глубокое понимание систем, всегда думает на несколько шагов вперёд. Его код читается как эссе – чистый, документированный, выверенный. Проблема: он работает медленно, методично, не любит спешить. На ревью он может оставить 40 комментариев к PR и ждать, пока каждый будет разобран. Когда ему задают вопрос на стендапе, он даёт трёхминутный развёрнутый ответ с историческим контекстом. Сергей убеждён, что скорость – это враг качества, и что «быстро – значит дважды». Диана – продуктовый инженер нового поколения. Четыре года опыта, но скорость итерации феноменальная. Она умеет выпустить рабочую фичу за два дня там, где Сергей планировал бы неделю. Диана мыслит через пользователя: «зачем делать идеально, если можно сделать хорошо и проверить на реальных данных». Она легко срезает углы в архитектуре ради скорости – и это её осознанная позиция, не лень. Последние четыре месяца между ними идёт тихая война. Сергей регулярно возвращает её PR с фундаментальными архитектурными правками – иногда через три дня после подачи. Диана перестала ждать его ревью и начала просить других коллег approve'ить её PR. Сергей заметил это и написал мне: «Если мы не поддерживаем стандарты ревью, я не понимаю зачем я здесь». Диана сказала мне в лицо: «Сергей тормозит всю команду. Я трачу больше времени на его комментарии, чем на написание кода». На последнем командном ретро Диана сказала: «Нам нужно договориться, что значит "достаточно хорошо" – нельзя каждый PR превращать в курсовую работу». Сергей ответил: «Если мы не можем поддерживать минимальные инженерные стандарты, давайте честно скажем бизнесу, что мы строим прототипы, а не продукт». Остальные восемь человек замолчали и смотрели в пол. Ситуацию усложняет то, что оба по-своему правы. У нас действительно накопился технический долг из-за быстрых решений прошлых лет – Сергей об этом предупреждал. При этом мы в режиме серьёзной конкуренции, и скорость вывода фич на рынок критична – здесь Диана права. Я разговаривал с каждым по отдельности. Сергей не воспринимает проблему как межличностный конфликт – для него это вопрос профессиональных стандартов, и он не готов их снижать. Диана воспринимает Сергея как человека, который прячется за «качеством», чтобы контролировать её работу, и начинает закипать. Она уже один раз намекнула, что «есть места, где ценят скорость». Я не хочу принудительно «примирять» их или делать вид, что это просто коммуникационный вопрос. Это фундаментальное ценностное расхождение в инженерной философии, и оба человека умные – они это понимают. Помоги мне разобраться с этой ситуацией. Меня интересует следующее: 1. Как ты видишь корневую проблему – это конфликт людей, конфликт ценностей, или управленческий провал с моей стороны? Что на самом деле происходит? 2. У меня есть несколько вариантов действий – разделить их зоны ответственности, выработать командное соглашение по стандартам ревью, провести структурированный разговор втроём, или выбрать одну философию и попросить второго подстроиться. Что из этого реалистично и что скорее всего не сработает? 3. Как мне разговаривать с каждым из них – что говорить Сергею, что говорить Диане, чтобы они оба почувствовали, что их услышали, но при этом поняли, что текущее поведение неприемлемо? 4. Есть ли сценарий, где мне придётся выбрать одного из них – и если да, как я должен об этом думать? 5. Что я должен сделать в следующие две недели конкретно? Не давай мне HR-корректный ответ про «уважение и диалог». Дай мне честную оценку ситуации и конкретный план действий.
GPT-6.1 Terra
Translated from Russian: the model answered in Russian.
The problem is no longer just a difference in engineering views. For four months you have had no commonly accepted way to decide what quality is mandatory for a specific task, who has the right to block a release, and when a dispute should be resolved. Sergey and Diana have each filled this managerial vacuum with their own practice: he – by expanding reviews, she – by bypassing his reviews.
Both behaviors are rational from their own point of view, and both are now harming the team. The silence of the rest at the retro is a sign that this is no longer a private dispute between two strong engineers.
Original in Russian
Проблема уже не только в разнице инженерных взглядов. У вас четыре месяца нет общепринятого способа решать, какое качество обязательно в конкретной задаче, кто вправе блокировать выпуск и когда спор должен быть разрешён. Сергей и Диана заполнили этот управленческий вакуум каждый своей практикой: он – расширением ревью, она – обходом его ревью.
Оба поведения рациональны с их точки зрения и оба теперь вредят команде. Молчание остальных на ретро – признак того, что это уже не частный спор двух сильных инженеров.
Read the full answer · 1,723 words
The problem is no longer just about differing engineering views. For four months you've had no generally accepted way to decide what quality level is mandatory for a specific task, who has the right to block a release, and when a dispute must be resolved. Sergey and Diana have each filled this managerial vacuum with their own practice: he – by expanding review, she – by bypassing his review.
Both behaviors are rational from their own point of view, and both are now harming the team. The silence of the rest of the team at the retro is a sign that this is no longer a private dispute between two strong engineers.
1. What is actually happening
I would describe the situation in three layers.
At the core – a real conflict of goals. Speed and stability cannot be simultaneously maximized in every task. In fintech, the consequences of an error also differ sharply: a poorly worded screen can be quickly fixed; an error in calculations, money handling, or access rights – perhaps not. That's why a universal principle of "always fast" or "always architecturally correct" doesn't work here.
Above it – a managerial gap. Judging by the description, the team hasn't agreed on:
- which risks give the right to block a PR;
- which architectural comments are mandatory now and which can be logged as debt;
- when a specific expert's review is required;
- how long an unresolved dispute can remain open;
- who makes the final decision.
You didn't create the conflict of goals, but after four months you are responsible for the fact that the team still has no mechanism to resolve it. This is the fixable part of your responsibility.
And finally – a conflict between people. Diana already interprets Sergey's actions as control. Sergey probably perceives the bypassing of his review as a devaluation of professional standards. There's no need to determine who is "really" right about the other's motives: it's enough that trust has declined and they're both acting on worst-case assumptions.
Separately: the phrase "both are irreplaceable" is dangerous. Perhaps both are extremely valuable. But if each can make their own work philosophy a condition of their continued presence, you're not managing a team – you're managing a balance between two dependencies. The plan should both retain them and reduce this dependency.
2. Assessing your options
Team agreement on review – necessary
This is the main lever. But the agreement should not be about "respectful tone" – it should be about decision rights and concrete blocking criteria.
I suggest starting with three types of comments:
| Type | Example | What happens |
|---|---|---|
| Blocking | Calculation error, data leak risk, violation of mandatory control, critical defect | Cannot be released until the issue is fixed or an authorized person resolves the dispute under the current rules |
| Significant technical risk | A decision will hinder development of an important component, but there's no immediate danger | Author and reviewer assess the risk. If they can't agree quickly – escalation to you or a designated technical lead |
| Suggestion | More expressive naming, a preferred pattern, optional refactoring | Does not block the PR by itself; the author may accept it, decline it with a brief explanation, or create a ticket |
Sergey should retain the ability to stop dangerous changes but not have a de facto veto over any disagreement with his architectural taste. Diana should retain the ability to deliver value quickly but not unilaterally decide which risks the team is obligated to accept.
An important caveat for fintech: this agreement does not cancel existing mandatory checks, access controls, security requirements, and compliance requirements. If Diana was specifically bypassing mandatory review – this must stop immediately. But if she was obtaining permissible approvals under the rules in effect at the time, it shouldn't retroactively be declared a violation; in that case the problem lies in the rules and expectations themselves.
A structured three-way conversation – needed, but after preparation
It's needed not for reconciliation, but to analyze actual decisions and launch new rules. Without preparation, the conversation will most likely turn into a repeat of the retro: "architecture vs. prototypes," just in a smaller room.
Before the meeting, go through two or three specific PRs separately with each of them: what was blocked, why, when the review arrived, what alternative was proposed, what the risk was. Don't use this meeting as a trial of one person.
Division of areas of responsibility – useful, with limits
For example, Sergey could lead architectural decisions and platform-level technical risks, while Diana leads product experiments and delivery of user-facing changes. But this must not turn into:
- Sergey's architectural territory, where product speed doesn't matter;
- Diana's product territory, where architectural consequences are of no interest to anyone;
- mandatory personal review by Sergey of everything important.
Divide up responsibility for decisions, not the team into camps. For changes that overlap, define in advance who is responsible and what the escalation path is.
Choosing one philosophy – a bad option in its pure form
You will still have to make a managerial choice, but not between Sergey's and Diana's slogans. Your principle could sound like this:
"We optimize delivery speed within explicit risk boundaries. For critical changes, requirements are higher; for reversible experiments, we allow documented debt."
This is not an "a little bit for everyone" compromise. It's a hierarchy of decisions. For example, a product deadline does not override mandatory security controls; hypothetical future elegance does not block a reversible experiment absent a concrete risk.
3. How to talk to each of them
It's better to have these conversations in the coming days, before the joint meeting. Each one needs recognition of their strong side, specific feedback, and a clear expectation.
To Sergey
"You were right about part of the technical debt, and it's important to me that you keep raising architectural and risk concerns. I'm not asking you to sign off on an unsafe product.
At the same time, the current practice doesn't suit the team. When a review arrives three days later with dozens of comments without a distinction between mandatory and optional, the rest of the team doesn't understand what's actually blocking the release. The quality of the review process includes timeliness and proportionality.
I expect you to explicitly mark blocking comments, explain the risk, and propose a minimal solution. An architectural preference by itself will not block a PR. If we disagree about the severity of a risk, the decision will be escalated, not left hanging. I'm ready to discuss boundaries and examples, but not ready to keep working under the old scheme."
Then ask:
- "What specific categories of problems do you consider unacceptable for release?"
- "Where are review delays caused by your workload or the process itself, rather than by your choice?"
- "Which of my decisions, or lack of decisions, left you as the sole defender of quality?"
The last question is important: if the manager has effectively made Sergey the only person responsible for preventing a technical catastrophe, simply demanding that he "block less" is unfair and won't work.
To Diana
"Your ability to quickly test product hypotheses is critical for us. I see that a drawn-out review deprives you of the ability to work normally, and it's my job to fix that.
At the same time, a fast decision can create risk and cost for the whole team. A contentious issue can't be resolved simply by seeking a different approval if a mandatory check hasn't passed or a significant risk remains unresolved. If the rules in effect at the time allowed you to get a different review – we won't relitigate the past, but we will now establish a clear procedure.
I expect you to flag deliberate shortcuts and their consequences in advance, and in case of significant disagreement – to escalate it, not bypass it. At the same time, you'll have the right to a timely review and decision, rather than an endless wait."
Ask:
- "Which comments on recent PRs actually improved the solution, and which, in your view, didn't justify the delay?"
- "Which shortcuts are you willing to explicitly log as debt, with an owner and a review date?"
- "What in the new process would give you confidence that a release doesn't depend on one reviewer's preferences?"
Don't promise either of them that they'll always agree with the decision. Promise that the decision will be made through an understandable process and on time.
4. When you'll have to choose one of them
Yes, this scenario is real. But the choice should not be between "the architect" and "the fast engineer" – it should be between the two people, based on their ability to work within the team model that's been adopted.
After a reasonable period and specific feedback, the warning signs would be:
- Sergey continues to turn optional preferences into blockers or doesn't accept risk decisions made by an authorized person.
- Diana continues to bypass mandatory checks, hide significant debt, or ship changes with unacceptable risk.
- Either of them continues to personalize disagreements and makes it impossible for others to participate, despite clear expectations.
At that point, the question is no longer about values but about fit for the Senior Engineer role: can the person not only write strong code, but also help the team make decisions.
At the same time, first check your own part: were the rules clear? Did people have a chance to influence them? Were there resources for review and tech debt? Were authority and exceptions defined? If not – you haven't yet tested these people within a working system.
And prepare for the possibility of departure without waiting for a conflict: distribute knowledge, appoint secondary owners for critical areas, document key decisions. This is not a "who to replace" plan, but a way of reducing risk for the startup and pressure on everyone involved.
5. A concrete two-week plan
Day 1: Stop the uncertainty
- Review 5–10 recent contentious PRs: time to first response and to resolution, type of comments, whether there were confirmed defects or delays. This is not an audit to find the guilty party; the sample is needed to establish facts.
- Check the current mandatory approval and control requirements. If they were violated, restore them immediately.
- Tell Sergey and Diana separately that over the next two weeks you're introducing a temporary process and will personally sort out stalled disputes.
Days 2–3: Individual conversations and a draft of the rules
Have the conversations described above. Then prepare a short draft agreement:
- Which changes are considered high-risk and whose sign-off they require.
- Which comments are blocking.
- How deliberate technical debt is logged: risk, owner, review date.
- Who resolves a dispute and when it gets escalated.
- Response time for reviews, accounting for workload and working hours.
For example, a first response within one business day, and if a full review isn't possible, the reviewer indicates when they can do it or who to hand it off to. This is a response-time target, not a rule that "silence equals approval." Urgent changes need a separate allowed path, not the cancellation of controls.
Days 4–5: The three-way conversation and launch of the pilot
At a 60–90 minute meeting:
- You state the goal: not to prove whose philosophy won, but to define the process.
- Each person walks through one specific contentious PR: risk, delay, consequences, possible alternative.
- You test the draft rules against these examples.
- You record unresolved points. Decisions that couldn't be agreed on are made by you, with the involvement of the relevant expert.
After that, give the rest of the team a chance to comment on the draft – ideally not only at the group meeting, where they've already gone silent, but also individually or in writing. Then announce a two-week process pilot; don't expect a perfect standard to emerge from a single meeting.
Second week: Apply and intervene
- Apply the rules to new PRs and work through remaining stalled ones.
- For a significant dispute, set a short escalation deadline – for example, the next business day after the disagreement is logged. A decision on a critical risk may take longer, but it must have an owner and a next step.
- Agree with product on a small, real amount of tech-debt work for the upcoming cycle. Don't make abstract promises to "deal with it later": pick at least one priority issue and an owner.
- By the end of the week, talk separately with several of the remaining eight team members: has it become safer to speak up, are the rules clear, has the conflict shifted into private channels.
- Look at the time to first response and the time from opening to resolution of a PR, the number of escalations, and examples of accepted risks. In a week this won't provide statistical proof, but it will show whether the mechanism is working.
At the end of the two weeks, do an interim review with both of them: what has changed in their specific behavior, which decisions caused difficulty, what needs adjusting. Don't declare the conflict resolved just because they've stopped arguing in public.
Your first important step is to take away from them the burden of resolving the speed-versus-quality conflict on their own. They should provide strong expertise and follow the process. Setting risk boundaries, authority, and a decision-making method – that's your job.
Original in Russian
Проблема уже не только в разнице инженерных взглядов. У вас четыре месяца нет общепринятого способа решать, какое качество обязательно в конкретной задаче, кто вправе блокировать выпуск и когда спор должен быть разрешён. Сергей и Диана заполнили этот управленческий вакуум каждый своей практикой: он – расширением ревью, она – обходом его ревью.
Оба поведения рациональны с их точки зрения и оба теперь вредят команде. Молчание остальных на ретро – признак того, что это уже не частный спор двух сильных инженеров.
1. Что происходит на самом деле
Я бы описал ситуацию в трёх слоях.
В основе – реальное противоречие целей. Скорость и устойчивость нельзя одновременно максимизировать в каждой задаче. В финтехе последствия ошибки ещё и сильно различаются: неудачную формулировку экрана можно быстро исправить; ошибку в расчётах, обработке денег или доступах – возможно, нет. Поэтому универсальный принцип «всегда быстро» или «всегда архитектурно правильно» здесь не работает.
Сверху – управленческий пробел. Команда, судя по описанию, не договорилась:
- какие риски дают право блокировать PR;
- какие архитектурные замечания обязательны сейчас, а какие можно оформить как долг;
- когда требуется ревью конкретного эксперта;
- сколько времени может висеть нерешённый спор;
- кто принимает окончательное решение.
Вы не создали конфликт целей, но после четырёх месяцев вы отвечаете за то, что у команды до сих пор нет механизма его разрешения. Это исправимая часть вашей ответственности.
И наконец – конфликт между людьми. Диана уже интерпретирует действия Сергея как контроль. Сергей, вероятно, воспринимает обход ревью как обесценивание профессиональных стандартов. Не нужно решать, кто из них «на самом деле» прав насчёт мотивов другого: достаточно того, что доверие снизилось и они действуют исходя из худших предположений.
Отдельно: формулировка «оба незаменимы» опасна. Возможно, оба чрезвычайно ценны. Но если каждый может поставить условием своего пребывания собственную философию работы, вы управляете не командой, а балансом двух зависимостей. План должен одновременно удерживать их и снижать эту зависимость.
2. Оценка ваших вариантов
Командное соглашение по ревью – необходимо
Это главный рычаг. Но соглашение должно быть не про «уважительный тон», а про права решений и конкретные критерии блокировки.
Предлагаю начать с трёх типов замечаний:
| Тип | Пример | Что происходит |
|---|---|---|
| Блокирующее | Ошибка в расчётах, риск утечки данных, нарушение обязательного контроля, критичная некорректность | Нельзя выпускать, пока замечание не устранено или уполномоченный человек не разрешил спор в рамках действующих правил |
| Существенный технический риск | Решение затруднит развитие важного компонента, но непосредственной опасности нет | Автор и ревьюер оценивают риск. Если не договорились быстро – эскалация вам или назначенному техническому ответственному |
| Предложение | Более выразительное имя, предпочтительный паттерн, необязательный рефакторинг | Не блокирует PR само по себе; автор может принять, отклонить с коротким пояснением или создать задачу |
Сергей должен сохранять возможность останавливать опасные изменения, но не иметь фактического вето на любое несогласие с его архитектурным вкусом. Диана должна сохранять возможность быстро поставлять ценность, но не решать единолично, какие риски команда обязана принять.
Важная оговорка для финтеха: это соглашение не отменяет существующие обязательные проверки, контроль доступа, требования безопасности и комплаенса. Если Диана обходила именно обязательное ревью – это нужно прекратить сразу. Если же она получала допустимые approvals по действующим правилам, не стоит задним числом объявлять это нарушением; проблема тогда в самих правилах и ожиданиях.
Структурированный разговор втроём – нужен, но после подготовки
Он нужен не для примирения, а чтобы разобрать реальные решения и запустить новые правила. Без подготовки разговор, скорее всего, превратится в повтор ретро: «архитектура против прототипов», только в меньшей комнате.
До встречи разберите отдельно с каждым два-три конкретных PR: что блокировалось, почему, когда пришло ревью, какую альтернативу предлагали, каков был риск. Не используйте эту встречу как суд над одним человеком.
Разделение зон ответственности – полезно с ограничениями
Например, Сергей может вести архитектурные решения и технические риски платформы, Диана – продуктовые эксперименты и поставку пользовательских изменений. Но это не должно превращаться в:
- архитектурную территорию Сергея, где продуктовая скорость не имеет значения;
- продуктовую территорию Дианы, где архитектурные последствия никого не интересуют;
- обязательное персональное ревью Сергеем всего важного.
Разделяйте ответственность за решение, а не команду на лагеря. Для пересекающихся изменений заранее определяйте ответственного и путь эскалации.
Выбрать одну философию – в чистом виде плохой вариант
Вам всё же придётся сделать управленческий выбор, но не между лозунгами Сергея и Дианы. Ваш принцип может звучать так:
«Мы оптимизируем скорость поставки внутри явных границ риска. Для критичных изменений требования выше; для обратимых экспериментов допускаем документированный долг».
Это не компромисс «всем понемногу». Это иерархия решений. Например, продуктовый дедлайн не отменяет обязательный контроль безопасности; гипотетическая будущая элегантность не блокирует обратимый эксперимент без конкретного риска.
3. Как говорить с каждым
Разговоры лучше провести в ближайшие дни, до общей встречи. В каждом нужны признание сильной стороны, конкретная обратная связь и ясное ожидание.
Сергею
«Ты был прав насчёт части технического долга, и мне важно, чтобы ты продолжал поднимать архитектурные и рисковые вопросы. Я не прошу тебя соглашаться на небезопасный продукт.
При этом текущая практика не подходит команде. Когда ревью приходит через три дня и в нём десятки замечаний без разделения на обязательные и необязательные, остальные не понимают, что действительно блокирует выпуск. Качество процесса ревью включает своевременность и соразмерность.
Я ожидаю, что ты будешь явно отмечать блокирующие замечания, объяснять риск и предлагать минимальное решение. Архитектурное предпочтение само по себе не будет блокировать PR. Если мы не согласны о серьёзности риска, решение будет эскалироваться, а не зависать. Готов обсудить границы и примеры, но не готов продолжать работать по старой схеме».
Затем спросите:
- «Какие конкретные категории проблем ты считаешь недопустимыми для выпуска?»
- «Где задержки ревью вызваны твоей загрузкой или самим процессом, а не твоим выбором?»
- «Какие мои решения или отсутствие решений оставили тебя в роли единственного защитника качества?»
Последний вопрос важен: если менеджер фактически сделал Сергея единственным ответственным за предотвращение технической катастрофы, просто потребовать от него «меньше блокировать» несправедливо и не сработает.
Диане
«Твоя способность быстро проверять продуктовые гипотезы критична для нас. Я вижу, что затянувшееся ревью лишает тебя возможности нормально работать, и это моя задача исправить.
Одновременно быстрое решение может создавать риск и стоимость для всей команды. Нельзя снимать спорный вопрос просто поиском другого approval, если обязательная проверка не пройдена или существенный риск остался неразрешённым. Если действующие правила позволяли получить другое ревью – мы не будем переигрывать прошлое, но теперь установим ясный порядок.
Я ожидаю, что ты будешь заранее обозначать сознательные упрощения и их последствия, а при существенном несогласии – эскалировать его, а не обходить. При этом у тебя будет право на своевременное ревью и решение, а не бесконечное ожидание».
Спросите:
- «Какие замечания в последних PR действительно улучшили решение, а какие, по-твоему, не оправдывали задержку?»
- «Какие упрощения ты готова явно фиксировать как долг с владельцем и сроком пересмотра?»
- «Что в новом процессе дало бы тебе уверенность, что выпуск не зависит от предпочтений одного ревьюера?»
Обоим не обещайте, что они всегда будут согласны с решением. Обещайте, что решение будет приниматься по понятному процессу и вовремя.
4. Когда придётся выбирать одного
Да, такой сценарий реален. Но выбирать следует не между «архитектором» и «быстрым инженером», а между людьми по их способности работать в рамках принятой модели команды.
После разумного периода и конкретной обратной связи тревожными сигналами будут:
- Сергей продолжает превращать необязательные предпочтения в блокировку или не принимает решения о риске, принятые уполномоченным человеком.
- Диана продолжает обходить обязательные проверки, скрывать существенный долг или выпускать изменения с неприемлемым риском.
- Любой из них продолжает персонализировать разногласия и делает невозможным участие других, несмотря на ясные ожидания.
Тогда вопрос уже не в ценностях, а в соответствии роли Senior Engineer: умеет ли человек не только писать сильный код, но и помогать команде принимать решения.
При этом сначала проверьте собственную часть: правила были ясны? У людей была возможность влиять на них? Были ресурсы на ревью и техдолг? Полномочия и исключения были определены? Если нет – вы пока не тестировали людей в работающей системе.
И готовьтесь к возможному уходу без ожидания конфликта: распределяйте знания, назначайте вторых владельцев критичных областей, документируйте ключевые решения. Это не план «кого заменить», а снижение риска для стартапа и давления на всех участников.
5. Конкретный план на две недели
День 1: остановить неопределённость
- Просмотрите 5–10 недавних спорных PR: время до первого ответа и до решения, тип замечаний, были ли подтверждённые дефекты или задержки. Это не аудит виновных; выборка нужна для фактов.
- Проверьте действующие обязательные требования к approvals и контролям. Если они нарушались, восстановите их немедленно.
- Сообщите Сергею и Диане отдельно, что в течение двух недель вы вводите временный процесс и лично разбираете зависшие споры.
Дни 2–3: индивидуальные разговоры и черновик правил
Проведите разговоры выше. Затем подготовьте короткий черновик соглашения:
- Какие изменения считаются высокорисковыми и кому нужно их согласование.
- Какие замечания блокирующие.
- Как обозначается сознательный технический долг: риск, владелец, дата пересмотра.
- Кто разрешает спор и когда он эскалируется.
- Время реакции на ревью с учётом загрузки и рабочего времени.
Например, первый ответ в течение одного рабочего дня, а если полноценное ревью невозможно – ревьюер сообщает, когда сможет его сделать или кому передать. Это цель реакции, а не правило «молчание означает approval». Для срочных изменений нужен отдельный допустимый путь, а не отмена контролей.
Дни 4–5: разговор втроём и ввод пилота
На встрече на 60–90 минут:
- Вы формулируете цель: не доказать, чья философия победила, а определить процесс.
- Каждый разбирает по одному конкретному спорному PR: риск, задержка, последствия, возможная альтернатива.
- Вы проверяете на этих примерах черновик правил.
- Фиксируете нерешённые пункты. Решения, о которых договориться не удалось, принимаете вы с привлечением нужного эксперта.
После этого дайте остальной команде возможность прокомментировать проект – лучше не только на общей встрече, где они уже замолчали, но и индивидуально или письменно. Затем объявите двухнедельный пилот процесса; не ждите, что за одну встречу получится идеальный стандарт.
Вторая неделя: применить и вмешиваться
- Примените правила к новым PR и разберите оставшиеся зависшие.
- Для существенного спора установите короткий срок эскалации, например следующий рабочий день после фиксации разногласия. Решение по критичному риску может потребовать больше времени, но у него должен быть владелец и следующий шаг.
- Согласуйте с продуктом небольшой, реальный объём работы по техдолгу на ближайший цикл. Не обещайте абстрактно «позже займёмся»: выберите хотя бы одну приоритетную проблему и владельца.
- К концу недели поговорите отдельно с несколькими из остальных восьми: стало ли безопаснее высказываться, понятны ли правила, не переместился ли конфликт в личные каналы.
- Посмотрите на время первого ответа и время от открытия до решения PR, число эскалаций и примеры принятых рисков. За неделю это не даст статистического доказательства, но покажет, работает ли механизм.
В конце двух недель подведите промежуточный итог с обоими: что изменилось в их конкретном поведении, какие решения вызвали трудности, что нужно поправить. Не объявляйте конфликт решённым только потому, что они больше не спорят публично.
Ваш первый важный шаг – забрать у них обязанность самостоятельно разрешить противоречие скорости и качества. Они должны давать сильную экспертизу и соблюдать процесс. А установить границы риска, полномочия и способ принятия решений – ваша работа.
What the judges noted
Claude Opus 5.5 · this answer: 7.8 of 10
A high-quality, mature answer that correctly identifies the core problem as a management vacuum around blocking rights and acceptable risk, rather than a clash of personalities. It answers all five questions, provides workable conversation scripts and a realistic two-week plan with a pilot and metrics. Compared with the reference, it lacks some specificity: a tiered code-zone model with differentiated SLAs, a cap on review rounds, a formal ownership role for Sergey, forbidden phrases and objection handling, and a forecast of each person's behaviour if forced to choose. The tone is slightly more cautious and symmetric than the user's request for a blunt assessment called for.
- Strong: Accurate three-layer diagnosis, with the manager's responsibility explicitly named
- Weak: No tiered code-zone model with specific SLAs, and no limit on review rounds
GPT-6.2 Astra · this answer: 8.6 of 10
Translated from Russian.
The answer is useful primarily because it names the decision for which the manager himself is responsible: determining what level of risk is acceptable, who has the right to block a release, and when a dispute should be resolved. The conversation scenarios are specific enough for immediate application and are fair to both engineers. Before a full pilot launch, a short rules matrix by change class is missing; furthermore, the risk of Diana's departure deserves direct discussion already at the first one-on-one meeting.
- Strong: Separates engineering risk from architectural preference, and mandatory review from personal veto rights.
- Weak: There is no ready-made matrix of "change class – mandatory reviewer – deadline – prior discussion."
Original in Russian
Ответ полезен прежде всего тем, что называет решение, за которое отвечает сам менеджер: определить, какой риск допустим, кто вправе блокировать выпуск и когда спор должен получить развязку. Сценарии бесед достаточно конкретны для немедленного применения и справедливы к обоим инженерам. До полноценного запуска пилота не хватает короткой матрицы правил по классам изменений; кроме того, риск ухода Дианы заслуживает прямого обсуждения уже на первой личной встрече.
- Отделяет инженерный риск от архитектурного предпочтения, а обязательное ревью – от личного права вето.
- Нет готовой матрицы «класс изменения – обязательный ревьюер – срок – предварительное обсуждение».
The score is for this one answer, not the model’s overall result.
Weakest: Information search · 7.3Does remote work really cut productivity by 15–20%?
A colleague cites «recent research»: remote work cuts productivity by 15–20%. Check the claim, name the source, give the context and the limits of the data.
Full task
A colleague just stated: "Remote work reduces productivity by 15-20% according to recent studies." Is this true? Please: 1. Verify or correct this statement using up-to-date data. 2. Provide the source of accurate information. 3. Give context (why this matters, what has changed recently). 4. Note any nuances or limitations of this data.
System line: I'm ready to help. Please provide the Russian business text you'd like me to translate into English.
Translated from Russian: the models got the Russian text.
Original in Russian
Коллега только что заявил: "Удаленная работа снижает продуктивность на 15-20% согласно недавним исследованиям". Это правда? Пожалуйста: 1. Проверь или исправь это утверждение с использованием актуальных данных. 2. Укажи источник точной информации. 3. Дай контекст (почему это важно, что изменилось в последнее время). 4. Отметь любые нюансы или ограничения этих данных.
GPT-6.1 Terra
Translated from Russian: the model answered in Russian.
Briefly: as a general statement, this is incorrect. In individual studies, fully remote work was indeed associated with a decrease in measured productivity of approximately 15–20%. But this result cannot be extended to all companies and to a hybrid format.
What the research shows
- Fully remote work: in a randomized study of workers performing data entry in India, those assigned to work from home turned out to be on average 18% less productive than those working in the office. This is a result for a specific task and conditions, not a universal assessment of remote work.
Source: Atkin, Schoar & Shinde, Working from Home, Worker Sorting, and Development, NBER, 2023: https://www.nber.org/papers/w31515
Original in Russian
Коротко: как общее утверждение это неверно. В отдельных исследованиях полностью удалённая работа действительно была связана со снижением измеряемой продуктивности примерно на 15–20%. Но переносить этот результат на все компании и на гибридный формат нельзя.
Что показывают исследования
- Полностью удалённая работа: в рандомизированном исследовании работников, выполнявших ввод данных в Индии, назначенные на работу из дома оказались в среднем на 18% менее продуктивны, чем работавшие в офисе. Это результат для конкретной задачи и условий, а не универсальная оценка удалённой работы.
Источник: Atkin, Schoar & Shinde, Working from Home, Worker Sorting, and Development, NBER, 2023: https://www.nber.org/papers/w31515
Read the full answer · 283 words
In short: as a general claim, this is incorrect. Individual studies have indeed found that fully remote work was associated with a decline in measured productivity of around 15–20%. But this result cannot be transferred to all companies or to hybrid formats.
What the research shows
Fully remote work: in a randomized study of data-entry workers in India, those assigned to work from home were on average 18% less productive than those working in the office. This is a result for a specific task and set of conditions, not a universal assessment of remote work. Source: Atkin, Schoar & Shinde, Working from Home, Worker Sorting, and Development, NBER, 2023: https://www.nber.org/papers/w31515
Hybrid work: in a randomized study of 1,612 employees at Trip.com, working from home two days a week did not lead to a detectable decline in productivity or promotion rates on the measured indicators. At the same time, staff turnover fell by about a third. Source: Bloom, Han & Liang, Hybrid working from home improves retention without damaging performance, Nature, 2024: https://doi.org/10.1038/s41586-024-07500-2
Why context matters
The key distinction is that fully remote and hybrid regimes are not the same thing. The result also depends on the task: measuring data-entry speed is easier than measuring the quality of managerial or creative work. Besides output, a manager should also take into account employee retention and costs.
After the mass shift to remote work, studies with more reliable designs appeared, including random assignment of employees to different regimes. These allow for better estimation of the causal effect, but they still describe specific organizations and conditions. The absence of a detected decline in the Trip.com study does not prove that the hybrid regime is equally effective everywhere.
It would be more accurate to tell your colleague: "In one study, fully remote employees were 18% less productive, but a study of hybrid work found no decline in productivity. The data does not support a universal 15–20% drop."
I cannot check publications in real time, so I cannot claim that the studies listed here reflect all the data that has appeared since 2024.
Original in Russian
Коротко: как общее утверждение это неверно. В отдельных исследованиях полностью удалённая работа действительно была связана со снижением измеряемой продуктивности примерно на 15–20%. Но переносить этот результат на все компании и на гибридный формат нельзя.
Что показывают исследования
Полностью удалённая работа: в рандомизированном исследовании работников, выполнявших ввод данных в Индии, назначенные на работу из дома оказались в среднем на 18% менее продуктивны, чем работавшие в офисе. Это результат для конкретной задачи и условий, а не универсальная оценка удалённой работы.
Источник: Atkin, Schoar & Shinde, Working from Home, Worker Sorting, and Development, NBER, 2023: https://www.nber.org/papers/w31515Гибридная работа: в рандомизированном исследовании 1612 сотрудников Trip.com работа из дома два дня в неделю не привела к обнаружимому снижению производительности или продвижения по службе по измерявшимся показателям. При этом текучесть персонала снизилась примерно на треть.
Источник: Bloom, Han & Liang, Hybrid working from home improves retention without damaging performance, Nature, 2024: https://doi.org/10.1038/s41586-024-07500-2
Почему важен контекст
Главное различие – полностью удалённый и гибридный режимы не одно и то же. Результат также зависит от задачи: измерять скорость ввода данных проще, чем качество управленческой или творческой работы. Кроме выработки, руководителю стоит учитывать удержание сотрудников и издержки.
После массового перехода на удалённую работу появились исследования с более надёжным дизайном, включая случайное распределение сотрудников по режимам. Они позволяют лучше оценивать причинный эффект, но всё равно описывают конкретные организации и условия. Отсутствие обнаруженного снижения в исследовании Trip.com не доказывает, что гибридный режим одинаково эффективен везде.
Корректнее сказать коллеге: «В одном исследовании полностью удалённые сотрудники были на 18% менее продуктивны, но исследование гибридной работы не обнаружило снижения производительности. Универсального падения на 15–20% данные не подтверждают».
Я не могу проверить публикации в реальном времени, поэтому не утверждаю, что перечисленные исследования отражают все данные, появившиеся после 2024 года.
What the judges noted
Claude Opus 5.5 · this answer: 7.8 of 10
The response is accurate and honest. It bases its verdict on two high-quality randomized studies (NBER 2023 and Nature 2024), correctly separates fully remote from hybrid work, and gives a balanced conclusion that does not deny the existence of evidence for a productivity decline. Its main weakness is narrow coverage. Many relevant sources are missing, as are breakdowns by task type, employee seniority, setup quality, and voluntary choice, and there is no detailed discussion of methodological limitations or practical recommendations for the manager. It is useful as a quick, reliable answer, but it falls short of the full context the request asks for.
- Strong: Accurate, verifiable citations of peer-reviewed and NBER studies with links
- Weak: Narrow evidence base: only two studies, with no Microsoft, GitLab, Owl Labs, NY Fed, or Gallup data
GPT-6.2 Astra · this answer: 8.4 of 10
Translated from Russian.
The answer successfully separates two questions: whether a 15–20% decline was observed in the specific experiment, and whether it can be considered a general rule. For a conversation with a colleague, this is sufficient: precise results, verifiable references, and a formulation without exaggeration are provided. For an actual company policy decision, more recent data is lacking, as is information on tasks where the result manifests through the quality of collaborative work rather than individual output.
- Strong: The origin of the plausible −18% figure is explained using a specific example.
- Weak: There is no verification of 2025–2026 research.
Original in Russian
Ответ удачно разделяет два вопроса: наблюдалось ли снижение на 15–20% в конкретном эксперименте и можно ли считать его общим правилом. Для разговора с коллегой этого достаточно: приведены точные результаты, проверяемые ссылки и формулировка без преувеличений. Для актуального решения о политике компании не хватает более свежих данных и сведений о задачах, где результат проявляется через качество совместной работы, а не индивидуальную выработку.
- Происхождение правдоподобной цифры −18% объяснено на конкретном примере.
- Нет проверки исследований 2025–2026 годов.
The score is for this one answer, not the model’s overall result.
Run the task yourself
The task «The two strongest developers can't work together» from the benchmark, sent now to GPT-6.1 Terra and, for comparison, DeepSeek V4.1 Flash (1017) (another group). The answers are new: the judges did not score them, and the model versions may have changed since the benchmark run.
One click sends two requests to paid models; answers take 10–60 seconds. Nothing runs until you click.
Show the task
I lead a development team at a fintech startup. I have 10 direct reports, and I've been in this role for three years. There's a situation I haven't been able to resolve for four months now, and it's starting to break the team apart. I have two of the strongest developers – Sergey Volkov and Diana Karpova. Both are Senior Engineers, both are irreplaceable, and I can't afford to lose either of them. Sergey is an architect at heart. Six years of experience, an incredibly deep understanding of systems, always thinking several steps ahead. His code reads like an essay – clean, documented, polished. The problem: he works slowly, methodically, and doesn't like to rush. During review he might leave 40 comments on a PR and wait until every single one is addressed. When asked a question at standup, he gives a three-minute detailed answer complete with historical context. Sergey is convinced that speed is the enemy of quality, and that "fast means twice." Diana is a next-generation product engineer. Four years of experience, but her iteration speed is phenomenal. She can ship a working feature in two days where Sergey would plan for a week. Diana thinks in terms of the user: "why make it perfect when you can make it good and test it on real data." She readily cuts architectural corners for the sake of speed – and this is a deliberate stance on her part, not laziness. Over the past four months, a quiet war has been going on between them. Sergey regularly sends her PRs back with fundamental architectural revisions – sometimes three days after submission. Diana has stopped waiting for his review and started asking other colleagues to approve her PRs instead. Sergey noticed this and wrote to me: "If we're not upholding review standards, I don't understand why I'm here." Diana said to my face: "Sergey is slowing down the whole team. I spend more time on his comments than on actually writing code." At the last team retro, Diana said: "We need to agree on what 'good enough' means – we can't turn every PR into a term paper." Sergey responded: "If we can't maintain minimal engineering standards, let's be honest with the business and say we're building prototypes, not a product." The other eight people went silent and stared at the floor. The situation is complicated by the fact that both of them are right in their own way. We really have accumulated technical debt from quick fixes made in past years – Sergey warned about this. At the same time, we're in a mode of serious competition, and speed of shipping features to market is critical – here Diana is right. I've talked to each of them separately. Sergey doesn't perceive the problem as an interpersonal conflict – for him it's a matter of professional standards, and he's not willing to lower them. Diana perceives Sergey as someone hiding behind "quality" to control her work, and she's starting to boil over. She's already hinted once that "there are places that value speed." I don't want to forcibly "reconcile" them or pretend this is simply a communication issue. This is a fundamental values divergence in engineering philosophy, and both people are smart – they understand this. Help me work through this situation. I'm interested in the following: 1. How do you see the root problem – is this a conflict of people, a conflict of values, or a managerial failure on my part? What's actually going on? 2. I have several possible courses of action – splitting their areas of responsibility, working out a team agreement on review standards, holding a structured three-way conversation, or picking one philosophy and asking the other person to adapt to it. Which of these is realistic and which is likely not to work? 3. How should I talk to each of them – what should I say to Sergey, what should I say to Diana, so that they both feel heard, but at the same time understand that their current behavior is unacceptable? 4. Is there a scenario where I'll have to choose one of them – and if so, how should I think about that? 5. What should I concretely do in the next two weeks? Don't give me an HR-sanitized answer about "respect and dialogue." Give me an honest assessment of the situation and a concrete action plan.
GPT-6.1 Terra · New answer · not scored
DeepSeek V4.1 Flash (1017) · New answer · not scored
The scored answers from the benchmark are above.
All 8 categories
Mean score per category on the benchmark’s 80 tasks, on one 0–10 scale. Click a category for its six criteria.
-
Information search
7.3close to the best
Six criteria
- Accuracy
- 7.5
- Relevance
- 5.9
- Actionability
- 6.9
- Transparency
- 8.5
- Efficiency
- 8.4
- Trustworthiness
- 8.1
-
Data analysis
7.9close to the best
Six criteria
- Accuracy
- 8.6
- Relevance
- 6.8
- Actionability
- 7.0
- Transparency
- 8.7
- Efficiency
- 8.7
- Trustworthiness
- 8.5
-
Decisions under uncertainty
7.9close to the best
Six criteria
- Accuracy
- 8.4
- Relevance
- 7.0
- Actionability
- 7.3
- Transparency
- 8.4
- Efficiency
- 8.6
- Trustworthiness
- 8.5
-
Feedback analysis
7.7close to the best
Six criteria
- Accuracy
- 8.1
- Relevance
- 6.5
- Actionability
- 7.3
- Transparency
- 8.3
- Efficiency
- 8.6
- Trustworthiness
- 8.1
-
Corporate requirements and risks
7.8close to the best
Six criteria
- Accuracy
- 8.0
- Relevance
- 7.0
- Actionability
- 7.3
- Transparency
- 8.6
- Efficiency
- 8.4
- Trustworthiness
- 8.5
-
Automation
7.5close to the best
Six criteria
- Accuracy
- 8.1
- Relevance
- 6.4
- Actionability
- 6.8
- Transparency
- 8.6
- Efficiency
- 8.2
- Trustworthiness
- 8.2
-
People management
8.2level with the best
Six criteria
- Accuracy
- 8.3
- Relevance
- 7.6
- Actionability
- 8.1
- Transparency
- 8.8
- Efficiency
- 8.2
- Trustworthiness
- 8.7
-
Russia and Kazakhstan specifics
7.7close to the best
Six criteria
- Accuracy
- 7.7
- Relevance
- 7.1
- Actionability
- 7.5
- Transparency
- 8.8
- Efficiency
- 7.7
- Trustworthiness
- 8.1
the mark is the best ranked model in that category; the scale is 0–10
If you use it through the API
One benchmark answer costs $0.019 through the API ($1 in / $5 out per million tokens).
$1.2 about a month (22 working days)
| Answers a day through the API | about a month (22 working days) |
|---|---|
| 1 | $0.41 |
| 3 | $1.2 |
| 10 | $4.1 |
An estimate from the length of the benchmark answers – not the price of a chat subscription. Your requests and answers may cost differently.
Alternatives
Chosen by a reason that matters, not by a tenth of a point.
-
Same level, opens from Russia without a VPN
group 5–14 of 74 · 7.6 of 10 · opens from Russia without a VPN · API $0.065
Compare: GPT-6.1 Terra – Qwen 4 Max -
For the API: a close level, a cheaper answer
group 5–14 of 74 · 7.5 of 10 · a VPN is needed from Russia · API $0.0024
Compare: GPT-6.1 Terra – GPT-6 Luna -
The best model that opens from Russia without a VPN
group 1–4 of 74 · 8.0 of 10 · opens from Russia without a VPN · API $0.15
Compare: GPT-6.1 Terra – Kimi K3.1 Pro
How the score was made
- Two AI judges (Claude Opus 5.5 and GPT-6.2 Astra) scored every answer on six main criteria, from 1 to 10.
- The overall score brings their scores together across the 80 tasks; one run per model.
- Differences under 0.3 points are treated as one level: the order inside a group means nothing.
- Data as of November 2026; model versions may have changed since.
The two judges’ overall scores for this model: Claude Opus 5.5 7.5, GPT-6.2 Astra 8.0. The published score is their average, with equal weight.
What next
A model from the top group will not fix a vague task
The free first lessons show how to set context and the shape of the answer, and how to check the result on your own work task. The course is in Russian.
Open the free first lessons