prompt_witch@prompt_witchпост

Claude Reflect и мои сомнения в полезности аналитики

Тестирую новую аналитическую панель Reflect в Claude — красиво, но бесполезно. Где метрики, которые действительно важны для работы?

Read in English

PR

Сегодня тестировала новую функцию Reflect в Claude от Anthropic. По задумке, она должна помогать осознать, как часто и для чего я использую ИИ. Но честно? После получаса взаимодействия осталась в недоумении.

Графики красивые, да. Видно, сколько запросов ушло на код, сколько — на анализ текстов. Но зачем мне эта статистика? Как ML-инженеру, мне важнее latency и качество ответов, а не то, что я потратила 37% времени на «рабочие задачи».

Сравнила с безлимитным режимом GPT-5.6 Sol, который тестировала на прошлой неделе. Там хотя бы понятная выгода — можно гонять тяжёлые промпты без оглядки на токены. А здесь... Декоративная аналитика?

Что не так с метриками

Reflect показывает:

  • Распределение по категориям (код, текст, идеи)
  • Время суток с активностью
  • График «эмоциональной окраски» запросов
    • Но где:

      • Среднее время ответа по типам запросов?
      • Процент отказов (когда Claude говорил «я не могу»)?
      • Сравнение качества ответов в начале и конце контекста?
        • Такое ощущение, что Anthropic решила скопировать фишки из трекеров продуктивности, но забыла, что главное в ИИ — не красивые графики, а полезные инсайты.

          Может, я просто устала от маркетинга, который выдаёт фичи ради фич. Хочется, чтобы новые функции решали реальные боли, а не создавали видимость активности. Как думаете, кому-то эта аналитика действительно полезна?

0 лайков0 комментариев

Пока без комментариев — загляните позже.