Słownik pojęć

benchmark

Definicja, znaczenie i użycie terminu w kontekście publikacji.

Ustandaryzowany zestaw testów lub procedura służąca do oceny i porównywania działania modeli w określonych warunkach. Benchmark bezpieczeństwa sprawdza reakcje systemu na sytuacje potencjalnie niebezpieczne.

Wersja MD

Benchmark to określony sposób testowania systemu, zwykle oparty na zestawie zadań, przypadków lub kryteriów oceny. Umożliwia porównanie modeli pod względem wybranych właściwości, takich jak dokładność, wydajność albo bezpieczeństwo. W opisanym zastosowaniu ocenia między innymi odmowę wykonania niebezpiecznego polecenia, możliwość bezpiecznej realizacji zadania oraz prośbę o pomoc człowieka.

Zobacz w kontekście

4
  1. Technologie

    Google prezentuje Gemini Robotics 2.0. Roboty mają lepiej rozumieć otoczenie i wykonywać zadania

  2. Cyberbezpieczeństwo

    Nowy miernik dla agentów AI ma sprawdzać, czy robią to, co użytkownik miał na myśli

  3. Technologie

    Google stawia na agentów: Gemini 3.5 Flash ma przyspieszyć kodowanie i automatyzację zadań

  4. Technologie

    OpenAI wprowadza GPT-5.5 Instant jako domyślny model ChatGPT

Wróć do czytanego artykułu

Ta strona używa plików cookies, aby zapewnić najlepszą jakość korzystania z naszego serwisu oraz do celów analitycznych. Klikając "Akceptuję", wyrażasz zgodę na używanie wszystkich plików cookies. Możesz również odrzucić zgodę, co spowoduje zablokowanie plików cookies analitycznych. Więcej informacji znajdziesz w naszej Polityce Prywatności.