O bezpieczeństwie agentów decyduje bramka MCP, a nie model
Trzecia publikacja dotyczy warstwy, która w firmach rośnie szybciej niż modele, a rzadko bywa oceniana. GatewayBench, praca Yitiana Zhenga, Zhaoruna Chena, Haoyu Li i Bo Li złożona szesnastego października, jest pierwszym ujednoliconym testem bramek protokołu kontekstu modeli, czyli warstwy pośredniej, przez którą agenci dostają dostęp do narzędzi. W typowym wdrożeniu to bramka decyduje, które narzędzia agent widzi, jak są opisane i jakie ma uprawnienia. Autorzy dzielą architektury na spłaszczone, gdzie cała lista trafia do kontekstu, i hierarchiczne, gdzie agent wybiera najpierw kategorię, a potem narzędzie.
Zestaw testowy jest konkretny: pięćset dwadzieścia cztery zadania w sześciu dziedzinach, pula jedenaście tysięcy sto osiemnaście rzeczywistych narzędzi z dwustu pięćdziesięciu jeden serwerów oraz siedem wdrożonych bramek. Do tego dochodzi zabieg odróżniający ten test od większości rankingów: autorzy celowo dopisują narzędzia nieistotne dla zadania, żeby zmierzyć, co się dzieje, gdy powierzchnia dostępnych funkcji rośnie tak jak w prawdziwych firmach. Eksperymenty prowadzono na zadaniach zwykłych i na atakach. Wynik jest jednoznaczny co do kierunku, choć nie co do liczb: architektura bramki istotnie różnicuje skuteczność zadania, oszczędność wywołań i odporność na ataki, a efekty zależą dodatkowo od modelu i od środowiska uruchomieniowego agenta.
Znaczenie jest praktyczne. W dyskusji o bezpieczeństwie agentów uwaga skupia się na modelu i promptach, a większość realnych szkód przechodzi przez uprawnienia i przez sposób, w jaki opisy narzędzi trafiają do kontekstu. Jeśli dwie bramki różnią się odpornością przy tym samym modelu, wybór bramki jest decyzją bezpieczeństwa, nie tylko wydajności. Zastrzeżenie: to pierwszy taki test i jego autorzy sami proponują taksonomię, którą oceniają, a niezależnego powtórzenia jeszcze nie ma. Sama lista kontrolna jest jednak użyteczna: ile narzędzi widzi agent, kto opisuje parametry, czy uprawnienia są zawężane per zadanie i czy bramka loguje wywołania w sposób, który da się później przejrzeć.