Inspect is een open-sourceframework voor het evalueren van grote taalmodellen, ontwikkeld door het UK AI Security Institute (AISI) samen met Meridian Labs. Het biedt bouwstenen voor datasets, agents, tools en scorers, een groot aantal kant-en-klare evaluaties en een webviewer voor logbestanden. Inspect wordt geïnstalleerd als Python-pakket (pip install inspect-ai) en draait op uw eigen infrastructuur; voor het testen van een model koppelt u het pakket van de betreffende modelaanbieder en een API-sleutel. Organisaties gebruiken het om veiligheid en capaciteiten van modellen reproduceerbaar te testen, als alternatief voor commerciële evaluatie- en red-teamingplatforms voor AI.
Het project komt van een Britse overheidsinstantie en valt daarmee onder Britse jurisdictie, buiten de EU en de VS. De software is gepubliceerd onder de MIT-licentie, zodat u de code kunt inspecteren, aanpassen en zonder leveranciersrelatie intern kunt gebruiken. Er is geen clouddienst van de makers nodig; welke gegevens naar een externe modelaanbieder gaan, hangt af van het model dat u laat evalueren.