Az OpenAI és az Anthropic nyilvánosan független külső modellvizsgálatokat sürget, a gyakorlatban azonban még vita tárgya, mit hozhatnak nyilvánosságra az értékelők. A Reuters október 13-i, két névtelen forrásra és egy látott szerződésre támaszkodó riportja szerint a cégek október 5-én még szigorúbb szerkesztői kontrollról tárgyaltak; az Anthropic egyeztetései október 8-ra enyhültek.
Az Anthropic válasza szerint a már ismert partnerek maguk irányíthatják a módszert, a mérési szempontokat, a következtetéseket és a publikálást. Új értékelő cégeknél viszont fenntartja a jelentések véleményezésének és jóváhagyásának jogát, amíg kialakul az együttműködés. Az OpenAI azt közölte, nem kér jóváhagyási jogot a teljes szövegre; a bizalmas információkat kitakarja, a jelentés pedig jelezheti, ha jelentős törlés történt.
A lényegi feszültség az, hogy ugyanaz a technikai részlet lehet üzleti titok és egy kockázat megítéléséhez szükséges bizonyíték. Az értékelők ráadásul a labor hozzáférésétől függnek. A riport nem bizonyítja, hogy bármelyik cég elhallgattatott volna egy konkrét eredményt, viszont megmutatja: egységes szabályozás nélkül a „független” vizsgálat jelentése szerződésről szerződésre változhat.
Forrás: Reuters – Behind AI industry’s call for independent reviews.