nullius: assajos d’acceptació d’IA
Comprovi, abans de posar-lo en marxa, si el seu assistent d’IA s’equivoca en allò que importa. Assajos d’acceptació independents amb criteris signats per endavant i un informe datat i signat.
Assajos d’acceptació independents per a assistents d’IA i sistemes que responen a partir dels seus documents: nullius, de Yago Mendoza, a Barcelona.
Posi a prova el seu assistent d’IA abans de posar-lo en marxa. Per a empreses que es disposen a posar en funcionament un assistent o un cercador d’IA que respon a partir dels seus documents. Comprovo amb preguntes reals de la seva feina si s’equivoca en allò que importa, i li lliuro un informe signat amb cada error i la seva prova.
L’assaig s’adapta a la plataforma que ja fa servir. L’assaig tracta el seu assistent com el veu un usuari: li fa preguntes i llegeix el que respon. Per això no importa quin model el mou ni amb quines eines està muntat, i no cal tocar-lo. Per connectar-lo n’hi ha prou amb un accés de prova, sigui una API o la mateixa pantalla que fa servir el seu equip. Amb els tres models marcats ja he fet el mateix assaig de demostració.
- Claude (ja assajat)
- Mistral (ja assajat)
- Qwen (ja assajat)
- Azure OpenAI
- AWS Bedrock
- Google Vertex AI
- LangChain
- LlamaIndex
- Ollama i models locals
Noms citats només per indicar compatibilitat. Les marques són dels seus titulars, sense relació comercial.
Encàrrecs amb preu tancat:
- Diagnosi tècnica, 650 € més IVA, una setmana. Per decidir amb criteri abans de gastar més: per exemple, si cal acceptar el lliurament d’un integrador o si fa falta un assaig complet.
- Comparativa, 3.900 € més IVA, cinc setmanes. Per triar entre dues configuracions o dos proveïdors amb les mateixes preguntes, en lloc de refiar-se de les demostracions de cadascun.
- Assaig d’acceptació, 5.500 € més IVA, set setmanes des que les preguntes de prova i l’accés estan a punt. Per comprovar, abans de donar-lo per bo, si l’assistent s’equivoca en allò que importa, amb un resultat que pot mostrar a la seva direcció o al seu comitè.
Sectors:
- Salut: Dosis, al·lèrgies, protocols i avisos, abans que una resposta arribi a un professional o a un pacient.
- Farmàcia i ciències de la vida: Fitxes tècniques, procediments normalitzats i documentació reguladora, citats al peu de la lletra.
- Despatxos i assessories: Clàusules, terminis i jurisprudència, sense ni una sola referència inventada.
- Banca i assegurances: Condicions, cobertures, límits i comissions, explicats igual que al contracte.
- Indústria: Manuals, parts de torn i procediments de manteniment, també els del pitjor dia.
- Energia i serveis públics: Normativa tècnica, tarifes i incidències, amb la versió vigent de cada document.
- Enginyeria i construcció: Normes, plecs i especificacions, sense confondre una edició amb l’anterior.
- Logística i transport: Comandes, rutes, duanes i terminis, de punta a punta.
- Comerç i atenció al client: Devolucions, garanties i promocions, amb la política que és vigent avui.
- Administració pública: Tràmits i normes que es poden explicar a qualsevol ciutadà, amb la seva font.
- Educació: Normatives acadèmiques, terminis i guies docents, sense inventar requisits.
- Consultores i integradors: Un assaig independent que acompanya el seu lliurament al client final.
Un assaig real de demostració, del 2026-11-14: 98 preguntes a un assistent sobre el reglament de baixa tensió. Resultat: desfavorable. Falla sis preguntes crítiques, quan el pactat era no fallar-ne cap.
No és una certificació ni una avaluació de la conformitat del Reglament (UE) 2024/1689.