OpenAI, Google, Microsoft un Anthropic atbalstīs kopīgu robots.txt signālu MI apmācības atteikumam

OpenAI, Google, Microsoft un Anthropic piektdien, 30. oktobrī, paziņoja, ka atbalstīs kopīgu signālu vietņu failā robots.txt. Ar to vietņu un mediju īpašnieki varēs vienā solī pateikt vairākiem MI uzņēmumiem, vai viņu saturu drīkst izmantot ģeneratīvo MI modeļu apmācībā.

Līdz šim vietnēm bija jāzina katra MI uzņēmuma rāpuļprogrammas nosaukums un katrai jāraksta atsevišķi noteikumi. Jaunais risinājums ir kopīgs politikas marķieris __usage_ai-training, ko robots.txt ieraksta tāpat kā parastu rāpuļprogrammas nosaukumu. Ja tam norāda aizliegumu visai vietnei, tas nozīmē vēlmi, lai saturu MI apmācībā neizmanto.

Priekšlikums radies interneta standartu organizācijas IETF MI preferenču darba grupā, un to iesniedzis Anthropic standartu speciālists. Pagaidām tas ir atsevišķs interneta dokumenta projekts, nevis apstiprināts IETF standarts. Signāls attiecas uz satura izmantošanu apmācībā, nevis uz to, vai rāpuļprogramma drīkst lapu apmeklēt, tāpēc piekļuvi joprojām regulē ar atsevišķiem noteikumiem.

Uzņēmumi to ieviesīs dažādā laikā. Anthropic signālu jau sācis atbalstīt, OpenAI sola to izdarīt tuvāko mēnešu laikā, bet Google un Microsoft atbalstu plāno nākamgad. Esošās katra uzņēmuma atsevišķās robots.txt kontroles paliks spēkā līdzās jaunajam signālam.

Google jau kopš 2023. gada piedāvā savu atsevišķo kontroli Google-Extended. Uzņēmums skaidro, ka gadījumā, ja vietne ar kopīgo marķieri atsakās no apmācības un nav atsevišķi norādījusi Google-Extended, tas tiks uztverts tā, it kā vietne būtu aizliegusi Google-Extended. Microsoft piedāvās arī sīkākas iespējas atsevišķi atteikties no MI apmācības un no satura izmantošanas MI atbilžu pamatošanai, un tas neietekmēs vietnes redzamību Bing meklēšanas rezultātos.

Paziņojums nāk laikā, kad izdevēji arvien biežāk sūdzas par MI rāpuļprogrammām, kas vāc viņu saturu. OpenAI un Google sola turpināt darbu IETF, lai priekšlikumu pilnveidotu par vispārpieņemtu standartu, un cer, ka signālu pieņems arī citi MI izstrādātāji. Kad tieši signāls sāks darboties pie katra no tiem, vietņu īpašniekiem būs jāseko līdzi uzņēmumu turpmākajiem paziņojumiem.