Microsoft accelerează optimizarea GPT-4.1 cu Direct Preference Optimization în Azure AI

Microsoft accelerează optimizarea GPT-4.1 cu Direct Preference Optimization

Microsoft inovează modul în care organizațiile realizează fine-tuning-ul modelelor lingvistice de mari dimensiuni, prin noi actualizări aduse suitei Azure AI. Cele mai recente îmbunătățiri ale portalului Azure AI Foundry, alături de API-uri și SDK-uri modernizate în Azure OpenAI Service, oferă acum suport pentru Direct Preference Optimization (DPO) atât pentru GPT-4.1, cât și pentru GPT-4.1-mini.

Ce este Direct Preference Optimization și de ce este important?

DPO reprezintă o tehnică avansată de ajustare a modelelor AI, ce permite dezvoltatorilor să rafineze inteligența artificială pe baza preferințelor umane, nu doar prin Reinforcement Learning cu feedback uman (RLHF). Prin compararea răspunsurilor preferate și a celor nepreferate, DPO ajustează parametrii modelului pentru a fi mai bine aliniați cu așteptările utilizatorilor și identitatea de brand. Comparativ cu RLHF, DPO este mai eficient din punct de vedere computațional, oferind rapiditate superioară fără a compromite precizia alinierii modelului.

Această inovație permite companiilor să antreneze modele AI adaptate profund stilului lor conversațional, cerințelor de siguranță și liniilor directoare de branding, reducând considerabil timpul de antrenare și costurile asociate.

Extinderea Global Training Azure AI în noi regiuni

Microsoft anunță și extinderea funcționalității Global Training din Azure AI în alte 12 regiuni, inclusiv East US, West Europe, UK South și Switzerland North. Deși această funcționalitate rămâne în fază de public preview, extinderea geografică este binevenită în contextul în care suveranitatea datelor devine crucială—mai ales în Europa, unde reglementările impun gestionarea locală a datelor pentru o confidențialitate și conformitate sporite.

Funcții și capabilități noi, în curând disponibile

Actualizările viitoare aduc funcții precum posibilitatea de a întrerupe și relua procesul de fine-tuning și suport pentru rafinarea continuă a modelelor AI. De asemenea, Microsoft va introduce GPT-4.1-nano în regiunile Azure nou susținute, oferind companiilor și dezvoltatorilor opțiuni suplimentare și putere de procesare sporită.

Lansarea Responses API: Integrare inteligentă a AI în aplicații

Dezvoltatorii pot profita acum de noul Responses API, creat pentru a integra fără probleme modele personalizate și optimizate în aplicații și fluxuri de lucru complexe. Acest API este optimizat pentru AI conversațional de tip agentic, gestionând cu succes dialoguri extinse, păstrând contextul relevant și facilitând accesul la instrumente diverse în mod transparent.

În plus, Responses API urmărește istoricul conversațiilor, evidențiază modul de raționament al modelului, afișează starea răspunsurilor pe parcursul generării și permite procesarea simultană. Este pe deplin compatibil cu o gamă largă de instrumente AI, de la căutare web în timp real până la recuperarea de documente.

Impactul pe piață și scenarii de utilizare

Prin aceste inovații, Microsoft consolidează Azure AI ca platformă globală și adaptabilă pentru dezvoltarea de soluții AI scalabile și sigure. Optimizarea DPO, extinderea regională și API-urile dedicate dezvoltatorilor permit organizațiilor din toate domeniile să creeze experiențe AI personalizate și conforme cu noile reglementări de protecție a datelor.

Pentru companiile care doresc să integreze AI conversațional în asistența pentru clienți, crearea de conținut sau interacțiunea cu brandul, noul set de instrumente și funcționalități Azure stabilește un standard nou pentru eficiență, flexibilitate și confidențialitate.