PRIVACY-ENHANCED TRAINING AND DEPLOYMENT OF MACHINE LEARNING MODELS USING CLIENT-SIDE AND SERVER-SIDE DATA

Computer-implemented systems and methods for training a decentralized model for making a personalized recommendation. In one aspect, the method comprising: obtaining, using user activity data, client-side training data that includes features and training labels; and training, by the client device, a...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: JAIN, Prateek, CHIEN, Steve Shaw-Tang, ZHANG, Li, KRICHENE, Walid, RENDLE, Steffen, MU, Yarong, GUHA THAKURTA, Abhradeep, SONG, Shuang
Format: Patent
Sprache:eng ; fre
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
container_end_page
container_issue
container_start_page
container_title
container_volume
creator JAIN, Prateek
CHIEN, Steve Shaw-Tang
ZHANG, Li
KRICHENE, Walid
RENDLE, Steffen
MU, Yarong
GUHA THAKURTA, Abhradeep
SONG, Shuang
description Computer-implemented systems and methods for training a decentralized model for making a personalized recommendation. In one aspect, the method comprising: obtaining, using user activity data, client-side training data that includes features and training labels; and training, by the client device, a decentralized model in training rounds, wherein training, in each training round comprises: receiving, first data including a current server-side embedding generated by the server-side machine learning model, wherein the first data received from the server does not include any server-side data used in generating the current server-side embedding; generating, using the client-side machine learning model, a client-side embedding based on the client-side training data; updating, using the client-side embedding and the current server-side embedding and based on the training labels, the client-side machine learning model; generating, an updated client-side embedding; and transmitting second data including the updated client-side embedding for subsequent updating of the server-side machine learning model. L'invention concerne des systèmes et des procédés mis en oeuvre par ordinateur pour l'entraînement d'un modèle décentralisé pour faire une recommandation personnalisée. Selon un aspect, le procédé comprend les étapes suivantes: l'obtention, au moyen de données d'activité d'utilisateur, de données d'entraînement côté client qui comprennent des caractéristiques et des étiquettes d'entraînement; et l'entraînement, par le dispositif client, d'un modèle décentralisé dans des cycles d'entraînement, l'entraînement, dans chaque cycle d'entraînement comprenant: la réception, de premières données comprenant une incorporation côté serveur actuelle générée par le modèle d'apprentissage automatique côté serveur, les premières données reçues en provenance du serveur ne comprenant pas de données côté serveur utilisées dans la génération de l'incorporation côté serveur actuelle; la génération, au moyen du modèle d'apprentissage automatique côté client, d'une incorporation côté client sur la base des données d'apprentissage côté client; la mise à jour, au moyen de l'incorporation côté client et de l'incorporation côté serveur actuel et sur la base des étiquettes d'apprentissage, du modèle d'apprentissage automatique côté client; la génération, d'une incorporation côté client mise à jour; et la transmission de seconde données comprenant l'incorporation côté client mise à jour pour un
format Patent
fullrecord <record><control><sourceid>epo_EVB</sourceid><recordid>TN_cdi_epo_espacenet_WO2023158446A1</recordid><sourceformat>XML</sourceformat><sourcesystem>PC</sourcesystem><sourcerecordid>WO2023158446A1</sourcerecordid><originalsourceid>FETCH-epo_espacenet_WO2023158446A13</originalsourceid><addsrcrecordid>eNqNy8sKwjAQheFuXIj6DgOuC_aiuB2SqQ2kk5LESlelSFyIaKG-P2r1AVwdfvjOPLrWVjUo2pi4RBYkwVtUrPgAyBIk1dq0FbEHU0CFolRMoAntRCojSTs4uk8Ird4udkrS9HVkG7LfluhxGc0u_W0Mq98uonVBXpRxGB5dGIf-HO7h2Z1MukmzZLvP8x0m2X_qBUAgNsM</addsrcrecordid><sourcetype>Open Access Repository</sourcetype><iscdi>true</iscdi><recordtype>patent</recordtype></control><display><type>patent</type><title>PRIVACY-ENHANCED TRAINING AND DEPLOYMENT OF MACHINE LEARNING MODELS USING CLIENT-SIDE AND SERVER-SIDE DATA</title><source>esp@cenet</source><creator>JAIN, Prateek ; CHIEN, Steve Shaw-Tang ; ZHANG, Li ; KRICHENE, Walid ; RENDLE, Steffen ; MU, Yarong ; GUHA THAKURTA, Abhradeep ; SONG, Shuang</creator><creatorcontrib>JAIN, Prateek ; CHIEN, Steve Shaw-Tang ; ZHANG, Li ; KRICHENE, Walid ; RENDLE, Steffen ; MU, Yarong ; GUHA THAKURTA, Abhradeep ; SONG, Shuang</creatorcontrib><description>Computer-implemented systems and methods for training a decentralized model for making a personalized recommendation. In one aspect, the method comprising: obtaining, using user activity data, client-side training data that includes features and training labels; and training, by the client device, a decentralized model in training rounds, wherein training, in each training round comprises: receiving, first data including a current server-side embedding generated by the server-side machine learning model, wherein the first data received from the server does not include any server-side data used in generating the current server-side embedding; generating, using the client-side machine learning model, a client-side embedding based on the client-side training data; updating, using the client-side embedding and the current server-side embedding and based on the training labels, the client-side machine learning model; generating, an updated client-side embedding; and transmitting second data including the updated client-side embedding for subsequent updating of the server-side machine learning model. L'invention concerne des systèmes et des procédés mis en oeuvre par ordinateur pour l'entraînement d'un modèle décentralisé pour faire une recommandation personnalisée. Selon un aspect, le procédé comprend les étapes suivantes: l'obtention, au moyen de données d'activité d'utilisateur, de données d'entraînement côté client qui comprennent des caractéristiques et des étiquettes d'entraînement; et l'entraînement, par le dispositif client, d'un modèle décentralisé dans des cycles d'entraînement, l'entraînement, dans chaque cycle d'entraînement comprenant: la réception, de premières données comprenant une incorporation côté serveur actuelle générée par le modèle d'apprentissage automatique côté serveur, les premières données reçues en provenance du serveur ne comprenant pas de données côté serveur utilisées dans la génération de l'incorporation côté serveur actuelle; la génération, au moyen du modèle d'apprentissage automatique côté client, d'une incorporation côté client sur la base des données d'apprentissage côté client; la mise à jour, au moyen de l'incorporation côté client et de l'incorporation côté serveur actuel et sur la base des étiquettes d'apprentissage, du modèle d'apprentissage automatique côté client; la génération, d'une incorporation côté client mise à jour; et la transmission de seconde données comprenant l'incorporation côté client mise à jour pour une mise à jour ultérieure du modèle d'apprentissage automatique côté serveur.</description><language>eng ; fre</language><subject>CALCULATING ; COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS ; COMPUTING ; COUNTING ; PHYSICS</subject><creationdate>2023</creationdate><oa>free_for_read</oa><woscitedreferencessubscribed>false</woscitedreferencessubscribed></display><links><openurl>$$Topenurl_article</openurl><openurlfulltext>$$Topenurlfull_article</openurlfulltext><thumbnail>$$Tsyndetics_thumb_exl</thumbnail><linktohtml>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&amp;date=20230824&amp;DB=EPODOC&amp;CC=WO&amp;NR=2023158446A1$$EHTML$$P50$$Gepo$$Hfree_for_read</linktohtml><link.rule.ids>230,308,776,881,25542,76516</link.rule.ids><linktorsrc>$$Uhttps://worldwide.espacenet.com/publicationDetails/biblio?FT=D&amp;date=20230824&amp;DB=EPODOC&amp;CC=WO&amp;NR=2023158446A1$$EView_record_in_European_Patent_Office$$FView_record_in_$$GEuropean_Patent_Office$$Hfree_for_read</linktorsrc></links><search><creatorcontrib>JAIN, Prateek</creatorcontrib><creatorcontrib>CHIEN, Steve Shaw-Tang</creatorcontrib><creatorcontrib>ZHANG, Li</creatorcontrib><creatorcontrib>KRICHENE, Walid</creatorcontrib><creatorcontrib>RENDLE, Steffen</creatorcontrib><creatorcontrib>MU, Yarong</creatorcontrib><creatorcontrib>GUHA THAKURTA, Abhradeep</creatorcontrib><creatorcontrib>SONG, Shuang</creatorcontrib><title>PRIVACY-ENHANCED TRAINING AND DEPLOYMENT OF MACHINE LEARNING MODELS USING CLIENT-SIDE AND SERVER-SIDE DATA</title><description>Computer-implemented systems and methods for training a decentralized model for making a personalized recommendation. In one aspect, the method comprising: obtaining, using user activity data, client-side training data that includes features and training labels; and training, by the client device, a decentralized model in training rounds, wherein training, in each training round comprises: receiving, first data including a current server-side embedding generated by the server-side machine learning model, wherein the first data received from the server does not include any server-side data used in generating the current server-side embedding; generating, using the client-side machine learning model, a client-side embedding based on the client-side training data; updating, using the client-side embedding and the current server-side embedding and based on the training labels, the client-side machine learning model; generating, an updated client-side embedding; and transmitting second data including the updated client-side embedding for subsequent updating of the server-side machine learning model. L'invention concerne des systèmes et des procédés mis en oeuvre par ordinateur pour l'entraînement d'un modèle décentralisé pour faire une recommandation personnalisée. Selon un aspect, le procédé comprend les étapes suivantes: l'obtention, au moyen de données d'activité d'utilisateur, de données d'entraînement côté client qui comprennent des caractéristiques et des étiquettes d'entraînement; et l'entraînement, par le dispositif client, d'un modèle décentralisé dans des cycles d'entraînement, l'entraînement, dans chaque cycle d'entraînement comprenant: la réception, de premières données comprenant une incorporation côté serveur actuelle générée par le modèle d'apprentissage automatique côté serveur, les premières données reçues en provenance du serveur ne comprenant pas de données côté serveur utilisées dans la génération de l'incorporation côté serveur actuelle; la génération, au moyen du modèle d'apprentissage automatique côté client, d'une incorporation côté client sur la base des données d'apprentissage côté client; la mise à jour, au moyen de l'incorporation côté client et de l'incorporation côté serveur actuel et sur la base des étiquettes d'apprentissage, du modèle d'apprentissage automatique côté client; la génération, d'une incorporation côté client mise à jour; et la transmission de seconde données comprenant l'incorporation côté client mise à jour pour une mise à jour ultérieure du modèle d'apprentissage automatique côté serveur.</description><subject>CALCULATING</subject><subject>COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS</subject><subject>COMPUTING</subject><subject>COUNTING</subject><subject>PHYSICS</subject><fulltext>true</fulltext><rsrctype>patent</rsrctype><creationdate>2023</creationdate><recordtype>patent</recordtype><sourceid>EVB</sourceid><recordid>eNqNy8sKwjAQheFuXIj6DgOuC_aiuB2SqQ2kk5LESlelSFyIaKG-P2r1AVwdfvjOPLrWVjUo2pi4RBYkwVtUrPgAyBIk1dq0FbEHU0CFolRMoAntRCojSTs4uk8Ird4udkrS9HVkG7LfluhxGc0u_W0Mq98uonVBXpRxGB5dGIf-HO7h2Z1MukmzZLvP8x0m2X_qBUAgNsM</recordid><startdate>20230824</startdate><enddate>20230824</enddate><creator>JAIN, Prateek</creator><creator>CHIEN, Steve Shaw-Tang</creator><creator>ZHANG, Li</creator><creator>KRICHENE, Walid</creator><creator>RENDLE, Steffen</creator><creator>MU, Yarong</creator><creator>GUHA THAKURTA, Abhradeep</creator><creator>SONG, Shuang</creator><scope>EVB</scope></search><sort><creationdate>20230824</creationdate><title>PRIVACY-ENHANCED TRAINING AND DEPLOYMENT OF MACHINE LEARNING MODELS USING CLIENT-SIDE AND SERVER-SIDE DATA</title><author>JAIN, Prateek ; CHIEN, Steve Shaw-Tang ; ZHANG, Li ; KRICHENE, Walid ; RENDLE, Steffen ; MU, Yarong ; GUHA THAKURTA, Abhradeep ; SONG, Shuang</author></sort><facets><frbrtype>5</frbrtype><frbrgroupid>cdi_FETCH-epo_espacenet_WO2023158446A13</frbrgroupid><rsrctype>patents</rsrctype><prefilter>patents</prefilter><language>eng ; fre</language><creationdate>2023</creationdate><topic>CALCULATING</topic><topic>COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS</topic><topic>COMPUTING</topic><topic>COUNTING</topic><topic>PHYSICS</topic><toplevel>online_resources</toplevel><creatorcontrib>JAIN, Prateek</creatorcontrib><creatorcontrib>CHIEN, Steve Shaw-Tang</creatorcontrib><creatorcontrib>ZHANG, Li</creatorcontrib><creatorcontrib>KRICHENE, Walid</creatorcontrib><creatorcontrib>RENDLE, Steffen</creatorcontrib><creatorcontrib>MU, Yarong</creatorcontrib><creatorcontrib>GUHA THAKURTA, Abhradeep</creatorcontrib><creatorcontrib>SONG, Shuang</creatorcontrib><collection>esp@cenet</collection></facets><delivery><delcategory>Remote Search Resource</delcategory><fulltext>fulltext_linktorsrc</fulltext></delivery><addata><au>JAIN, Prateek</au><au>CHIEN, Steve Shaw-Tang</au><au>ZHANG, Li</au><au>KRICHENE, Walid</au><au>RENDLE, Steffen</au><au>MU, Yarong</au><au>GUHA THAKURTA, Abhradeep</au><au>SONG, Shuang</au><format>patent</format><genre>patent</genre><ristype>GEN</ristype><title>PRIVACY-ENHANCED TRAINING AND DEPLOYMENT OF MACHINE LEARNING MODELS USING CLIENT-SIDE AND SERVER-SIDE DATA</title><date>2023-08-24</date><risdate>2023</risdate><abstract>Computer-implemented systems and methods for training a decentralized model for making a personalized recommendation. In one aspect, the method comprising: obtaining, using user activity data, client-side training data that includes features and training labels; and training, by the client device, a decentralized model in training rounds, wherein training, in each training round comprises: receiving, first data including a current server-side embedding generated by the server-side machine learning model, wherein the first data received from the server does not include any server-side data used in generating the current server-side embedding; generating, using the client-side machine learning model, a client-side embedding based on the client-side training data; updating, using the client-side embedding and the current server-side embedding and based on the training labels, the client-side machine learning model; generating, an updated client-side embedding; and transmitting second data including the updated client-side embedding for subsequent updating of the server-side machine learning model. L'invention concerne des systèmes et des procédés mis en oeuvre par ordinateur pour l'entraînement d'un modèle décentralisé pour faire une recommandation personnalisée. Selon un aspect, le procédé comprend les étapes suivantes: l'obtention, au moyen de données d'activité d'utilisateur, de données d'entraînement côté client qui comprennent des caractéristiques et des étiquettes d'entraînement; et l'entraînement, par le dispositif client, d'un modèle décentralisé dans des cycles d'entraînement, l'entraînement, dans chaque cycle d'entraînement comprenant: la réception, de premières données comprenant une incorporation côté serveur actuelle générée par le modèle d'apprentissage automatique côté serveur, les premières données reçues en provenance du serveur ne comprenant pas de données côté serveur utilisées dans la génération de l'incorporation côté serveur actuelle; la génération, au moyen du modèle d'apprentissage automatique côté client, d'une incorporation côté client sur la base des données d'apprentissage côté client; la mise à jour, au moyen de l'incorporation côté client et de l'incorporation côté serveur actuel et sur la base des étiquettes d'apprentissage, du modèle d'apprentissage automatique côté client; la génération, d'une incorporation côté client mise à jour; et la transmission de seconde données comprenant l'incorporation côté client mise à jour pour une mise à jour ultérieure du modèle d'apprentissage automatique côté serveur.</abstract><oa>free_for_read</oa></addata></record>
fulltext fulltext_linktorsrc
identifier
ispartof
issn
language eng ; fre
recordid cdi_epo_espacenet_WO2023158446A1
source esp@cenet
subjects CALCULATING
COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS
COMPUTING
COUNTING
PHYSICS
title PRIVACY-ENHANCED TRAINING AND DEPLOYMENT OF MACHINE LEARNING MODELS USING CLIENT-SIDE AND SERVER-SIDE DATA
url https://sfx.bib-bvb.de/sfx_tum?ctx_ver=Z39.88-2004&ctx_enc=info:ofi/enc:UTF-8&ctx_tim=2025-02-19T23%3A57%3A34IST&url_ver=Z39.88-2004&url_ctx_fmt=infofi/fmt:kev:mtx:ctx&rfr_id=info:sid/primo.exlibrisgroup.com:primo3-Article-epo_EVB&rft_val_fmt=info:ofi/fmt:kev:mtx:patent&rft.genre=patent&rft.au=JAIN,%20Prateek&rft.date=2023-08-24&rft_id=info:doi/&rft_dat=%3Cepo_EVB%3EWO2023158446A1%3C/epo_EVB%3E%3Curl%3E%3C/url%3E&disable_directlink=true&sfx.directlink=off&sfx.report_link=0&rft_id=info:oai/&rft_id=info:pmid/&rfr_iscdi=true