Móiminteam

Conas a fhoghlaimíonn samhlacha i ndáiríre, ó ghnáth-shliocht grádán go Adam

Tugann móiminteam cuimhne do sliocht grádán. In ionad an grádán reatha amháin a úsáid, coinníonn sé meán gluaisteach de na grádáin is déanaí agus tógann sé céim sa treo carnach sin.

Cabhraíonn sé seo ar dhá bhealach: réitíonn sé grádáin thorannacha, agus tógann sé luas feadh treonna a bhfuil grádáin ag aontú leo i gcónaí. Trasna gleann caol, cealaíonn grádáin thaobhacha ailtéarnacha a chéile; feadh an treo úsáidigh, suimíonn grádáin arís agus arís eile.

Ní dhéanann liathróid babhlála dearmad ar an mbrú deiridh. Cuireann brú amháin ag bogadh í, agus tógann brúnna arís agus arís eile sa treo céanna luas. Ní chasann sméideanna beaga taobhacha ar ais í láithreach. Fágann móiminteam go n-iompraíonn optamú níos lú cosúil le céimeanna ar leith agus níos mó cosúil le gluaisne le táimhe. Féach é ag tarlú thíos: rith gnáth-ísliú ar dtús le β = 0, ansin ardaigh β agus rith arís. Trá an preabadh ó thaobh go taobh agus cruinníonn an cosán luas feadh an ghleanna.

Cá bhfeictear é seo in MLFanann SGD le móiminteam ina bhunlíne láidir don fhís ríomhaireachta agus don oiliúint mhórscála. Fiú nuair a bhíonn Adam coitianta, tá tábhacht le tuiscint a bheith agat ar mhóiminteam, mar gur móiminteam faoi ainm eile é an chéad mhóimint de Adam.
▶ Móiminteam
← Coinníollú agus FiarlánúRMSProp →