A „Tedd érdekessé és márkára szabottá” érthetően hangzik egy értekezleten, de a gépek számára semmi stabil igazolást nem nyújt. Mielőtt feladatokat adnál a Pippit videóügynöknek, alakíts minden elvárást megfigyelhető eredménnyé, egy igazságforrássá és egy válasszá arra az esetre, ha az ellenőrzés sikertelen lenne. A cél nem az ítélkezés megszüntetése. A cél az, hogy egyszerű hibák ne jussanak el azokhoz, akik idejére a nehezebb döntésekhez van szükség.
Mitől ellenőrizhető egy sikerességi kritérium?
Egy ellenőrizhető kritérium olyasmit ír le, ami megfigyelhető az exportált videóban vagy annak projektjegyzékében. Megnevezi az elemet, a megengedett állapotot, a bizonyítékot és a teendőt. A terméknév megfelel az elfogadott nyilvántartásnak – ez ellenőrizhető. A termék prémium érzetet kelt, amíg a csapat meg nem határozza a fontos jeleket.
Használj egy kritériumot egy döntéshez. Olyan mondat, amely logót, feliratokat, termékszínt, állításmellényt és ritmust kombinál, nem magyarázza meg, miért bukott el egy videó. Válaszd szét azokat a tényeket, amelyek blokkolhatják a kiadást, azoktól a tulajdonságoktól, amelyeket a véleményező egy skálán pontozhat.
A NIST szerint a megbízható AI mérések és értékelés azokra a jelentős mérőszámokra és módszerekre épül, amelyek megfelelnek az alkalmazási kontextusnak. Ezért egy videóügynöknek olyan kritériumokra van szüksége, amelyek az adott közönségre, csatornára, erőforrásokra és károsodási szintre épülnek, nem pedig egy univerzális minőségi számra.
Hogyan írjunk egy Kritériumi szerződést?
Határozza meg a következő hat területet: cél, az igazság forrása, tesztelési módszer, megfelelési szabály, hibás eset intézkedése, és tulajdonos. A cél meghatározza, hogy mit ellenőriznek. Az igazság forrása megnevezi a jóváhagyott feljegyzést. A tesztelési módszer elmagyarázza, hogyan vizsgálja meg a videó ügynök vagy az ellenőr. Az utolsó mezők teszik lehetővé a cselekvést az eredmények alapján.
Például: a cél az eladási ár feltüntetése; a forrás a kampánylap 12. verziója; a módszer az összehasonlítja a látható és kimondott árakat; a siker pontos egyezést igényel; a sikertelenség blokkolja az exportot; a felelős a kampányműveletek osztálya. Egy jövőbeni árváltozást most már csak egy helyen kell frissíteni és egy tesztet újra futtatni.
Tartomány hozzáadása. Egy kritérium csak az első képkockára, minden kimondott jelenetre, egy bizonyos piacra vagy ajánlást tartalmazó videókra vonatkozhat. Tartomány nélkül az ellenőrző eszköz jelentheti az ártalmatlan hiányt, vagy kihagyhat egy problémát, ami a várt pillanaton kívül jelenik meg.
Nevezze meg a pontos tárgyat vagy viselkedést, amelyet tesztelnek.
Hivatkozzon egy aktuális igazságforrásra.
Írja le egy ismételhető ellenőrzési módszert.
Állítsa be az elfogadhatósági határt és bármilyen tűrést.
Válassza az átmenet, átnézés vagy megszakítás eredményét.
Rendelje hozzá azt a személyt, aki képes megoldani a nézeteltéréseket.
Mely ellenőrzések igényelnek három kimenetelt?
Bináris szabályok az egzakt tényekre működnek: hibás URL, hiányzó nyilatkozat, nem támogatott fájltípus vagy termékazonosító eltérés. A kreatív és érzékelési ellenőrzések gyakran igényelnek elfogadást, felülvizsgálatot és elutasítást. A felülvizsgálat határvonalon lévő eseteket talál, anélkül hogy azt tettetné, hogy azok biztonságosak vagy használhatatlanok volnának.
Határozza meg a köztes zónát a tesztelés előtt. A feliratok kontrasztja átlépheti a csapat által mért küszöböt, alacsonyabb határ alatt megállhat, és a kettő között felülvizsgálatra kerülhet. Az arcazonosítás emberi felülvizsgálatot igényelhet, ha a biztonság mértéke nem egyértelmű, mivel egy hibás átengedés súlyosabb, mint egy lassabb döntés.
Ne hagyja, hogy a felülvizsgálat minden homályos szabály számára gyűjtőláda legyen. Kövesse nyomon, hogy egyes kritériumok milyen gyakran kerülnek oda, és miért. Ha a legtöbb eset megvitatást igényel, akkor lehet, hogy a forrás, a tesztmódszer vagy a határérték nem egyértelmű. Javítsa a szerződést ahelyett, hogy a videóügynököt hibáztatná az olyan bizonytalanságokért, amelyeket a csapat soha nem oldott meg.
Mi tartozik a tesztcsomagba?
Készítsen egy kis reprezentatív csomagot a szélesebb használat előtt. Tartalmazza az egyszerű videókat, nehéz szélsőséges eseteket, ismert hibákat, különböző képarányokat, csendes és zsúfolt háttereket, hosszú és rövid feliratokat, jóváhagyott és lejárt igényeket, valamint hiányzó eszközöket. A csomagnak inkább a telepítésre, mintsem egy tiszta bemutatóra kell hasonlítania.
Címkézze meg a várt eredményeket anélkül, hogy azokat a rendszernek megjelenítené az ellenőrzés során. Futtassa a videóügynököt a feltételek alapján, majd hasonlítsa össze az eredményt az elfogadott címkével. Számolja külön a téves áthaladásokat a téves megállásoktól, mert ezek különböző költségeket okoznak.
Új gyártási hibák hozzáadása a csomaghoz felülvizsgálat után Ha egy vízjel le lett vágva, egy ár megmaradt az audióban a képkockáról történő eltávolítás után, vagy egy hivatkozás rossz piacra mutatott, tartsa meg ezt az esetet regressziós tesztként. A csomag működési előzménnyé válik.
Mit kell az embereknek mindig átnézniük?
Az embereknek birtokolniuk kell a jelentést, az igazságosságot, az érzékeny kontextust, a humort, a meggyőzést és minden döntést, amely valódi tekintélyt igényel. Egy ellenőrző megerősítheti, hogy létezik egy forráslink. Nem tudja eldönteni, hogy a kiválasztott állítás-e felelős egy sebezhető közönségért, vagy hogy egy látszólagos vicc megaláz-e valakit.
Emberi felülvizsgálat is szükséges, ha az bizonyítékok egymásnak ellentmondanak. Előfordulhat, hogy a terméklapon egyik kifejezés szerepel, míg az elfogadott kampánytervben egy másik. A rendszernek mindkét forrást fel kell mutatnia és le kell állnia. Nem szabad a kényelmesebb választást választania, sem pedig csendben kombinálnia azokat.
A folyamat átadását ugyanolyan gondossággal határozza meg, mint az automatizált tesztet. Nevezze meg a szerepet, a szükséges bizonyítékokat, a válaszidőt és az opciókat. Egy olyan üzenet, amelyben csak az szerepel, hogy manuális felülvizsgálat szükséges anélkül, hogy megjelenítené a keretet, a szabályt és a forrást, csupán másik személyre hárítja át a keresési munkát.
Olyan állítások, amelyek igazsága a változó külső körülményektől függ.
Egy személy képmásának, hangjának, történetének vagy érzékeny adatainak felhasználása.
Szabályozott, orvosi, pénzügyi, jogi, biztonsági vagy jogosultsági jelentés.
Kulturális kontextus, humor, sztereotipizálás vagy lehetséges megalázás.
Jóváhagyott források közötti konfliktusok vagy nem egyértelmű döntési hatáskör.
Hogyan mérje a vizsgálót?
Mérje meg a kritériumrendszert, ne csak az előállított videókat. Kövesse nyomon a téves jóváhagyásokat, téves leállításokat, felülvizsgálati arányt, megoldási időt, ismételt hibákat, valamint azokat a változtatásokat, amelyeket kiadás előtt észleltek. A magas jóváhagyási arány rossz lehet, ha a tesztek figyelmen kívül hagyják a fontos hibákat.
Bontsa le az eredményeket videótípus, piac, nyelv, termékcsalád és hibakategória szerint. Az átlag eltakarhatja a gyenge feliratozás-ellenőrzéseket vertikális videókon vagy a rossz termékillesztést átlátszó csomagolásokon. A tesztcsomagnak és a jelentésnek ugyanazokat a szegmenseket kell használnia.
Állítson be egy változtatási kaput. Egy új modell, prompt, szerkesztő, sablon, forrásrendszer vagy publikációs csatorna megváltoztathatja a viselkedést. Futtassa újra az érintett csomagot, mielőtt bővítené a munkafolyamatot, és hasonlítsa össze az új bizonylatot az utoljára elfogadott változattal.
Mi az a bizonyíték bizonylat?
A bizonyíték bizonylat egy tömör feljegyzés arról, hogy mi került ellenőrzésre. A projekt- és exportazonosítókat, kritériumverziókat, forrásokat, időbélyegeket, teszteredményeket, megjelölt képkockákat vagy időkódokat, a bírálók döntéseit és a végleges kiadási állapotot tartalmazza. Lehetővé teszi az elfogadás ellenőrzését az értekezlet lezárása után.
Tároljon bizonyítékokat, ne csupán egy zöld jelvényt. Ha egy feliratozási ellenőrzés sikeres volt, őrizze meg a tesztelt átiratot és képkocka eredményt. Ha egy értékelő felülbírálta a leállítást, rögzíteni kell az okot és a felelőst. A felülbírálások feltárhatnak rossz szabályokat, de kockázatos szokásokat is felfedhetnek.
Tartsa meg a nyugtát a közzétett verzióval együtt. Egy későbbi módosítás az áron, hangon, vágáson vagy célállomáson érvénytelenítheti a korábbi teszteket. A megváltozott feltételek újbóli ellenőrzése gyorsabb, ha a korábbi bizonyítékok megmutatják, mi maradt változatlan.
Hogyan alkalmazza a Pippit kritériumait?
Kezdje a Pippit összefoglalót a kritérium szerződésével, ne jelzőkkel teli bekezdéssel. Adja meg az elfogadott anyagokat és forrásokat, majd határozza meg a kiadási akadályokat, ellenőrzési feltételeket és a szükséges bizonyítékokat. A videoügynök készíthet egy vázlatot, miközben a csapat fenntartja a független bírálati standardot.
Ellenőrizze a piszkozatot a Pippit videószerkesztőben. Ellenőrizze a beszélt és látható állításokat, feliratokat, biztonsági területeket, termékazonosságot, közleményeket, hangot és célt együtt. Rögzítse az időkódokat minden olyan elemhez, amelyet emberi tulajdonoshoz küldenek.
Csak az exportált fájlt tegye közzé, amely megfelel a nyugtának. Ha a csapat egy feliratot, vágást, klipet, árat vagy cselekvésre ösztönző elemet módosít az engedélyezés után, futtassa újra az érintett kritériumokat. A siker azt jelenti, hogy a végleges fájl megfelelt a szerződésnek, nem pedig azt, hogy egy korábbi piszkozat egyszer zöld jelölést kapott.
Gyakran ismételt kérdések
K1. Hány sikerkritériumnak kell lennie egy videónál?
Használja a legkisebb készletet, amely lefedi a kiadási kockázatot és az ígért eredményt. Egy egyszerű emlékeztető esetében csak a forrás-, felirat-, vágás-, hang- és célellenőrzések szükségesek. Egy termékigény több támogatást igényel. Kombinálja az ismétlődő szabályokat, de ne rejtsen el nem kapcsolódó döntéseket egyetlen kritériumba csak azért, hogy a lista rövidebb legyen.
2. negyedév: Eldöntheti egy videóügynök, hogy egy videó érdekes-e?
Megvizsgálhat meghatározott jeleket, például a kezdési időzítést, jelenetváltásokat, csendet, feliratok tempóját vagy nézői teszteredményeket. Az elkötelezettség önmagában a közönségtől és a kontextustól függ, ezért kerüljük az univerzális címkék használatát. Használjon viselkedési bizonyítékokat a célközönségtől, és tartsa külön a kreatív ítéleteket a determinisztikus kiadási szabályoktól.
3. negyedév: Mi a különbség egy értékelési szempont és egy akadály között?
Egy értékelési szempont több szinten pontozza a minőséget, és segíti az összehasonlítást vagy az áttekintést. Az akadály egy olyan feltételt jelöl, amely megakadályozza a kiadást, például rossz ár vagy hiányzó hozzájárulás esetén. Ne alakítson minden alacsony értékelési pontszámot akadállyá. A csapat által meghatározott hibák kizárása érdekében a munkafolyamatot soha nem szabad elindítani.
Q4. Milyen gyakran kell frissíteni a tesztcsomagot?
Frissítse, amikor a gyártás jelentős új hibát tár fel, egy forrásrendszer megváltozik, vagy a munkafolyamat új modellt, formátumot, piacot vagy csatornát kap. Őrizze meg a stabil eseteket összehasonlítás céljából, és adjon hozzá célzott eseteket az új kockázatokhoz. A változó csomaghoz verziótörténet szükséges, hogy a trendek értelmezhetők maradjanak.
Q5. Ki írhat felül egy sikertelen kritériumot?
Csak a kijelölt tulajdonos vagy egy engedélyezett eszkalációs szerepkör írhatja felül. A nyugtán fel kell tüntetni a bizonyítékot, az okot, a dátumot és az érintett exportot. Gyakori felülírások jelzik, hogy a kritériumot vagy a munkafolyamatot javítani kell. Nem szabad, hogy informális kerülőút legyen a kiadási szabály megkerülésére.
Tedd megfigyelhetővé a végrehajtást
Egy videómunkafolyamat tesztelhetővé válik, ha a „jó” látható tényekre, hasznos tartományokra és megnevezett emberi ítéletekre oszlik fel. Adj meg minden kritériumhoz forrást, módszert, határt, hibaelhárítási tevékenységet és felelőst. Teszteld reprezentatív eseteken, őrizd meg a bizonyítékokat, és hajtsd végre újra az érintett ellenőrzéseket a változtatások után. Az eredmény nem automatikus ízlés. Egy megbízható határvonal az rutinellenőrzés és azok között a döntések között, amelyeket az embereknek továbbra is meg kell hozniuk.