Gudanar da Binciken Delphi Inda Hujjojin Suka Dade a Kowane Zango

Kwamitin da ya taru kan wani abu da ba wanda zai iya bayyana ba

Zagaye na 3 na binciken Delphi ya rufe kuma mai gudanarwa ya aiko da imel ga kwamitin: an cimma yarjejeniya. Matsakaicin ya tashi daga 6.1 zuwa 7.8 akan tambayar karɓar shekaru goma; bambancin ma'auni ya ragu da rabi; rahoton yana rubuta kansa. Sai wani mamba na kwamitin — wanda yake da hankali — ya amsa da tambayar da ta warware shi: "Na sake duba hasashen na saboda taƙaitaccen bayanin Zagaye na 2 ya ce kungiyar tana da dalilai masu ƙarfi na fata. Zan iya ganin waɗannan dalilan? Ina so in san abin da na yarda da shi."

Babu amsa mai kyau. Rounds din sun kasance bincike. Tsakanin su, kwamitin ya ga matsakaita, kashi hudu da taƙaitaccen bayani na mai gudanarwa. Dalilan — duk wani takamaiman hujja da ta motsa kwararru guda goma sha ɗaya su inganta — an rubuta su a cikin akwatunan rubutu kyauta, an haɗa su cikin taƙaitaccen bayani, kuma an rasa su. Kwamitin ya haɗu; akan wane tunani, babu wanda zai iya faɗi.

Wannan ba karatun da aka karye ba ne; yana da al'ada tare da kayan aiki na al'ada, kuma yana ɓata mafi kyawun halayen hanyar. An tsara Delphi bisa ga fahimta mai kyau: anonymity da 'yancin kai suna cire tasirin iko da matsayin da ke ɓata taron fuska-da-fuska, kuma amsar da aka sarrafa tana ba da damar ainihin hukunci ya canza ba tare da matsin lamba na zamantakewa ba. Software na bincike yana ba da 'yancin kai kuma yana rasa ma'anar amsar. Wannan koyarwar tana gudanar da irin waɗannan zagaye tare da tunani da aka kiyaye.

Menene asarar da binciken da aka yi amfani da Delphi ke yi tsakanin zagaye?

Wannan zagaye na Delphi yana samar da abubuwa guda biyu: rarrabawa (inda kwamitin ke tsaye) da kuma jigon tunani (dalilin). An gina kayan bincike don na farko. Na biyu yana zama mai sauƙi a cikin filayen rubutu kyauta sannan kuma a cikin taƙaitaccen bayani na mai gudanarwa — wanda a hankali ke saka edita wanda ba a iya lissafa shi ba tsakanin masana da juna. Masu halartar a Zagaye na 2 ba sa amsa hujjojin abokan aikinsu; suna amsa fassarar su. Don wata hanya wacce dukkan iliminta shine hukuncin haɗin gwiwa mai tsari, wannan abu ne mai ban mamaki a rasa — tarihin hanyoyin haɗin gwiwa yana da yawa tarihin faɗa kan wannan matakin amsa.

Tsarawa: tambayar, kwamitin — da shawarar rashin bayyana sunan

Kafin komai, shawara daya da mai hanyoyin bincike zai duba farko: menene ainihin bukatar kwamitinku — 'yancin kai ko kuma rashin sanin juna — saboda ba su daidai ba, kuma dandamalin yana ba ku daya daga cikinsu a matsayin tsoho.

1. 1Tsara tayin a matsayin asalin ikirari — mai iya jayayya, ba mai bude kofa ba: "X zai zama tsarin aikin likita na yau da kullum kafin 2032", ba "menene makomar X?". Asalin da ba a fayyace ba yana haifar da matsayi da ba za a iya tantancewa ba. Tsayawa: ana iya jayayya kan asalin a gefe guda da kuma dayan.

Zagaye na 1: matsayi masu zaman kansu, sannan lambobin

1. 1Tagar mika kai tsaye. Kowanne mai duba yana ƙara goyon baya ko matsayin adawa a ƙarƙashin tushen — ba tare da ganin na wasu ba har sai an mika. Wannan shine 'yancin da hanyar ke buƙata, wanda kafofin watsa labarai ke tabbatarwa maimakon dogaro da tsarin mai gudanarwa. Tsayawa: kowanne mai duba yana da ≥1 matsayi; babu wanda ya ga ko ya gyara na wani.
2. 2Zaɓi: Masu ba da ra'ayi na AI, an yi musu lakabi. A ƙara wasu matsayi daga samfuran da dama. Asalin an yi masa alama a kowane hujja, don haka matsayoyin na'ura koyaushe suna bambanta da na ƙwararru. Wannan yana faɗaɗa sararin matsayi; ba ya ƙara kwarewa — bambancin yana da mahimmanci kuma yana cikin rahotonku (duba sashin kwamitin haɗin gwiwa a ƙasa). Tsayawa: Matsayoyin AI an yi musu lakabi a fili.
3. 3Kimantawa na zagaye na 1. Kowane mai ba da ra'ayi yana kimanta kowanne matsayi — wani ƙima tare da lakabi, tare da ma'aunin da ka bayyana ("1 = ba a yiwu ba … 9 = kusa da tabbaci"). Wannan shine rikodin lissafi na zagayen. Tsayawa: cikakken matrix na kimantawa; ma'auni an bayyana su sau ɗaya, an yi amfani da su a cikin daidaito.

Kulawar ra'ayi da ke dauke da dalilin

Yanzu kayan aikin binciken mataki ba za su iya yi ba. Abin da aka bayar na ra'ayi don Zagaye na 2 ba taƙaitaccen rubutun da mai gudanarwa ya yi ba — shi ne itacen kansa: kowanne matsayi, a cikin kalmomin marubucinsa (ko samfurin), tare da rarraba kimar sa. Masu halarta suna ganin ainihin wane hujja ne kungiyar ta ga mai karfi, wane ne ya raba kwamitin, da wane ne ya gaza — ba tare da wani fassarar edita a tsakiya ba. Aikin mai gudanarwa yana raguwa zuwa gudanarwa: sanar da lokacin, nuna itacen.

Zagaye na 2: tambaya, kalubalanci, sulhu

Zagaye na 2 shine inda tsohon Delphi ke cewa "sake duba bisa ga ra'ayin da aka bayar." Tare da dalilin da ke bayyana, sake duba yana zama mai aiki — motsi guda uku masu tsari, kowanne yana da tattaunawa mai juyawa hudu tare da marubucin matsayin:

1. 1Tattauna — Tsarin Q&A. Kafin ka gyara zuwa wani matsayi, fahimci shi: tambayarka, amsar marubucin, ci gaba, amsa — cikakke. Don matsayoyin AI, amsar samfurin tana zuwa ta atomatik, don haka kwamitin ba ya taɓa jinkirin jiran wani memba. Tsayawa: matsayoyin da suka canza ra'ayi suna dauke da jerin bayanai da ke bayyana dalilin.
2. 2Kalubale — Binciken sarkar. Kimanta wani matsayi a matsayin wanda ba a goyi bayan; marubucin ya amsa; ci gaba; amsa. N masu ba da shawara suna kalubalantar wani matsayi = N sarkar jere — wanda shine ainihin tsarin da Delphi ke so: jere masu nazari masu zaman kansu, ba tare da wata hanya guda don sake shiga ba. Matakin duba: matsayen da aka yi takara suna dauke da kalubale da aka kammala.
3. 3Daidaita kusan-maimaitawa — Tsarin sulhu. Masana biyu da ke rike da kusan matsayin iri ɗaya suna ƙididdige ra'ayi guda biyu a cikin kimantawa. Daya yana ba da shawarar haɗa tsarin ga ɗayan, a kan rikodi. Tsayawa: babu maimaitawa da aka bar ba a haɗa ko bayyana ba.
4. 4Kimantawa na zagaye na 2. Sake kimanta komai a ƙarƙashin waɗannan ma'auni. Tsayawa: matrix na biyu da aka kammala, a shirye don kwatantawa.

Hanyoyin haɗin gwiwa: ƙara samfura ba tare da ƙara ƙwarewa ba

Saboda cewa matsayin da AI ta rubuta na amsa jerin su — an dawo da su ga samfurin da ya rubuta su — kwamitin hadin gwiwa na mutum/AI yana da amfani sosai: yi amfani da samfuran don fadada sararin matsayin Round 1, sannan bari kwararrun mutane su duba matsayin na'ura a Round 2 kuma su sami amsoshi masu ma'ana ba tare da kowa yana aiki a gefen na'urar ba. Ka kasance daidai game da abin da wannan ke saya: fadi shigarwa, ba ƙarin ƙwarewa ba. Matsayin samfurin shine kyakkyawan tsari, ba aikin hukunci ba, kuma ana samun lakabi don a iya lissafin lambobin hadin kai tare da kuma ba tare da jerin na'ura ba. Lokacin da fadada shigarwa ke taimakawa da lokacin da kawai yake ragewa shine littafinsa — lokacin da taron ya yi kuskure yana rufe hanyoyin gazawa; gefen juyawa, dalilin da yasa hukuncin 'yanci ke taruwa da kyau lokacin da suke da 'yanci sosai, shine labarin Galton da Condorcet.

Auna hadin kai, bayar da rahoton rashin jituwa

Hadin gwiwa shine raguwa na rarraba kimantawa tsakanin zagaye, kuma kuna auna shi ta hanyar kwatanta su — da gaske, da hannu ko fitarwa: babu wani kididdigar hadin gwiwa da aka gina a ciki, babu Kendall's W na atomatik, babu gwajin kwanciyar hankali. Fitar da matrices biyu ku kuma lissafa abin da filinku ke tsammani, ko kuma ku bayar da rahoton rarraba a cikin inganci ("goma sha biyu daga cikin goma sha hudu sun ragu; biyu sun rabu ƙarin").

Kuma a bayar da rahoton rashin jituwa. Wani matsayi inda kwamitin ke rashin jituwa da kyau a cikin zagaye — tare da rarraba iri ɗaya, dukkanin ɓangarorin suna karewa a cikin jerin da aka kammala — wani bincike ne, wanda za a iya cewa shine mafi daraja: yana nuna inda hukuncin ƙwararru ya rabu, tare da dalilan dukkan ɓangarorin da aka haɗa. Kawai cire shi daga cikin lissafi shine babban zunubi na Delphi. Itacen yana sa rashin jituwa ya zama abin da za a iya ambato: ƙin amincewa da ya rage, marubucinsa (ko wakilin sa na jama'a da aka ɓoye), da kalubalen da ya tsira daga gare su.

Gaskiya iyakoki

• ✗Yancin kai ba shine rashin sanin kowa ba — an bayyana a fili kuma yana da kyau a maimaita: ana danganta hujjojin masu haya na kashin kai. Idan rashin sanin kowa yana da mahimmanci a hanyoyin bincike, yi amfani da Argumentree.AI na jama'a kuma ku bayyana hakan a cikin rubutunku.
• ✗Babu manajan zagaye. Babu maɓallin kusa da Zagaye-1, babu rufewar gani a kowanne zagaye. Zage-zage wata hanya ce ta sauƙaƙe da kuke tilasta tare da lokutan da umarni — ku faɗi haka, kuma kada ku nuna aikin da ba ya nan.
• ✗Babu kididdiga ta haɗuwa da aka gina a ciki. Wannan W na Kendall, gwaje-gwajen kwanciyar hankali da makamantansu suna nan don ka ƙirƙira daga ƙimar da aka fitar.
• ✗Kimantawa suna darajar guda ɗaya mai lakabi, ba kayan aikin Likert tare da tushe masu inganci ba. Fayil ɗin tushe a cikin lakabin ku kuma ku kiyaye su a matsayin dindindin a dukkan zagaye.
• ✗Waya guda hudu ne, sannan a kammala. Tattaunawa ta kwararru da ke bukatar karin bayani tana samun kira — wayar tana rubuta abin da aka riga aka tambaya da amsa.

Darussan aikace-aikace

• ✓Rubuta makullin kafin Zagaye na 1 kuma liƙa su cikin kowane sanarwa na taga. Rabin dukkan bayanan Delphi masu datti shine jujjuyawar makulli.
• ✓Lokutan lokaci suna da kyau a fadin lokutan duniya — awanni 72 a kowanne zagaye suna aiki ga kwamitocin kasa da kasa; sarkokin suna da asyncronous ta hanyar gini.
• ✓Cap Round-1 matsayi per panelist (uku ya isa). Delphi na ba da lada ga matsayi da aka yi la'akari da su, ba yawan su ba.
• ✓Tsayar da itacen tsakanin zagaye. Sanar da cewa za a cire gabatarwa a wajen lokutan — tsarin zagaye yana aiki ne kawai idan mai gudanarwa ya gudanar da shi.

Amsar da zaka iya aikawa a ƙarshe

Komawa ga imel na mai nazari mai hankali: "Shin zan iya ganin dalilan? Ina son sanin abin da na yarda da shi." A wannan sigar na binciken, amsar ita ce hanyar haɗi. Ga matsayin guda goma sha huɗu; ga wanda darajarsa ta rushe bayan an kasa samun tasiri daga silsilar Bita guda biyu; ga musayar da ta motsa ku da wasu goma sha ɗaya. Jituwa tare da dalilin da aka haɗa — wanda shine alkawarin hanyar tun daga farko.