Perché gli scientiati timediato gli kokeilu? Replikointi, menetelmä ja fiducia

Aloittaminen » Tiede » matemaattinen » Tilastollinen » Perché gli scientiati timediato gli kokeilu? Replikointi, menetelmä ja fiducia

Tieteilijöiden perché kokeilujen riptono? Perché la scienza vive di risultati che non-dipendon dall'ora, dal luogo o da chi tiene la pipetta en mano: se una legge naturale vale, täytyy ilmestyä tätä tietä kohti Stoccholmaa, saapuu SaturnukseenToista koe ja toista analyysi, yhdeksän luvun testi muuttaa yksilön uskottavaksi henkilöksi.

Questo non implicate che ogni singolo studio venga rifatto infinite come back. Vastaus on pohjimmiltaan soprattutto, kun ilmestyn esiin odottamatta, ratkaisevasti tai mahdollisesti kiistanalaisena.Hyvin kurinalaisesti yritin luoda oman ensimmäisen kokeiluni etsimällä itselleni oman rivistan, joka ei toimisi itsenäisenä onnenkantamoisena tai metodologisena artefaktina.

Replica, reproducibilità ja perché contano

Tutkimuskielellä replikointi tarkoittaa studion kopiointia tilassa, jossa on mahdollista vain tarkistaa, tuottaako se uudelleen tuloksia. Per contro, si parla spesso di riproducibilità in contesti di dati e calcolo per indicare che, con gli stessi dataset e gli stessi metodologia, riippumaton analyytikko ottien identici output. Tämä parole sono -tila käyttää sanoituksissa moniselitteistä muotoa, molemmat che istituzioni com le National Academies statunitensi hanno ehdotettu distinzioni operative per fare chiarezza.

Perusperiaate pysyy muuttumattomana: Jos tulosta ei synny, sitä ei palauteta. Può essere la nostra comprensione del système a essere incomplete, oppure i protocolli usati non sono stati descritti et controllati a sufficienza. Tästä syystä alla olevaan "menetelmä"-osioon sisältyvät artikkelit: anna itsellesi lupa jatkaa matkaa, ohjaa työn laatua ja harjaa väärään suuntaan tai frodiin.

Se ei toista kaikkea, mutta se on tärkeintä

Arkielämässä en koskaan pysähdy mihinkään sellaiseen kuin epäitsekäs toivo. Tiede edistyy keräämällä todisteita ja puuttumalla epävarmuuteen ja ihmeellisyyteen.. Gli studi che fanno notizia o cambiano una linea di richervono spesso tentative di replica; molti gruppi, inoltre, toistan omia tuloksiani sisäisesti prima della pubblicazione per saggiarne la robustezza.

Tämä käytännön kysymys on ollut esillä jo kauan sitten viime vuodesta: Kuinka suuri osa julkaistusta tieteestä on Davveron replikoitavaa? Psykologiassa saavutettiin vuonna 2015 suuri koordinoitu ponnistus, jossa alle 39–100 tulosta replikaattitestamentista saatiin alkuperäisiin tuloksiin. Se ei ole pelkästään psykologiaan liittyvä ongelmateema kattaa biolääketieteen, käyttäytymistieteen ja yhteiskuntatieteet.

"Tuotantokriisi": päivämäärä, määritelmä ja viitekehys

Negli anni 2010 kommentaattorit hanno parlato di "crisi di riproducibilità". Alcuni numeri hanno fatto keskustellaanElämäsi tieteessä on aika ehdottaa, että yli 50 % tuloksistani on tuottamatonta sarebbea, käännettynä decine di miliardi di dollari spesi yksi vuosi in studi che non reggono alla verifica indipendente. John Ioannidis -argumentti luotiin vuonna 2005 molti risultati pubblicati taipumus tähän valheeseen tai sovrastimati, monimutkaistavat suunnittelun vinouman, analyysin ja julkaisemisen kannustamisen yhdistelmää.

Osa ongelmasta johtuu käyttämästämme ehdonalaisesta vapaudesta. Toistettavuus ja toistettavuus eivät ole merkittäviä tieteenalojen välisen yhdenmukaisuuden kannalta.. Alcuni autori erottaa seuraavat: empiirinen tuotanto (osservazioni e experiencia todellisessa maailmassa), tilastollinen (coerenza delle inferenze date le analisi) ja computazionale (ri-esecuzione di code e dati per ottenere identici risultati). Terminologinen sekaannus aiheuttaa hämmennystä, tekee monimutkaisesta capire di cosa si stia keskustelusta betonissa.

Perché le repliche falliscono: syytekniikka, tilastot ja kulttuurit

Le ragioni dei fallimenti non sono tutte uguali. Spaziano da errori umani e progetti deboli a scelte analitiche diskusijaibi, senza dimenticare fattori sociali come gli incentivi a pubblicare risultati "positivi" ja l'opacità dei dati. Se näkyy selvästi sellaisenaan Perinteinen vertaisarviointi ei riitä takaamaan toistettavuuttaAnonyymi arvostelu ja aika stretti En voi läpäistä ja analysoida protokollaa vähän dettagliati.

Ricornon kritiikin välttäminen: julkaisuliike (gli studi con esiti nulli finiscono nel cassetto), päätellä sopimattomia tilastoja, kokeellinen suunnittelu riittämättömällä teholla, suoritetut virheet ja epätäydellinen raportointi. Interventi possibili includóni registrazioni preventive dei protocolli, condivisione di dati e codice, e tarkistusprosessin avaaminen lisätäkseen läpinäkyvyyttä ja vastuullisuutta.

Tieteellisen menetelmän merkitys

Dietro ogni replica c'è il methodo. Il tieteellinen menetelmä Se on systemaattinen matka hallinnan, arviointien laatimisen, testaamisen ja johtopäätösten tekemisen kautta. Tämän reitin tarkka noudattaminen tuottaa tuloksia, jotka ovat vähemmän riippuvaisia ​​soggettisten ja perustavanlaatuisten asioiden tulkinnasta. controllabili da richercatori indipendenti.

Le sue tappe, per adattandosi ai contesti, sekundono uno schema noto: havainto ilmiöstä; domande Mirate; hypoteesi todennettavissa; kokeilu hallituissa olosuhteissa; analyysi I dati che conferma, muuttaa rigette le ipotesi; ja johtopäätös, joka voi olla periaatteen, leggen tai teorian muodossa. Tämä kaava on perusta replikoinnin rakentamiselle.

Tipi di approccio: induktiivinen, deduktiivinen, hypoteettinen-deduktiivinen ja muut

En nukkunut samaa unta, ja monipuolinen tieteenala etuoikeutettu erilainen strategia. L 'induktio tulot casi particolarista generalizzazioniin (con i suoi rischi, se i casi osservati sono pochi o non rappresentativi); siellä päätellä osa yleistä lähtökohtaa tietyn johtopäätöksen tekemiseksi; il hypoteettinen-deduktiivinen menetelmä ehdottaa ipotesi ja yrittää kaikin tavoin väärentää finché resistono; approcci dialettici si basano su tesi, antitesi e sintesi, tipici delle scienze sociali; minätilastollinen analyysi rakenteen kvantitatiivinen epävarmuus, teho ja virhemarginaali; il vertailu analysoida somiglianze ja differentenze; minäkoe manipuloida osservare effetti -ehtoja. Olen samaa mieltä ajatuksesta kuvailla "tule" tavalla, joka antaa sinun suostua matkan varrella..

Capire keksii jonkinlaisen "teorian" kaltaisen tieteellisen suunnitelman ja laittaa sen järjestykseen: Teoria on johdonmukainen ja tukeva katsaus todistusaineistoon, joka yhdistää ilmiöitä ja mahdollistaa ennusteet.Se ei ole mielipiteen puute tai totuudenvastainen lausunto; muuten Vive proprio perché ha superato testi ripetuti e può semper essere raffinata alla luce di nuove taste.

Esempi concreti: kun vastaus tulee selväksi, dettaglio ontuu

Laboratorion eturintamassa ollut symbolinen tapaus, joka pilasi rintarauhaskudoskokoelmansa sen jälkeen, kun se oli pahasti pielessä, lo stsesso protokolla. Tulokseni ei kuitenkaan sattumaa. Harjoittele fianco by fianco, jos scoprì che a gruppo staccava sellule herkän matkustajan kanssa, entä jos tarmokkaampi levottomuusNäennäisen banaali yksityiskohta, jota ei ole kirjoituksessa kerrottu, mutta joka riittää vaihtamaan aihetta. Siitä hetkestä lähtien sekoitustekniikan määrittäminen on ollut olennainen osa menetelmääni..

Toinen kuuluisa jakso korostaa misura deliä Q della zaffiro, perintö sen kristallivärähtelyn vaimenemisen aikaan. Alla fine degli anni '70 venäläinen ryhmä ottenne valori erittäin korkea Sanoin, että kaikki hyväksyivät. Viime vuonna en kuullut lehdistöltä mitään, joten suoritin intensiivisen scambi-harjoituksen ja vierailin vastavuoroisen fra i -tiimin kanssa. rivelarono Compenze tacite ja "trucchi del mestiere": monipuolinen materiaali jousitukseen, nopea menetelmä tulevaisuuden luomiseen, ja määrittelen tähän sovelletun "painomäärän", herkkä tatuointi, mutta vaikea koodata ehdonalaisessa vapaudessaTuon saper-hinnan siirron myötä replika on vaarallinen.

Nämä tilat näyttävät siltä hiljainen tieto on olemassa ja kertoo. Anche con protocolli molto dettagliati, alcuni passaggi richiedono addestramento pratico, syö keittiössä: ricetta scritta ei riitä kuuluisan baccalà della nonnan tekemiseen. Per questo initiative toimitukselliset tulevat videopäiväkirja omistaa se protokollaan lähellä testauksen ja käytännön välistä kuilua.

Kun tilastoja kannustetaan luomaan illuusioita

Viime vuoden metodologinen harhautus on tilastollisessa käytännössä ulottunut vain tiettyyn pisteeseen asti. P-arvo tulkittu virheellisesti, analysoitu jälkikäteen ja kerrottu väärin. En voi uskoa olevani väärä positiivinen. Se in parallelo gli studi nulli non vengono pubblicati, kirjainosan on kirjoittanut illusoriTässä kysymyksessä kiistän ehdotuksen esirekisteröinnin ja tietojen ja koodin täydellisen ehtona. auttaa ridurre gradi di libertà non dichiarati.

Ongelma ei ole vain tekninen, vaan myös sosiaalinen. "Uusien" ja "merkityksellisten" tulosten edistäminen, rahoitus ja näkyvyys tietyin perusteinKannustinjärjestelmä voidaan sisällyttää huomaamattomasti ja epäoptimaalisesti. Mieti uudelleen ja arvosta kriteerejä — palkitsemista. replikan kestävyys, kunto ja työ – se on osa ratkaisua.

Tietokoneen toistettavuus: data, koodi ja läpinäkyvyys

Päivämäärän ja laskennan räjähdysmäisen suosion myötä syntyy ajatus "riproducibile-tutkimus”: chiunquen on voitava pidättää gli stessi dati e lo stesso koodekki ja ottenere i medesimi numeri. Se on välttämätön, mutta ei riittävä ehto: Noudata koodia takaamatta mallin kelvollisuutta. Se on kuitenkin tukipilari todentamiselle ja scoprire errorille, toinen che un acceleratore per la comunità che può costruire su basi comuni.

Studi sociologici hanno demonstrato che il dibattito sulla "crisi" ja articola in più filoni: laboratorioreagenssien ja protokollien käyttö, tilastolliset menetelmätJa heterogeneità del mondo reale. Ciascuno richiede -liuos erityisesti, dalla standardzzazione annoin materiaalia kaikki tilastollinen muodostuminen, hienosti suunniteltu ja kertova luonnollisesta vaihtelevuudesta.

Esimerkki tarinasta menetelmän toiminnasta: penisilliini ja luonnonvalinta

La penisilliini nacque da un'osservazione fortuita: colture batteriche kontaminoida da una muffa demonstrano batteri dissolti. Sieltä hallitse, hypoteesi, eristäydy aktiivisesta periaatteesta ja todista vahvuutesi sodassa. Se on tieteellinen menetelmä tehokkaimmassa muodossaanAloita erilaisten hoitojen kanssa valmiin testin ja tarkan kuvauksen avulla.

La luonnonvalinnan teoria Darwin on toinen esimerkki. Tämän sopravviveren kanssa kilpailevan organismin rikkaudesta deduktiivisen viitekehyksen ja uuden lajin ylläpidon kautta se päätyy yhdellä silmäyksellä perché tietyt ominaisuudet, jos ne eroavat populaatiostaanSe on teoria yksinkertaisessa mielessä: vakoilee ilmiöitä, tuottaa ennusteita ja vastustaa lukemattomia hämmennysyrityksiä.

Et voi tehdä instituutioita, varallisuutta ja rahoitusta

I giornali sciencei contano, ma Joten en osaa ratkaista ongelmaa. Servono-infrastruktuuri e risorse a livello institutionale: arkisto tiedot ja koodit, arkisto ennakkorekisteröintiin, e politiikka, joka korostaa läpinäkyvyyttäMinulla ei ole varaa maksaa saamastani sairaudesta ja antamani hoidon budjetista; yliopisto ei voi Valutare ja rikkaat kopiot, tietojoukot ja ohjelmistot, ei yksin "uutta" varten.

Pratiche di avoin tiede tule esipainoon, julkaise revisio ja laajamittaista yhteistyötä Virheriskiä ja tarpeettomien epäonnistumisten kustannuksia ei ole. Kampuksilla vaihtelu on suurta, monikeskuskonsortio En voi arvioida vaikutuksen kestävyyttä contesti diverse meglio di qualunque laboratorioisolaatissa.

Kun pelkkä testi ei riitä: protokolla, video ja koulutus

Kuinka näytän sinulle, missä solukulttuurisi ja Q della zaffiro, saavuttaa kyvyn, jos opit matkimaan ja harjoittelemaan tarkista se. Videoprotokollat ​​ja periodi di affiancamento eivät välttämättä vaikuta asiaan. Lisää menetelmä sanalle ”operativi” — intensità dell'agitazione, tempo tra i passaggi, type di materiale — riduce ambiguità che innescano fallimenti di replica.

Toinen hyvä osio ”Metodi” pitäisi Mietin ulkoista kirjettäPitääkö laboratoriossani olla selvää, jotta voin tehdä tämän kokeen? Toistanko sen aloittaessani? Tämä tehtävä vaatii konkreettista muuntamista toistettavuuteen arkikäytännössä.

Toiminnallinen sanasto opastamaan sinua

Voit navigoida tässä aiheessa käyttämällä piccolo-operatiivista sanastoa. Replikointi: riippumaton rifacimento di uno studio con menettely il più mahdollinen identiche, idealmente su nuovi dati o campioni. Toistettavuus: capacità di ottenere gli stessi risultati ri-seguendo analisi con gli stessi dati e metodi (soprattutto in ambito computazionale). Vankka: stabilità dei risultati al variare ragionevole di parametri o condizioni. Yleistys: estensione dell'effetto a contesti, popolazioni o setting diversi. Chiarire questi aiuta a progettare studi e a interpretare la repliche.

Applicare que este definizioni non vuol dire imbrigliare la creatività, ma renderla todennettavissaVankka tulos ei ole se, mikä "toimii yksin kanssani", vaan se, mikä se vastustaa käden, valon, ajan ja tietojoukon muuttumista.

Harjoittele strategioita toistettavuuden lisäämiseksi

Välittömän vaikuttavuuden vaatiminen, mukaan lukien: tehoanalyysi Montessa per assicurare campioni adeguati; ennakkorekisteröinti esplorazionen rajaamisen pääanalyysistä; erota data grezzistä, materiaalista ja koodistaja täydellinen raportti negatiivisista löydöksistä. Insegnare tilastollinen sovellus ja tieteellinen tieto todellisen todellisuuden kanssa ja codici riproducibili costruisce kompetencie diffuuse.

Infinite, riconoscere che epäonnistunut vastaus on tietoa: segnala dove cercare, quali variabili na coste matterare, quale osa menetelmää esplicitare meglio. Myöskään obiettivo ei ole "sbugiardare", vaan parempaa ilmiötä ja ridurre l'incertezza collettiva.

Tiede toimii, kunhan sitä käytän, jos pystyn. tee uudelleen: non perché tutto debba essere rifatto semper, mutta perché sappiamo como, come e perché rifare ciò che conta. Perusmäärittelyn, läpinäkyvän menetelmän, tiukan kulttuurin ja käytännön koulutuksen avulla replica smette di essere un ostacolo e diversenta il motore que tuotto kumulativa conoscenza, affidabile ja hyödyllinen.