====== Evaluarea cercetării ====== Aspecte legate de colectarea informațiilor de cercetarea, evaluarea cercetării și căutarea și evaluarea conferințelor și revistelor de specialitate. ===== CRESCDI ===== Pentru diversele raportari legate de activitatea de cercetare, in UPB se foloseste platforma [[https://crescdi.pub.ro/|CRESCDI]]. Fiecare persoana angajata are cont, pentru autentificare va puteti loga cu credentialele folosite pe Moodle sau E-Mail. Manualul de utilizare il puteti consulta la [[https://crescdi.pub.ro/io/api/files/tutorial]]. Orice problema intampinati, folositi sistemul de ticketing: [[http://support.crescdi.pub.ro/]]. Sau email catre [[mailto:ciprian.dobre@upb.ro|Ciprian Dobre]]. ===== Profil de cercetător ===== Există instrumente utile pentru colectarea rezultatelor cercetare și realizarea unui profil de cercetător: * [[http://scholar.google.com/|Google Scholar]] oferă suport pentru colectarea citărilor publicațiilor noastre, aspect important atât la depunerea de proiecte, la fișele de autoevaluare, cât și la avansări și abilitare * Ghidul este disponibil la adresa: http://scholar.google.com/intl/en/scholar/citations.html * [[http://www.researcherid.com/|ResearcherID]] este integrat direct cu baza ISI Thomson * Instrucțiuni aici: http://www.acsu.buffalo.edu/~abwagner/ResearcherID-Instructions.pdf * [[http://orcid.org/|ORCID]] se dorește a fi o unificare a bibliotecilor digitale și este integrat direct cu SCOPUS * [[http://www.scopus.com/ | Scopus]] Utilizarea sistemelor de mai sus presupune crearea de conturi și completarea unor informații generale, apoi agregarea asistată (automată) a publicațiilor. ResearcherID folosește baza ISI Web of Science și ISI Web of Knowledge. Google Scholar folosește cautari pe web (sunt foarte multe surse). Sistemele oferă suport pentru dezambiguizarea autorilor și sunt ușor de folosit. În final se obțin profile (semi-complete) ale cercetărorilor; se pot introduce și manual publicații.. ===== Căutare reviste ===== Reviste sunt echivalentul în limba engleză a noțiunii de ''journal''. În limba română mai folosim și noțiunea de jurnal. În cele de mai jos vom folosi interschimbabil noțiunea de revistă sau jurnal. În Thomson Reuters, sunt disponibile pentru căutare două categorii de reviste: * o categorie de reviste incluse in lista principala (master list): [[http://science.thomsonreuters.com/cgi-bin/jrnlst/jloptions.cgi?PC=master|master list]] * o categorie de reviste extinsa, toate indexate de catre Thompson-Reuters, dar nu toate cu factor de impact: [[http://www.thomsonscientific.com/cgi-bin/jrnlst/jloptions.cgi?PC=D|expanded list]] In plus, cele mai puternice reviste pentru fiecare domeniu (si subdomeniu) sunt disponibile pe [[http://uefiscdi.gov.ro/userfiles/file/PREMIERE_ARTICOLE/articole%202012/Copy%20of%20Sc_Soc%20Scs_AIS_2012ultima.pdf|site-ul UEFISCDI]]. Cele mai puternice reviste sunt cele rosii, dar si cele albe sunt foarte tari (au un IF destul de mare). Pentru reviste/jurnale, o clasificarea a acestora este oferită de [[http://portal.core.edu.au/jnl-ranks/|CORE]] (Computing Research and Education).   Pentru a găsi ușor revista, se recomandă căutare după ISSN dar și după un cuvânt cheie din titlu. Există mai multe mesaje de la reviste care pretind a fi ISI sau a avea factor de impact, dar nu este cazul. ===== Articole științifice vs. Rapoarte tehnice ===== Link-uri utile: * http://www.osti.gov/home/ostiblog/technical-reports-and-journal-articles * http://academia.stackexchange.com/questions/1275/when-and-why-a-scientific-technical-report-is-written Rapoartele/Articolele tehnice sunt scrise în momentul în care: * Vrei să publici ceva foarte rapid ca să fie cunoscut în lume. * Rezultatele cercetării sunt mai puțin importante și nu ești de părere că e necesar efortul de publicare într-o conferință sau jurnal/revistă. * Ai multe lucruri de comunicat și e o prea mare constrângere limita de pagini pentru publicarea unui articol științific. * Rezultatele sunt mai mult din zona de proiectare și implementare, mai puțin material științific. Rapoartele/Articolele tehnice pot fi publicate: * Pe site-ul propriu (//self-archiving//) * În repository-ul instituțional, un repository aferent organizației; în acest repository sunt centralizate materialele academice. În general este open access (//green open access//). * Într-un repository aferent unei discipline, precum [[http://arxiv.org/|ArXiv]] sau [[http://citeseerx.ist.psu.edu/|CiteSeerX]]. Rapoartele tehnice, tezele și disertațiile în format electronic (//ETDs -- Electronic Theses and Dissertations//), monografiile și articolele din jurnale pot fi submise într-un repository instituțional (open acess) pentru a fi ușor accesibile tuturor. Pe moment, la nivel UPB/ACS/CSE nu există un repository instituțional pentru materiale în format electronic. Putem publica materiale folosind [[http://arxiv.org/|ArXiv]] sau [[http://citeseerx.ist.psu.edu/|CiteSeerX]]. În cazul implementării unui repository centralizat, va exista probabil și o schemă de numerotare/denumire a materialelor. ===== Evaluarea unui cercetător și a unui jurnal sau conferință ===== Câteva metrici după care poate fi evaluat un cercetător sunt: * [[http://en.wikipedia.org/wiki/H-index|Indexul H]] (//h-index//, //Hirsch index//) este numărul ''h'' de articole care au cel puțin ''h'' citări. Poate fi vizualizat folosind [[http://scholar.google.com/|Google Scholar]]. * Indexul i10 (//i10-index//) a fost propus de Google pentru a furniza numărul de articole care au cel puțin 10 citări. * Indexul G (//g-index//) este similar indexului h, dar extrage numărul ''g'' de articole care, adunate au mai mult de ''g2'' citări. * Scorul ResearchGate este calculat de [[https://www.researchgate.net/|ResearchGate]] pe baza contribuțiilor și modului în care acestea sunt primite de alți cercetători. Ține cont de perspectiva altora asupra muncii tale, un fel de măsură a reputației. În general, performanța unui cercetător este bună dacă: * Are articole acceptate la jurnale și conferințe bine privite. * Obține citări de la alți cercetători. * Obține citări de la cercetători de profil înalt. * Rezultatele care stabilesc un reper în comunitatea științifică vor obține un număr mare de citări și vor duce la un nivel înalt al profilului științific și al reputației. * În general, contează mai mult calitatea lucrărilor publicate, nu neapărat numărul acestora. Legat de evaluarea unui jurnal sau a unei conferințe, câteva criterii sunt descrise în [[http://www.ep.liu.se/authorinf/evaluating_a_journal.en.asp|această pagină]]. Cea mai cunoscută metrică pentru evaluarea jurnalelor este [[http://en.wikipedia.org/wiki/Impact_factor|factorul de impact]] (//IF -- Impact Factor//). Acesta ține cont de citările din ultimii ani, fiind actualizat periodic. Un jurnal este cu atât mai bine cotat cu cât are un număr mai mare de citări recente, rezultând într-un factor de impact superior. O altă metrică, introdusă de Google Scholar, este [[http://scholar.google.com/intl/en/scholar/metrics.html#metrics|indexul h5]] (//h5-index//) care este un index H al articolelor dintr-o publicație (jurnal sau conferință) în ultimii 5 ani. Pentru conferințe, o clasificarea a acestora (în conferințe de rang A*, A, B, C) este oferită de [[http://www.core.edu.au/index.php/conference-rankings|CORE]] (//Computing Research and Education//) și de [[http://www.conferenceranks.com/|Conference Ranks]]. O altă clasificare este dată de Microsoft Academic Search pe pagina [[http://academic.research.microsoft.com/RankList?entitytype=3&topDomainID=2&subDomainID=0|Top Conferences in Computer Science List]]. Conferințele sau jurnalele ISI / WoS sunt cele indexate în baza de date ISI Thomson / Clarivate Web of Science. Se pot urmări la [[http://isiknowledge.com/|acest link]]. ===== Instrumente de analiză ===== * http://www.arnetminer.org/ (bazat doar pe DBLP) * http://academic.research.microsoft.com/ (este un sistem nou, acum se dezvolta) * http://researcherid.com/ (bazat pe ISI Thomson) * http://scholar.google.com/‎ * ‎http://www.harzing.com/pop.htm (Publish or Perish, foloseste Google Scholar si Microsoft Academic Search, trebuie instalat) ===== Biblioteci digitale ===== * ISI Thomson: http://isiknowledge.com * ACM Digital Library: http://dl.acm.org/ * DBLP: http://www.informatik.uni-trier.de/~ley/db/ * ScienceDirect: http://www.sciencedirect.com/ * IEEE Xplore: http://ieeexplore.ieee.org/ * CiteSeer: http://citeseerx.ist.psu.edu/ * PubZone: http://www.pubzone.org/ * AcademicINFO: http://www.academicinfo.net/ * NSDL Library: http://nsdl.org/collection/computer-science/ ===== Articole despre evaluarea cercetării ===== * {{:cercetare:evaluating-computer-scientists-and-engineers-for-promotion-and-tenure-tenure_review.pdf|}} * {{:cercetare:conferences_vs_journals_in_cs.pdf|}} * {{:cercetare:comparing-the-scientific-impact-of-conference-and-journal-publications-in-computer-science-ape08-rahm.pdf|}} * {{:cercetare:research-evaluation-for-computer-science-research_evaluation_cacm.pdf|}} * http://www.csi.ucd.ie/files/ucd-csi-2008-8.pdf * http://www.khuisf.ac.ir/DorsaPax/data/file/pajooheshi/medianimpactfactor.pdf * [[http://www.uaic.ro/uaic/bin/download/Main/N1301021933/ordinaprobarestandard.pdf|Criteriile comisiei de informatică CNATDCU]] (Anexa 2) ===== Ranking conferințe și reviste ===== * [[http://www.guide2research.com/research/world-ranking-of-top-computer-science-conferences-in-2020|Guide2Research]] * [[http://www.confsearch.org/confsearch/ | ConfSearch ]] * [[http://core.edu.au/index.php/categories/conference%20rankings/1 | Clasificare a conferințelor]] * [[http://portal.core.edu.au/conf-ranks/|Core Conference Portal]] * [[http://portal.core.edu.au/jnl-ranks/|Core Journal Portal]] * [[http://www.conferenceranks.com/|Conference Ranks]] * [[http://academic.research.microsoft.com/RankList?entitytype=3&topDomainID=2&subDomainID=0|Microsoft Research: Top Conferences in Computer Science]] * [[http://interaction.lille.inria.fr/~roussel/rankings/era/index.cgi | ERA Ranking (conferinte si jurnale)]] * [[http://lipn.univ-paris13.fr/~bennani/CSRank.html|Clasificare conferințe Computer Science]] * [[http://webdocs.cs.ualberta.ca/~zaiane/htmldocs/ConfRanking.html | Clasament al conferințelor]] (2009) * http://www.arc.gov.au/era/era_journal_list.htm * http://www.cs.albany.edu/~ashwin/Conf_rank.html * http://europa.nvc.cs.vt.edu/~ctlu/Link-File/Link-Folder/conference-ranking.txt * http://www3.ntu.edu.sg/home/assourav/crank.htm * http://www.arc.gov.au/xls/era2010_conference_list.xls (2010, nu a mai fost actualizată din 2011) * http://clip.dia.fi.upm.es/VenueImpact/core07_conf_alpha.pdf * http://www.cse.ohio-state.edu/~hartonoa/tier-conf-final2007.pdf * http://www.cs.wm.edu/~srgian/tier-conf-final2007.html * [[http://www.verlab.dcc.ufmg.br/qualis/ | Qualis Conference Ranking]] * [[http://www.scimagojr.com/ | Scimagojr Journal & Country Ranking]] * {{:cercetare-proiecte:cercetare_reviste_scor-relativ-de-influenta.xls|Scor relativ de influență pentru reviste}} ===== Audit de proiecte ===== [[https://docs.google.com/document/d/14t1Rk6z0YmzBBqxy-yyxgRDj9jPCndjRFvnpYo0S00k/edit?usp=sharing|Informații despre audit H2020]]