Home » D:News » Valoarea cuvintelor

Valoarea cuvintelor

Valoarea cuvintelor
Publicat: 25.08.2009
Pusa la punct de un grup de cercetatori de la Universitatea din Manchester, Marea Britanie, o metoda matematica identifica cuvintele cele mai semnificative dintr-un text.

Identificarea rapida a cuvintelor-cheie dintr-un text necunoscut reprezinta visul oricarui cercetator din domeniul lingvisticii si de-acum inainte, acest vis este realizabil gratie metodei matematice puse la punct de cercetatorii de la Universitatea din Manchester, care atribuie oricarui cuvant o “valoare informativa”, identificand astfel termenii cei mai relevanti dintr-un text citit pentru prima oara. Pentru a obtine aceasta valoare, oamenii de stiinta au masurat cat de uniform este distribuit fiecare cuvant (calculandu-i entropia conform teoriei informatiei, disciplina care studiaza elaborarea si distributia informatiei), atat intr-un text cu cuvintele aflate intr-o ordine fireasca, cat si cu ele toate amestecate. Inmultind diferenta intre cele doua valori ale entropiei fiecarui cuvant cu cu frecventa cuvantului respectiv, cercetatorii au obtinut unitatea de masura dorita: asa-numita “valoare informativa”.

Potrivit cercetatorilor englezi, ceea ce decreteaza valoarea unui termen este tocmai felul in care este distribuit intr-un text, si nu numarul absolut de repetari ale acestuia. Conjunctiile (si, asadar, deci, etc) sunt de exemplu utilizate frecvent, dar nu sunt semnificative (sunt in mod uniform distribuite atat intr-un text ordonat, cat si intr-unul dezordonat, prin urmare prezinta o valoare informativa scazuta). In schimb, tendinta de a grupa propozitiile in capitole si paragrafe confera cuvintelor semnificative o valoare foarte inalta, facandu-le recognoscibile.

Validitatea noii unitati de masura a fost confirmata de un text facut pe “Originea speciilor” a lui Charles Darwin, in care cuvintele cele mai valoroase au reiesit a fi: specie, varietate, hibrizi, forme, insule, selectie si gen. Desi sistemul pus la punct de cercetatori s-ar putea dovedi foarte util in decodificarea textelor cifrate sau scrise in limbi necunoscute, aplicatia principala a acestuia ar putea sa nu fie literatura, ci biologia, mai exact identificarea acelor gene care transporta informatii utile, considera Marcelor Montemuro, seful echipei de cercetare. “De altfel, atunci cand privim genomul ne pare cu adevarat ca ne aflam in fata unei limbi straine”, a precizat el. 

Sursa: Galileo

CITESTE SI:

 

 

 

 

Urmărește DESCOPERĂ.ro pe
Google News și Google Showcase
Cele mai noi articole
Avertisment de la FMI: economia mondială, aproape de limita rezistenței
Avertisment de la FMI: economia mondială, aproape de limita rezistenței
Tot mai mulți români au început să-și încaseze pensia din Pilonul 2
Tot mai mulți români au început să-și încaseze pensia din Pilonul 2
Cum a rămas fără benzină o insulă cu milioane de locuitori?
Cum a rămas fără benzină o insulă cu milioane de locuitori?
NASA caută peșteri ascunse pentru a construi prima bază permanentă pe Lună
NASA caută peșteri ascunse pentru a construi prima bază permanentă pe Lună
Cum îți poți regla sistemul nervos: obiceiuri simple care ajută organismul să gestioneze stresul
Cum îți poți regla sistemul nervos: obiceiuri simple care ajută organismul să gestioneze stresul
Ce mâncau, de fapt, dinozaurii? Cel mai probabil alge marine, indică noi fosile
Ce mâncau, de fapt, dinozaurii? Cel mai probabil alge marine, indică noi fosile
Un ghețar montan impresionant din Tibet a supraviețuit ultimei ere glaciare
Un ghețar montan impresionant din Tibet a supraviețuit ultimei ere glaciare
O planetă Phoenix extrem de fierbinte ar putea rezolva un mister astronomic vechi de decenii
O planetă Phoenix extrem de fierbinte ar putea rezolva un mister astronomic vechi de decenii
(P) De sub pământ până sub apă: mediile extreme în care tehnologia de detecție este pusă la încercare
(P) De sub pământ până sub apă: mediile extreme în care tehnologia de detecție este pusă la încercare
Ce presupune dieta nordică? Un studiu amplu arată că ne-ar putea ajuta să trăim mai mult
Ce presupune dieta nordică? Un studiu amplu arată că ne-ar putea ajuta să trăim mai mult
Cum te poate ajuta o listă zilnică să îți recapeți controlul asupra vieții
Cum te poate ajuta o listă zilnică să îți recapeți controlul asupra vieții
Îngrijorător: cât timp își petrec adulții zilnic fără să se miște?
Îngrijorător: cât timp își petrec adulții zilnic fără să se miște?
Papa Leon al XIV-lea se operează. De ce anume suferă acesta?
Papa Leon al XIV-lea se operează. De ce anume suferă acesta?
Mult mai mulți oameni au ajuns în spațiu decât credeți. Ce țară i-a trimis pe cei mai mulți?
Mult mai mulți oameni au ajuns în spațiu decât credeți. Ce țară i-a trimis pe cei mai mulți?
Ce mai vrea președintele Donald Trump să redenumească, faza pe oceane
Ce mai vrea președintele Donald Trump să redenumească, faza pe oceane
Cu cât a crescut indicele global al sărăciei și câți oameni sunt afectați?
Cu cât a crescut indicele global al sărăciei și câți oameni sunt afectați?
Cea mai veche piață acoperită din Paris a fost distrusă de un incendiu
Cea mai veche piață acoperită din Paris a fost distrusă de un incendiu
Deși adolescenții consumă mai puține droguri și alcool, apar noi motive de îngrijorare pentru autorități
Deși adolescenții consumă mai puține droguri și alcool, apar noi motive de îngrijorare pentru autorități