?Funzionamento/Progettazione di un motore di ricerca

[piercing]

Poniamo che io voglia creare un motore di ricerca. Non tanto un discorso internet... fatto di spider, URL e indicizzazioni,

ma di una ricerca di testo per esempio... ho una pubblicazione piccola... diciamo tre pagine per esempio...

ho un campo di testo in cui inserisco la chiave di ricerca...

i risultati devono uscire in un ordine di importanza... quindi prima risposte fedeli, e poi risposte sempre più prossime...

ovviamente non sarà solo una SELECT o comunque una LIKE, ma un discorso diciamo "intelligente" che possa capire che ho inserito una chiave di ricerca vaga... o meno vaga.... e quindi trarre le sue conclusioni...

Come si struttura una problematica del genere?

Accetto bibliografie, URL, consigli, progetti, incoraggiamenti e insulti...

Grazie!

[Nicola]

[critica]
e poi ti lamenti delle robe strane di BC
[/critica]
credono che abbiano un dB no ?
credo che se i risultano siano inferiori di tot robe te lo dice o qualcosa del genere...

[Nemok]

Beh credo che posta così la questione sia un po' vaga.....intanto qual'è l'obiettivo reale?Cercare parole in un testo o cercare pagine in un database?E poi:linguaggio di programmazione?Se si tratta solo di attingere a database basta SQL,opportunamente impostate le query non dovrebbero esserci problemi.Se stiamo parlando di ricerca in un testo (o in genere in un file) invece sarebbe meglio qualcosa di piu potente,C/C++.

Oppure più semplicemente se hai un database "statico" potresti usare dei marcatori inseriti da te.Ad esempio ad una pagina in cui l'argomento è "programmazione e reti" potresti attribuire i marcatori "programmazione" e "reti",in modo da creare un legame biunivoco tra i termini e le pagine.

Incoraggiamenti:daje piercing!!
Insulti:°*ç%&!

[piercing]

Robe strane?? naaa.... è solo una bella ideuzza che m'è venuta stanotte...

Niko.... siamo un pò oltre al concetto del DB... sicuramente un DB va bene per lo "stoccaggio" dei dati...

il problema è l'algoritmo della ricerca... non basta una select su un campo di testo... è troppo stupida e meccanica...

pensa un attimo... quando metti un chiave di ricerca su un sito... quello che succede... i siti escono ordinati... e casualmente quello che cerchi è sempre o quasi sulla prima pagina... come fà?
ci sono delle tecniche di raffinamento delle ricerche... di ordinamento, di indicizzazioni... ma sinceramente non so che pesci prendere...

mi ricordo solo qualcosa riguardo a un piccione... da cui google aveva tratto spunto per fare il suo motore di ricerca... (mi pare proprio se ne parlò quassù)

[kadosh]

Sicuramente un Motore di Ricerca che si rispetti avrà vari DB divisi secondo un loro criterio e contenenti tutto il materiale che serve, continuamente aggiornato. Di lì partiranno una serie di Query innestate atte a discernere l'importanza del risultato trovato.
Forse useranno un range di parole fisse e combinate, e a seconda del numero di queste parole trovate caricheranno una percentuale di riferimento rispetto alla tua ricerca.
Cmq il discorso è davvero molto vasto, vedo se trovo cose interessanti sulla rete e te le posto......assieme agli insulti

[piercing]

allora vediamo un pò di chiarire...

con un esempio...

poniamo che io faccia un sito di autori emergenti che mi mandano dei testi dei loro manoscritti. Come detto roba di poche pagine. Diciamo di tre.

Bene... a questo punto voglio cercare tutte i racconti che ad esempio parlino di "cane", trovando però anche quelli che parlano di cani. Trovando anche un elenco di termini simili... (che ne sò.... magari pescecane).

Ovviamento mi escono mille racconti e allora scrivero "cane pechinese", e allora mi usciranno 10 racconti...

ma se fossero scritti sul racconto come "cani pechinesi"?

E fare una select like su diecimila racconti di tre pagine quanto ci metterei? forse tre mesi...

ed è per questo che i motori di ricerca non funzionano così, ma creano una sorta di indicizzazione di ogni racconto con le parole chiave, e solo quelle vengono inserite nel database, una volta "testata" la corrispondenza su una sorta di tabella dizionario che poi diventa effettivamente l'unica tabella del DB da gestire.

Io penso proprio che funzionino così, mi pare l'unica maniera possibile, ma mi chiedevo quale poteva essere un buon metodo di indicizzazione, una volta che conosco bene il dizionario (che non necessariamente a questo punto deve essere il dizionario della lingua italiana, ma anche uno custom costruito ad hoc per l'ambito del motore di ricerca).

Meglio che dormo di notte eh?

[Frengo78]

Vengo io a cantarti la ninna nanna se necessario. Oppure ti faccio sniffare un po' di gas dal fornello della cucina

Sinceramente non ho idea di quale funzionamento abbia. Chiedetelo a google

[Mikizo]

Ricordo benissimo di aver letto la cosa dei piccioni di Google... ricordo pure il disegno del piccione!
Ma non è che sarà in una vecchia newsletter?
---------
Mi rispondo: si, è in una news di pc-facile!
http://www.google.com/technology/pigeonrank.html

[piercing]

azz... siamo nelle mani di un piccione...

uhmmm come info è un pò pochino...

se non mi ricordo se ne parlo anche un annetto fa forse su PC-Professionale... stanotte mi sfondo la libreria...

Esiste tutta una teoria sui motori di ricerca... basterebbe trovare dove...

Studentiiiiii.... sulle tesi delle vostre università d'informatica?

Uhmmmmm...... eppure ci deve essere una soluzione...

(Me lo diceva la mamma.... ti fai troppe piiiiiiiiiiiiiiiiiiiiiiip mentali...)

[Frengo78]

Si si lo so che l'inglese lo dovrei capire alla perfezione. Ma alle 17:30 non si puo avere un riassunto della traduzione da te piercing? Per i non capenti..

[Frengo78]

Ma da quando ho la dicitura off topic sopra il nick???? chi è stato????

[piercing]

oltre al fatto che apprezzo l'ultima operazione di wm (anche io me ne sono appena accorto frengOT)...

raga... sto traducendo e sono allibito... i piccioni sono veri!!! possibile????

[Nemok]

Ma da quando ho la dicitura off topic sopra il nick???? chi è stato????

Stramitico frengo!!!!Sei il primo utente ad avere una dicitura personalizzata!!!farai invidia a tutti!

[kadosh]

Frengo...AHAHAHAHAHAHAHAHAHAHAH...ops...pardon

[Nicola]

Ma da quando ho la dicitura off topic sopra il nick???? chi è stato????

io voglio la mia scritta : Moderatore Intelligente
WM dai ... falla ... x favore...
Ciao

[Triumph Of Steel]

cos'è la storia dei Piccioni??

[dado]

UHUHUHUHUHUH... ehm
Torno serio, ora, raga... !
Ma una risatina ci scappa...

[BrSys]

Ragazzi!!!
Mi meraviglio di voi!!

Andate all'indirizzo dei piccioni.
http://www.google.com/technology/pigeonrank.html

Nella barra degli indirizzi digitate il seguente codice javascript:

javascript:alert(window.document.lastModified)

Uscirà la data di ultima modifica del documento... indovinate un po'?

Se non siete ancora convinti...
http://www.google.it/search?q=google+pi ... &hl=it&lr=

Siete perdonati perchè a quanto pare ai tempi ci è cascata pure ADN Kronos.

Bye, Gabriele

[piercing]

infatti br.... all'inizio mi pareva plausibile... poi quando ho capito bene il concetto mi è sembrata una gran ca22ata... e l'hai dimostrato BR...

nel frattempo mi ero documentato altrove su google, più che altro per capire il discorso dell'indicizzazione e della rilevanza.

Beh... ho tirato fuori un bel pò di numeri, ma purtroppo tutti molto orientati al discorso web (che a me interessa poco o nulla).

Il vero cavallo di battaglia di Google è il PageRank, che in pratica conta quante pagine web linkano a quella pagina specifica e più pagine ci linkano più vuol dire che il sito è rilevante, e viene messo per primo nell'ordine di importanza... questo metodo, utilizzato su grandi numeri, e quindi su leggi statistiche porta alla grande affidabilità di google.

Se volete vi do un pò di numeri, anche se sono di un annetto fà...

Il mio problema però rimane , passerò un'altra notte insonne!! e voi XXXtardi non mi aiutate!!!

[Mikizo]

Beh, per lo meno ci siamo cascati in tanti...
Poi non è che ci avessi capito qualcosa, comunque.
Pierce, ma vuoi rifare Google in locale? Credo che, come dici tu stesso nel tuo post, il sistema di Google dipenda strettamente dal fatto che le pagine in questione sono in rete, quindi linkate e cliccate...