Discussion :

[siaoly]

Bonjour je voudrais programmer ou plutot porter un webcrawler de perl vers C# pour plus de puissance et d'�fficatit� parce que voir un programme de 80Ko prendre 800Mo de ram sa fait froid dans le dos ce probl�me est du au threads qui ne sont pas vraiment au point dans perl.

Je me suis renseign� sur la faisabilit� d'un webcrawler complet utilisant C#, mais j'ai quelques questions sans r�ponde pour l'instant !!


Comment avec le framework impl�ment� la gestion des cookies lors d'une requ�te HTTP?

Existe il une classe de gestion des fichiers robots.txt en dans l'un des language .NET ?

Existe il des structure associative en C# parce que j'ai beau cherch� je ne trouve pas de renseignement la dessus mon hash en perl ressemble a cela

Code :

S�lectionner tout - Visualiser dans une fen�tre � part

1
2
3
4
5
6
7
8
9
10
my $data = {
   url => $res->base,
   code => $res->content
  .....
  links => {
        $backlink => 1,
        .....
  }
....
}

Si un tel structure n'existe pas je peut passer par une structure Xml

merci a tous et bon code

[StormimOn]

Existe il des structure associative en C# parce que j'ai beau cherch� je ne trouve pas de renseignement la dessus

Tu as la classe HashTable ou, si tu utilises le framework 2.0, la classe Dictionary qui est un HashTable typ�.

[siaoly]

Merci de ton aide StormimOn, j'ai une derni�re question mon crawler perl utilise un fichier dbm ( il s'agit une hash li� sur le disque ) qui me permet de sauvegarder mes hash sous forme s�rialis� sur le disque ainsi en cas d'arret du robot je ne perd pas de donn�es , je voudrais savoir si il existe un �quivalent des DBM avec le framework ou si je doit me lancer dans la programmation d'une extesion


http://access.www.webthing.com/software/AnyDBM/

[Mose]

Ca n'existe pas, mais ce n'est pas bien dur � faire : il y a deux propri�t�s Keys et Values sur la hashtable.