[Site] ITComponents (comparação de preços)*

[xirix]

Nome: ITComponents

Versão analisada: Online

Tipo de licença: Freeware

Sistemas operativos: Windows, ...

Nota pessoal: 5

Tamanho: 0Mb

Endereço: http://www.itcomponents.net

Comentário:
É um site de pesquisa de produtos em várias lojas online em simultâneo. A ideia é facilitar as pesquisas. Por exemplo, quando queremos comprar um disco de 250GB, vamos a vários sites e anotamos o preço do disco em cada um dos sites. Este site básicamente faz isso automaticamente e mostra numa só lista todos os produtos de várias lojas (cerca de 48 lojas) que correspondem ao critério informado. A actualização dos preços/produtos ocorre uma vez por dia.
Utilizo sempre que procuro comprar alguma coisa nova para o PC.

PS. Espero que não venham com flames disto ser publicidade
PS2. Pelo que sei, a pesquisa é feita apenas em sites nacionais

tópico aprovado

[deathseeker25]

Já existia um do género que é o KuantoKusta.Parece-me interessante. Gostava de saber como é que o site conseguiu as licenças das lojas todas para aceder ás suas bases de dados....ou será o carregamento da DB do site manual?

[xirix]

Já existia um do género que é o KuantoKusta.Parece-me interessante. Gostava de saber como é que o site conseguiu as licenças das lojas todas para aceder ás suas bases de dados....ou será o carregamento da DB do site manual?

Licenças???

Pelo que sei, todas as noites o dono do site executa um prog feito por ele em .NET que abre várias threads e martela os sites todos, tipo um crawler. Para cada site ele montou uma Regular Expression para sacar tanto links válidos, como os produtos. Depois espeta isso tudo numa BD

Era isto que querias saber?


Abraços

[Red_bulls]

Mas sao pra lojas nacionais ou estranjeiras?

[xirix]

Até agora acho que é só nacionais.

[ITComponents]

As lojas são todas nacionais, espalhadas por todos os cantos de Portugal. Infelizmente e ao contrário do que foi dito a actualização dos produtos e preços é feita uma vez por semana e não uma vez por dia.

Isto deve-se ao facto de a captura dos preços ser feita através de um processo de crawling aos sites. Este processo de crawling gasta muito tráfego e como tal não o posso fazer todos os dias. Para terem uma ideia, ao fazer crawl a todos os sites gasto 300MB de trafego internacional e cerca de 500MB de trafego nacional.

Quanto às licenças. Todos os donos de sites foram informados que a sua loja constava no ITComponents. Alguns não disseram nada, outros apoiaram e até fizeram algum desenvolvimento da parte deles para melhorar o processo de crawl e houve apenas 1 (até hoje) que não quis estar inserido no ITComponents, sendo portanto removido imediatamente.

PS: Embora haja trafego internacional isto deve-se ao facto de as lojas hospedarem os seus sites em servidores estrangeiros. As lojas são todas portuguesas.

[xirix]

Não sabia que tb andavas por aqui....

Também tenho blog no pontonetpt

Sobre o teu processo de recolha de dados... eu tenho tráfego ilimitado (nacional ou internacional). Se quiseres que eu meta isso a bombar durante o dia no pc de casa diz qualquer coisa.

Para já o PC não está operacional, mas posso meter aquilo up and running até ao fds.

Abraços

[ITComponents]

Obrigado mas penso que não é necessário. Os preços não mudam com muita frequencia. Actualizações semanais penso que é suficiente.

[deathseeker25]

Já existia um do género que é o KuantoKusta.Parece-me interessante. Gostava de saber como é que o site conseguiu as licenças das lojas todas para aceder ás suas bases de dados....ou será o carregamento da DB do site manual?

Licenças???

Pelo que sei, todas as noites o dono do site executa um prog feito por ele em .NET que abre várias threads e martela os sites todos, tipo um crawler. Para cada site ele montou uma Regular Expression para sacar tanto links válidos, como os produtos. Depois espeta isso tudo numa BD

Era isto que querias saber?


Abraços

Era exactamente isso. Bem, confirmo que não conhecia o método logo existiu alguma confusão na minha cabeça quando pensei na maneira como actualizava a BD. Obrigado pela explicação...

[skorzen]

Uso este site há já algum tempo e é muito bom.

[SimpLe-Kid]

O que aconteceu ao site? Deixaram expirar o domínio?

[skorzen]

O que aconteceu ao site? Deixaram expirar o domínio?

Com muita pena minha, parece que sim.