dane z xml

[marek_o]

Są sobie dane w xml - dużo programów partnerskich udostępnia tak swoje dane. I teraz pytanie - co dalej? Parsować to w locie? A jak wtedy z wydajnością zasobów serwera?

A może wrzucać to do bazy? Jak najlepiej obsługiwać takie coś w praktyce?

[mkr]

raz pobrać i pamiętać, inaczej będzie ciężko z wydajnością, a każda niedostępność połączenia wywali twoją stronę

[KuRT]

Są sobie dane w xml - dużo programów partnerskich udostępnia tak swoje dane. I teraz pytanie - co dalej? Parsować to w locie? A jak wtedy z wydajnością zasobów serwera?

A może wrzucać to do bazy? Jak najlepiej obsługiwać takie coś w praktyce?

większośc PP udostepnia pelną baze, taka parsujemy i wrzucamy w baze danych. nastepnie PP udostepniaja bazy ze zmianami (np 14 dni wstecz) i taka dziennie pobieramy CRONem i wrzucamy do bazy dancyh

[forpan]

Ja stosuję następującą taktykę:

- jeśli pobrane dane są stałe (nie zmieniają się) pobieram je raz i zapisuje w pliku na dysku lub w bazie mySQL

- jeśli dane zmieniają się uaktulaniam cache co jakiś czas (zależnie od potrzeb - co godzinę, tydzień, itp.)

Korzystam w ten sposób z amazona, dmoza, clickbanku, RSS i wielu innych.

Oczywiście parsowanie danych w locie pochłania bez porównania więcej mocy serwera niż pobieranie z cache w pliku lub bazy danych.

[marek_o]

Dzięki za podpowiedzi.