Szpej.info Dev News

Ten blog został przeniesiony

2010-10-24T23:12:00.001+02:00

Ten blog znajduje się obecnie pod adresem http://szpejdev.blogspot.com/.
Za 30 sekund nastąpi automatyczne przekierowanie. Zamiast czekać, możesz kliknąć tutaj.

W przypadku subskrybowania kanałów konieczna jest zmiana adresu subskrypcji na:
http://szpejdev.blogspot.com/feeds/posts/default.

Synchronizacja danych i nowe sklepy

2010-02-21T01:09:00.001+01:00

Witajcie,

Dawno nic nie pisałem, co nie znaczy, że projekt został porzucony. Podczas przedostatniego updatu nic ciekawego się nie działo dlatego nie stworzyłem dla niego wpisu. Od dzisiaj w wyszukiwarka indeksuje dwa nowe sklepy: Sekcja 6mm oraz Jarmix Militaria. Natomiast sklep IronbroAsg przekształcił się w Defcon (albo przynajmniej domena została przepięta). Póki co to tyle.

Miłego wyszukiwania.

Synchronizacja danych

2010-01-04T21:30:00.001+01:00

Witajcie,

wszyscy użytkownicy, w nowym 2010 roku. Po chwilowych problemach technicznych udało się wykonać synchronizację danych ze sklepów i w wyszukiwarce. Z aktualizacji wypadł sklep paintball-planet, ponieważ w czasie pracy bota indeksującego (jak i chyba na chwilę obecną) nie udostępnił on aktualnych danych o produktach. Mam nadzieje, że nie podzieli on losów sklepu cog...

Miłego wyszukiwania

Aktualizacja cen i optymalizacja strony

2009-12-13T01:04:00.006+01:00

Witajcie,

ostatniej synchronizacji bazy z cenami sklepowymi nie opisywałem. Nie różniła się ona niczym od tych poprzednich. Podczas tej aktualizacji zaszło parę zmian o których warto wspomnieć.
Pierwszą z nich jest dodanie sklepu: paintball-planet. Pomimo tak kontrowersyjnej nazwy, można znaleźć w nim szpej airsoftowy. Jeżeli jednak kogoś bardzo będzie drażniła oferta tego sklepu w każdym momencie może w "ustawieniach" wyszukiwarki ją wyłączyć.
Drugą sprawą jest pominięcie podczas tej aktualizacji sklepu 6mm. Pominięcie nie wynikło z mojej złośliwości, po prostu serwer na którym znajdował się sklep nie działał w czasie, gdy bot zbierał dane. Ot co.

To tyle jeżeli chodzi o sprawy sklepowe. Zmiany zaszły również w samym silniku wyszukiwarki. Strona została zoptymalizowana pod kątem szybkości. Wyszukiwanie podobnych przedmiotów oraz generowanie wykresów powinno działać zauważalnie szybciej. Zostało włączone cachowanie skryptów js, plików ze stylami oraz inne statyczne dane często wysyłane, może to powodować dziwne zachowanie stron. Dlatego przed zgłoszeniem błędu, spróbujcie odświeżyć stronę (w Firefox ctrl+f5). Niemniej jednak ten manewr przyśpieszy wyświetlanie stron. Poza tym został poprawiony, może mało zauważalny, ale krytyczny błąd w skrypcie przetwarzającym dane ze sklepów.

Miłego wyszukiwania.

Poprawki w statystykach

2009-11-22T15:56:00.004+01:00

Witajcie,

tak jak zapowiedziałem, w weekend udało mi się znaleźć trochę czasu i dopisać mechanizmy zabezpieczające generowanie statyk na stronie głównej. Teraz już nie powinny pojawiać się przekłamania, a przynajmniej nie takie, o których pisałem w poprzednim poście.

Zmieniłem też porę wykonywania synchronizacji bazy z informacjami ze sklepów. Niestety część właścicieli sklepów aktualizuje informacje o produktach w soboty/niedziele co również powodowało pewne nieścisłości w danych jakie uzyskiwałem. Godzina pozostaje nadal "późno wieczorna", aby nie zakłócać pracy serwerów, zmienił się jedynie dzień tygodnia z soboty na środę.

Synchronizacja bazy i mały komentarz do statystyk

2009-11-16T23:04:00.006+01:00

Witajcie,

jak zwykle po okresie około dwóch tygodni zsynchronizowałem bazę z informacjami ze sklepów. Z racji korzystania z nowych (naskrobanych w wolnym czasie) narzędzi mogą pojawić się pewne błędy w danych. Niemniej jednak aktualizacje powinny trwać teraz trochę krócej.

Część z osób korzystających z wyszukiwarki szpeju, na pewno zauważyło na pierwszej stronie pewne "nieścisłości" w statystykach. Złe podpisy do zdjęć produktów czy niewyobrażalnie duże różnice w cenach produktów między kolejnym aktualizacjami. Powodem takiego stanu rzeczy są "podmiany" jednych produktów na inne w witrynach sklepowych. To znaczy przez długi czas w danym miejscu jest trzymany jeden produkt np. replika karabinu, w pewnym momencie sklep z powodów różnych rezygnuje z jego sprzedaży i w to miejsce wkłada inny produkt np. uchwyt na baterie. Tego typu operacja owocuje, widocznymi na stronie głównej anomaliami. Przy tak dużej ilości produktów ciężko ręcznie przejrzeć każdą zmianę, dlatego proszę o wyrozumiałość. W przyszłości postaram się stworzyć rozwiązanie, które wyeliminuje tego typu przekłamania.

Synchronizacja bazy

2009-11-01T09:26:00.002+01:00

Witajcie,

dziś w nocy zsynchronizowałem dane oraz dodałem jeden nowy sklep. Może nie jest on ściśle airsoftowy, ale zawiera trochę przydatnego szpeju. Mowa o miwo-military, specjalizującym się w dostarczaniu mundurów, plecaków, różnego rodzaju kamizelek oraz ładownic.

Póki co to tyle. Miłego wyszukiwania.

Synchronizacja oraz zmiany w wyszukiwarce

2009-10-17T23:49:00.007+02:00

Witajcie,

poza standardową synchronizacją danych trochę się zmieniło na stronie. Do bazy zostały dodane dwa nowe sklepy:

Casg - duża ilość sprzętu w kolorze coyote i nie tylko (podziękowania dla Michała za link do tego miejsca),
Azteko - trochę części do replik oraz gearboxów;

Na stronę główną trafiły statystyki z ciekawostkami na temat ostatniej synchronizacji. W przeciwieństwie do "śledzika", w ustawieniach wyszukiwarki można je wyłączyć. Zmieniły się również linki oraz oznaczenia w wynikach wyszukiwania. Kliknięcie na nazwę produktu, spowoduje przekierowanie do jego szczegółów, natomiast znaczek "[>]" przekieruje na stronę w odpowiednim sklepie. Strona ze szczegółami produktu również została ulepszona. Od teraz można zorientować się kiedy ostatni raz produkt był na stanie w sklepie oraz zobaczyć na wykresie historię jego dostępności. Lekkim zmianom uległ również algorytm wyszukujący podobne przedmioty między innymi dzięki zastosowaniu dynamicznego wykrywania producentów dla produktów. Poprawiłem także parę różnych mniejszych błędów.

To tyle... piszcie jeżeli zauważycie jakieś błędy, lub z informacjami co można w portalu jeszcze ulepszyć.

Miłego wyszukiwania.

Synchronizacja bazy i kosmetyka strony

2009-09-21T02:39:00.003+02:00

Witajcie,

parę dni temu miała miejsce awaria portalu (po części z mojej winy), po paru godzinach walki udało się przywrócić stronę. Jeżeli zauważycie jeszcze jakieś błędy lub dziwne zachowanie strony piszcie.

Dziś wieczorem zaktualizowałem bazę produktów oraz poprawiłem parę kosmetycznych błędów. Dodałem również funkcję auto uzupełniania tekstu w polach producentów i sklepów w kartach wyszukiwania zaawansowanego i ustawieniach. Powinno ułatwić to wybór konkretnych wartości. Mam nadzieje, że się wam spodoba.

Miłego wyszukiwania.

Synchronizacja bazy

2009-09-10T01:41:00.004+02:00

Witajcie,

po chwilowej nieobecności, baza produktów została zaktualizowana. Tym razem (o dziwo) odbyło się to bez większych problemów.

Pozdrawiam.

Poprawki w silniku wyszukiwarki

2009-08-23T22:34:00.007+02:00

Witajcie,

dziś w nocy (bez szaleństw jak ostatnim razem), wprowadziłem parę poprawek do ostatnio dodanej funkcjonalności. Oto ich lista:

usprawnienie komunikacji z bazą danych, która teraz powinna przebiegać szybciej,
poprawienie błędu oraz usprawnienie algorytmu wyszukującego podobne przedmioty (błąd występował np. dla magazynków),
poprawienie wyświetlania tabelki z przedmiotami podobnymi (dotyczył przeglądarek IE),
poprawienie błędnego wyświetlania wykresów dla starszych wersji Flash Playera.

To tyle, następne nie wcześniej niż za dwa tygodnie ;).

Nowa wersja wyszukiwarki oraz synchronizacja

2009-08-20T03:05:00.000+02:00

Witajcie,

ponad miesiąc temu pisałem, że powinienem mieć więcej czasu. Nic się nie zmieniło, nie było nawet częstszych synchronizacji. Nie, nie odpuściłem tego projektu. Pracowałem nad nim sporo i dziś mam przyjemność udostępnić Wam jego nową wersję. Poza wyglądem, zmieniło się sporo w kodzie wyszukiwarki.
Część z najważniejszych zmian to:

Zmiany w wyglądzie strony ułatwiające nawigację po portalu.
Dodanie możliwości wyszukiwania/przeglądania: nowych produktów w sklepach, produktów o obniżonych cenach, produktów o podwyższonych cenach.
Dodanie możliwości wyszukiwania/przeglądania produktów po danej kategorii.
Dodanie możliwości wyszukiwania zawartości wskazanych sklepów, lub unikania wyszukiwania we wskazanych sklepach.
Dodanie możliwości przeglądania najpopularniejszego (wśród użytkowników portalu) szpeju.
Dodanie strony ze szczegółami dla danego produktu (nad która trzeba jeszcze trochę popracować). Póki co jest:

Rysowanie diagramu pokazującego zmianę ceny produktu
Wyszukiwanie tego samego produktu w innych sklepach (eksperymentalne)

Dodanie nowego algorytmu (domyślnie) sortującego wyniki wyszukiwania.
Zmiana algorytmu (mam nadzieje, że na lepszy) przypisującego sprzęt ze sklepów do danych kategorii.
Dodanie ustawień personalizujących wyszukiwanie dla każdego odwiedzającego. Między innymi:

Ustawienie ilość produktów wyświetlanych na stronie.
Ustawienie pomijania w wyszukiwaniu wskazanych sklepów.

Usunięcie wielu mniejszych i większych błędów utrudniających wyszukiwanie.

Przy okazji poprawiłem (w końcu) indeksowanie CyberGun'a oraz dodałem następujące sklepy do indeksu wyszukiwarki:

AirSoftGuns (http://sklep.airsoftguns.pl/).
Vest (http://www.vest.pl/).
SnajperAsg (http://snajperasg.pl/).

Dużo nowych funkcji to również nowe błędy, jeżeli jakiś znajdziesz skontaktuj się (napisz maila, lub komentarz) postaram się go w wolnej chwili poprawić.

Synchronizacja po długiej przerwie

2009-07-03T13:17:00.005+02:00

Witajcie,

upłynęło trochę czasu od ostatniej synchronizacji. Jednak w końcu rozpoczęły się wakacje i powinienem mieć, więcej czasu na poprawienie/ulepszenie wyszukiwarki. Z "obserwowanych" sklepów wypadł CogAsg, zmienili oni formę działalności na hurtownię, usuwając z internetu całą swoją ofertę. Nie udało się także zebrać informacji z CyberGun. Pozostałe sklepy zostały (chyba) w całości pobrane.

Update: poprawiony został błąd związany z wyszukiwaniem przedmiotów, w których występują polskie litery. Od teraz nie powinny pojawiać się problemy z przeglądaniem wyników dla wyszukań np. hełmu.

Synchronizacja bazy

2009-04-28T14:32:00.006+02:00

Witajcie,

zsynchronizowałem bazę produktów, z zasobami jakie posiadają poszczególne sklepy. Wyjątkiem jest CyberGun: administrator zmienił silnik sklepu oraz wystąpiły jakieś problemy techniczne z ich serwerem, przez co został on tym razem pominięty.

Do wyszukiwarki został dodany nowy sklep: RedZone.

Miłego wyszukiwania.

Zaczynamy...

2009-04-19T00:49:00.005+02:00

Witajcie,

od jakiegoś czasu zastanawiałem się jak zorganizować system powiadomień o zmianach na stronie. Na implementację wszystkiego od początku nie mam czasu (a oprócz zarządzania samymi komunikatami, trzeba by było uwzględnić jakieś komentarze, cms do obsługi tego wszystkiego i tak dalej). Mija się to z celem projektu, nie mam zamiaru tworzyć kolejnego portalu informacyjnego, ani pół informacyjnego. Swój wolny czas chciałbym przeznaczać na udoskonalanie wyszukiwarki i dodawanie nowych sklepów.
Stworzenie czegoś na bazie forum, uważam, że było by przerostem formy nad treścią.

Nie ma sensu tworzyć nowego forum o tematyce ASG, a sama wyszukiwarka nie jest zbyt rozległym tematem.

Mimo to chciałem mieć możliwość informowania maniaków airsoftu o aktualizacja, ewentualnych planach na przyszłość oraz móc wysłuchać Waszych opinii. Niby gdzieś na stronie można znaleźć adres emailowy, jednak protokół pocztowy powoli wymiera i coraz rzadziej jest używany. Sądzę, że musiałbym komuś nieźle zaleźć za skórę, aby chciało mu się pisać specjalnie maila.

Zdecydowałem się na formę taką jaką tutaj widzicie. System informacyjny oparty na silniku blogowym. Prosty w swojej formie wygląd, łatwa komunikacja z odwiedzającymi, gotowy system zarządzania treścią, możliwość podłączenia czytnika rss. Wszystko czego potrzeba.

Póki co włączyłem opcję dodawania komentarzy anonimowym odwiedzającym, jeżeli jednak nazbiera się zbyt duża ilość trolli będę zmuszony ją wyłączyć.