Szpej.info Dev News

Ten blog został przeniesiony

noreply@blogger.com (rookie) — Sun, 24 Oct 2010 21:12:00 +0000

Ten blog znajduje się obecnie pod adresem http://szpejdev.blogspot.com/.
Za 30 sekund nastąpi automatyczne przekierowanie. Zamiast czekać, możesz kliknąć tutaj.

W przypadku subskrybowania kanałów konieczna jest zmiana adresu subskrypcji na:
http://szpejdev.blogspot.com/feeds/posts/default.

Synchronizacja danych i nowe sklepy

noreply@blogger.com (rookie) — Sun, 21 Feb 2010 00:09:00 +0000

Witajcie,

Dawno nic nie pisałem, co nie znaczy, że projekt został porzucony. Podczas przedostatniego updatu nic ciekawego się nie działo dlatego nie stworzyłem dla niego wpisu. Od dzisiaj w wyszukiwarka indeksuje dwa nowe sklepy: Sekcja 6mm oraz Jarmix Militaria. Natomiast sklep IronbroAsg przekształcił się w Defcon (albo przynajmniej domena została przepięta). Póki co to tyle.

Miłego wyszukiwania.

Synchronizacja danych

noreply@blogger.com (rookie) — Mon, 04 Jan 2010 20:30:00 +0000

Witajcie,

wszyscy użytkownicy, w nowym 2010 roku. Po chwilowych problemach technicznych udało się wykonać synchronizację danych ze sklepów i w wyszukiwarce. Z aktualizacji wypadł sklep paintball-planet, ponieważ w czasie pracy bota indeksującego (jak i chyba na chwilę obecną) nie udostępnił on aktualnych danych o produktach. Mam nadzieje, że nie podzieli on losów sklepu cog...

Miłego wyszukiwania

Aktualizacja cen i optymalizacja strony

noreply@blogger.com (rookie) — Sun, 13 Dec 2009 00:04:00 +0000

Witajcie,

ostatniej synchronizacji bazy z cenami sklepowymi nie opisywałem. Nie różniła się ona niczym od tych poprzednich. Podczas tej aktualizacji zaszło parę zmian o których warto wspomnieć.
Pierwszą z nich jest dodanie sklepu: paintball-planet. Pomimo tak kontrowersyjnej nazwy, można znaleźć w nim szpej airsoftowy. Jeżeli jednak kogoś bardzo będzie drażniła oferta tego sklepu w każdym momencie może w "ustawieniach" wyszukiwarki ją wyłączyć.
Drugą sprawą jest pominięcie podczas tej aktualizacji sklepu 6mm. Pominięcie nie wynikło z mojej złośliwości, po prostu serwer na którym znajdował się sklep nie działał w czasie, gdy bot zbierał dane. Ot co.

To tyle jeżeli chodzi o sprawy sklepowe. Zmiany zaszły również w samym silniku wyszukiwarki. Strona została zoptymalizowana pod kątem szybkości. Wyszukiwanie podobnych przedmiotów oraz generowanie wykresów powinno działać zauważalnie szybciej. Zostało włączone cachowanie skryptów js, plików ze stylami oraz inne statyczne dane często wysyłane, może to powodować dziwne zachowanie stron. Dlatego przed zgłoszeniem błędu, spróbujcie odświeżyć stronę (w Firefox ctrl+f5). Niemniej jednak ten manewr przyśpieszy wyświetlanie stron. Poza tym został poprawiony, może mało zauważalny, ale krytyczny błąd w skrypcie przetwarzającym dane ze sklepów.

Miłego wyszukiwania.

Poprawki w statystykach

noreply@blogger.com (rookie) — Sun, 22 Nov 2009 14:56:00 +0000

Witajcie,

tak jak zapowiedziałem, w weekend udało mi się znaleźć trochę czasu i dopisać mechanizmy zabezpieczające generowanie statyk na stronie głównej. Teraz już nie powinny pojawiać się przekłamania, a przynajmniej nie takie, o których pisałem w poprzednim poście.

Zmieniłem też porę wykonywania synchronizacji bazy z informacjami ze sklepów. Niestety część właścicieli sklepów aktualizuje informacje o produktach w soboty/niedziele co również powodowało pewne nieścisłości w danych jakie uzyskiwałem. Godzina pozostaje nadal "późno wieczorna", aby nie zakłócać pracy serwerów, zmienił się jedynie dzień tygodnia z soboty na środę.

Synchronizacja bazy i mały komentarz do statystyk

noreply@blogger.com (rookie) — Mon, 16 Nov 2009 22:04:00 +0000

Witajcie,

jak zwykle po okresie około dwóch tygodni zsynchronizowałem bazę z informacjami ze sklepów. Z racji korzystania z nowych (naskrobanych w wolnym czasie) narzędzi mogą pojawić się pewne błędy w danych. Niemniej jednak aktualizacje powinny trwać teraz trochę krócej.

Część z osób korzystających z wyszukiwarki szpeju, na pewno zauważyło na pierwszej stronie pewne "nieścisłości" w statystykach. Złe podpisy do zdjęć produktów czy niewyobrażalnie duże różnice w cenach produktów między kolejnym aktualizacjami. Powodem takiego stanu rzeczy są "podmiany" jednych produktów na inne w witrynach sklepowych. To znaczy przez długi czas w danym miejscu jest trzymany jeden produkt np. replika karabinu, w pewnym momencie sklep z powodów różnych rezygnuje z jego sprzedaży i w to miejsce wkłada inny produkt np. uchwyt na baterie. Tego typu operacja owocuje, widocznymi na stronie głównej anomaliami. Przy tak dużej ilości produktów ciężko ręcznie przejrzeć każdą zmianę, dlatego proszę o wyrozumiałość. W przyszłości postaram się stworzyć rozwiązanie, które wyeliminuje tego typu przekłamania.

Synchronizacja bazy

noreply@blogger.com (rookie) — Sun, 01 Nov 2009 08:26:00 +0000

Witajcie,

dziś w nocy zsynchronizowałem dane oraz dodałem jeden nowy sklep. Może nie jest on ściśle airsoftowy, ale zawiera trochę przydatnego szpeju. Mowa o miwo-military, specjalizującym się w dostarczaniu mundurów, plecaków, różnego rodzaju kamizelek oraz ładownic.

Póki co to tyle. Miłego wyszukiwania.

Synchronizacja oraz zmiany w wyszukiwarce

noreply@blogger.com (rookie) — Sat, 17 Oct 2009 21:49:00 +0000

Witajcie,

poza standardową synchronizacją danych trochę się zmieniło na stronie. Do bazy zostały dodane dwa nowe sklepy:

Casg - duża ilość sprzętu w kolorze coyote i nie tylko (podziękowania dla Michała za link do tego miejsca),
Azteko - trochę części do replik oraz gearboxów;

Na stronę główną trafiły statystyki z ciekawostkami na temat ostatniej synchronizacji. W przeciwieństwie do "śledzika", w ustawieniach wyszukiwarki można je wyłączyć. Zmieniły się również linki oraz oznaczenia w wynikach wyszukiwania. Kliknięcie na nazwę produktu, spowoduje przekierowanie do jego szczegółów, natomiast znaczek "[>]" przekieruje na stronę w odpowiednim sklepie. Strona ze szczegółami produktu również została ulepszona. Od teraz można zorientować się kiedy ostatni raz produkt był na stanie w sklepie oraz zobaczyć na wykresie historię jego dostępności. Lekkim zmianom uległ również algorytm wyszukujący podobne przedmioty między innymi dzięki zastosowaniu dynamicznego wykrywania producentów dla produktów. Poprawiłem także parę różnych mniejszych błędów.

To tyle... piszcie jeżeli zauważycie jakieś błędy, lub z informacjami co można w portalu jeszcze ulepszyć.

Miłego wyszukiwania.

Synchronizacja bazy i kosmetyka strony

noreply@blogger.com (rookie) — Mon, 21 Sep 2009 00:39:00 +0000

Witajcie,

parę dni temu miała miejsce awaria portalu (po części z mojej winy), po paru godzinach walki udało się przywrócić stronę. Jeżeli zauważycie jeszcze jakieś błędy lub dziwne zachowanie strony piszcie.

Dziś wieczorem zaktualizowałem bazę produktów oraz poprawiłem parę kosmetycznych błędów. Dodałem również funkcję auto uzupełniania tekstu w polach producentów i sklepów w kartach wyszukiwania zaawansowanego i ustawieniach. Powinno ułatwić to wybór konkretnych wartości. Mam nadzieje, że się wam spodoba.

Miłego wyszukiwania.

Synchronizacja bazy

noreply@blogger.com (rookie) — Wed, 09 Sep 2009 23:41:00 +0000

Witajcie,

po chwilowej nieobecności, baza produktów została zaktualizowana. Tym razem (o dziwo) odbyło się to bez większych problemów.

Pozdrawiam.

Poprawki w silniku wyszukiwarki

noreply@blogger.com (rookie) — Sun, 23 Aug 2009 20:34:00 +0000

Witajcie,

dziś w nocy (bez szaleństw jak ostatnim razem), wprowadziłem parę poprawek do ostatnio dodanej funkcjonalności. Oto ich lista:

usprawnienie komunikacji z bazą danych, która teraz powinna przebiegać szybciej,
poprawienie błędu oraz usprawnienie algorytmu wyszukującego podobne przedmioty (błąd występował np. dla magazynków),
poprawienie wyświetlania tabelki z przedmiotami podobnymi (dotyczył przeglądarek IE),
poprawienie błędnego wyświetlania wykresów dla starszych wersji Flash Playera.

To tyle, następne nie wcześniej niż za dwa tygodnie ;).

Nowa wersja wyszukiwarki oraz synchronizacja

noreply@blogger.com (rookie) — Thu, 20 Aug 2009 01:05:00 +0000

Witajcie,

ponad miesiąc temu pisałem, że powinienem mieć więcej czasu. Nic się nie zmieniło, nie było nawet częstszych synchronizacji. Nie, nie odpuściłem tego projektu. Pracowałem nad nim sporo i dziś mam przyjemność udostępnić Wam jego nową wersję. Poza wyglądem, zmieniło się sporo w kodzie wyszukiwarki.
Część z najważniejszych zmian to:

Zmiany w wyglądzie strony ułatwiające nawigację po portalu.
Dodanie możliwości wyszukiwania/przeglądania: nowych produktów w sklepach, produktów o obniżonych cenach, produktów o podwyższonych cenach.
Dodanie możliwości wyszukiwania/przeglądania produktów po danej kategorii.
Dodanie możliwości wyszukiwania zawartości wskazanych sklepów, lub unikania wyszukiwania we wskazanych sklepach.
Dodanie możliwości przeglądania najpopularniejszego (wśród użytkowników portalu) szpeju.
Dodanie strony ze szczegółami dla danego produktu (nad która trzeba jeszcze trochę popracować). Póki co jest:

Rysowanie diagramu pokazującego zmianę ceny produktu
Wyszukiwanie tego samego produktu w innych sklepach (eksperymentalne)

Dodanie nowego algorytmu (domyślnie) sortującego wyniki wyszukiwania.
Zmiana algorytmu (mam nadzieje, że na lepszy) przypisującego sprzęt ze sklepów do danych kategorii.
Dodanie ustawień personalizujących wyszukiwanie dla każdego odwiedzającego. Między innymi:

Ustawienie ilość produktów wyświetlanych na stronie.
Ustawienie pomijania w wyszukiwaniu wskazanych sklepów.

Usunięcie wielu mniejszych i większych błędów utrudniających wyszukiwanie.

Przy okazji poprawiłem (w końcu) indeksowanie CyberGun'a oraz dodałem następujące sklepy do indeksu wyszukiwarki:

AirSoftGuns (http://sklep.airsoftguns.pl/).
Vest (http://www.vest.pl/).
SnajperAsg (http://snajperasg.pl/).

Dużo nowych funkcji to również nowe błędy, jeżeli jakiś znajdziesz skontaktuj się (napisz maila, lub komentarz) postaram się go w wolnej chwili poprawić.

Synchronizacja po długiej przerwie

noreply@blogger.com (rookie) — Fri, 03 Jul 2009 11:17:00 +0000

Witajcie,

upłynęło trochę czasu od ostatniej synchronizacji. Jednak w końcu rozpoczęły się wakacje i powinienem mieć, więcej czasu na poprawienie/ulepszenie wyszukiwarki. Z "obserwowanych" sklepów wypadł CogAsg, zmienili oni formę działalności na hurtownię, usuwając z internetu całą swoją ofertę. Nie udało się także zebrać informacji z CyberGun. Pozostałe sklepy zostały (chyba) w całości pobrane.

Update: poprawiony został błąd związany z wyszukiwaniem przedmiotów, w których występują polskie litery. Od teraz nie powinny pojawiać się problemy z przeglądaniem wyników dla wyszukań np. hełmu.

Synchronizacja bazy

noreply@blogger.com (rookie) — Tue, 28 Apr 2009 12:32:00 +0000

Witajcie,

zsynchronizowałem bazę produktów, z zasobami jakie posiadają poszczególne sklepy. Wyjątkiem jest CyberGun: administrator zmienił silnik sklepu oraz wystąpiły jakieś problemy techniczne z ich serwerem, przez co został on tym razem pominięty.

Do wyszukiwarki został dodany nowy sklep: RedZone.

Miłego wyszukiwania.

Zaczynamy...

noreply@blogger.com (rookie) — Sat, 18 Apr 2009 22:49:00 +0000

Witajcie,

od jakiegoś czasu zastanawiałem się jak zorganizować system powiadomień o zmianach na stronie. Na implementację wszystkiego od początku nie mam czasu (a oprócz zarządzania samymi komunikatami, trzeba by było uwzględnić jakieś komentarze, cms do obsługi tego wszystkiego i tak dalej). Mija się to z celem projektu, nie mam zamiaru tworzyć kolejnego portalu informacyjnego, ani pół informacyjnego. Swój wolny czas chciałbym przeznaczać na udoskonalanie wyszukiwarki i dodawanie nowych sklepów.
Stworzenie czegoś na bazie forum, uważam, że było by przerostem formy nad treścią.

Nie ma sensu tworzyć nowego forum o tematyce ASG, a sama wyszukiwarka nie jest zbyt rozległym tematem.

Mimo to chciałem mieć możliwość informowania maniaków airsoftu o aktualizacja, ewentualnych planach na przyszłość oraz móc wysłuchać Waszych opinii. Niby gdzieś na stronie można znaleźć adres emailowy, jednak protokół pocztowy powoli wymiera i coraz rzadziej jest używany. Sądzę, że musiałbym komuś nieźle zaleźć za skórę, aby chciało mu się pisać specjalnie maila.

Zdecydowałem się na formę taką jaką tutaj widzicie. System informacyjny oparty na silniku blogowym. Prosty w swojej formie wygląd, łatwa komunikacja z odwiedzającymi, gotowy system zarządzania treścią, możliwość podłączenia czytnika rss. Wszystko czego potrzeba.

Póki co włączyłem opcję dodawania komentarzy anonimowym odwiedzającym, jeżeli jednak nazbiera się zbyt duża ilość trolli będę zmuszony ją wyłączyć.