Aktualizacja indeksu Historic firmy Majestic

Majestic z przyjemnością ogłasza nie tylko wprowadzenie nowego indeksu Historic, ale także usprawnienie jego działania. Prace nad indeksem trwają już parę miesięcy, a jako, że nasi Użytkownicy lubią przejrzystość, prezentujemy najważniejsze statystyki:

Nowy indeks Historic obejmuje 369 MILIARDÓW DODATKOWYCH ADRESÓW URL odnalezionych dzięki przeszukaniu PONAD 100 miliardów dodatkowych linków. Poniższa tabela odzwierciedla tę zmianę.

Najważniejsze statystyki:

Przedział czasu: 30.06.2012 do 30.01.2018 roku
Ostatnia aktualizacja: 5.03.2018 roku

	Stary	Nowy	Wzrost
Odnalezione unikalne adresy URL	6 659 283 985 220	7 028 327 426 799	5,54%
Przeszukane unikalne adresy URL	1 413 052 059 901	1 532 667 950 732	8,47%
Odsetek przeszukanych	21,2%	21,8%

Co się zmieniło i dlaczego trwało to tak długo

Poprzednia aktualizacja indeksu Historic miała miejsce w dniu 2 listopada ubiegłego roku. Na ogół co miesiąc wprowadzamy aktualizację, dlatego widząc, że tym razem trwa to dłużej, udostępniliśmy ulepszenia infrastrukturalne. Po wprowadzeniu wszystkich zmian online z przyjemnością zauważamy, że skutkowało to nie tylko powiększeniem indeksu, ale także udało się przeszukać nieco większy odsetek odkrytych adresów URL.

Opóźnienie wynikało częściowo ze zmian sprzętowych – chociaż faktyczną korzyść przyniosła modernizacja oprogramowania na naszych serwerach, która pozwala nam nieco szybciej przetwarzać dane. Przeszukanie indeksu Historic zajęłoby… uwaga… 5 LAT! Tak, jest to zbiór danych, którego przeszukanie trwałoby 5 lat, dlatego w przypadku zmiany sposobu przetwarzania danych, jest to wielkie wyzwanie, na które nikt nie był przygotowany.

Niektórzy weterani z branży SEO pewnie pamiętają, jak firma Google próbowała dokonać czegoś podobnego, gdy wprowadziła silnik „Caffeine” w 2009 roku, próbując zmienić system indeksowania bez wpływania na zwykłych użytkowników. Wiedzieli jednak, że wymagający użytkownicy zauważą różnicę, dlatego prosili społeczność SEO o opinię. W przeciwieństwie do nich, Majestic obsługuje TYLKO wymagających użytkowników! Dlatego NIE chcieliśmy wykorzystywać naszych statystyk do zmian tylko dlatego, że modyfikowaliśmy system indeksowania.

Uznaliśmy, że to się udało, i tak było, ale ostatecznie odtworzyliśmy cały indeks Historic z nieco inną konfiguracją dla nowego indeksu. Oznacza to, że to MOGLIŚMY uruchomić indeks Historic w ubiegłym miesiącu, ale spowodowałoby to cofnięcie zmiany, która miała miejsce w lecie 2016 roku, która spowodowała niemało zamieszania w tamtym okresie. Gdyby tak się stało, wskaźniki Flow Metrics różniłyby się diametralnie, a co gorsze… miesiąc później… ponownie by zostały zresetowane po skorygowaniu ustawień. Zamiast po raz drugi niepokoić naszych Użytkowników, postanowiliśmy ponownie uruchomić kompilację indeksu – i wprowadzić do użytku bez zakłóceń.

Tak więc… po trzech miesiącach udoskonaleń infrastruktury i indeksu uzyskaliśmy większy indeks i lepsze pokrycie sieci Web – mamy nadzieję, że Użytkownikom to się spodoba.

Jak już dzisiaj skorzystać z nowych danych indeksu Historic

Użytkownicy konta Pro lub starszego mają możliwość wyświetlania indeksu Historic. Każdy, kto korzysta z planu bezpłatnego lub Lite, może go tutaj uaktualnić. Różnica między indeksem Fresh i Historic jest ogromna… około 4x więcej adresów URL odnalezionych i 8x więcej adresów URL przeszukanych niż w indeksie Fresh… co już pokazuje znaczną różnicę, ale warto także zrozumieć, co się za tymi danymi kryje. Indeks Fresh zawiera stare linki!

Przedstawia wszystkie linki, które widzimy w 90-dniowym cyklu przeszukiwania. Jeśli więc nawet określony link ma 10 lat, to jeśli jest przydatny i można go przeszukać, wybieramy go znacznie częściej niż raz na 90 dni… dlatego też zawsze pozostaje w indeksie Fresh. Jeśli link zostanie z jakiegokolwiek powodu USUNIĘTY, oflagujemy go stosownie i usuniemy z indeksu Fresh po upłynięciu 90 dni oflagowania jako usunięty. Dzięki temu każdy ma szansę dostrzeżenia utraconych linków. Indeks Historic jest inny, ponieważ cykl przeszukiwania, na którym opiera się cały indeks, waha się od 90 dni do 5 lat. To jest 20-krotność cyklu życia. Jak można sobie wyobrazić, wymaga do innej perspektywy. Można by to nazwać „archive.org” linków. Można napotkać linki, które zostały usunięte w ciągu 5 ostatnich lat.
Mamy nadzieję, że z przyjemnością powitacie nowy, powiększony indeks Historic. Dla każdego, kto chciałby się w ten temat zagłębić, ale musi uaktualnić konto, wersja Pro kosztuje 99,99 USD / 79,99 GBP / 94,99 Euro miesięcznie w przypadku opłaty za kwartał.

wróć