Po namyśle postanowiłem opublikować bazę do addera na tym blogu. Listę katalogów będę dodawał sukcesywnie po dokładnym sprawdzeniu bazy. Jeszcze nie wiem w jakiej formie będę udostępniał listę katalogów, for i precli, ale prawdopodobnie będą to odzielne strony/podstrony gdzie na jednej stronie zostanie opublikowane minimum sto linków.
Aktualnie adder sprawdza samodzielnie bazę i będzie wyrzucał katalogi z brakiem połączenia dopiero po 50 nieudanych połączeniach. Obecnie skrypt sprawdza bazę już po raz czwarty, a może i piąty. Myślę, że pójdzie gładko ponieważ skrypt, a mianowicie cron odpala sprawdzanie co 5 minut. Przyznam, że trochę się niecierpliwię i raczej z czasem obniżę maksymalą ilość nieudanych połączeń do 10, a może nawet 5 z uwagi na obecne, duże rozmiary bazy. Z czasem gdy baza będzie już w miarę przeczyszczona z niedziałających katalogów znów podniesiemy ilość nieudanych połączeń.
Dzisiaj usunąłem z bazy 551 niepotrzebnych katalogów. W miażdżącej przewadze były to katalogi typu cncat, które prowadziły do podkategorii lub do panelu admina, były również cncat'y niemoderowane, puste strony itp.
Kolejnymi typami katalogów którymi dzisiaj "się zająłem" były blogi wordpress. Usunąłem wszystkie WP, które wskazywały na kategorie, archiwa, tagi, strony, podstrony i użytkowników. Zdarzały się także blogi moderowane, które w stu procentach nie przyjęłyby naszych artykułów.
Wlasnie dodalem ok. 400 tysiecy linkow do sprawdzenia przez addera. Oczywiscie wiekszosc z nich nie bedzie katalogami, blogami czy forami, jednak wiem, ze dostaniemy spora dawke nowych katalogow. Aktualizacja ststystyk juz wkrotce.