Od razu zrobię rezerwację, że są różne skrypty, które łapią wolne terminy i za które ludzie dostają pieniądze. Mój skrypt nie zajmuje miejsca pod względem szybkości, jakości itp. Ten scenariusz powstał tylko dla siebie, nie dążyłem do żadnych komercyjnych ani innych korzyści.
Opis problemu i dane wejściowe:
Na początek konieczne było zbadanie, jak przebiega proces rejestracji.Link do strony ambasady: by.e-konsulat.gov.pl
Na stronie głównej widzimy dwie selekcje, z możliwością wyboru kraju i miasta. Po wybraniu niezbędnych parametrów zostaniemy przekierowani na stronę by.e-konsulat.gov.pl/Informacyjne/Placowka.aspx?IDPlacowki=94 .
Następnie wybieramy z menu „Wiza Schengen – zarejestruj formularz” i wchodzimy na by.e-konsulat.gov.pl/Uslugi/RejestracjaTerminu.aspx?IDUSLUGI=8&IDPlacowki=94 - wziąłem ten URL jako punkt wejścia, bo nie ma sensu automatyzować poprzednich stron (oczywiście wcześniej sprawdzałem możliwość wejścia pod tym adresem z czystymi ciasteczkami)
Następnie widzimy captcha. Wchodząc do niego, otrzymujemy wynik - Brak wolnych terminów.
Na podstawie tych danych możemy naszkicować plan naszego przyszłego skryptu:
Wybór narzędzia
Po tym, jak zdecydowałem, co należy zrobić, pojawiło się pytanie o odpowiednie narzędzie. Chcę dokonać rezerwacji od razu, nie jestem programistą, jestem testerem. Ale obecna jest pewna znajomość języków.Na samym początku chciałem zautomatyzować ten proces na TestComplete. Po automatyzacji natknąłem się na pewne problemy, z których głównym była szybkość przetwarzania skryptów, a poza tym korzystałem ze starej wersji zestawu testowego 7.5, który działa maksymalnie z przeglądarką Mozzila 3.5. Rozumiesz, że w tak starej przeglądarce wyświetlanie elementów jest kiepskie, a układ miejscami. Dlatego zrezygnowałem z tego narzędzia i przyjrzałem się bliżej Selenium WebDriver.
Jako język skryptowy wybrano Python. Wybór padł na niego tylko z jednego powodu, byłem trochę zaznajomiony z tym językiem skryptowym i nie było ani czasu, ani chęci, aby na przykład zagłębić się w Javę i go studiować.
Praca z captcha
W rzeczywistości automatyzacja tych działań nie jest trudna, ale znienawidzona captcha wszystko psuje. Cały problem polegał na tym, że captcha zmieniały się co miesiąc lub dwa i dlatego nie było sensu zastanawiać się nad technologią ich rozwiązywania (tworzenie szablonów, masek itp.). Z tego powodu zdecydowałem się na antigate.Rejestrując się tam i wrzucając 3$ otrzymałem środki na 3000 captch.
Ale teraz trzeba było przemyśleć algorytm przetwarzania tego captcha, wysłać go do anty-bramy i uzyskać wartość captcha. Wyglądało to mniej więcej tak:
Do pracy z antigate wykorzystałem API tej usługi. Musiałem wdrożyć serwer PHP na maszynie lokalnej, bez zawracania sobie głowy, wybór padł na Denwera. Utworzyłem lokalną witrynę test1.ru i przesłałem tam stronę php do pracy z API usługi.
Lista tej strony
$nie znaleziono nazwy pliku"; return false; ) $fp=fopen($filename,"r"); if ($fp!=false) ( $body=""; while (!feof($fp)) $body.=fgets($ fp,1024); fclose($fp); $ext=strtolower(substr($nazwapliku,strpos($nazwapliku,."")+1)); ) else ( if ($is_verbose) echo " nie można odczytać pliku $nazwapliku "; return false; ) if ($ext=="jpg") $conttype="image/pjpeg"; if ($ext=="gif") $conttype="image/gif"; if ($ext== "png") $conttype="obraz/png"; $granica="---------FGf4Fh3fdjGQ148fdh"; $content="--$granica\r\n"; $treść.="Treść- Dyspozycja: formularz-dane; name=\"metoda\"\r\n"; $treść.="\r\n"; $treść.="post\r\n"; $treść.="--$granica\r\n" $content.="Dyspozycja zawartości: dane formularza; name=\"klucz\"\r\n"; $content.="\r\n"; $content.="$apikey\r\n"; $content.="--$boundary\r\n "; $content.="Dyspozycja zawartości: dane formularza; name=\"phrase\"\r\n"; $content.="\r\n"; $content.="$is_phrase\r\n"; $content.="--$boundary\r\n "; $content.="Dyspozycja zawartości: dane formularza; name=\"regsense\"\r\n"; $content.="\r\n"; $content.="$is_regsense\r\n"; $content.="--$boundary\r\n "; $content.="Dyspozycja zawartości: dane formularza; name=\"numeric\"\r\n"; $content.="\r\n"; $content.="$is_numeric\r\n"; $content.="--$boundary\r\n "; $content.="Dyspozycja zawartości: dane formularza; name=\"min_len\"\r\n"; $content.="\r\n"; $content.="$min_len\r\n"; $content.="--$boundary\r\n "; $content.="Dyspozycja zawartości: dane formularza; name=\"max_len\"\r\n"; $content.="\r\n"; $content.="$max_len\r\n"; $content.="--$boundary\r\n "; $content.="Dyspozycja zawartości: dane formularza; name=\"is_russian\"\r\n"; $content.="\r\n"; $content.="$is_russian\r\n"; $content.="--$boundary\r\n "; $content.="Dyspozycja zawartości: dane formularza; nazwa=\"plik\"; filename=\"capcha.$ext\"\r\n"; $content.="Content-Type: $conttype\r\n"; $content.="\r\n"; $content.=$body "\r\n"; $content.="--$boundary--"; $poststr="POST http://$sendhost/in.php HTTP/1.0\r\n"; $poststr.=" Content-Type: multipart/form-data; border=$boundary\r\n"; $poststr.="Host: $sendhost\r\n"; $poststr.="Długość treści: ".strlen($content)."\r\n\r\ n"; $poststr.=$treść; $fp=fsockopen($sendhost,80,$errno,$errstr,30); if ($fp!=false) ( fputs($fp,$poststr); $resp= ""; while (!feof($fp)) $resp.=fgets($fp,1024); fclose($fp); $result=substr($resp,strpos($resp,"\r\n\r \n")+4)); ) else ( if ($is_verbose) echo " nie udało się połączyć z anti-captcha"; if ($is_verbose) echo " błąd gniazda: $errno ($errstr)"; return false; ) if (strpos($result, "ERROR")!==false lub strpos($result, " ")!==false) ( if ($is_verbose) echo " serwer zwrócił błąd: $result"; return false; ) else ( $ex = explode("|", $result); $captcha_id = $ex; if ($is_verbose) echo " $captcha_id"; ) ) $text=recognize("captcha.png","Klucz musi być tutaj do pracy z usługą",true,"antigate.com"); ?>
Nie do końca rozumiałem co było co, ale jedyne co ustawiłem to następujące ustawienia:
$is_phrase = 0, //czy captcha jest frazą $is_regsense = 1, //wielkość liter ma znaczenie, czy nie? $is_numeric = 0, // Składa się z cyfr? $min_len = 4, //minimalna długość $max_len = 4, //maksymalna długość $is_russian = 1 //czy są rosyjskie znaki
W rezultacie musimy umieścić obraz captcha.png w katalogu, w którym znajduje się index.php i podążać za adresem url test1.ru
W efekcie captcha poleci do serwisu, gdy zostanie rozwiązany, otrzymamy jego id, obramowane w tagu b, lub pojawi się jakiś błąd, który się wyświetli.
Jedyne, co pozostało do zrobienia, to pobrać wartość captcha ze strony według jej identyfikatora.
Tworzenie skryptu
Ponieważ po zakończeniu wszystkich wstępnych przygotowań możemy przystąpić bezpośrednio do pisania scenariusza.Będziemy pracować z dwoma otwartymi oknami Firefoksa. Ponieważ w jednym oknie będziemy mieli kontrolę dat, a w drugim całą pracę dotyczącą captcha. Aby wyświetlić captcha w nowym oknie, po prostu odnajdziemy sam element na stronie po id i odczytamy adres URL aktualnego captcha. Uzyskując dostęp do tego adresu URL, otrzymamy tylko obraz captcha, bez żadnych dodatkowych elementów.
Teraz lista skryptów z komentarzami:
from selenium import webdriver z selenium.webdriver.support.ui import WebDriverWait import czasu driver = webdriver.Firefox() #uruchom pierwsze okno (główne) add_driver = webdriver.Firefox() #uruchom dodatkowe okno do pracy z captcha driver.get (" https://by.e-konsulat.gov.pl/Uslugi/RejestracjaTerminu.aspx?IDUSLUGI=8&IDPlacowki=94") #przejdź do naszego adresu URL captcha_url = driver.find_element_by_id("c_uslugi_rejestracjaterminu_ctl00_cpImage_chabotdetectcapttribute"_Cgetatectcapttribute ) # Znajdź element captcha po jego identyfikatorze i odczytaj adres URL, pod którym będzie dostępny obrazek add_driver.get(captcha_url) #otwórz naszą captcha w drugim oknie add_driver.set_window_size(50,200) #zmień rozmiar okna przeglądarki, aby zrobić zrzut ekranu captcha, bez dodatkowych szarych pól add_driver.get_screenshot_as_file("captcha.png") #zrób zrzut ekranu okna, w rezultacie nasz zrzut ekranu będzie zawierał tylko captcha i zapisz go w katalogu lokalnej witryny test1.ru, ponieważ Skrypt mam w tym samym miejscu, więc nie napisałem ścieżki add_driver.get(http://test1.ru) #idź do adresu URL naszej strony, aby pracować z anti-gate captcha_id = add_driver.find_element_by_xpatch( "//b") #znajdź element umieszczony w ramce znacznika b, co oznacza, że jest tam przechowywana wartość identyfikatora captcha count = false while (count == false) add_driver.get("http://antigate.com/res .php?key=Klucz do pracy z antigate&action=get&id= " + captcha_id) captcha_complete = add_driver.find_element_by_xpatch("//pre").text # znajdź naszą wartość (na anti-gate jest otoczona w tagu pre), jeśli ( captcha_complete.find("ERROR") >= 0) #sprawdź czy przeskoczył błąd time.sleep(5) #sleep przez 5 sekund else count = true #wyjdź z pętli weryfikacji # teraz wartość naszego captcha jest zawarta w captcha_complete i wprowadź ją do input driver.find_element_by_id("ctl00_cp_BotDetectCaptchaCodeTextBox").send_keys(captcha_complete) #znajdź nasze wejście i wprowadź wartość captcha driver.find_element_by_id("ctl00_cp_btnDalej").click() #find m następny przycisk i kliknij go wynik = driver.find_element_by_id("ctl00_cp_lblBrakTerminow").text if (result.find("Nieobecność") >= 0) print("Brak daty") else print("Data istnieje")
Przyszłe ulepszenia
Baza jest gotowa, nasz skrypt przechodzi na stronę, pobiera captcha, rozpoznaje ją przez usługę rozpoznawania, wprowadza captcha, klika dalej i sprawdza datę. Dla siebie zrobiłem to, co następuje - wepchnąłem całą tę akcję w pętlę chwilową (prawdziwą) i sprawdzałem witrynę, aż data została złapana (dodałem również wysłanie listu do mydła, w przypadku pozytywnego wyniku). Oczywiście w skrypcie można wprowadzić wiele ulepszeń, na przykład:1) sprawdź błędy i podejmij różne działania w oparciu o błędy
2) sprawdź niewłaściwą captcha i wyślij raport do antigate (skarga na złego pracownika)
3) dodaj automatycznego rejestratora, a nie tylko sprawdzacz daty
itp.
Posłowie
Jeszcze raz chcę zastrzec, że ten skrypt jest raczej słaby, ale wynik z tego był. Warto też zauważyć, że ambasadzie daleko do głupców siedzących i często zmieniających captcha, więc konieczne będzie przepisanie scenariusza w nowych warunkach.We wrześniu 2011 r. weszły w życie zmiany w procedurze składania wniosków o uzyskanie polskiej wizy krajowej i wizy Schengen. Nowością jest to, że wszystkie formularze należy wypełnić i zarejestrować na stronie internetowej elektronicznego konsulatu RP: http://www.e-konsulat.gov.pl/
Z własnego doświadczenia dodam, że dokładnie i poprawnie wypełnij wniosek wizowy, sprawdzanie wszystkich wypełnionych wierszy, ale nie więcej niż 30 minut, ponieważ system zmusi Cię do rozpoczęcia całego procesu od nowa. Dlatego przed rozpoczęciem rejestracji warto mieć pod ręką wydrukowaną „ściągawkę” z w/w artykułu.
Oprócz wszystkich zalet elektronicznego systemu rejestracji wniosków wizowych e-konsulat (teraz nie trzeba szukać formularzy, stać w kolejce w konsulacie itp.) jest jedna bardzo poważna wada: ściśle ograniczona liczba przetworzonych wniosków, co stwarza trudności przy próbie rejestracji, dlatego od momentu rejestracji do wizyty w konsulacie może to zająć nawet półtora miesiąca. A teraz nie ma sposobu, aby zmienić sytuację, z wyjątkiem wcześniejszej rejestracji.
Ten obraz jest obserwowany w konsulatach RP we Lwowie, Łucku, Winnicy. Ciekawe, że nie można zarejestrować się w urzędzie konsularnym, do którego nie należysz terytorialnie - wyjaśniają konsultanci konsulatów Sewastopola i Charkowa. Dlatego jeśli znasz przybliżony czas odbioru wszystkich wymagane dokumenty od pracodawcy w celu uzyskania wizy (Oświadczenie lub Zezwolenie), wtedy warto wcześniej zarejestrować wniosek. Jak wskazano na stronie e-konsulat
Kwestionariusze, które nie zostały zarejestrowane na stronie http://www.e-konsulat.gov.pl/ nie będą przyjmowane.
Punkty składania wniosków wizowych
Jeśli nie masz możliwości odwiedzenia Konsulatu RP, powinieneś skorzystać z usług ośrodków wizowych. Aby uzyskać bardziej szczegółowe informacje o centrach wizowych w Twoim mieście, zadzwoń:
- +38 044 594 5496,
- +38 032 235 1776
- +38 050 117 9053
Możesz również skontaktować się poprzez e-mail:
Oficjalna strona sieci ośrodków wizowych na Ukrainie: http://www.polandvisa-ukraine.com/
UWAGA! Polskie Centrum Wniosków Wizowych na Ukrainie (PPVA w Kijowie, Charkowie, Dnieprze, Równem, Łucku, Tarnopolu i Odessie) zmieniło warunki rejestracji składania dokumentów do otwarcia wizy do Polski. Od niedawna, po opłaceniu opłaty wizowej (18,5 euro), przedstawiciel PPVA osobiście kontaktuje się z Państwem telefonicznie i ustala termin składania dokumentów. NIE WOLNO kontaktować się z pośrednikami!
Rejestracja na wizę do Polski dla obywateli Ukrainy odbywa się albo bezpośrednio na stronie internetowej Konsulatu RP, albo za pośrednictwem centrum wizowego. Poniżej podałem szczegółowe instrukcje jak samodzielnie zarejestrować się do wizy i co zrobić, jeśli z jakiegoś powodu rejestracja się nie powiedzie.
Gdzie lepiej się zarejestrować - w centrum wizowym czy bezpośrednio w konsulacie?
Oczywiście za pośrednictwem strony internetowej konsulatu ( e-konsulat.gov.pl) - w końcu jest bezpłatny, a za usługi centrum wizowego trzeba będzie uiścić opłatę serwisową - 18,5 euro.
Należy jednak pamiętać, że konsulaty RP na Ukrainie znajdują się tylko w Kijowie, Charkowie, Odessie, Winnicy, Łucku i Lwowie. Jeśli nie masz szczęścia, aby zostać mieszkańcami tych miast i dotrzeć tam daleko, to być może centrum wizowe będzie najlepszym rozwiązaniem, ponieważ ich sieć jest znacznie szersza.
Problem numer dwa. Bardzo trudno jest znaleźć wolne terminy na stronie konsulatu, a biorąc pod uwagę ogromny napływ migrantów zarobkowych z Ukrainy w ostatnim czasie jest to po prostu nierealne. Najprawdopodobniej czekasz na taką wiadomość -
Czyli „Z uwagi na brak wolnych terminów rejestracji na wizę do Polski w systemie e-konsulat proponujemy skorzystać z usług centrum wizowego”. W zasadzie możesz spróbować szczęścia za kilka dni lub spróbować skontaktować się z personelem konsulatu i sprecyzować terminy otwarcia wolnych terminów. Ale szanse są bardzo małe.
Sam proces rejestracji w systemie nie różni się od rejestracji na stronie PPVA, dlatego opiszemy go poniżej.
Rejestracja na wizę do Polski przez centrum wizowe (PPVA)
Jak wspomniałem powyżej, złożenie dokumentów przez centrum wizowe (PPVA) jest odpłatne i wynosi 18,5 euro. Aby się zarejestrować, musisz dokonać przedpłaty za tę usługę w Bank Credo lub bank pomysłów, gdzie otrzymasz pokwitowanie zapłaty opłaty serwisowej z podanym numerem rejestracyjnym
Istnieją dwa sposoby rejestracji w PPVA:
1. W trybie telefonicznym, wybierając jeden z numerów call center
- +38 032 2351776
- +38 032 2424564
- +38 044 5945496
- +38 050 1179053
- +38 067 3430480
- +38 093 1755503
Operator wizowego call center wprowadzi wszystkie Twoje dane do bazy danych i zadzwoni numer rejestracyjny oraz datę wizyty w celu złożenia dokumentów. Zadzwoń pod ten numer rejestracyjny po przybyciu do PPVA.
2. Po przejściu rejestracji on-line na stronie PPWW
Wchodzimy na stronę PPVA (punkt przyjmowania wniosków wizowych):
Ważny! Strona do rejestracji o wizę do Polski za pośrednictwem centrum wniosków wizowych jest polskavisa-ukraine.com Wszystkie inne strony - które otrzymujesz przy próbie rejestracji - to firmy pośredniczące lub biura podróży, które chcą otrzymać dodatkową prowizję. Bądź ostrożny!
Na następnej karcie, na samej górze strony, zostaniesz poproszony o przejście do procesu przesyłania:
W kolejnej zakładce zostaniesz poproszony o kontynuowanie procesu rejestracji lub możesz dokonać zmian w już wypełnionym wniosku lub całkowicie go anulować, wydrukować potwierdzenie rejestracji lub sprawdzić status. Interesuje nas pierwszy punkt.
Etap trzeci- w rozwijanym menu wybierz centrum składania wniosków wizowych, które odpowiada nam pod względem lokalizacji, wybierz pozycję „złożenie dokumentów” i kliknij „Potwierdź”:
Ważny! Możesz złożyć dokumenty nie tylko do centrum wizowego w miejscu rejestracji, ale także w miejscu oficjalnego zatrudnienia lub szkolenia.
Etap czwarty– wybierz rodzaj wizy, która nas interesuje: wiza krajowa (praca), krajowa na szkolenie, Schengen i turystyczna Schengen; wskazać liczbę wnioskodawców, czy w paszporcie są dzieci wpisane oraz ich liczbę i kliknąć „POTWIERDŹ”
Jeśli są wolne terminy rejestracji, przejdziesz do następnego okna, w którym będziesz musiał wpisać kod rejestracyjny wskazany na potwierdzeniu z banku w celu uiszczenia opłaty serwisowej. Jeśli wszystko jest w porządku, przystępujesz do wypełnienia ankiety.
Sam proces szczegółowo opisałem w innym artykule – jak wypełnić wniosek o polską wizę
Przypomnę tylko, że czas na wypełnienie ankiety jest ograniczony - 1 godzina, więc lepiej nie zwlekać. Po wypełnieniu ankiety należy ją wydrukować, wkleić zdjęcie i podpisać w wymaganych miejscach. Z formularzem wniosku i pełnym pakietem dokumentów musisz stawić się w wyznaczonym czasie w PPVA, aby ubiegać się o wizę.
Ankieta musi zawierać kod kreskowy z 19-cyfrowym numerem. Sprawdź zgodność pisowni imienia i nazwiska po łacinie we wniosku oraz w paszporcie.
Dzieje się tak w szczęśliwych okolicznościach. A teraz o smutnej części - kto próbował zarejestrować się na stronie internetowej konsulatu lub na stronie internetowej centrum składania wniosków wizowych w ostatnie miesiące borykają się z tym samym problemem – zawsze nie ma terminów rejestracji na wizę do Polski.
Obejścia dotyczące rejestracji na polską uczelnię w przypadku braku wolnych terminów
Dlaczego więc nie ma wolnych terminów? centrum składania wniosków wizowych? Może Polska zdecydowała się zablokować napływ migrantów zarobkowych do kraju? Zupełnie nie. Tyle, że napływ chętnych do pracy w Polsce (i tylko turystów) jest tak duży, że Centra Wniosków Wizowych nie są w stanie obsłużyć takiej ilości wniosków. Ale to nie tylko to.
Sprytne biura podróży-pośrednicy dostrzegli świetną okazję do zarobienia pieniędzy na współobywateli. Mechanizm wdrażania nie jest nam znany, ale najprawdopodobniej specjalny program robota automatycznie przyjmuje terminy składania dokumentów, gdy tylko się otworzą.
Szczerze mówiąc, warto zauważyć, że nadal można złapać darmowe randki w punktach Kijowa, Lwowa i Odessy za przyjmowanie wniosków wizowych, jeśli spróbujesz wejść na stronę wcześnie od 8 do 9 rano. Kolejna sprawa to centra wizowe Charków, Dniepropietrowsk, Winnica i Chmielnicki. Tam złapanie „okna” jest po prostu nierealne.
Nie ma więc wolnych terminów, ale jakoś trzeba wyrobić wizę. Co robić?
W rzeczywistości nie ma wielu opcji:
- staraj się stale aktualizować stronę internetową centrum składania wniosków wizowych ( polskavisa-ukraine.com) w nadziei, że dopisze Ci szczęście i uda Ci się „złapać” wolne terminy
- złóż wniosek do pośredników i otrzymaj usługę pomocy w rejestracji za opłatą
Jak znaleźć tych pośredników? I tak naprawdę się nie ukrywają. Co więcej, gdy spróbujesz znaleźć stronę internetową centrum wniosków wizowych w wyszukiwarce do składania wniosku, na pewno natkniesz się na jednego tak dużego „asystenta”, którego łatwo pomylić z oficjalnym PPVA - jest to tak- nazywa " Centrum Wsparcia Wizowego»
Można łatwo znaleźć o wiele więcej analogów takich „pomocników”. Zasada ich pracy nie jest inna. A teraz najciekawsze – ile kosztują usługi takich pośredników? Z poniższego zdjęcia widzimy to dla mieszkańców różne obszary a dla różnych kategorii wiz ceny są różne:
- jeśli dla mieszkańców obwodu lwowskiego, zakarpackiego, wołyńskiego, rówieńskiego, tarnopolskiego i iwano-frankowskiego cena usługi pomocy w rejestracji w celu złożenia dokumentów w PPWW dla wiz kategorii C i D wyniesie 300 hrywien
- następnie dla mieszkańców Charkowa i Dniepropietrowska za wizę kat. C cena wynosi 1000 hrywien, a za wizę krajową D - już 3000 hrywien.
Będziesz musiał wypełnić ankietę bezpośrednio na stronie internetowej „centrum pomocy wizowej”. Później otrzymasz e-mail z datą i godziną rozmowy kwalifikacyjnej oraz kodem rejestracyjnym. Pytasz: „Jak to jest legalne?”. Oficjalnie w takiej firmie nie można się przyczepić, bo zgodnie z dokumentami świadczą one tzw. usługi doradcze w zakresie przygotowania i złożenia dokumentów i tyle.
Jeśli masz problem z brakiem wolnych terminów rejestracji w centrum wizowym w Polsce, nie spiesz się z natychmiastowym kontaktem z pośrednikami, odłóż kilka dni i postaraj się sam dokończyć rejestrację.
|
|
W kontakcie z