Wdrożenie systemu analizy profili kandydatów

Wdrożenie systemu analizy profili kandydatów Lobo Sp. z o. o. Sp. k. zaprasza do złożenia oferty cenowej w postępowaniu, którego przedmiotem zamówienia jest wdrożenie systemu analizy profili kandydatów Przedmiotem zamówienia jest stworzenie dedykowanego systemu informatycznego oraz przekazanie pełnych praw materialnych do niego. System będzie tworzony na bazie prototypu, który został wytworzony w ramach I etapu badawczego w wyniku prac B+R wykonanych przez jednostkę naukową. Przedmiot zamówienia musi obejmować następujące moduły integracyjne: 1. Moduł wyboru trybu rozpoznawania CV W ramach prac B+R zostały utworzone dwa systemy rozpoznawania CV dla dwóch różnych typów CV. Pierwszy system, oparty na algorytmach eksperckich, służy przede wszystkim do rozpoznawania CV utworzonych w portalu społecznościowym LinkedIn. Drugi system, oparty pierwotnie na metodzie graficznej oraz metodzie semantycznej, a po aktualizacji na metodzie sieci neuronowych, służy do rozpoznawania CV utworzonych samodzielnie przez kandydata bez pomocy portalu Linkedin. Przedmiotem modułu będzie rozpoznanie, z którym z dwóch powyższych rodzajów CV mamy do czynienia oraz wybór optymalnej dla tego CV algorytmu rozpoznawania CV. W ramach zadania należy wykonać następujące prace: - Przygotowanie bazy CV obu powyższych rodzajów. W ramach prac należy zaktualizować bazę CV przygotowaną w ramach prac B+R uzupełniając ją o minimum 100 nowych CV. - Dobór cech charakterystycznych dotyczących zarówno formatu, jak i zawartości, dzięki którym możliwe będzie odróżnienie obu typów CV. - Zaprogramowanie funkcji, która będzie wykrywać wybrane cechy oraz dokonywać prawidłowego rozpoznania typu CV. - Przetestowanie działania na przygotowanej bazie i optymalizacja działania modułu - Weryfikacja działania na przynajmniej 40 nowych CV, nie użytych w trakcie tworzenia algorytmu Przedmiotem zakupu w ramach zadania będzie zakup praw materialnych do stworzonego modułu wraz z kodem źródłowym oraz dokumentacją. 2. System rozpoznawania elementów CV za pomocą sieci neuronowych W ramach zadania planowane są następujące czynności: - uzupełnienie bazy CV utworzonej w ramach prac B+R o minimum 400 aktualnych, wzorcowych CV zawierających badane elementy - rozwinięcie aplikacji do ręcznej anotacji CV stworzonej w ramach prac B+R o dodatkowe pola - dokonanie wzorcowej anotacji CV na rozszerzonej bazie (ok. 2400 CV) - konfiguracja sieci neuronowych dla nowych algorytmów obsługujących nowe elementy CV - wytrenowanie sieci neuronowej na podstawie danych wzorcowych (80% - 90% danych) - przetestowania działania narzędzia na podstawie danych użytych w trakcie trenowania i dalsza optymalizacja - walidacja działania na podstawie danych nie użytych w trakcie trenowania (10-20%) i optymalizacja Przedmiotem zakupu w ramach zadania będzie zakup praw materialnych do stworzonego modułu wraz z kodem źródłowym oraz dokumentacją oraz zestawami testowymi. 3. System obsługi tekstów zawartych w elementach zidentyfikowanych w CV za pomocą systemu Element Wynikiem działania systemu sieci neuronowych opracowanych w ramach prac B+R oraz Zadania 2 będzie system rozpoznający położenie wszystkich kluczowych elementów CV kandydatów. Po rozpoznaniu przez system tego, że dany fragment tekstu CV jest określonym elementem CV (np. rozpoznanie tego, że tekst “Asystent działu sprzedaży, Coca Cola” jest tekstem zawartym w elemencie “doświadczenie zawodowe”), system powinien pobrać zawartość tego elementu, podzielić tę zawartość na odpowiednie elementy podstawowe (“Asystent działu sprzedaży” jako stanowisko, oraz “Coca Cola” jako pracodawca”) i zapisać te informacje w odpowiednim miejscu w bazie danych systemu Element. Moduł wykonany w ramach niniejszego zadania będzie odpowiadał za rozbicie informacji na konkretne elementy podstawowe oraz wpisanie tych informacji do bazy danych systemu. Testowanie algorytmów będzie odbywało się na bazie CV użytej w zadaniach 1 oraz 2 z użyciem próbki losowej. Wymagana jest skuteczność na poziomie 85%. Jako poprawny podział bloku zostanie uznany podziała zaakceptowany przez rekrutera Lobo z wieloletnim doświadczeniem. W ramach zadania planowane są następujące czynności: - zaprojektowanie algorytmów rozpoznających elementy podstawowe - implementacja algorytmów - wersja beta - przetestowanie algorytmów - implementacja algorytmów - wersja produkcyjna - stworzenie funkcji do zapisu elementów podstawowych w bazie danych Przedmiotem zakupu w ramach zadania będzie zakup praw materialnych do stworzonego modułu wraz z kodem źródłowym oraz dokumentacją. 4. System optymalizacji działania sieci neuronowych Opracowany w ramach prac B+R system sieci neuronowych oparty na systemie GoogleML zawiera kilka wytrenowanych sieci neuronowych, z których każda odpowiada za rozpoznawanie innego bloku znaczeniowego. Liczba tych sieci zostanie zwiększona w ramach Zadania nr 2. Jest to rozwiązanie wysoce nieoptymalne z finansowego punktu widzenia ze względu na fakt, iż system Google pobiera opłaty za wykorzystanie sieci od każdego przypadku użycia. Posiadanie kilku podobnych sieci zwiększa kilkukrotnie koszty użycia systemu. Dodatkowo, zwiększa to szansę przypisania jednego kawałka CV do 2 różnych bloków znaczeniowych ze względu na to, iż sieci działają niezależnie. Dlatego też, w ramach optymalizacji sieci neuronowych należy zmniejszyć ilość stworzonych modeli, optymalnie do tylko jednego. W ramach zadania planowane są następujące czynności: - Poprawa i optymalizacja zestawów testowych - Optymalizacja konfiguracji sieci neuronowych - Dokonanie ponownego trenowania - Testowanie i analiza w celu określenia: - poprawy / pogorszenia jakości dopasowań (ilościowo oraz jakościowo) - zmniejszenia kosztów korzystania z rozwiązania 5. Moduł integracji systemu sieci neuronowych z systemem Element oraz API programistycznego Moduł będzie odpowiadać za asynchroniczną komunikację pomiędzy systemem Element, a systemem rozpoznawania treści CV za pomocą sieci neuronowych oraz innych komponentów systemu. System powinien zawierać następujące elementy: - Zaprojektowanie komunikacji przy pomocy API REST po stronie aplikacji do obsługi sieci neuronowych. - Zaprojektowanie API REST po stronie systemu Element - Implementacja API REST po stronie aplikacji do obsługi sieci neuronowych. - Implementacja API REST po stronie systemu Element - Przetestowanie działania API Przedmiotem zakupu w ramach zadania będzie zakup praw materialnych do stworzonego modułu wraz kodem źródłowym oraz oraz sieci wraz oraz dokumentacją. 6. Poprawa ergonomii oraz interfejsu użytkownika Zadanie podzielone będzie na 4 części: - Customizacja, dodawanie własnych pól do profilu kandydata przez kandydata. - Podpowiadanie słów kluczowych - system będzie podpowiadał kandydatowi jakie elementy tekstu może jeszcze użyć w swoich CV dla pełniejszego opisu swoich doświadczeń, kompetencji i umiejętności. Podpowiadanie przeprowadzane będzie na podstawie informacji odczytanych z CV innych użytkowników, którzy posiadają podobne doświadczenie zawodowe. Zadanie realizowane w ramach tej części: - Obsługa CV w różnych formatach. W fazie badań obsługiwane były CV jedynie w formacie PDF. Niezbędne jest stworzenie dodatkowego modułu, które będzie umożliwiał przetwarzanie CV w innych popularnych formatach (np. doc, .docx, .odt)  - Prace związane z GUI 7.Zwiększenie wydajności systemu Niniejsze zadanie dotyczy prac programistycznych związanych ze współdziałaniem z chmurą obliczeniową i przygotowaniem aplikacji do jej skalowania. Zadanie podzielone zostało na następujące podzadania: - Stworzenie planu migracji systemu do chmury obliczeniowej Google lub innej podobnej - Przygotowanie konteneryzacji aplikacji, która ułatwia komercjalizację i skalowanie aplikacji - Przeniesienie algorytmów kolejkowania zadań z bazy danych na rozwiązanie Pub/Sub w Google Cloud lub innego usługodawcy chmurowego - Przeniesienie cyklicznych zadań do Google Cloud Scheduler lub innego usługodawcy chmurowego - Przygotowanie mechanizmu Load Balancing opartego na domenach - Przygotowanie mechanizm autoscalingu - Stworzenie możliwości obserwacji oraz logowania w rozproszonej architekturze w chmurze. - Przystosowanie aplikacji, aby nie zapisywała wszystkich logów na dysk - Przeniesienie systemu Rozpoznawania tekstu na odpowiednie rozwiązani 8.Wyodrębnienie narzędzia jako oddzielnej usługi Niniejsze zadanie dotyczy wyodrębnienia narzędzia jako odrębnej od systemu Element aplikacji. Prace będą obejmować: - Stworzenie systemu autoryzacji w postaci serwera OAuth/SSO lub analogicznego dla wspólnej bazy użytkowników w systemie Element - Integracja z bazami kandydatów klientów w systemie Element i zebranie danych w globalną bazę danych, z danymi potrzebnymi dla tej aplikacji - Konfiguracja nowych repozytoriów na aplikacje - Konfiguracja projektów - Stworzenie ekranu logowania - Stworzenie systemu deploymentu nowej usługi - Stworzenie systemu płatności i mikropłatności dla użytkowników - Testowanie nowej struktury - Optymalizację na podstawie wyników testów 9.Moduł testów automatycznych Moduł testów automatycznych jest niezbędny do zapewnienia stabilności aplikacji. Celem jest wykonanie testów w krótkim czasie oraz szybkie wykrywanie błędów pojawiających się w czasie rozwoju systemu. Beze testów automatycznych nie da się utrzymywać stabilności tak dużego rozwiązania w fazie wdrożenia. Prace będą obejmować: - Identyfikację przypadków testowych (min 50 różnych przypadków opracowanych w konsultacji z Lobo) - Opracowanie scenariuszy testowych - Implementację scenariuszy - Weryfikację poprawności działania UWAGA: Z uwagi na limit znaków bardziej szczegółowy opis modułów znajduje się w załączniku - Zapytanie ofertowe.