Новая должность — ИИ инженер в Uniqa
В июле я начал разрабатывать программу для сбора данных о клиентах B2B через интернет. Я вошел в команду Scaly, стартап от Uniqa — страховой компании в Австрии. Scaly занимается аутсорсингом работников из Словакии в Германию, Австрию и Швейцарию. Моя задача — разработать искусственный интеллект-RPA на основе Selenium, Beautiful Soup и Perplexity и OpenAI, который собирает данные с различных сайтов, где robots.txt это разрешает, далее ИИ формирует из них единый набор данных.
На основе Streamlit я создал визуальный интерфейс, который позволяет любому сотруднику находить нужную информацию. Эта информация помогает принимать правильные бизнес-решения, определяя, на какие компании следует в первую очередь фокусироваться. К сожалению, я не могу углубляться в метрики и количество компаний, используемых для анализа, но алгоритм, который был разработан, оказался очень эффективным.
Этот ИИ может применяться не только в страховании и поиске, но и в других областях. Теперь AI может выполнять различные задачи, используя рекурсию и разные вариации поведения, например, когда Алгоритму не хватает информации для дальнейших действий.
Я создал систему, в которой бот загружает всё базу данных, извлекает информацию о компаниях, ищет более подробные данные в интернете в зависимости от задачи и в нужной структуре благодаря pydantic. Программа оптимизирована: поиск по 1000 страницам за 3-5 долларов. Вся информация автоматически попадает в постгре, где она либо направляется в основную базу данных для принятия решений менеджером, либо в базу данных бота, который, исходя из истории и специфичных запросов, пытается найти аналогичные решения для конкретного сайта.