Big Data Engineer that helps us to create an advanced search engine tailored for business data spanning various industries. We achieve this by enhancing business data with an unparalleled focus on small and medium-sized enterprises (SMBs), ensuring precise categorization, and offering profound insights powered by real-time information.
Challenges
- Mine and analyze data from across the web
- Assess the effectiveness and accuracy of new data sources and data-gathering techniques
- Develop custom data models and algorithms to apply to text datasets
- Use predictive modeling to increase and optimize data extraction and data quality at ingestion and post-processing
- Develop the company's A/B data testing framework and test the quality of the data continuously
- Develop processes and tools to monitor and analyze model performance and data accuracy
- Prototype quickly to solve thorny use cases, without getting stuck in theory, as we're prone to shipping early and often
- Write well-designed, testable, efficient code
- Identify areas of opportunity and improvement
Requirements
- Experience using statistical computer languages, preferably Scala (or R, Python, SQL etc.) to manipulate data and draw insights from (very!) large datasets
- Experience working with and creating data architectures (Spark, Cassandra)
- Knowledge of advanced statistical techniques and concepts (regression, properties of distributions, statistical tests and proper usage, etc.) and experience with applications
- Any knowledge of machine learning techniques (clustering, decision tree learning, artificial neural networks etc.) and their real-world advantages/drawbacks is a big plus
Tech Stack
- Scala (or R, Python, SQL)
- Spark
- Cassandra
W Square One Poland dążymy tam, gdzie nie dotarła jeszcze żadna agencja rekrutacyjna IT – prosto na orbitę transparentności i działania w duchu win-win. Jesteśmy towarzyszem, opiekunem, wsparciem – na każdej drodze rekrutacyjnej podróży. Specjalistom IT dajemy nieskrępowaną możliwość rozwoju – przy inspirujących projektach, z nowoczesnymi technologiami. Ważna jest dla nas kultura uczciwości i rzetelnego informowania o możliwościach rozwoju kariery.
Naszym hasłem jest #OneSquareOne - jeden zespół, wiele talentów. Tworzymy zgrany zespół, który żadnej technologii się nie boi. Wśród naszych klientów znajdziesz firmy reprezentujące różne branże, m.in. mediową, farmaceutyczną, technologiczną czy bankową. Nasze biura są zlokalizowane w Warszawie oraz Londynie.
Jesteśmy dumnymi posiadaczami certyfikatu Great Place to Work 2023.