Det är lite ironiskt att världens största skrapare av internet nu söker en anti-skrapare eftersom att de inte vill ha andra AI tjänster som skrapar av webben på information från deras domäner och webbplatser för att bygga upp sina LLM modeller.
Google stängde jobbannons för Anti-Scraper
För ett par veckor sedan lade Google ut en ny tjänst med titeln Senior Engineering Analyst, Search, Anti-scraper, men redan efter en veckas tid plockades annonsen ned. På LinkedIn kunde man se att 49 personer ansökte tjänsten (via LinkedIn) – lite märkligt att Google stängde platsannons så snabbt.
SEO-communityt tolkade tjänsten som att Google vill anställa en specialist för att stoppa personer eller företag som försöker skrapa Googles sökresultat. Det framgår ganska tydligt av själva jobbtiteln att så är fallet.
Men varför stängde Google jobbannonsen så snabbt? Annonsen togs dessutom bort från Googles egen sajt i samband med detta? Troligtvis var det alla syrliga kommentarer som fick den att plocka ned annonsen. eller?
Jobbannonsen finns nu på en annan plats, ni hittar den här
Job requirements:
Minimum qualifications:
- Bachelor’s degree or equivalent practical experience
- 5 years of experience in data analysis, including identifying trends, generating summary statistics, and drawing insights from quantitative and qualitative data.
- 5 years of experience managing projects and defining project scope, goals, and deliverables.
- Experience with statistical analysis, data science and data analysis.
Preferred qualifications:
- Master’s degree in a quantitative field (e.g., Statistics, Computer Science, Mathematics, Engineering).
- 5 years of experience in a data-intensive role such as threat intelligence, data science, trust and safety, or fraud analysis.
- Experience with threat intelligence, anti-abuse, security, network analysis, fraud detection, and Search Engine Optimization (SEO).
- Experience with SQL, JavaScript, Python, or C++.
- Experience with machine learning systems and concepts.
- Experience in data analysis, data science, statistical analysis, abuse detection, spam, web development, project management, and fraud detection.
Responsibilities:
- Investigate and analyze complex patterns of abuse on Google Search, utilizing data-motivated insights to develop countermeasures and enhance platform security. Analyze datasets to identify trends, patterns, and anomalies that may indicate abuse within Google Search.
- Develop and track metrics to measure scraper impact and the effectiveness of anti-scraping defenses. Collaborate with engineering teams to design, test, and launch new anti-scraper rules, models, and system enhancements.
- Investigate proof-of-concept attacks and research reports that identify blind spots and guide the engineering team’s development priorities. Evaluate the effectiveness of existing and proposed detection mechanisms, understanding the impact on both scrapers and real users. Contribute to the development of signals and features for machine learning models to detect abusive behavior. Develop and maintain threat intelligence on scraper actors, motivations, tactics and the scraper ecosystem.