DevOps Engineer - AI Model Evaluator
USD 85 pro StundeMercor
Zürich ZH
- Homeoffice
About the job
Mercor connects elite creative and technical talent with leading AI research labs. Headquartered in San Francisco, our investors include Benchmark , General Catalyst , Peter Thiel , Adam D'Angelo , Larry Summers , and Jack Dorsey .
Position: DevOps / SRE / Cloud Engineer (Coding Agent Experience)
Type: Contract
Compensation: $85/hour
Location: Remote
Role Responsibilities
- Use frontier AI coding agents to complete and evaluate complex infrastructure engineering tasks.
- Review model-generated implementations involving cloud platforms , Kubernetes , CI/CD systems , observability , and infrastructure automation .
- Identify bugs, edge cases, reliability issues, and failure modes in model outputs.
- Compare outputs from multiple frontier models to assess their strengths and weaknesses.
- Apply professional engineering judgment to realistic infrastructure engineering scenarios.
Qualifications
Must-Have
- 2+ years of professional DevOps , SRE , or Cloud Engineering experience.
- Experience with AWS , Azure , GCP , Kubernetes , Terraform , CI/CD pipelines , or observability tooling.
- Regular use of AI coding agents such as Cursor, Claude Code, Codex, Windsurf, Gemini CLI, or similar tools.
- Ability to evaluate model-generated infrastructure and reliability engineering solutions.
Preferred
- Experience supporting production-scale systems.
Compensation & Legal
- $400 per accepted task
- Compensation tied to accepted work.
Application Process (Takes 20–30 mins to complete)
- Upload resume
- AI interview based on your resume
- Submit form
Resources & Support
- For details about the interview process and platform information, please check:
- For any help or support, reach out to: Email anzeigen
PS: Our team reviews applications daily. Please complete your AI interview and application steps to be considered for this opportunity.
Die Stellenanzeige wurde vor Vor 2 Tagen veröffentlicht
Ähnliche Jobs, die für Sie interessant sein könntenBasierend auf das Stellenangebot DevOps Engineer - AI Model Evaluator in Zürich ZH
USD 43 pro Stunde
...creative and technical talent with leading AI research labs. Headquartered in San... ...week Role Responsibilities Evaluate AI model output lyrics , voice generation, and... ...experience as a music producer, audio engineer, and/or sound mixer. ~ College degree...EmpfohlenHomeofficeRemote jobSoforteinstellungMercor
Zürich ZHVor 9 TagenUSD 60 - USD 70 pro Stunde
...technical talent with leading AI research labs. Headquartered in... ...Role Responsibilities Evaluate AI-generated responses for... ...domains. Apply and refine evaluation rubrics for RLHF , SFT , and... ...feedback to improve model alignment and safety performance...EmpfohlenHomeofficeRemote jobMercor
Zürich ZHVor 1 Tag- ...01 Zukünftiger Arbeitgeber Für ein namhaftes Dienstleistungsunternehmen im Raum Zürich suchen wir einen kompetenten DevOps System Engineer (m/w). Bei unserem Kunden bringen Sie Ihr Talent und Ihre Expertise in einem motivierten und flexiblen Arbeitsumfeld ein...EmpfohlenSelbständige TätigkeitRemote jobFestanstellungFlexible Arbeitszeit
- ...Bereit für Swisscom Als DevOps Engineer arbeitest du im agilen Team, entwickelst die SOC Plattform (SIEM/Splunk, SOAR) weiter, und stellst im täglichen Betrieb die Qualität unserer Security Services für unsere Geschäftskunden sicher. Du entwickelst unsere SOC Plattform...Empfohlen
- ...by attackers. The team consists of experienced developers and engineers, who you work closely with to continually develop services to protect... ...security services to counter the associated cyber risks.As a DevOps Engineer in the Security Operation Centre, you are part of...Empfohlen
- Ready for Swisscom Working as part of a team, you implement modern workspace technologies for our customers. M365 service developmentDevOps: We take responsibility for the solutions from set-up to operationDesigning the services of tomorrowContinuing education and exchange...
- Bereit für Swisscom Im Team bist du Umsetzer für die modern Workspace Technologien für unsere Kunden. M365 ServiceentwicklungDevOps: Wir verantworten die Lösungen vom Aufbau bis und mit BetriebServices von Morgen gestaltenWeiterbildung und Austausch über eine breite Basis...
- ...Applied AI Engineer Zürich AI & Software In office Full-time... ...and training through evaluation and deployment. Beyond individual... ...and continuously improve our models. Responsibilities Apply... ...robotic applications Own model training runs, evaluation, and...Vollzeit
- ...fabricants en cas de besoin et tu te penches en permanence sur les dernières technologies Microsoft. 3/3Skill Check En tant que Workplace Engineer, tu proposes à nos clients des solutions à leurs défis. Grâce à la collaboration au sein de l'équipe, nous célébrons sans cesse...
- ...Zukunft. Für deine innovativen Ideen bieten wir dir viel Gestaltungsfreiraum in einem agilen Arbeitsumfeld. 2/3Die Themen Innerhalb des DevOps Teams sind Operations und Development Aufgaben gleichermassen wichtig. Im Betriebsteil unserer Aufgaben stellen wir sicher, dass...
- ...RIVR, part of Amazon is a robotics company pioneering Physical AI through real-world doorstep delivery. Founded in 2024 as an ETH Zurich... ...data. By utilizing state-of-the-art Vision-Language-Action (VLA) models, large-scale generalist models (like Transformers), generative AI...Vollzeit
- ...den Herstellerfirmen zusammen und beschäftigst dich laufend mit den neuesten Microsoft-Technologien. 3/3Skill Check Als Workplace Engineer bietest du unserer Kundschaft Lösungen zu ihren Herausforderungen. Dank der Zusammenarbeit im Team feiern wir immer wieder Erfolge...
- ...Zukunft. Für deine innovativen Ideen bieten wir dir viel Gestaltungsfreiraum in einem agilen Arbeitsumfeld. 2/3Die Themen Innerhalb des DevOps Teams sind Operations und Development Aufgaben gleichermassen wichtig. Im Betriebsteil unserer Aufgaben stellen wir sicher, dass...
- Bereit für Swisscom Zusammen mit deinem Team verbesserst du unsere Produkte und Dienstleistungen kontinuierlich, um den stabilen Betrieb unserer Datenbankdienste auf verschiedenen Betriebssystemen sicherzustellen. Wir arbeiten im einem Enterprise Environment mit neusten...
- Ready for Swisscom Together with your team, you continuously improve our products and services to ensure the stable operation of our database services across different operating systems. We work in an enterprise environment with the latest technologies in the relational...Teilzeitarbeit
- Bereit für Swisscom Wir entwickeln, testen und betreiben gemeinsam IP Connectivity Services für unsere Businesskundschaft. Wir bauen auf unseren Werten: Vertrauen, Neugierde und Wertschätzung im Team. Dynamisches Team Neueste Technologien Moderne Arbeitsweisen Was du draus...
- ...Senior AI Engineer Zurich, Switzerland Product In office... ...technology company building a data engine that powers the future of... ...features end-to-end from design and evaluation through to deployment,... ...regulated domain. Working Model: This role is based on-site...Vollzeit
- ...Architektur, Konzeptionierung sowie Realisierung, basierend auf modernsten Ansätzen und Technologien. 3/3Skill Check Als Senior DevOps Engineer entwickelst und realisierst du die Private Cloud der nächsten Generation für die Schweizer Armee: Hochsicher, hochverfügbar und...
- Bereit für Swisscom Du bist an vorderster Front, wenn es um Architektur und Implementation von komplexen Linux-Umgebungen geht. Du löst anspruchsvollen Automatisierungsanforderungen und schwierige Fragestellungen treiben dich zu Höchstleistung an. Design, Planung und Implementation...
- ...01 Zukünftiger Arbeitgeber Eine moderne, sichere und leistungsfähige IT ist das Fundament unseres Unternehmenserfolgs. Als DevOps Engineer übernimmst du eine Schlüsselrolle bei der Weiterentwicklung unserer Microsoft-Cloud-Plattformen und unserer...Selbständige TätigkeitHomeofficeFestanstellungFlexible Arbeitszeit
- ...platform that brings together traditional HPC and modern AI workloads. We are looking for a Platform Engineer with a passion for Linux, automation, and open-... ...new perspectives for you. Flexible working models with the option to partly work from home We live...TemporärVon zu HauseHomeofficeFlexible Arbeitszeit
- ...DevOps Engineer MS Dynamics (m/w/d) 100% | IT / Business Engineering | Zürich | Berufserfahrene Bei uns in der IT der Zürcher Kantonalbank entwickelst du gemeinsam mit über 1'000 Kolleginnen und Kollegen die Technologie von morgen und das im Herzen von Zürich...Festanstellung
- ...that brings computer vision models from research and prototyping... ...components from day one. You will evaluate trade-offs in scalable,... ...This role combines hands-on engineering with exposure to real-world... ...and obstacle avoidance, and AI for high-quality and consistent...
- ...Compliance und technischen Audits – Enge Zusammenarbeit mit Engineering-, Data- und Security-Teams sowie aktive Mitgestaltung von Architektur... ...5 Jahre Berufserfahrung als Cloud Platform Engineer, DevOps Engineer, Site Reliability Engineer oder in einer vergleichbaren...FerienjobHomeoffice
- ...RIVR, part of Amazon is a robotics company pioneering Physical AI through real-world doorstep delivery. Founded in 2024 as an ETH Zurich spin-off, RIVR developed wheeled-legged robots designed to operate in complex, unstructured environments such as stairs, gates, doors...Vollzeit
- ...multi-lingual data, code, etc). Extend modeling and data generation to enable passing additional... ...and behavioral metadata. Red team our model to understand the most pressing... ...pivotal role in defining the future of secure AI within a mission-driven company with ambitious...Vollzeit
- ...interpretable, and steerable AI systems. We want AI to... ...committed researchers, engineers, policy experts, and... ...Anthropic's production models undergo sophisticated... ...directly improve production model quality Design,... ...model fine-tuning and evaluation Develop tools to measure...SoforteinstellungFlexible Arbeitszeit
CHF 106000 - CHF 158000 pro Jahr
...About the Role As an AI Engineer at Swiss Re, you'll be at the forefront of developing... ...sophisticated AI solutions including Large Language Models (LLMs), Retrieval-Augmented Generation (... ...AI pipelines from data ingestion to model deployment and monitoring in production...Vollzeit- ...Mistral Mistral provides full-stack AI solutions: from frontier models to developer tools, applications,... ...infrastructure to allow training, evaluation and analysis of AI models at scale... ...functionally with other scientists, engineers and product teams to ship AI...VollzeitÖffentlicher Dienst
- ...Instead, your focus will be AI Platform Engineering: building the paved roads,... ...heart of On's AI capability: model gateway and orchestration... ...vector and feature stores, evaluation pipelines, and the developer... ...• Continuously evaluate new serving frameworks, orchestration...
Wollen Sie mehr Stellenangebote erhalten?
Abonnieren Sie und erhalten Sie ähnliche Stellenangebote wie DevOps Engineer - AI Model Evaluator. Seien Sie der Erste, der sich bewirbt!
