DevOps Engineer - AI Model Evaluator
USD 85 pro StundeMercor
Zürich ZH
- Homeoffice
About the job
Mercor connects elite creative and technical talent with leading AI research labs. Headquartered in San Francisco, our investors include Benchmark , General Catalyst , Peter Thiel , Adam D'Angelo , Larry Summers , and Jack Dorsey .
Position: DevOps / SRE / Cloud Engineer (Coding Agent Experience)
Type: Contract
Compensation: $85/hour
Location: Remote
Role Responsibilities
- Use frontier AI coding agents to complete and evaluate complex infrastructure engineering tasks.
- Review model-generated implementations involving cloud platforms , Kubernetes , CI/CD systems , observability , and infrastructure automation .
- Identify bugs, edge cases, reliability issues, and failure modes.
- Compare outputs from multiple frontier models and assess their strengths and weaknesses.
- Apply professional engineering judgment to realistic infrastructure engineering scenarios.
- Work independently and asynchronously to meet sprint-based project deadlines.
Qualifications
Must-Have
- 2+ years of professional DevOps , SRE , or Cloud Engineering experience.
- Experience with AWS , Azure , GCP , Kubernetes , Terraform , CI/CD pipelines , or observability tooling .
- Regular use of AI coding agents such as Cursor, Claude Code, Codex, Windsurf, Gemini CLI, or similar tools.
- Ability to evaluate model-generated infrastructure and reliability engineering solutions.
Preferred
- Experience supporting production-scale systems.
Compensation & Legal
- $400 per accepted task .
- Compensation is tied to accepted work.
Application Process (Takes 20–30 mins to complete)
- Upload resume
- AI interview based on your resume
- Submit form
Resources & Support
- For details about the interview process and platform information, please check:
- For any help or support, reach out to: Email anzeigen
PS: Our team reviews applications daily. Please complete your AI interview and application steps to be considered for this opportunity.
Die Stellenanzeige wurde vor Vor 3 Tagen veröffentlicht
Ähnliche Jobs, die für Sie interessant sein könntenBasierend auf das Stellenangebot DevOps Engineer - AI Model Evaluator in Zürich ZH
USD 85 pro Stunde
...technical talent with leading AI research labs. Headquartered... ...Dorsey . Position: DevOps / SRE / Cloud Engineer (Coding Agent Experience)... ...coding agents to complete and evaluate complex infrastructure engineering tasks. Review model-generated implementations involving...EmpfohlenHomeofficeRemote jobMercor
Zürich ZHVor 3 TagenUSD 43 pro Stunde
...creative and technical talent with leading AI research labs. Headquartered in San... ...week Role Responsibilities Evaluate AI model output lyrics , voice generation, and... ...experience as a music producer, audio engineer, and/or sound mixer. ~ College degree...EmpfohlenHomeofficeRemote jobSoforteinstellungMercor
Zürich ZHVor 20 TagenUSD 60 - USD 70 pro Stunde
...technical talent with leading AI research labs. Headquartered in... ...Role Responsibilities Evaluate AI-generated responses for... ...domains. Apply and refine evaluation rubrics for RLHF , SFT , and... ...feedback to improve model alignment and safety performance...EmpfohlenHomeofficeRemote jobMercor
Zürich ZHVor 5 Tagen- ...01 Zukünftiger Arbeitgeber Für ein namhaftes Dienstleistungsunternehmen im Raum Zürich suchen wir einen kompetenten DevOps System Engineer (m/w). Bei unserem Kunden bringen Sie Ihr Talent und Ihre Expertise in einem motivierten und flexiblen Arbeitsumfeld ein...EmpfohlenSelbständige TätigkeitRemote jobFestanstellungFlexible Arbeitszeit
- ...by attackers. The team consists of experienced developers and engineers, who you work closely with to continually develop services to protect... ...security services to counter the associated cyber risks.As a DevOps Engineer in the Security Operation Centre, you are part of...Empfohlen
- Ready for Swisscom Working as part of a team, you implement modern workspace technologies for our customers. M365 service developmentDevOps: We take responsibility for the solutions from set-up to operationDesigning the services of tomorrowContinuing education and exchange...
- ...Bereit für Swisscom Als DevOps Engineer arbeitest du im agilen Team, entwickelst die SOC Plattform (SIEM/Splunk, SOAR) weiter, und stellst im täglichen Betrieb die Qualität unserer Security Services für unsere Geschäftskunden sicher. Du entwickelst unsere SOC Plattform...
- Bereit für Swisscom Im Team bist du Umsetzer für die modern Workspace Technologien für unsere Kunden. M365 ServiceentwicklungDevOps: Wir verantworten die Lösungen vom Aufbau bis und mit BetriebServices von Morgen gestaltenWeiterbildung und Austausch über eine breite Basis...
- ...learner and well rounded, AI Software Engineer to join our AI innovation lab... ...Stay up-to-date and evaluate the latest advancements in... ...deploying and maintaining AI models in production ML frameworks... ...tools, observability tools, evaluation pipelines, prompt engineering...VollzeitBackoffice
- ...We are looking for an experienced DevOps Engineer (Golang) to join a leading telecommunications company in Zurich. This is a high-impact contract... ...office environment in Zurich with a flexible hybrid working model following the onboarding period. Collaborative, innovation-...TemporärVon zu HauseHomeofficeFlexible Arbeitszeit
- ...RIVR, part of Amazon is a robotics company pioneering Physical AI through real-world doorstep delivery. Founded in 2024 as an ETH Zurich... ...data. By utilizing state-of-the-art Vision-Language-Action (VLA) models, large-scale generalist models (like Transformers), generative AI...Vollzeit
- ...Applied AI Engineer Zürich AI & Software In office Full-time... ...and training through evaluation and deployment. Beyond individual... ...and continuously improve our models. Responsibilities Apply... ...robotic applications Own model training runs, evaluation, and...Vollzeit
- Bereit für Swisscom Zusammen mit deinem Team verbesserst du unsere Produkte und Dienstleistungen kontinuierlich, um den stabilen Betrieb unserer Datenbankdienste auf verschiedenen Betriebssystemen sicherzustellen. Wir arbeiten im einem Enterprise Environment mit neusten...
- Ready for Swisscom Together with your team, you continuously improve our products and services to ensure the stable operation of our database services across different operating systems. We work in an enterprise environment with the latest technologies in the relational...Teilzeitarbeit
- ...Zukunft. Für deine innovativen Ideen bieten wir dir viel Gestaltungsfreiraum in einem agilen Arbeitsumfeld. 2/3Die Themen Innerhalb des DevOps Teams sind Operations und Development Aufgaben gleichermassen wichtig. Im Betriebsteil unserer Aufgaben stellen wir sicher, dass...
- ...interpretable, and steerable AI systems. We want AI to... ...committed researchers, engineers, policy experts, and... ...Anthropic's production models undergo sophisticated... ...directly improve production model quality Design,... ...model fine-tuning and evaluation Develop tools to measure...SoforteinstellungFlexible Arbeitszeit
- ...fabricants en cas de besoin et tu te penches en permanence sur les dernières technologies Microsoft. 3/3Skill Check En tant que Workplace Engineer, tu proposes à nos clients des solutions à leurs défis. Grâce à la collaboration au sein de l'équipe, nous célébrons sans cesse...
- ...Zukunft. Für deine innovativen Ideen bieten wir dir viel Gestaltungsfreiraum in einem agilen Arbeitsumfeld. 2/3Die Themen Innerhalb des DevOps Teams sind Operations und Development Aufgaben gleichermassen wichtig. Im Betriebsteil unserer Aufgaben stellen wir sicher, dass...
- ...den Herstellerfirmen zusammen und beschäftigst dich laufend mit den neuesten Microsoft-Technologien. 3/3Skill Check Als Workplace Engineer bietest du unserer Kundschaft Lösungen zu ihren Herausforderungen. Dank der Zusammenarbeit im Team feiern wir immer wieder Erfolge...
- Bereit für Swisscom Wir entwickeln, testen und betreiben gemeinsam IP Connectivity Services für unsere Businesskundschaft. Wir bauen auf unseren Werten: Vertrauen, Neugierde und Wertschätzung im Team. Dynamisches Team Neueste Technologien Moderne Arbeitsweisen Was du draus...
- ...Architektur, Konzeptionierung sowie Realisierung, basierend auf modernsten Ansätzen und Technologien. 3/3Skill Check Als Senior DevOps Engineer entwickelst und realisierst du die Private Cloud der nächsten Generation für die Schweizer Armee: Hochsicher, hochverfügbar und...
- Bereit für Swisscom Du bist an vorderster Front, wenn es um Architektur und Implementation von komplexen Linux-Umgebungen geht. Du löst anspruchsvollen Automatisierungsanforderungen und schwierige Fragestellungen treiben dich zu Höchstleistung an. Design, Planung und Implementation...
- ...Senior AI Engineer Zurich, Switzerland Product In office... ...technology company building a data engine that powers the future of... ...features end-to-end from design and evaluation through to deployment,... ...regulated domain. Working Model: This role is based on-site...Vollzeit
- ...Head of Geospatial AI - Foundation Models and Geo-Intelligence... ...design, development, evaluation and operationalisation... ...pipelines, model-training environments... ...development activities, evaluate external capabilities... ...learning, geo-informatics, engineering, remote sensing or a...Öffentlicher DienstRemote jobFestanstellung
- ...DevOps Engineer MS Dynamics (m/w/d) 100% | IT / Business Engineering | Zürich | Berufserfahrene Bei uns in der IT der Zürcher Kantonalbank entwickelst du gemeinsam mit über 1'000 Kolleginnen und Kollegen die Technologie von morgen und das im Herzen von Zürich...Festanstellung
- ...to determine it analytically instead, with an arbitrary machine model (for any system) and a parametrized representation for algorithms... ...reproducibility across machines. o Coverage of matrix/tensor engines and mixed- and low-precision arithmetic, rather than inferring...
- ...DevOps Engineer Java/Kotlin Handel (m/w/d) 80% - 100% | Trading / Sales / Kapitalmarkt | Zürich | Berufserfahrene Der Handel der Zürcher Kantonalbank ist einer der lebendigsten Bereiche der Bank mit permanent neuen Ideen. Deine Anwendungen bilden das technologische...FestanstellungFlexible Arbeitszeit
- ...Compliance und technischen Audits – Enge Zusammenarbeit mit Engineering-, Data- und Security-Teams sowie aktive Mitgestaltung von Architektur... ...5 Jahre Berufserfahrung als Cloud Platform Engineer, DevOps Engineer, Site Reliability Engineer oder in einer vergleichbaren...FerienjobHomeoffice
- ...RIVR, part of Amazon is a robotics company pioneering Physical AI through real-world doorstep delivery. Founded in 2024 as an ETH Zurich spin-off, RIVR developed wheeled-legged robots designed to operate in complex, unstructured environments such as stairs, gates, doors...Vollzeit
- ...that brings computer vision models from research and prototyping... ...components from day one. You will evaluate trade-offs in scalable,... ...This role combines hands-on engineering with exposure to real-world... ...and obstacle avoidance, and AI for high-quality and consistent...
Wollen Sie mehr Stellenangebote erhalten?
Abonnieren Sie und erhalten Sie ähnliche Stellenangebote wie DevOps Engineer - AI Model Evaluator. Seien Sie der Erste, der sich bewirbt!
