Videodan Sepete — Getir Fikir #023

Fikir

Problem → Çözüm

Problem

Kullanıcılar sosyal medyada yüzlerce tarif videosu kaydediyor ama malzemeleri not almak için videoyu durdura durdura izlemek gerekiyor. Kaydedilen tariflerin büyük çoğunluğu hiç pişirilmiyor.

Çözüm

Kullanıcı video linkini yapıştırır ya da paylaş menüsünden Getir’e gönderir. Bir agent ekibi sesi metne döker, ekrandaki yazıları okur, malzeme ve miktarları çıkarır, porsiyonu ayarlar ve katalogla eşleştirerek sepeti hazırlar.

Ürün

Temel özellikler

1Paylaş menüsünden gönderTikTok, Instagram ve YouTube Shorts’tan tek dokunuşla Getir’e paylaş.

2Ses + görüntü okumaKonuşma, ekrandaki yazılar ve açıklama birlikte analiz edilir.

3Porsiyon ayarıVideodaki 2 kişilik tarifi 5 kişiye çevirir, miktarları yeniden hesaplar.

4Evde olanları çıkarTuz, yağ gibi temel ürünleri sorup sepetten çıkarabilirsin.

AI katmanı

Yapay zeka nerede devreye giriyor?

CrewAI ile koordine edilen uzman agent’lar videoyu çok modlu analiz eder ve doğrulanmış bir malzeme listesi üretir.

Transkript agent’ı: yt-dlp ile ses çıkarma + Whisper ile Türkçe/İngilizce transkript
Görsel agent: anahtar karelerden Gemini 1.5 Pro ile ekrandaki yazı ve malzeme tespiti; transkriptle çapraz doğrulama
Eşleme agent’ı: malzeme → SKU (Qdrant), birim dönüştürme (“1 su bardağı un” → 120 g) ve Pydantic şema doğrulaması

Mimari

Nasıl çalışır?

Web / Share ExtensionNext.js + iOS share sheet

İş KuyruğuFastAPI + AWS SQS

Agent EkibiCrewAI • 4 agent

Çok Modlu AnalizWhisper + Gemini 1.5 Pro

SKU EşlemeQdrant + birim dönüştürücü

SepetGetir sepet API

Teknoloji

Stack

Arayüz

Next.js 14Tailwind CSSiOS Share Extension

Backend

Python 3.12FastAPIAWS SQSyt-dlp + ffmpeg

AI / ML

CrewAIWhisperGemini 1.5 ProQdrant

Veri

DynamoDBS3 (geçici medya)Redis

Altyapı & DevOps

AWS ECS FargateLambdaDocker

Go-to-market

Pazarlama & lansman

Yemek içerik üreticileriTarif videolarının açıklamasına “Malzemeler Getir’de” linki; üreticiye komisyon.

“Kaydettiğin tarifi pişir” kampanyasıİlk video siparişinde 100 TL indirim, kodu Reels açıklamalarında.

TikTok Duet formatıKullanıcılar videoyu düet edip Getir sepetinin 10 dakikada gelişini çekiyor.

Ölçüm

Başarı metrikleri (hedef)

%89malzeme çıkarım doğruluğu (F1)

<40 snlinkten sepete süre

%34işlenen video → sipariş

Teslimat

MVP yol haritası

Hafta 1-2Transkript + çıkarım300 Türkçe tarif videosuyla transkript ve malzeme çıkarım eval seti.

Hafta 3-4Görsel agent & eşlemeEkran yazısı okuma, birim dönüştürme ve SKU eşleme.

Hafta 5-8Share extensioniOS/Android paylaş menüsü, porsiyon ayarı ve içerik üretici programı.

Fİ

Fatih İnci — Full Stack Software Engineer

Bir fikri production’a taşırken ilk sorum şu: ölçülebilir mi ve mevcut sistemi bozmadan nasıl açılır? Yaklaşık 4 yıl, ayda yüz milyonlarca CDN isteği alan bir embed script üzerinde çalıştım. Kademeli geçiş ve gerçek test kapsamı benim için vazgeçilmez. Remote çalışmaya hazırım.