Jak wysłać zapytanie do elementu JSON?

Spróbuj użyć astext

records = db_session.query(Resource).filter(
              Resources.data["lastname"].astext == "Doe"
          ).all()

Pamiętaj, że kolumna MUSI mieć typ JSONB. Zwykła kolumna JSON nie będzie działać.