آیا بدون قرارداد پیمانکاری، مسئولیت سقوط کارگر از ساختمان بر عهده من است؟

بنده کارگر روزمزد یک ساختمان بوده‌ام. بنایی که کنار ما کار می‌کرده از بالای ساختمان افتاده است و بیمه ساختمان نیز منقضی شده. مالک ساختمان ادعا می‌کند که بنده پیمانکار هستم، در حالی که هیچ قراردادی بین ما منعقد نشده است. آیا این ادعا وجاهت قانونی دارد و آیا بنده در قبال آن فرد مسئولیتی دارم؟