יש פה חרדים שלא עובדים ולומדים תורה במקום?

הכוונה זה שיהיה לו קשה יותר בעבודת האדמה

^בדיוק

זה לא קשור, זה שיש קללה לא אומר שאי אפשר לכפר עליה. וכתוב על להביא לחם ולאכול, אז כל עבודה אחרת לכאורה לא נחשבת. גם היה אסור מחרשות ומכונות להכנת אוכל.
וכמובן, אם היינו נכנעים לקללה, היה אסור אפידורל וטיפולים רפואיים בלידה.

אדם צריך לעבוד, אם הוא חי על חשבון אחרים כדיי לילמוד תורה, הוא מחלל את שם התורה.

יש פה חרדים - שלא עובדים (כיתה ח')
אז הם לומדים גם תורה, אך לא במקום