سرمایه گذاری متفاوت در سال نو 🍎🌱 ۳۵٪ تخفیف نوروزی ➕ حضور رایگان در مسترمایند نخبگان صنعت نرم‌افزار 💻✅
۰ ثانیه
۰ دقیقه
۰ ساعت
۱ Mahdi Nematshahi
install spark with hadoop
جامعه هوش مصنوعی ایجاد شده در ۲۳ اسفند ۱۴۰۲

با سلام و احترام

توی این فایلی که قرار دادین به عنوان docker compose برای spark در این پوشه

\docker-spark-bde\multinode می‌خواستم بدونم. اینکه گفته میشه که spark  روی hadoop نصب میتونه بشه به چه مفهوم هست. اگر این فایل yml رو نصب کنم روی داکر یعنی هم spark  و هم hadoop رو دارم. چون داخل container برای spark-master رفتم توی مسیر اصلی فقط spark بود.

با تشکر

سلام

ببینید در واقع داده‌ها میتواند از data-nodeهایی که در هدوپ هستند استفاده کند.

منظور بیشتر این است.

البته در ورژن‌های قدیمی قضیه فرق میکرد و اسپاک بر روی اکوسیستم هدوپ نصب می‌شد.

مسعود کاویانی ۰۲ فروردین ۱۴۰۳، ۱۹:۵۷