چالش‌ها و فرصت ها در پردازش کلان داده‌های جغرافیایی

داده‌های کلان در یک دهه اخیر تبدیل به واژه پرگفتمان در کلیه سطوح تحقیقاتی و تجاری شده است و کنفرانس‌های متعدد آکادمیک و تجاری در سطح جهان با محوریت اصلی این موضوع برگزار شده است. به موازات آن حجم زیادی از مقالات علمی برآمده از کارهای تحقیقاتی در دانشگاه‌ها نیز به این حوزه اختصاص داده شده است که نشان از اهمیت آن در آینده دنیای پردازش اطلاعات دارد. اما داده‌های کلان واقعاً چه هستند و چرا تا این حد اهمیت پیدا کرده‌اند؟ واژه داده کلان به طور مفهومی به بانک‌های اطلاعاتی اطلاق می‌شود که دارای حجم رکوردهای انبوهی است که با روش‌های سنتی و مکانیسم‌های عادی در نرم‌افزارهای مدیریت بانک‌های اطلاعاتی قادر به پردازش آنها نیستیم. تولید حجم انبوه رکوردهای اطلاعات، چالش‌های فراوانی پیش روی ما قرار خواهد داد از جمله در زمینه شیوه جمع‌آوری داده‌ها، ذخیره‌سازی آنها، پردازش، جست‌وجو، تقسیم با دیگران، انتقال، تولید نمودارهای آماری مناسب، کوئری گرفتن در سطح بانک اطلاعاتی، به‌روزرسانی رکوردها و حتی حفظ حریم خصوصی افراد. واژه داده کلان، به خصوص زمانی که بحث از آنالیز داده‌های انبوه برای استخراج و استنتاج اطلاعات مفید و کاربردی باشد، اهمیت خود را دوچندان نشان می‌دهد. درک صحیح از مفهوم داده کلان برای فهم چرایی سختی پردازش آن بسیار مهم است. تصور کنید یک تصویر دیجیتالی از یک دوربین مداربسته دارای 10 میلیون پیکسل باشد. اگر پردازش این تصویر برای شناسایی چهره یک فرد چیزی حدود یک ثانیه برای یک پردازشگر قوی زمانبر باشد، آنگاه اگر در یک تصویر ویدئویی لحظه‌ای 36 فریم تصویر در یک ثانیه موجود باشد، می‌فهمیم که باید حدود 36 کامپیوتر همزمان 36 تصویر را پردازش کنند تا درلحظه قادر باشند چهره یک فرد در یک ویدئو را شناسایی کنند. اگر ما در سطح شهر تهران در نقاطی مانند ایستگاه‌های مترو و معابر مهم شهری، حدود 10 هزار دوربین مداربسته نصب کنیم که...