GeoVLM-R1: Reinforcement Fine-Tuning for Improved Remote Sensing Reasoning
Fiaz, Debary, Fraccaro et al.
Recent advances in reinforcement learning (RL) have delivered strong reasoning capabilities in natural image domains, yet their potential for Earth Observation (EO) remains largely unexplored. EO tasks introduce unique challenges, spanning referred object detection, image or region captioning, change detection, grounding, and temporal analysis, that demand task aware reasoning. We propose a novel post training framework that incorporates task aware rewards to enable effective adaptation of reasoning based RL models to diverse EO tasks. This training strategy enhances reasoning capabilities for remote sensing images, stabilizes optimization, and improves robustness. Extensive experiments across multiple EO benchmarks show consistent performance gains over state of the art generic and specialized vision language models. Code and models will be released publicly at https://mustansarfiaz.github.io/GeoVLM-R1/ .
academic
GeoVLM-R1: দূরবর্তী সংবেদন যুক্তির জন্য শক্তিশালীকরণ সূক্ষ্ম-সুর
সম্প্রতি শক্তিশালীকরণ শিক্ষা প্রাকৃতিক চিত্র ক্ষেত্রে যুক্তির ক্ষমতায় উল্লেখযোগ্য অগ্রগতি অর্জন করেছে, তবে পৃথিবী পর্যবেক্ষণ (ইও) ক্ষেত্রে এর সম্ভাবনা এখনও সম্পূর্ণভাবে অন্বেষণ করা হয়নি। ইও কাজগুলি অনন্য চ্যালেঞ্জ উপস্থাপন করে যা রেফারেন্সিয়াল লক্ষ্য সনাক্তকরণ, চিত্র/অঞ্চল বর্ণনা, পরিবর্তন সনাক্তকরণ, স্থানীয়করণ এবং সময়গত বিশ্লেষণ অন্তর্ভুক্ত করে, যার জন্য কাজ-সচেতন যুক্তির ক্ষমতা প্রয়োজন। এই পত্রটি একটি উপন্যাস পোস্ট-প্রশিক্ষণ কাঠামো প্রস্তাব করে যা কাজ-সচেতন পুরস্কার প্রক্রিয়া একত্রিত করে, যুক্তি-ভিত্তিক শক্তিশালীকরণ শিক্ষা মডেলগুলিকে বৈচিত্র্যময় ইও কাজগুলিতে কার্যকরভাবে খাপ খাইয়ে নিতে সক্ষম করে। এই প্রশিক্ষণ কৌশল দূরবর্তী সংবেদন চিত্রের যুক্তির ক্ষমতা বৃদ্ধি করে, অপ্টিমাইজেশন প্রক্রিয়া স্থিতিশীল করে এবং শক্তিশালীতা উন্নত করে। একাধিক ইও বেঞ্চমার্ক পরীক্ষায় ব্যাপক পরীক্ষা-নিরীক্ষা অত্যাধুনিক সাধারণ এবং বিশেষায়িত দৃষ্টি ভাষা মডেলের তুলনায় সামঞ্জস্যপূর্ণ কর্মক্ষমতা উন্নতি প্রদর্শন করে।
দূরবর্তী সংবেদন দৃষ্টি ভাষা মডেল (RS-VLMs) উচ্চ-রেজোলিউশন পৃথিবী পর্যবেক্ষণ চিত্রে উৎকর্ষ প্রদর্শন করে, তবে অগভীর যুক্তির সমস্যা রয়েছে:
অপর্যাপ্ত যুক্তির ক্ষমতা: বিদ্যমান মডেলগুলি পাঠ্য পূর্বাভাস এবং তত্ত্বাবধানকৃত সূক্ষ্ম-সুর (এসএফটি) এর উপর গুরুতরভাবে নির্ভর করে, চিন্তার শৃঙ্খল যুক্তির অভাব রয়েছে, যা দুর্বল সাধারণীকরণ ক্ষমতার দিকে পরিচালিত করে
অপর্যাপ্ত কাজ-নির্দিষ্টতা: ইউএভি-ভিএল-আর১ এর মতো প্রাথমিক আরএল প্রচেষ্টা শুধুমাত্র ভিজ্যুয়াল প্রশ্ন উত্তর কাজের মধ্যে সীমাবদ্ধ, সনাক্তকরণ, বর্ণনা, স্থানীয়করণ এবং অন্যান্য বিস্তৃত ইও কাজে দুর্বল কর্মক্ষমতা প্রদর্শন করে
পুরস্কার সংকেত দুর্বলতা: বিদ্যমান ইও ডোমেইন আরএল পদ্ধতি দুর্বল এবং কাজ-অসম্পর্কিত পুরস্কার সংকেত গ্রহণ করে, পুরস্কার প্রতারণা সমস্যা সৃষ্টি করতে সহজ, জটিল ইও দৃশ্যের জন্য প্রয়োজনীয় কাঠামোগত বহু-পদক্ষেপ যুক্তি ক্যাপচার করতে পারে না
পৃথিবী পর্যবেক্ষণ কাজগুলি অনন্য জটিলতা এবং বৈচিত্র্য প্রদর্শন করে, শ্রেণীবিভাগ, সনাক্তকরণ, বর্ণনা, পরিবর্তন সনাক্তকরণ, দুর্যোগ মূল্যায়ন এবং অন্যান্য একাধিক মাত্রা অন্তর্ভুক্ত করে, যা বহু-সেন্সর ইনপুট এবং জটিল স্থানকালীন সম্পর্ক পরিচালনা করতে কাঠামোগত যুক্তি পরিচালনা করতে পারে এমন শক্তিশালী ভিএলএম সিস্টেম প্রয়োজন।
GeoVLM-R1 কাঠামো প্রস্তাব: বৈচিত্র্যময় ইও কাজ যুক্তির ক্ষমতার জন্য বিশেষায়িত পোস্ট-প্রশিক্ষণ আরএল কাঠামো উন্নয়ন
উদ্ভাবনী দ্বৈত-উদ্দেশ্য পুরস্কার প্রক্রিয়া: জিআরপিও কাঠামোর মধ্যে বিন্যাস সম্মতি এবং নির্ভুলতা সম্মতির দ্বৈত পুরস্কার প্রবর্তন, স্থিতিশীল আরএল শিক্ষা বৃদ্ধি এবং নির্ভুল, কাঠামোগত, ব্যাখ্যাযোগ্য যুক্তি পথ উৎপাদন
কাজ-সচেতন পুরস্কার ডিজাইন: বিভিন্ন ইও কাজের জন্য বিশেষায়িত পুরস্কার ফাংশন ডিজাইন, স্মরণ পুরস্কার, সনাক্তকরণ পুরস্কার, এসবার্ট পুরস্কার অন্তর্ভুক্ত
ব্যাপক পরীক্ষা যাচাইকরণ: ২৮টি ডাউনস্ট্রিম বেঞ্চমার্ক পরীক্ষায় বিদ্যমান ভিএলএমের তুলনায় উচ্চতর কর্মক্ষমতা প্রদর্শন
ইও বহু-মোডাল নমুনা Qi={i,qi} দেওয়া, স্যাটেলাইট চিত্র i এবং সংশ্লিষ্ট পাঠ্য প্রম্পট qi অন্তর্ভুক্ত, লক্ষ্য যুক্তি পদক্ষেপ এবং চূড়ান্ত উত্তর অন্তর্ভুক্ত কাঠামোগত আউটপুট উৎপাদন:
শূন্য-নমুনা এবং বহু-লেবেল শ্রেণীবিভাগ কাজে, জিওভিএলএম-আর১ বিগআর্থনেটে ইয়ার্থডায়ালের তুলনায় ৭.৮৮% উন্নতি অর্জন করে, সময়গত ডেটাসেট এক্সবিডি এবং এফএমওডব্লিউতে যথাক্রমে ২.৫৬% এবং ৬.৯% পরম সুবিধা অর্জন করে।
রেফারেন্সিয়াল লক্ষ্য সনাক্তকরণ কাজে, জিওভিএলএম-আর১ বহু-লক্ষ্য সনাক্তকরণে ইয়ার্থডায়ালের তুলনায় ২১.৬৩% উল্লেখযোগ্য উন্নতি অর্জন করে। এনডব্লিউপিইউ ভিএইচআর-১০ ডেটাসেটে, সমস্ত আকারের লক্ষ্য সনাক্তকরণ উল্লেখযোগ্য উন্নতি অর্জন করে।
আরএল প্রশিক্ষণের জন্য অনুভূমিক সীমানা বাক্স (এইচবিবি) ব্যবহার ঘূর্ণায়মান সীমানা বাক্স (আরবিবি) এর চেয়ে আরও স্থিতিশীল, কোণ পূর্বাভাস ত্রুটির সংগ্রহ এড়ায়।
পত্রটি ৮२টি সম্পর্কিত রেফারেন্স উদ্ধৃত করে, দূরবর্তী সংবেদন ভিএলএম, শক্তিশালীকরণ শিক্ষা, দৃষ্টি ভাষা মডেল সহ একাধিক ক্ষেত্রের গুরুত্বপূর্ণ কাজ অন্তর্ভুক্ত করে, গবেষণার জন্য দৃঢ় তাত্ত্বিক ভিত্তি প্রদান করে।
সামগ্রিক মূল্যায়ন: এটি কম্পিউটার দৃষ্টি ক্ষেত্রের একটি উচ্চ-মানের গবেষণাপত্র, দূরবর্তী সংবেদন চিত্র বোঝাপড়ার এই গুরুত্বপূর্ণ প্রয়োগ ক্ষেত্রে উল্লেখযোগ্য অবদান রাখে। পদ্ধতি উদ্ভাবনী, পরীক্ষা ব্যাপক, ফলাফল প্রভাবশালী, দূরবর্তী সংবেদন কৃত্রিম বুদ্ধিমত্তা প্রযুক্তি উন্নয়ন অগ্রসর করার জন্য মূল্যবান প্রযুক্তিগত পথ প্রদান করে।