ورود هوش مصنوعی به یخچال‌ها؛ ابتکار هوشمندی با استفاده از ChatGPT

یک کاربر با نام Mimobeano در شبکه اجتماعی ردیت، با بهره‌گیری از تکنولوژی ChatGPT، یک سیستم هوشمند جدید برای یخچالها طراحی کرده است که قابلیت تشخیص محتویات مواد غذایی در داخل یخچال را دارد.

این پروژه به عنوان یک پروژه‌ی کارشناسی ارشد توسط Mimobeano در دانشگاه آغاز شده و با استفاده از برد کامپیوتر کوچک رزبری پای، یک سامانه هوشمند بر مبنای ChatGPT ایجاد شده است. این برنامه برای شناسایی ۱۲ مورد خاص برنامه‌ریزی شده بود و از یک مدل مبتنی بر تصاویر استفاده می‌کرد که Mimobeano با توجه به هزاران تصویر از مواد غذایی آن را آموزش داده بود.

فرآیند کنونی پروژه به این صورت است که با باز شدن در یخچال، یک عکس از محتویات یخچال گرفته می‌شود. سپس این تصویر توسط مدل GPT4-Vision تجزیه‌وتحلیل شده و اطلاعات درباره محتویات غذایی بدست می‌آید. Mimobeano از تلگرام برای ارسال درخواست‌های خود به چت‌بات استفاده می‌کند و در تصویر نمونه، درخواست فهرست مواد غذایی با دیگران به اشتراک گذاشته شده است.

هرچند Mimobeano مدل دقیق برد رزبری پای خود را مشخص نکرده است، اما امکان بازسازی این پروژه با استفاده از Pi 4 یا Pi 5 وجود دارد. این برد به یک ماژول دوربین HQ متصل شده و از یک لنز عریض برای گرفتن تصاویر و یک ربات تلگرامی برای ارتباط با API چت‌بات استفاده می‌کند.برنامه‌های ارتقایی نیز برای این پروژه وجود دارد که از طریق ایجاد پایه‌ای مخصوص، تصاویر را از زوایای بهتری ضبط کند و برنامه‌های بررسی انقضای مواد غذایی را نیز پیاده‌سازی نماید.​