Point-E

Point-E হলো Point-E: A System for Generating 3D Point Clouds from Complex Prompts গবেষণাপত্রের জন্য প্রকাশিত অফিসিয়াল কোড ও মডেল।

1. ছবি থেকে পয়েন্ট ক্লাউড: উদাহরণ হিসেবে দেওয়া সিন্থেটিক ভিউয়ের ছবির ভিত্তিতে একটি পয়েন্ট ক্লাউড স্যাম্পল করে।
2. টেক্সট থেকে পয়েন্ট ক্লাউড: একটি ছোট ও তুলনামূলক কম-মানের বিশুদ্ধ টেক্সট-টু-3D মডেল ব্যবহার করে টেক্সট বর্ণনা থেকে সরাসরি 3D পয়েন্ট ক্লাউড তৈরি করে। মডেলটির সক্ষমতা সীমিত, তবে এটি কিছু সাধারণ শ্রেণি ও রং বুঝতে পারে।
3. পয়েন্ট ক্লাউড থেকে মেশ: পয়েন্ট ক্লাউড থেকে মেশ তৈরি করতে একটি SDF রিগ্রেশন মডেল ব্যবহার করে।

মূল্যায়ন ও রেন্ডারিংয়ের জন্য P-FID এবং P-IS মূল্যায়ন স্ক্রিপ্ট, পাশাপাশি Blender রেন্ডারিং কোড রয়েছে। গবেষণাপত্রের ব্যানার ছবির জন্য seed images ও point clouds এবং COCO CLIP R-Precision মূল্যায়নে ব্যবহৃত seed images ডাউনলোড করা যায়। মূল সুবিধার মধ্যে রয়েছে পয়েন্ট-ক্লাউড ডিফিউশনের মাধ্যমে 3D মডেল সংশ্লেষণ, টেক্সট ও ছবি—দুই মাধ্যমের সমর্থন, এবং গবেষণার জন্য ওপেন-সোর্স কোড ও pretrained models। প্রকল্পটি MIT লাইসেন্সের অধীনে এবং ব্যবহারের জন্য সম্পূর্ণ বিনামূল্যে।