🧬 biology
Rotation, rescaling, or replacement? Decomposing organ adaptation in single-cell transformer representations
من خلال الاستفادة من ثلاث نقاط تفتيش لنموذج scGPT ذات بنيات متطابقة ولكن مع مجموعات بيانات تدريب مسبق مختلفة، تُظهر هذه الدراسة أن التكيف الخاص بالأعضاء في نماذج المحولات أحادية الخلية ضئيل ومركز في طبقات انتباه محددة بدلاً من التحولات الهندسية الشاملة، مما يشير إلى أن النماذج المدربة على أقل من عشرة ملايين خلية تحتفظ إلى حد كبير بضجيج التهيئة الأولية، وأن نقاط التفتيش العامة هي الأفضل لاستخراج الخوارزميات البيولوجية.