📃 Energy-Based Transformers are Scalable Learners and Thinkers

Inference-time computation techniques, analogous to human System 2 Thinking, have recently become popular for improving model performances. In this paper, we ask the question "Is it possible to generalize these System 2 Thinking approaches, and develop models that learn to think solely from unsupervised learning?" Interestingly, we find the answer is yes, by learning to explicitly verify the compatibility between inputs and candidate-predictions, and then re-framing prediction problems as optimization with respect to this verifier. Specifically, we train Energy-Based Transformers (EBTs) -- a new class of Energy-Based Models (EBMs) -- to assign an energy value to every input and candidate-prediction pair, enabling predictions through gradient descent-based energy minimization until convergence. Across both discrete (text) and continuous (visual) modalities, we find EBTs scale faster than the dominant Transformer++ approach during training, achieving an up to 35% higher scaling rate with respect to data, batch size, parameters, FLOPs, and depth. During inference, EBTs improve performance with System 2 Thinking by 29% more than the Transformer++ on language tasks, and EBTs outperform Diffusion Transformers on image denoising while using fewer forward passes.

@Machine_learn

"Transcendence" is when an LLM, trained on diverse data from many experts, can exceed the ability of the individuals in its training data.

This paper demonstrates three types: when AI picks the right expert skill to use, when AI has less bias than experts & when it generalizes.

📚 Read

@Machine_learn

با عرض سلام ما برای یکی از مقالاتمون در حوزه ی پزشکی نیاز به نفر ۴ ام داریم با قبولی شرایط پرداخت میتونیم اضافه کنیم.

@Raminmousa

Scientific Visualization: Python + Matplotlib

📚 Book


@Machine_learn

"GPT-5 moves from human-comparable to above human-expert performance"

GPT-5 outperforms licensed human experts by 25-30% and achieves SOTA results on the US medical licensing exam and the MedQA benchmark.

I sound like a broken record, but AI models are better than most doctors.

📚 Paper

@Machine_learn

📃 A Comprehensive and Systematic Review for Deep Learning-Based De Novo Peptide Sequencing


📎 Study the paper



@Machine_learn

🔹 Title: Explain Before You Answer: A Survey on Compositional Visual Reasoning



🔹 Paper Links:
• arXiv Page: https://arxiv.org/abs/2508.17298
• PDF: https://arxiv.org/pdf/2508.17298
• Project Page: https://github.com/pokerme7777/Compositional-Visual-Reasoning-Survey
• Github: https://github.com/pokerme7777/Compositional-Visual-Reasoning-Survey

@Machine_learn

Caltech's "Undergraduate Game Theory" lecture notes by Omer Tamuz

PDF: https://tamuz.caltech.edu/teaching/ps172/lectures.pdf

@Machine_learn

با عرض سلام ما برای یکی از مقالاتمون در حوزه ی پزشکی نیاز به نفر ۴ ام داریم با قبولی شرایط پرداخت میتونیم اضافه کنیم.
زمان سابمیت فردا شب ...!
@Raminmousa

Dataset Name: Used Cars Dataset
Basic Description: Vehicles listings from Craigslist.org



🔴 Dataset Size: Download dataset as zip (275 MB)

🔰 Direct dataset download link:
https://www.kaggle.com/api/v1/datasets/download/austinreese/craigslist-carstrucks-data

📚 RELATED NOTEBOOKS:

1. Automatic Number Plate Recognition | Upvotes: 2,295
URL: https://www.kaggle.com/code/aslanahmedov/automatic-number-plate-recognition

2. Automatic Number Plate Recognition | Upvotes: 419
URL: https://www.kaggle.com/code/mohamedbhy/automatic-number-plate-recognition

3. Used Cars Price Prediction by 15 models | Upvotes: 355
URL: https://www.kaggle.com/code/vbmokin/used-cars-price-prediction-by-15-models

4. USA Housing Listings | Upvotes: 75
URL: https://www.kaggle.com/datasets/austinreese/usa-housing-listings

5. 1.2 Million Used Car Listings | Upvotes: 61
URL: https://www.kaggle.com/datasets/jpayne/852k-used-car-listings

@Machine_learn

بنام خدا
حدود 4 الی 5 ماه است که در حال نوشتن مقاله ای مروری مبنی بر کاربرهای هوش مصنوعی، یادگیری ماشین، یادگیری ژرف و پردازش تصویر در صنعت غذا هستیم. این مقاله کاربردهای فناوری های مورد نظر در جنبه های مختلف صنعت غذا شامل
✅Food Classification, Detection, Segmentation, Localization
✅Caloric Estimation, Detecting Food In Fridges
✅Freshness, Quality and Defect Detection
✅ Food Safety & Integrity (Contamination, Adulteration and Fraud, Freshness, Quality, Processing, etc)
✅ Food Waste (Causes & Impact, FW Detection, Estimation, Quantification, Demand Prediction with ANN, Image Processing)
✅Recommender Systems (Restaurant, Sentiment Analysis, Nutrition and Diet, Health, etc)
✅Agriculture and Supply Chain (ML, AI and CV in Orchard, Harvesting, Postharvest QC, Manufacturing, Freshness and Ripening, Spoilage, etc)
✅Other Review Papers
✅Computer Vision, Machine Learning, Aritifical Neural Networks, Image Processing, etc
را در بر میگیرد.
در نسخه اولیه این مقاله برای سابمیت بیش از 250 (250 الی 300 مقاله مرتبط جدید که 90 درصد برای بعد 2020 و حداقل 80 درصد برای بعد 2022 هستند) مورد بررسی دقیق قرار گرفته اند.
هدف این مقاله مروری چاپ در ژورنال های Q1-Q2 با IF بالا است.

⛏️به دلیل حجم بالای کار و کیفیت بسیار بالای مقاله امکان حداکثر 7 نفر در این مقاله وجود دارد.
انتظار می رود که مقاله پس از چاپ در یکی از ژورنالهای مورد نظر ظرف 1 سال (به دلیل مروری و جامع بودن) حداقل 50 سایتیشن بخورد.

نفر اول (کارسپاند): 700 تتر ✅واگذار شد.
نفر دوم: 350 تتر
نفر سوم: 250 تتر
نفر چهارم: 220 تتر
نفر پنجم: 190 تتر
نفر ششم: 160 تتر
نفر هفتم: 130 تتر

👌مناسب و عالی برای اپلای دکتری و ارشد به دلیل سطح بالای مقاله و کیفیت ژورنال های مورد سابمیت
👌مناسب برای رشته های علوم کامپیوتر، هوش مصنوعی، بینایی کامپیوتری و پردازش تصویر، صنایع، صنایع غذایی
👌مناسب برای اقامت آمریکا از EB2 و حتی EB1 (به دلیل کیفیت و سایتشن های زیاد)

👍امکان افزایش سایتیشن شما (به صورت مشروط به یکی از حوزه ها یا متدها) فراهم است. برای بررسی لطفا لینک یا DOI مقاله خود را ارسال کنید

🎈مقاله در نسخه نهایی بازبینی خود، برای برطرف سازی هر گونه اشکال احتمالی است و ظرف 1 هفته الی حداکثر 1 ماه (October 1st) سابمیت خواهد شد.
🎈مشارکت کنندگان علاوه بر ایمیل (ترجیحا ایمیل دانشگاهی)، بهتر است کد ORCID نیز ارائه دهند. (کافی است در ORCID یک اکانت بسازید و کد 16 رقمی خود را که با اسم شما همخوانی دارد بدهید)

ارتباط:
@Raminmousa

جایگاه سوم رزرو شد...!