👨💻 خداحافظی با دردسرهای استخراج متن از فایلهای pdf!
👨🏻💻 اگه تا حالا خواستی از یه فایل pdf متنی رو بکشی بیرون، احتمالاً با این مشکل روبرو شدی که یه عالمه هدر، فوتر و شماره صفحه هم قاطی متن اصلی میشه! واقعاً اعصاب خورد کنه.
✅ خوشبختانه تو کتابخونه pypdf یه قابلیت به اسم visitor_text هست که دقیقاً برای همین کار ساخته شده:
💬 با استفاده ازش میتونی شرط بذاری. مثلاً فقط متنهایی که فونتشون از یه حدی بزرگتره استخراج بشن و همون بخشهای اضافی و مزاحم رو هم فیلتر کنی.
💯 اینجوری هم خروجیت خیلی شستهرفتهتر میشه و هم میتونی ازش برای پردازش متن، خلاصهسازی یا آموزش مدلهای زبانی استفاده کنی.
pip install pypdf
┌ pypdf
├ 📖 Documentation
└ 🐱 GitHub-Repos
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
👨🏻💻 اگه تا حالا خواستی از یه فایل pdf متنی رو بکشی بیرون، احتمالاً با این مشکل روبرو شدی که یه عالمه هدر، فوتر و شماره صفحه هم قاطی متن اصلی میشه! واقعاً اعصاب خورد کنه.
✅ خوشبختانه تو کتابخونه pypdf یه قابلیت به اسم visitor_text هست که دقیقاً برای همین کار ساخته شده:
💬 با استفاده ازش میتونی شرط بذاری. مثلاً فقط متنهایی که فونتشون از یه حدی بزرگتره استخراج بشن و همون بخشهای اضافی و مزاحم رو هم فیلتر کنی.
💯 اینجوری هم خروجیت خیلی شستهرفتهتر میشه و هم میتونی ازش برای پردازش متن، خلاصهسازی یا آموزش مدلهای زبانی استفاده کنی.
pip install pypdf
┌ pypdf
├ 📖 Documentation
└ 🐱 GitHub-Repos
🌐 #علم_داده #DataScience #Python #pypdf #HiTech #هایتک
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
👍2
❓️چطوری اعداد یک List رو به توان 2 برسونیم؟
راه حل معمولی VS راه حل #پایتون😉
┏━━━━━━━━┓
〓@HiTech_Codes
┗━━━━━━━━┛
راه حل معمولی VS راه حل #پایتون😉
┏━━━━━━━━┓
〓@HiTech_Codes
┗━━━━━━━━┛
👍2
اگه یه پادکست کل Git رو بهت آموزش بده چقدر براش هزینه میکنی؟🤔
Anonymous Poll
83%
150,000
11%
250,000
6%
بیشتر از 300,000
HiTech | آموزش پایتون و هوش مصنوعی pinned «اگه یه پادکست کل Git رو بهت آموزش بده چقدر براش هزینه میکنی؟🤔»
This media is not supported in your browser
VIEW IN TELEGRAM
🖥 ریپوهای گیتهاب رو با این ترفند به یه گفتوگوی هوشمند تبدیل کن!
👨🏻💻 اکثر ریپوهای گیتهاب پر از کد و اطلاعات پراکندهای هستن که فهمیدنشون وقتگیره. اما یه ترفند جدید پیدا کردم که کارو خیلی راحت میکنه!
✅ کافیه تو URL ریپو، “github” رو با “talktogithub” عوض کنی. یه گفتگو تعاملی با ریپو برات فعال میشه.
⬅️ این ابزار کاملاً رایگان و اوپن سورسه! به راحتی میتونی هر ریپویی رو در چند ثانیه تبدیل به یه مکالمه کنی و سریعتر بفهمی چی به چیه!
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
👨🏻💻 اکثر ریپوهای گیتهاب پر از کد و اطلاعات پراکندهای هستن که فهمیدنشون وقتگیره. اما یه ترفند جدید پیدا کردم که کارو خیلی راحت میکنه!
✅ کافیه تو URL ریپو، “github” رو با “talktogithub” عوض کنی. یه گفتگو تعاملی با ریپو برات فعال میشه.
⬅️ این ابزار کاملاً رایگان و اوپن سورسه! به راحتی میتونی هر ریپویی رو در چند ثانیه تبدیل به یه مکالمه کنی و سریعتر بفهمی چی به چیه!
🌐 #علم_داده #Github #HiTech #هایتک #DataScience
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
📌استخراج متن از فایلهای pdf با Pypdf
اینجوری با چند خط کد پایتون میتونی متن هر pdf رو استخراج کنی و اون رو ذخیره کنی😉👌
┏━━━━━━━━┓
〓@HiTech_Codes
┗━━━━━━━━┛
اینجوری با چند خط کد پایتون میتونی متن هر pdf رو استخراج کنی و اون رو ذخیره کنی😉👌
┏━━━━━━━━┓
〓@HiTech_Codes
┗━━━━━━━━┛
👏1
This media is not supported in your browser
VIEW IN TELEGRAM
📌بازی کن و برنامهنویس شو!😍🎮
با این پلتفرم میتونی هر زبان برنامهنویسی رو در قالب بازی و رد کردن مرحله های اون یاد بگیری 😉🎮
فقط کافیه اینجا کلیک کنی و یه ثبت نام ساده انجام بدی و تموم🤩
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
با این پلتفرم میتونی هر زبان برنامهنویسی رو در قالب بازی و رد کردن مرحله های اون یاد بگیری 😉🎮
فقط کافیه اینجا کلیک کنی و یه ثبت نام ساده انجام بدی و تموم🤩
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
💯 ۱۷ تا از بهترین کتابخونههای پایتون
✅ برای معاملات الگوریتمی
📂 کتابخونه ffn
✏️ تحلیل سریزمانی مالی و ارزیابی عملکرد پورتفوی.
➖ ➖ ➖
📂 کتابخونه optlib
✏️ خروجی قیمتگذاری آپشنها رو میتونی به عنوان فیچر بندازی تو مدلهات.
➖ ➖ ➖
📂 کتابخونه Q-Fin
✏️ مدلسازی ریاضی در امور مالی.
➖ ➖ ➖
📂 کتابخونه PyQL
✏️ مثل یه رابط بین QuantLib و پایتونه. بیشتر برای ساخت دیتاهای پیچیده مالی کاربرد داره.
➖ ➖ ➖
📂 کتابخونه vollib
✏️ نوسان ضمنی و پارامترهای مهم آپشنها رو باهاش میتونی حساب کنی. برای ساخت فیچر عالیه.
➖ ➖ ➖
📂 کتابخونه pysabr
✏️ پیادهسازی مدل SABR برای تحلیل نوسانات در بازارهای مالی.
➖ ➖ ➖
📂 کتابخونه OpenBB
✏️ یه ابزار همهکارهست. داده مالی میگیره، تحلیل میکنه، حتی پیشبینی هم میتونی بکنی باهاش!
➖ ➖ ➖
📂 کتابخونه QuantPy
✏️ ابزار سادهایه برای کارهای مقدماتی تو مالی کمی. واسه پروژههای کوچیک خوبه.
➖ ➖ ➖
📂 کتابخونه pynance
✏️ جمعآوری و تحلیل دادههای مالی با استفاده از pandas و matplotlib.
➖ ➖ ➖
📂 کتابخونه gs-quant
✏️ توسعه استراتژیهای معاملاتی و مدیریت ریسک.
➖ ➖ ➖
📂 کتابخونه FinancePy
✏️ قیمتگذاری و مدلسازی ریسک در مشتقات مالی.
➖ ➖ ➖
📂 کتابخونه Quantsbin
✏️ قیمتگذاری و ترسیم نمودارهای آپشن و تحلیلهای مرتبط.
➖ ➖ ➖
📂 کتابخونه finoptions
✏️ برای مدلسازی قیمت آپشن به سبک R طراحی شده. اگه دیتا از مشتقات بخوای بسازی، به کارت میاد.
➖ ➖ ➖
📂 کتابخونه willowtree
✏️ مدلهای درختی برای قیمتگذاری درست میکنه. برای یادگیری ساختار آپشن خیلی خوبه.
➖ ➖ ➖
📂 کتابخونه Finance-Python
✏️ محاسبه شاخصها و روزهای کاری در امور مالی.
➖ ➖ ➖
📂 کتابخونه tf-quant-finance
✏️ کتابخونهای با عملکرد بالا برای امور مالی کمی با استفاده از TensorFlow.
➖ ➖ ➖
📂 کتابخونه financial-engineering
✏️ ابزاری برای محاسبات مهندسی مالی در پایتون.
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
✅ برای معاملات الگوریتمی
📂 کتابخونه ffn
✏️ تحلیل سریزمانی مالی و ارزیابی عملکرد پورتفوی.
➖ ➖ ➖
📂 کتابخونه optlib
✏️ خروجی قیمتگذاری آپشنها رو میتونی به عنوان فیچر بندازی تو مدلهات.
➖ ➖ ➖
📂 کتابخونه Q-Fin
✏️ مدلسازی ریاضی در امور مالی.
➖ ➖ ➖
📂 کتابخونه PyQL
✏️ مثل یه رابط بین QuantLib و پایتونه. بیشتر برای ساخت دیتاهای پیچیده مالی کاربرد داره.
➖ ➖ ➖
📂 کتابخونه vollib
✏️ نوسان ضمنی و پارامترهای مهم آپشنها رو باهاش میتونی حساب کنی. برای ساخت فیچر عالیه.
➖ ➖ ➖
📂 کتابخونه pysabr
✏️ پیادهسازی مدل SABR برای تحلیل نوسانات در بازارهای مالی.
➖ ➖ ➖
📂 کتابخونه OpenBB
✏️ یه ابزار همهکارهست. داده مالی میگیره، تحلیل میکنه، حتی پیشبینی هم میتونی بکنی باهاش!
➖ ➖ ➖
📂 کتابخونه QuantPy
✏️ ابزار سادهایه برای کارهای مقدماتی تو مالی کمی. واسه پروژههای کوچیک خوبه.
➖ ➖ ➖
📂 کتابخونه pynance
✏️ جمعآوری و تحلیل دادههای مالی با استفاده از pandas و matplotlib.
➖ ➖ ➖
📂 کتابخونه gs-quant
✏️ توسعه استراتژیهای معاملاتی و مدیریت ریسک.
➖ ➖ ➖
📂 کتابخونه FinancePy
✏️ قیمتگذاری و مدلسازی ریسک در مشتقات مالی.
➖ ➖ ➖
📂 کتابخونه Quantsbin
✏️ قیمتگذاری و ترسیم نمودارهای آپشن و تحلیلهای مرتبط.
➖ ➖ ➖
📂 کتابخونه finoptions
✏️ برای مدلسازی قیمت آپشن به سبک R طراحی شده. اگه دیتا از مشتقات بخوای بسازی، به کارت میاد.
➖ ➖ ➖
📂 کتابخونه willowtree
✏️ مدلهای درختی برای قیمتگذاری درست میکنه. برای یادگیری ساختار آپشن خیلی خوبه.
➖ ➖ ➖
📂 کتابخونه Finance-Python
✏️ محاسبه شاخصها و روزهای کاری در امور مالی.
➖ ➖ ➖
📂 کتابخونه tf-quant-finance
✏️ کتابخونهای با عملکرد بالا برای امور مالی کمی با استفاده از TensorFlow.
➖ ➖ ➖
📂 کتابخونه financial-engineering
✏️ ابزاری برای محاسبات مهندسی مالی در پایتون.
🌐 #علم_داده #Github #HiTech #هایتک #DataScience #library #Python #پایتون
➖➖➖➖➖➖➖➖➖➖➖➖➖➖
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
GitHub
GitHub - pmorissette/ffn: ffn - a financial function library for Python
ffn - a financial function library for Python. Contribute to pmorissette/ffn development by creating an account on GitHub.
👍1
✔️ قابلیت ویرایش عکس به Gemini اومد
▪️از این به بعد میتونید عکسهایی که با Gemini ساختید یا آپلود کردید رو ویرایش کنید؛ مثلاً پسزمینه عوض کنید یا آیتمهایی مثل لباس، کلاه و... اضافه کنید.
▪️عکسها با واترمارک نامرئی SynthID علامتگذاری میشن و گوگل هم داره روی واترمارک قابلدید کار میکنه. این قابلیت از امروز بهصورت تدریجی فعال میشه و توی هفتههای آینده برای بیشتر زبانها و کشورها میاد.
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
▪️از این به بعد میتونید عکسهایی که با Gemini ساختید یا آپلود کردید رو ویرایش کنید؛ مثلاً پسزمینه عوض کنید یا آیتمهایی مثل لباس، کلاه و... اضافه کنید.
▪️عکسها با واترمارک نامرئی SynthID علامتگذاری میشن و گوگل هم داره روی واترمارک قابلدید کار میکنه. این قابلیت از امروز بهصورت تدریجی فعال میشه و توی هفتههای آینده برای بیشتر زبانها و کشورها میاد.
#هوش_مصنوعی #AI #gemini #HiTech #هایتک
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
✔️ هوش مصنوعی Grok ایلان ماسک مهمان مایکروسافت؟
مایکروسافت در حال آمادهسازی زیرساخت Azure برای میزبانی مدل Grok از شرکت xAI است. این همکاری فقط شامل میزبانی است و فعلاً آموزش مدلها در برنامه نیست.
با اینکه هنوز مشخص نیست قرارداد انحصاریه یا نه، احتمال حضور Grok در پلتفرمهایی مثل AWS هم وجود داره.
از طرفی، مایکروسافت بهدنبال کاهش وابستگی به OpenAI هست و داره مدلهای xAI، متا و DeepSeek رو بهعنوان گزینههای جایگزین برای Copilot بررسی میکنه.
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
مایکروسافت در حال آمادهسازی زیرساخت Azure برای میزبانی مدل Grok از شرکت xAI است. این همکاری فقط شامل میزبانی است و فعلاً آموزش مدلها در برنامه نیست.
با اینکه هنوز مشخص نیست قرارداد انحصاریه یا نه، احتمال حضور Grok در پلتفرمهایی مثل AWS هم وجود داره.
از طرفی، مایکروسافت بهدنبال کاهش وابستگی به OpenAI هست و داره مدلهای xAI، متا و DeepSeek رو بهعنوان گزینههای جایگزین برای Copilot بررسی میکنه.
#هوش_مصنوعی #AI #gemini #HiTech #هایتک
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
اگه استقبال بالا باشه پادکست یه سری از کتابخونه های مهم پایتون رو هم میسازم که به صورت کامل و توی زمان کمتری اون ها رو یاد بگیرین😍
✔️ تحقق رؤیای ایلان ماسک؛ تولد شهر استاربیس!
اهالی بوکا چیکا در جنوب تگزاس با اکثریت آرا به تأسیس شهر جدیدی به نام استاربیس رأی دادند؛ شهری که قرار است خانه رسمی پایگاه اسپیسایکس باشد!
از ۲۱۸ رأیدهنده، تنها ۶ نفر مخالف بودند. بیشتر رأیدهندگان از کارکنان یا وابستگان اسپیسایکس بودند.
استاربیس در نزدیکی مرز مکزیک قرار دارد و از سال ۲۰۱۴ مرکز پرتابهای اسپیسایکس بوده است.
با این تصمیم، استاربیس شهرداری مستقل، آتشنشانی، پلیس و قوانین محلی خودش را خواهد داشت.
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
اهالی بوکا چیکا در جنوب تگزاس با اکثریت آرا به تأسیس شهر جدیدی به نام استاربیس رأی دادند؛ شهری که قرار است خانه رسمی پایگاه اسپیسایکس باشد!
از ۲۱۸ رأیدهنده، تنها ۶ نفر مخالف بودند. بیشتر رأیدهندگان از کارکنان یا وابستگان اسپیسایکس بودند.
استاربیس در نزدیکی مرز مکزیک قرار دارد و از سال ۲۰۱۴ مرکز پرتابهای اسپیسایکس بوده است.
با این تصمیم، استاربیس شهرداری مستقل، آتشنشانی، پلیس و قوانین محلی خودش را خواهد داشت.
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
✔️ گوگل زد رو دست همه!
نسخه جدید مدل هوش مصنوعی خودش رو با اسم Gemini 2.5 Pro – I/O Edition منتشر کرد!
تو بنچمارکهای برنامهنویسی دوباره مقام اول رو کسب کرده، اونم با اختلاف زیاد از Sonnet 3.7.
الان این نسخه جدید، جایگزین مدل قبلی شده و از طریق سایت، اپ و API قابل استفادهست.
ولی صبر کن... یه قابلیت عجیب هم داره:
میتونی یه ویدیو از عملکرد یه برنامه بهش بدی، اونم کد مشابهش رو مینویسه!
(به این میگن «ویدیو به کد»)
گوگل گفته این فقط یکی از مدلهای جدیده و تو رویداد Google I/O قراره کلی سورپرایز دیگه معرفی بشه!
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
نسخه جدید مدل هوش مصنوعی خودش رو با اسم Gemini 2.5 Pro – I/O Edition منتشر کرد!
تو بنچمارکهای برنامهنویسی دوباره مقام اول رو کسب کرده، اونم با اختلاف زیاد از Sonnet 3.7.
الان این نسخه جدید، جایگزین مدل قبلی شده و از طریق سایت، اپ و API قابل استفادهست.
ولی صبر کن... یه قابلیت عجیب هم داره:
میتونی یه ویدیو از عملکرد یه برنامه بهش بدی، اونم کد مشابهش رو مینویسه!
(به این میگن «ویدیو به کد»)
گوگل گفته این فقط یکی از مدلهای جدیده و تو رویداد Google I/O قراره کلی سورپرایز دیگه معرفی بشه!
#هوش_مصنوعی #AI #gemini #HiTech #هایتک
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
✔️ رونمایی شیائومی از مدل متنباز هوش مصنوعی با قدرت کدنویسی
شیائومی از مدل جدید هوش مصنوعی خود با نام MiMo-7B رونمایی کرد؛ مدلی متنباز با ۷ میلیارد پارامتر که برای کدنویسی و استدلال طراحی شده است.
با وجود پارامترهای کمتر نسبت به رقبا، شیائومی میگوید MiMo-7B با مصرف منابع کمتر، عملکرد بهتری نسبت به مدلهایی مثل o1-mini و Qwen-32B دارد.
این مدل با استفاده از ۲۰۰ میلیارد توکن مرتبط با استدلال و مجموعاً ۲۵ تریلیون توکن آموزش دیده است.
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
شیائومی از مدل جدید هوش مصنوعی خود با نام MiMo-7B رونمایی کرد؛ مدلی متنباز با ۷ میلیارد پارامتر که برای کدنویسی و استدلال طراحی شده است.
با وجود پارامترهای کمتر نسبت به رقبا، شیائومی میگوید MiMo-7B با مصرف منابع کمتر، عملکرد بهتری نسبت به مدلهایی مثل o1-mini و Qwen-32B دارد.
این مدل با استفاده از ۲۰۰ میلیارد توکن مرتبط با استدلال و مجموعاً ۲۵ تریلیون توکن آموزش دیده است.
#هوش_مصنوعی #AI #gemini #HiTech #هایتک
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
🚀 تا حالا شده موقع لود کردن یک فایل دیتای حجیم با Pandas رم سیستمت کِش بیاد و همهچیز قفل کنه؟ من دقیقاً این تجربه رو داشتم! اما وقتی همان دیتاست را با Polars تست کردم، انگار با جت کار میکردم! ⚡️
---
### چالش Pandas در پردازش Big Data
* بارگذاری ۱۰۰٪ داده در حافظه
* فیلتر و انتخاب ستونها تنها پس از لود کامل
* مصرف بالای RAM و کندی عملکرد
برتری Polars برای Data Science
* Lazy Evaluation: فقط دادههای مورد نیاز را لود میکند
* مدیریت هوشمند حافظه 💾
* سرعت فوقالعاده در پردازش دیتای بزرگ
---
📣 اگر در مسیر تحلیل داده یا Data Science با Big Data سروکار داری، همین امروز Polars را جایگزین Pandas کن و از سرعت و سبکتر شدن پردازش لذت ببر! 😉
┌ 🐼 Polars
├ 📄 Article
└ 🐱 GitHub-Repos
👇 برای آموزشهای بیشتر و نکات حرفهای کانال ما را دنبال کن!
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
---
### چالش Pandas در پردازش Big Data
* بارگذاری ۱۰۰٪ داده در حافظه
* فیلتر و انتخاب ستونها تنها پس از لود کامل
* مصرف بالای RAM و کندی عملکرد
برتری Polars برای Data Science
* Lazy Evaluation: فقط دادههای مورد نیاز را لود میکند
* مدیریت هوشمند حافظه 💾
* سرعت فوقالعاده در پردازش دیتای بزرگ
---
📣 اگر در مسیر تحلیل داده یا Data Science با Big Data سروکار داری، همین امروز Polars را جایگزین Pandas کن و از سرعت و سبکتر شدن پردازش لذت ببر! 😉
┌ 🐼 Polars
├ 📄 Article
└ 🐱 GitHub-Repos
#Python #Pandas #Polars #BigData #DataScience #تحلیل_داده #بهینه_سازی #سرعت_پردازش #HiTech #هایتک
👇 برای آموزشهای بیشتر و نکات حرفهای کانال ما را دنبال کن!
┏━━━━━━━━┓
〓 @HiTech_Codes
┗━━━━━━━━┛
👍1