Forwarded from Lobste.rs
LLVM Discussion Forums
[RFC] JSIR: A High-Level IR for JavaScript
This RFC introduces JSIR, a high-level IR for JavaScript: JSIR preserves all information from the AST and supports high-fidelity round-trip between source ↔ AST ↔ JSIR; JSIR uses MLIR regions to represent control flow structures; JSIR supports dataflow…
https://github.com/dylan-sutton-chavez/edge-python
Discussion: https://discuss.python.org/t/building-a-python-compiler-in-rust-that-runs-faster-than-cpython-with-a-160kb-wasm-binary/106860
#rust #python
Discussion: https://discuss.python.org/t/building-a-python-compiler-in-rust-that-runs-faster-than-cpython-with-a-160kb-wasm-binary/106860
#rust #python
GitHub
GitHub - dylan-sutton-chavez/edge-python: Single-pass SSA bytecode compiler and threaded-code stack VM for a sandboxed Python subset:…
Single-pass SSA bytecode compiler and threaded-code stack VM for a sandboxed Python subset: NaN-boxed values, inline caching, super-instruction fusion, pure-function memoization, mark-sweep GC. Cov...
❤1👍1🔥1
This is result of today's work on optimizing training process for different ASR architectures
The bottleneck was older version of torchaudio where OPUS decoder was not able to load some corrupted files and feature extraction time was not OK
Dataset size: 1200 hours, around 35GB of data
I have solved this by rewriting this pipeline using Rust
Parallelism using rayon helped to utilize all the cores and features are here in 20 minutes (~140GB)
#asr #ml #rust
The bottleneck was older version of torchaudio where OPUS decoder was not able to load some corrupted files and feature extraction time was not OK
Dataset size: 1200 hours, around 35GB of data
I have solved this by rewriting this pipeline using Rust
Parallelism using rayon helped to utilize all the cores and features are here in 20 minutes (~140GB)
#asr #ml #rust
❤4
Forwarded from Yehor Smoliakov
Всім привіт!
Запрошую бажаючих долучитись до тестування https://github.com/RustedBytes/pyregistry
Що це: це легка альтернатива PyPI з вбудованими функціями по скануванню пайтонівських пакетів та коду в них на наявні CVE або інші неприємні штуки.
Всередині вбудований механізм дзеркалення інших пакетів, тому Pyregistry можна використати навіть для закритої мережі. Якщо з'являється якась CVE - проєкт відправить вебхук на вказану адресу.
Також є вбудований чекер на віруси в файлах.
Сам проєкт поширюється як бінарик (бо написаний на Rust), скачати під свою ОС можна тут: https://github.com/RustedBytes/pyregistry/releases/tag/v0.1.1
Цього буде достатньо для початку роботи:
Буду радий конструктивній критиці та зірочці на GitHub, якщо проєкт є корисним для Вас.
Запрошую бажаючих долучитись до тестування https://github.com/RustedBytes/pyregistry
Що це: це легка альтернатива PyPI з вбудованими функціями по скануванню пайтонівських пакетів та коду в них на наявні CVE або інші неприємні штуки.
Всередині вбудований механізм дзеркалення інших пакетів, тому Pyregistry можна використати навіть для закритої мережі. Якщо з'являється якась CVE - проєкт відправить вебхук на вказану адресу.
Також є вбудований чекер на віруси в файлах.
Сам проєкт поширюється як бінарик (бо написаний на Rust), скачати під свою ОС можна тут: https://github.com/RustedBytes/pyregistry/releases/tag/v0.1.1
Цього буде достатньо для початку роботи:
./pyregistry init-config
./pyregistry serve
Буду радий конструктивній критиці та зірочці на GitHub, якщо проєкт є корисним для Вас.
GitHub
GitHub - RustedBytes/pyregistry: PyPI alternative for local usage with package vulnerability scanning
PyPI alternative for local usage with package vulnerability scanning - RustedBytes/pyregistry
🔥7🌚1👨💻1
https://gitlab.com/esr/reposurgeon
really cool tool that ESR made, it gives (a) editing past comments and metadata,
(b) excising commits, (c) coalescing commits, and (d) removing files and
subtrees from repo history
#go
really cool tool that ESR made, it gives (a) editing past comments and metadata,
(b) excising commits, (c) coalescing commits, and (d) removing files and
subtrees from repo history
#go
GitLab
Eric S. Raymond / reposurgeon · GitLab
A tool for editing version-control repositories and translating among different vwersion-control systems. Supports git, bzr, Subversion, darcs, and fossil directly, also hg, SCCS, CVS, RCS, and src through...
Forwarded from пехаде блог
Змагання з розпізнавання українського рукописного тексту стартує вже 16 квітня і триватиме до 15 червня 2026 р. 🔥 🔥 🔥
Приєднуйтесь командою чи самотужки!
* Отримайте доступ до різножанрових проанотованих рукописних текстів 🖋️
* Долучіться до розробки відкритих рішень для цифрової трансформації України 🤖
* Виграйте грошовий приз від спонсорів змагання 💰
➡️ Реєстрація та всі деталі тут: https://aihouse.org.ua/event/handwritten-to-data/
Приєднуйтесь командою чи самотужки!
* Отримайте доступ до різножанрових проанотованих рукописних текстів 🖋️
* Долучіться до розробки відкритих рішень для цифрової трансформації України 🤖
* Виграйте грошовий приз від спонсорів змагання 💰
➡️ Реєстрація та всі деталі тут: https://aihouse.org.ua/event/handwritten-to-data/
aihouse.org.ua
Handwritten to Data
doing something
This is result of today's work on optimizing training process for different ASR architectures The bottleneck was older version of torchaudio where OPUS decoder was not able to load some corrupted files and feature extraction time was not OK Dataset size:…
I also rewrote data loader in Rust because torch has became a crazy man and ate all 120 gb of RAM
😨3🔥1
Forwarded from Українська Rust Спільнота (Kostiantyn M)
🦀 Спільното, збираємось!
Вже за пів години, о 18:00, наші випускники презентуватимуть свої фінальні проєкти. Це буде цікаво! Заварюйте чай і приєднуйтесь до нас.
Посилання на Meet
Вже за пів години, о 18:00, наші випускники презентуватимуть свої фінальні проєкти. Це буде цікаво! Заварюйте чай і приєднуйтесь до нас.
Посилання на Meet
🤗3🔥1
Люди бояться Клод.
Що сталося:
Модератори хаба /р/раст вчора видалили пост через те, що нібито проєкт який був там мною опублікований є лоу-еффорт робота.
Як було:
Я побачив гарну ідею яка була реалізована через Клода і просто компілювалася та показувала структурні та архітектурні помилки в Раст коді в якійсь мірі.
Сам код створений був з чистою архітектурою але явно без особливого залучення пальців автора.
Після деяких експериментів я побачив false-positive детекції і вирішив покращити інструмент аби їх усунути. Зробив 4 пул-реквести і якість суттєво покращилась.
Далі вирішив поділитись з товариством світовим на Реддіті і пост був живим десь годину: 2 тисячі переглядів, 10 коментів які в основному про те що це ШІ-слоп.
Чому?
Тому що всі бачать в історії комітів невелику їх кількість та у співавторах акаунт Клода.
І це лякає людей і в якійсь мірі їх конфузить і спонукає закривати сторінку з проєктом. По факту, ШІ їх лякає і це, на жаль, сьогодення і змінена реальність.
Отакий ранковий пост.
Що сталося:
Модератори хаба /р/раст вчора видалили пост через те, що нібито проєкт який був там мною опублікований є лоу-еффорт робота.
Як було:
Я побачив гарну ідею яка була реалізована через Клода і просто компілювалася та показувала структурні та архітектурні помилки в Раст коді в якійсь мірі.
Сам код створений був з чистою архітектурою але явно без особливого залучення пальців автора.
Після деяких експериментів я побачив false-positive детекції і вирішив покращити інструмент аби їх усунути. Зробив 4 пул-реквести і якість суттєво покращилась.
Далі вирішив поділитись з товариством світовим на Реддіті і пост був живим десь годину: 2 тисячі переглядів, 10 коментів які в основному про те що це ШІ-слоп.
Чому?
Тому що всі бачать в історії комітів невелику їх кількість та у співавторах акаунт Клода.
І це лякає людей і в якійсь мірі їх конфузить і спонукає закривати сторінку з проєктом. По факту, ШІ їх лякає і це, на жаль, сьогодення і змінена реальність.
Отакий ранковий пост.
👍5😱4
doing something
Люди бояться Клод. Що сталося: Модератори хаба /р/раст вчора видалили пост через те, що нібито проєкт який був там мною опублікований є лоу-еффорт робота. Як було: Я побачив гарну ідею яка була реалізована через Клода і просто компілювалася та показувала…
Продовжую історію по цьому проєкту.
Вчора зробив розширення для VS Code яке перевіряє помилки в Rust коді автоматично через цю програму та додає їх у таб Problems.
Зараз він працює на рівні файлу, але вже бачу деякі сторони для покращення:
1) аналіз всього проєкту після відкриття проєкту
2) додавання коментів ігнорування якоїсь знахідки
3) Сама програма має метод —how-fix з підказкою щодо поліпшення коду, її теж треба додати в інформацію
PS: Під кожний проєкт треба тюнити конфіг, звісно. Бо як виявилось не всім це зрозуміло.
Вчора зробив розширення для VS Code яке перевіряє помилки в Rust коді автоматично через цю програму та додає їх у таб Problems.
Зараз він працює на рівні файлу, але вже бачу деякі сторони для покращення:
1) аналіз всього проєкту після відкриття проєкту
2) додавання коментів ігнорування якоїсь знахідки
3) Сама програма має метод —how-fix з підказкою щодо поліпшення коду, її теж треба додати в інформацію
PS: Під кожний проєкт треба тюнити конфіг, звісно. Бо як виявилось не всім це зрозуміло.
❤2