Личный блог
Таблица сравнения библиотек сжатия. Рекомендуется использовать ZSTD ZSTD сжимает эффективно, но медленно. При этом достаточно быстро распаковывает документы. А скорость распаковки у ZSTD сильно не зависит от степени сжатия
Читать далееМожет публиковать сюда задачки? **Задача** Есть лог звонков call-центра. В нем зафиксировано время начала и конца звонка. Количество записей в логе может быть очень большим, как и сам лог-файл. Считайте, что он минимум в 10 раз больше вашей оперативной памяти. Нужно написать эффективный по...
Читать далееПоследнее время мысль заказать 2-метровый памятник Пикачу кажется заманчивой
Читать далее
Статья, в которой подробно объясняется, что такое Платформа данных
Читать далееДля начинающих (и не только) будет полезно https://dfedorov.spb.ru/pandas/ Гоняем 100гб csv-файлы на очердной мультиварке 2000-года туда-сюда
Читать далее
Касаемо Parquet HuggingFace самостоятельно создал версию моего опубликованного набора данных в формате Parquet
Читать далееDuckDB обеспечивает высокую скорость работы с табличными и, в основном, иерархическими данными. Однако он не поддерживает чтение файлов форматов Excel, ORC и других, в то время как такие библиотеки, как Pandas и Polars, могут их обрабатывать и частично записывать. Среди основных проблем DuckDB...
Читать далее🦙 LlamaCoder — веб-приложение с **открытым** исходным кодом, которое может генерировать целое приложение из описания. Репозиторий уже был клонирован сотнями разработчиков на GitHub и отмечен более 2 тысяч раз. https://llamacoder.together.ai
Читать далее
Прекрасный проект https://trackthis.link/ предназначен для обмана рекламодателей путем открытия множества вкладок в браузере. Однако стоит отметить, что за последние пять лет не было обновлений, и некоторые из открываемых ссылок уже недоступны, но не все
Читать далееВ Чебоксарах Сбер установил шесть милых мини-фигурок с QR-кодами, которые ведут на сайт с описаниями — Девушка на Луне — Волга — Богатырь Улып — Нарспи и Сентер — Красавица Плаги —Лиса-плясунья Ссылки на них были получены через файл sitemap.xml сайта) А сами страницы забэкапил на WebArchive UPD....
Читать далее
Очередной ИИ-сервис для ведения соцсетей Сервис рерайтит тексты из источников и получает тексты в любом объёме и формате и публикует в ВК или Телеграме @GiveMePublicBot Описание тут
Читать далееСегодня хочу поделиться мыслями об опенсорсе в AI/ML. Как человек, который сам тренирует большие модели, могу сказать - опенсорс это очень круто! Радует, что крупные компании это тоже понимают. Открытые решения реально двигают всю сферу вперед, позволяя даже небольшим командам использовать SOTA...
Читать далее