Вариант для распечатки |
Пред. тема | След. тема | ||
| Форум Разговоры, обсуждение новостей | |||
|---|---|---|---|
| Изначальное сообщение | [ Отслеживать ] | ||
| "Google опубликовал Magika 1.0, инструментарий для определения типа содержимого файлов " | +/– | |
| Сообщение от opennews (??), 07-Ноя-25, 14:28 | ||
Компания Google представила релиз инструментария Magika 1.0, предназначенного для определения типа содержимого на основе анализа имеющихся в файле данных. Magika может точно определять в содержимом используемые языки программирования, методы сжатия, установочные пакеты, исполняемый код, виды разметки, форматы звука, видео, документов и изображений. Связанный с проектом инструментарий и готовая модель машинного обучения распространяются под лицензией Apache 2.0. Обвязки подготовлены для языков Rust, Python, JavaScript/TypeScript и Go... | ||
| Ответить | Правка | Cообщить модератору | ||
| Оглавление |
| Сообщения | [Сортировка по времени | RSS] |
| 1. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (1), 07-Ноя-25, 14:28 | ||
Уже чувствую, что функционала меньше, чем в libmagic (или что там утилита file юзает), а жор будет где-то метров 200 минимум. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 13. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от НяшМяш (ok), 07-Ноя-25, 15:07 | ||
Интересно, что гугл на это даже ответить попытался: https://securityresearch.google/magika/additional-resources/... | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 16. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Bob (??), 07-Ноя-25, 15:11 | ||
Максимально оптимизируют, ибо всетмощности надо под ИИ освобождать. Ту же Гемини и чё там ещё понавыпускали. | ||
| Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору | ||
| 23. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (23), 07-Ноя-25, 15:59 | ||
File такая кривая дрянь что это уже не смешно. Даже распознавание zip файлов регулярно ломают. Если хотя бы будет работать, то 200 мегабайт не жалко. | ||
| Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору | ||
| 73. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (73), 07-Ноя-25, 22:09 | ||
https://github.com/horsicq/Detect-It-Easy?tab=readme-ov-file | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 80. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (80), 08-Ноя-25, 01:30 | ||
this. | ||
| Ответить | Правка | К родителю #23 | Наверх | Cообщить модератору | ||
| 119. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
Сообщение от Ванька (?), 08-Ноя-25, 12:53 | ||
совмещайте, file и binwalk на одно и тоже =) | ||
| Ответить | Правка | К родителю #23 | Наверх | Cообщить модератору | ||
| 24. "Google опубликовал Magika 1.0, инструментарий для определени..." | +6 +/– | |
| Сообщение от Аноним (24), 07-Ноя-25, 16:09 | ||
> отличается применением методов машинного обучения | ||
| Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору | ||
| 88. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 03:32 | ||
>т.е. будут галлюцинации и ложные результаты | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 98. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (98), 08-Ноя-25, 05:38 | ||
Очень круто, когда ты можешь вызвать программу сто раз с теми же входными данными и в среднем один раз она выдаст что-то другое. Очень надежный инструмент. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 104. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от МИСАКА (?), 08-Ноя-25, 10:22 | ||
Так а кто тебя заставляет температуру крутить? Если давать нейронке идентичные настройки, то там и 1% не будет | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 42. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 07-Ноя-25, 19:23 | ||
> Уже чувствую, что функционала меньше, чем в libmagic (или что там утилита file юзает), а жор будет где-то метров 200 минимум. | ||
| Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору | ||
| 57. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (57), 07-Ноя-25, 20:59 | ||
Если ты настолько несведущ в слабых сторонах ИИ, то лучше тебе вообще эту тему не комментировать. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 62. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Аноним (42), 07-Ноя-25, 21:11 | ||
> Если ты настолько несведущ в слабых сторонах ИИ | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 83. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Анониссимус (?), 08-Ноя-25, 02:23 | ||
Я другой аноним, но отвечу на это: | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 89. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 03:35 | ||
>Безусловно, иногда он очень полезен, а иногда абсолютно бесполезен | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 125. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 14:11 | ||
> А иногда она выглядит очень убедительно и логично, но когда попытаешься вникнуть — понимаешь, что это полный бред. | ||
| Ответить | Правка | К родителю #83 | Наверх | Cообщить модератору | ||
| 97. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (97), 08-Ноя-25, 05:38 | ||
А простая программа или условная баш-портянка значит может делать финальное решение? Прям 100% точность? Прям все возможные файловые инпуты протестированы? | ||
| Ответить | Правка | К родителю #57 | Наверх | Cообщить модератору | ||
| 130. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от anonymos (?), 08-Ноя-25, 14:31 | ||
А чем Вам bash не угодил? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 44. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Аноним (44), 07-Ноя-25, 19:34 | ||
> Уже чувствую | ||
| Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору | ||
| 46. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (46), 07-Ноя-25, 19:46 | ||
> А что за сишные программы? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 49. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (42), 07-Ноя-25, 19:56 | ||
>> А что за сишные программы? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 133. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Павел (??), 08-Ноя-25, 15:52 | ||
Что в расте хорошо, то русскому погибель. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 90. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 03:36 | ||
Видимо, file | ||
| Ответить | Правка | К родителю #44 | Наверх | Cообщить модератору | ||
| 5. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Хлебан (?), 07-Ноя-25, 14:34 | ||
А вот интересно, что произойдет, если этот определитель типа начнет бредить (или как еще аккуратно говорят, галлюцинировать)? Какой простор для творчества вирусописателей. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 7. "Google опубликовал Magika 1.0, инструментарий для определени..." | +6 +/– | |
| Сообщение от Жор (?), 07-Ноя-25, 14:45 | ||
Там нет генеративной модели. Оно не может "бредить", может просто ошибиться при классификации. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 25. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от Аноним (24), 07-Ноя-25, 16:11 | ||
> может просто ошибиться | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 29. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от 12yoexpert (ok), 07-Ноя-25, 16:57 | ||
так это совсем другое дело | ||
| Ответить | Правка | К родителю #7 | Наверх | Cообщить модератору | ||
| 51. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 07-Ноя-25, 20:00 | ||
> Там нет генеративной модели. Оно не может "бредить", может просто ошибиться при классификации | ||
| Ответить | Правка | К родителю #7 | Наверх | Cообщить модератору | ||
| 72. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (-), 07-Ноя-25, 22:01 | ||
Меня всегда озадачивают люди типа тебя, которые вдруг придумывают своё собственно определение для термина, и совершенно безосновательно утверждают, что это единственно верное утверждение. Что интересно вас сподвигает на такое поведение? Считаете ли вы его нормальным и допустимым в приличном обществе, или делаете это ради троллинга? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 108. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (108), 08-Ноя-25, 10:53 | ||
А что за организация должна придумывать единственно верное определение терминов? Или вам пролам о таком думать не положено? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 114. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (-), 08-Ноя-25, 11:32 | ||
Почему сразу организация? Если мы говорим про галлюцинации ИИ, то есть референсная группа -- ИИ-исследователи. В этой группе термин зародился и сформировался. В этой группе сформировалось и определение. Все остальные, пользующиеся этим термином, в лучшем случае могут понимать его правильно, но никакого влияния на его смысл они иметь не могут. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 137. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 16:54 | ||
> Если мы говорим про галлюцинации ИИ, то есть референсная группа -- ИИ-исследователи. В этой группе термин зародился и сформировался. В этой группе сформировалось и определение. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 136. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 16:49 | ||
> Меня всегда озадачивают люди типа тебя, которые вдруг придумывают своё собственно определение для термина | ||
| Ответить | Правка | К родителю #72 | Наверх | Cообщить модератору | ||
| 10. "Google опубликовал Magika 1.0, инструментарий для определени..." | –3 +/– | |
| Сообщение от Аноним (10), 07-Ноя-25, 14:49 | ||
> А вот интересно, что произойдет, если этот определитель типа начнет бредить | ||
| Ответить | Правка | К родителю #5 | Наверх | Cообщить модератору | ||
| 19. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (19), 07-Ноя-25, 15:29 | ||
> вы можете подредактировать файл чтобы ввести в заблуждение другие инструменты | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 37. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от Аноним (37), 07-Ноя-25, 18:13 | ||
Например, есть такой контейнерный формат ISOBMFF, который используется в MP4, JPEG2000, MJPEG, FMP4. В теории можно использовать атомы одного типа в файле другого, чтобы заставить подобные штуки ошибиться. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 74. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (-), 07-Ноя-25, 22:10 | ||
> Я убираю из файла заголовок/магическое число и он превращается... в бессмысленный набор байтов? | ||
| Ответить | Правка | К родителю #19 | Наверх | Cообщить модератору | ||
| 131. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от anonymos (?), 08-Ноя-25, 14:55 | ||
Берем jpeg картинку, например haha.jpeg | ||
| Ответить | Правка | К родителю #19 | Наверх | Cообщить модератору | ||
| 109. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (108), 08-Ноя-25, 10:56 | ||
Ты показал свою полнейшую некомпетентность. | ||
| Ответить | Правка | К родителю #10 | Наверх | Cообщить модератору | ||
| 36. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от devl547 (ok), 07-Ноя-25, 18:01 | ||
>вирусописателей | ||
| Ответить | Правка | К родителю #5 | Наверх | Cообщить модератору | ||
| 6. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от Кошкажена (?), 07-Ноя-25, 14:37 | ||
> Magika is used at scale to help improve Google users' safety by routing Gmail, Drive, and Safe Browsing files to the proper security and content policy scanners | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 9. "Google опубликовал Magika 1.0, инструментарий для определени..." | +5 +/– | |
| Сообщение от ryoken (ok), 07-Ноя-25, 14:45 | ||
Гуглу-то..? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 18. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Bob (??), 07-Ноя-25, 15:20 | ||
Это пресс релиз - для колхозников (юзеров гугла). Дачники (думающее) - идут мимо) | ||
| Ответить | Правка | К родителю #6 | Наверх | Cообщить модератору | ||
| 112. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (112), 08-Ноя-25, 11:25 | ||
> Зачем вести базу "небезопасных" сайтов, если их можно сразу репортить хостеру и говорить: сноси или с выдачи уберём уже тебя) | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 17. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним10084 и 1008465039 (?), 07-Ноя-25, 15:16 | ||
Утилита file больше не нужна, получается? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 39. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (39), 07-Ноя-25, 18:34 | ||
Зато нужна GTX100500 LLM и проц помощнее. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 41. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (42), 07-Ноя-25, 19:22 | ||
> Зато нужна GTX100500 LLM и проц помощнее. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 53. "Google опубликовал Magika 1.0, инструментарий для определени..." | +6 +/– | |
| Сообщение от Аноним (-), 07-Ноя-25, 20:08 | ||
> Тем временем в новости | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 64. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от BrainFucker (ok), 07-Ноя-25, 21:16 | ||
> После загрузки модели время формирования вывода составляет 5 мс | ||
| Ответить | Правка | К родителю #41 | Наверх | Cообщить модератору | ||
| 120. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 13:00 | ||
> только время на загрузку модели тратить не надо. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 132. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от BrainFucker (ok), 08-Ноя-25, 15:44 | ||
> Зато надо тратить время на загрузку врсьмимегабайтного magic.mgc. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 69. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Кошкажена (?), 07-Ноя-25, 21:36 | ||
> Утилита file больше не нужна, получается? | ||
| Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору | ||
| 91. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 03:45 | ||
Вы, очевидно, не в курсе, но детерминированные алгоритмы в утилите file могут работать хуже, чем недетерминированные в нейронке. Потому что часто форматы слишком многовариантные или подпорченные, детерминированный алгоритм на таком срабатывает неправильно. Вы же не думаете, что в Гугле идиоты работают, и не знают о том, что есть детерменированные алгоритмы? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 102. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от SubGun (ok), 08-Ноя-25, 09:15 | ||
Она не очень справляется. | ||
| Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору | ||
| 107. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от asand3r (ok), 08-Ноя-25, 10:34 | ||
Проверил на keytab-файле -- file корректно определяет содержимое, а magika пишет "Unknown binary data (unknown) [Low-confidence model best-guess: Certificates (binary format) (text), score=0.273]". | ||
| Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору | ||
| 124. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Vindex (?), 08-Ноя-25, 13:43 | ||
Давным-давно из-за проблем file я изобрёл другое: | ||
| Ответить | Правка | К родителю #17 | Наверх | Cообщить модератору | ||
| 20. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (20), 07-Ноя-25, 15:29 | ||
а в чем была проблема юзать binwalk? он даже на их любимом расте переписан | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 92. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 03:46 | ||
Возможно, проблема в количестве ошибок при определении формата. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 21. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (21), 07-Ноя-25, 15:32 | ||
Теперь же в процессоры добавляют эти как его за ногу NPU нейромодули, почему бы из них хоть каплю пользы не выдоить для сабжа и подобных задач? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 70. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Кошкажена (?), 07-Ноя-25, 21:38 | ||
> Теперь же в процессоры добавляют эти как его за ногу NPU нейромодули, | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 26. Скрыто модератором | +1 +/– | |
| Сообщение от Аноним (26), 07-Ноя-25, 16:16 | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 27. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Аноним (27), 07-Ноя-25, 16:30 | ||
Напоминаю, что magicka работает через откусывание от файла блока из начала, конца и середины. То есть засунув в начало, конец и середину нужные данные эту либу элементарно обмануть, при этом это нейронка, то есть не строгий алгоритмический парсинг, какой используется в реализациях, а штука, которой можно подсунуть adversarial куски, но при этом строгим парсером они всё равно будут парситься как надо. По-настоящему любой формат детектится только через попытку парсинга. На практике надо тип файла детектить по расширению, если контейнер - то парсить контейнер тоже, если тип запрещён - то ффтопку, если выглядит не запрещённым - то парсить безопасным парсером. Если не парсится - то ффтопку, если парсится - значит тот тип, что написан в расширении (даже если это химера). Либа имела бы существенную ценность для реверсинга, если бы была трансформером на индивидуальных битах и выдавала бы не тип файла, а тип данных (тип компрессии или кодировки, тип инта или тип флоата), а так это просто кусок хайпожорного дерьма, который на практике бесполезен. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 45. "Google опубликовал Magika 1.0, инструментарий для определени..." | +3 +/– | |
| Сообщение от Аноним (42), 07-Ноя-25, 19:37 | ||
> То есть засунув в начало, конец и середину нужные данные эту либу элементарно обмануть | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 75. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (75), 07-Ноя-25, 22:25 | ||
Нет, обмануть сочетание расширения и структуры - нельзя. Расширение тебе говорит, что ты ожидаешь в файле найти. А парсер тебе говорит, нашёл ли ты именно то, что ожидаешь. И не используйте говнософт, который гадает, вместо того, чтобы полагаться на идентифкаторы. Особенно держитесь подальше от ImageMagick. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 93. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 03:53 | ||
Сколько-сколько времени займёт распарсить 1 файл объёмом в несколько гигабайтов? А если у вас их гораздо больше одного, запасёмся вечностью? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 138. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 16:58 | ||
> А парсер тебе говорит, нашёл ли ты именно то, что ожидаешь | ||
| Ответить | Правка | К родителю #75 | Наверх | Cообщить модератору | ||
| 78. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (78), 07-Ноя-25, 23:45 | ||
> Напоминаю, что magicka работает через откусывание от файла блока из начала, конца и середины. | ||
| Ответить | Правка | К родителю #27 | Наверх | Cообщить модератору | ||
| 84. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (84), 08-Ноя-25, 02:29 | ||
Нет, парсеры разбирают структуру хотя-бы верхнего уровня полностью, а не дают вердикт "кажется, байтики на exe похожи с вероятностью 0.9912345", хотя там хедер от какого-нибудь другого формата, просто поля метаданных подобраны чтобы нейросети казалось. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 85. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Анониссимус (?), 08-Ноя-25, 02:30 | ||
Строгий парсер ничего не кусает, он берёт и парсит весь файл. На то он и парсер. | ||
| Ответить | Правка | К родителю #78 | Наверх | Cообщить модератору | ||
| 139. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 17:00 | ||
> Строгий парсер ничего не кусает, он берёт и парсит весь файл. На то он и парсер. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 28. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от Аноним (28), 07-Ноя-25, 16:53 | ||
Зашли с коллегой на их сайт в раздел DEMO | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 30. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Мемоним (?), 07-Ноя-25, 17:00 | ||
> Sudo for Windows is a new way for users to run elevated commands (as an administrator) directly from an unelevated console session on Windows. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 32. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от Аноним (39), 07-Ноя-25, 17:05 | ||
> Magika может точно определять | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 33. "Google опубликовал Magika 1.0, инструментарий для определени..." | +4 +/– | |
| Сообщение от Аноним (33), 07-Ноя-25, 17:17 | ||
Поочередно кинул три файла Гимпа в формате xcf с какими-то своими каляками. | ||
| Ответить | Правка | К родителю #28 | Наверх | Cообщить модератору | ||
| 54. "Google опубликовал Magika 1.0, инструментарий для определени..." | –2 +/– | |
| Сообщение от Аноним (-), 07-Ноя-25, 20:12 | ||
> Поочередно кинул три файла Гимпа в формате xcf | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 58. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (57), 07-Ноя-25, 21:04 | ||
Вот и всё, что нужно знать о "нейронках". :) | ||
| Ответить | Правка | К родителю #33 | Наверх | Cообщить модератору | ||
| 76. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (75), 07-Ноя-25, 22:26 | ||
А теперь давай выкладывай свои каляки... | ||
| Ответить | Правка | К родителю #33 | Наверх | Cообщить модератору | ||
| 63. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Кошкажена (?), 07-Ноя-25, 21:13 | ||
Вряд ли они в проде используют прям тоже самое. | ||
| Ответить | Правка | К родителю #28 | Наверх | Cообщить модератору | ||
| 38. Скрыто модератором | –2 +/– | |
| Сообщение от Аноним (38), 07-Ноя-25, 18:14 | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 43. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (43), 07-Ноя-25, 19:33 | ||
Жду, когда выпустят новую программу dir, которая отображает список файлов и директорий. Естественно нужно ,чтобы эта программа была обязательно на искусственном интеллекте и обучалась на типичных домашних каталогах пользователей. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 48. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от аролп5 (?), 07-Ноя-25, 19:52 | ||
Это будет клиент, который будет в Майкрософт отправлять ваши файлы, анализировать и сообщать клиенту, директория это или файл ))) | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 47. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от аролп5 (?), 07-Ноя-25, 19:51 | ||
"The client and the bindings are already open source, and more is coming soon!" Не понял, этой штуке что ли стабильный канал интернета нужен будет для работы?! | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 50. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от ProfessorNavigator (ok), 07-Ноя-25, 19:58 | ||
> Задействование методов глубокого машинного обучения | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 55. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (-), 07-Ноя-25, 20:17 | ||
> А что, бывают ещё методы "мелкого" машинного обучения?)) | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 56. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от ProfessorNavigator (ok), 07-Ноя-25, 20:33 | ||
>> А что, бывают ещё методы "мелкого" машинного обучения?)) | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 59. "Google опубликовал Magika 1.0, инструментарий для определени..." | +1 +/– | |
| Сообщение от Аноним (57), 07-Ноя-25, 21:06 | ||
Мне вот "глубокое" по ___й, а вам по колено будет :) | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 86. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (84), 08-Ноя-25, 02:31 | ||
xgboost, например, рабочая лошадка всего нехайпового машоба. | ||
| Ответить | Правка | К родителю #50 | Наверх | Cообщить модератору | ||
| 117. "Google опубликовал Magika 1.0, инструментарий для определени..." | –2 +/– | |
| Сообщение от ProfessorNavigator (ok), 08-Ноя-25, 12:18 | ||
> xgboost, например, рабочая лошадка всего нехайпового машоба. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 121. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 13:13 | ||
> но поскольку термин уже устоялся, то пусть будет машинное обучение | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 141. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от anonymos (?), 08-Ноя-25, 17:27 | ||
Аноним прав, термин "глубокое" машинное обучение - это не более чем маркетинг ) | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 142. Скрыто модератором | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 18:03 | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 52. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (52), 07-Ноя-25, 20:06 | ||
"В Google система (magika) используется для классификации файлов в сервисах Gmail, Drive ..." | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 60. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Аноним (57), 07-Ноя-25, 21:06 | ||
Нехорошо. Но это если всем об этом рассказывать. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 65. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Кошкажена (?), 07-Ноя-25, 21:16 | ||
Но есть и плюс: можно создать нужный тебе "профиль" в гугле просто загружая нужную инфу. | ||
| Ответить | Правка | К родителю #52 | Наверх | Cообщить модератору | ||
| 105. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (105), 08-Ноя-25, 10:22 | ||
Читаем условия пользования гуглоящиком. | ||
| Ответить | Правка | К родителю #52 | Наверх | Cообщить модератору | ||
| 67. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Кошкажена (?), 07-Ноя-25, 21:20 | ||
> На MacBook Pro (M4) производительность движка позволяет обрабатывать около 1000 файлов в секунду. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 68. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Кошкажена (?), 07-Ноя-25, 21:30 | ||
> Изначально проект развивался на языке Python, но при подготовке релиза 1.0 движок для определения типов контента был переписан на языке Rust, что позволило добиться более высокой производительности, сохранив должный уровень защищённости кода. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 79. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Аноним (-), 08-Ноя-25, 01:06 | ||
> Какой? К сожалению никто не ответит | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 81. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (81), 08-Ноя-25, 01:42 | ||
> на одном ядре CPU | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 96. "Google опубликовал Magika 1.0, инструментарий для определени..." | –4 +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 04:07 | ||
Предположу, что какого-то серверного, скорее всего или Амл, или Интел. Но почему это важно? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 106. "Google опубликовал Magika 1.0, инструментарий для определени..." | +2 +/– | |
| Сообщение от Аноним (105), 08-Ноя-25, 10:24 | ||
Это в макбуке то? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 116. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (24), 08-Ноя-25, 11:53 | ||
> Но почему это важно? | ||
| Ответить | Правка | К родителю #96 | Наверх | Cообщить модератору | ||
| 82. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Кошкажена (?), 08-Ноя-25, 01:56 | ||
>> Какой? К сожалению никто не ответит | ||
| Ответить | Правка | К родителю #79 | Наверх | Cообщить модератору | ||
| 94. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 03:59 | ||
>Какой CPU? Почему только CPU учитываеся? Почему тест только на одном, если их больше одного? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 95. "Google опубликовал Magika 1.0, инструментарий для определени..." | –2 +/– | |
| Сообщение от Чтото знающий (?), 08-Ноя-25, 04:05 | ||
>Как локально тесты запустить, чтобы проверить? | ||
| Ответить | Правка | К родителю #82 | Наверх | Cообщить модератору | ||
| 101. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от Кошкажена (?), 08-Ноя-25, 08:37 | ||
>>Как локально тесты запустить, чтобы проверить? | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 140. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 17:05 | ||
>> Используйте её для того, чтобы скачать программу и начать ваше тестирование. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 111. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (108), 08-Ноя-25, 11:04 | ||
Ты прав нас просто пытаются обмануть. | ||
| Ответить | Правка | К родителю #68 | Наверх | Cообщить модератору | ||
| 77. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (77), 07-Ноя-25, 23:31 | ||
Правильно, всегда надо знать, что за файл перед тобой. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 115. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (24), 08-Ноя-25, 11:51 | ||
ИИ: "Но это неточно". | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 135. Скрыто модератором | +/– | |
| Сообщение от Аноним (108), 08-Ноя-25, 16:18 | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 113. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (113), 08-Ноя-25, 11:28 | ||
сейчас использую из golang: https://github.com/gabriel-vasile/mimetype | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 118. "Google опубликовал Magika 1.0, инструментарий для определени..." | –1 +/– | |
| Сообщение от lucentcode (ok), 08-Ноя-25, 12:36 | ||
Написано на Rust. Значит не взлетит. Вообще не понимаю, чего они так за этот недоязык цепляются? Есть же C, там где его возможностей не хватает(что бывает не часто) - C++, лучшее решение из существующих на рынке, для высокопроизводительных приложений. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 122. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (42), 08-Ноя-25, 13:20 | ||
> Написано на Rust. Значит не взлетит. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 134. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Аноним (108), 08-Ноя-25, 16:17 | ||
Конечно там же можно выйти за границу буфера. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
| 143. "Google опубликовал Magika 1.0, инструментарий для определени..." | +/– | |
| Сообщение от Анонисссм (?), 08-Ноя-25, 18:14 | ||
подсунул EML файл, пожатый lz4. | ||
| Ответить | Правка | Наверх | Cообщить модератору | ||
|
Архив | Удалить |
Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема |
|
Закладки на сайте Проследить за страницей |
Created 1996-2025 by Maxim Chirkov Добавить, Поддержать, Вебмастеру |