> В феврале 2011 по данным счётчика mail.ru количество просмотров страниц достигло пика
> в 4млн., после чего показатели стали плавно снижаться.

В 2011 началась постепенная экспансия блокировщиков рекламы. Так как многие блокировщики по умолчанию блокируют счётсчик mail.ru в статистике перестал отображаться огромный пласт пользователей. С учётом того, что на opennet в основном технически продвинутая аудитория, доля посетителей с блокировщиками сейчас превышает 50%, что делает бессмысленным применение счётчика mail.ru.

> После июня 2017-го  случился какой-то фатальный обвал,

Это я полностью удалил счётчик со страниц сайта. Последней каплей стала блокировка mail.ru на территории Украины. По статстиске на основе логов http-сервера небольшое проседание трафика за последние лет 5 наблюдается, но это в основном за счёт ухода для чтения в социальные сети (например, полные тексты транслируются в канал на telegram) и сокращения прихода с Google. Трафик просмотра новостей растёт, по сравнению с 2011 годом раза в два.

> и сейчас в месяц от силы 1.5-1.6

Это трафик от страниц на которых остался код счётчика, например, на сторонних зеркалах сайта.

> На какой инфраструктуре работает сайт сейчас? Серверы, софт, операционная система, и пр.

Сейчас на основном сервере используется CentOS 7. Софт в основном тот же (Perl, PostgreSQL), что и раньше, за исключенем использования Redis вместо memcachedb.

> Надо бы: URL-encode-ить (или как там его?) данные в форме при просмотре.

.

$ echo -n 'русификация+консоли+FreeBSD'|recode -f ../x1|tr -d ', \n'|sed 's/0x/%/g'; echo
%D1%80%D1%83%D1%81%D0%B8%D1%84%D0%B8%D0%BA%D0%B0%D1%86%D0%B8%D1%8F%2B%D0%BA%D0%BE%D0%BD%D1%81%D0%BE%D0%BB%D0%B8%2B%46%72%65%65%42%53%44
$ _

http://lmddgtfy.net/?q=%D1%80%D1%83%...

> Проблема: вставляем правильно квоченый URL (с %-тами на всю катушку), нажимаем [Посмотреть],
> вверху видим _правильный html со сслыкой, а в боксе "Сообщение" ссылка
> рас-квочена. Итог: если теперь нажать [Отправить] (или ещё раз [Посмотреть]), но
> в html-е ссылка будет неквочена, не будет [желаемого/правильного] линка, и, вообще,
> ссылка может оказаться в кодировке "бНОПНЯ" (см.экспонат#1 выше).
> Надо бы: URL-encode-ить (или как там его?) данные в форме при просмотре.

+Без перекодировки ascii-символов # http://www.opennet.dev/openforum/vsluhforumID9/9893.html

Exhibit B: Также "не работает".

$ echo http://lmddgtfy.net/?q=русификация+консоли+FreeBSD |recode ..h
http://lmddgtfy.net/?q=русиф&#...
$ _

Exhibit C: Работает, http://www.opennet.dev/openforum/vsluhforumID9/9893.html#4 :
$ echo http://lmddgtfy.net/?q=русификация+консоли+FreeBSD |perl -ne 's/([^\x00-\x7f])/sprintf "%%%2X", ord $1/ge; print'
http://lmddgtfy.net/?q=%D1%80%D1%83%...
$ _

> http:/openforum/vsluhforumID3/84906.html#94
> Проблема: вставляем

А чего это у Вас с кавычками: http:/openforum/vsluhforumID1/96166.html#1
SQL-инджекшенов ждёте?

> Проблема: вставляем

...в форуме URL, читаем пред-просмотр, всё ничего, постим, отвечая на качу и -- URL в готовом после сломан.  Он был сломан и на предпросмотре, но _все_ (наверное) это пропускают.

Поломка: к ссылке, URL-у "клеится" код %A0%A0, когда после URL в исх.тексте вбито _два пробела (возможно, также пробел и перевод строки - не проверял).  

Вариант: кодом %A0%A0 склеиваются в одну (= и ломаются) 2 ссылки, если между ними -- два пробела.

Экспонаты:
2015-03-10 http://www.opennet.dev/openforum/vsluhforumID3/101697.html#73
2016-12-24 https://www.opennet.dev/openforum/vsluhforumID3/109993.html#22
2018-07-30 http://www.opennet.dev/openforum/vsluhforumID3/114949.html#3

>А можно ли объединить получение по RSS основных новостей и мини-новостей?

А что мешает подписаться на две RSS ленты ? RSS основых и RSS мини-новостей ? В итоге резльтат будет такой же, как если бы лента была одна.

http://www.opennet.dev/opennews/opennews_6.rss
http://www.opennet.dev/opennews/opennews_mini.rss

>Раньше хотя бы раз в две недели сводка была, сейчас нету, как

Сводка теперь немного в другом формате, http://www.opennet.dev/opennews/mini.shtml

>вообще /art.shtml) вполне интересны, не понимаю, почему они в "мини"...

Формат новостей в мини-ленте немного другой, там лишь очень краткая аннотация и ссылка на оригинал. По сути, мини-лента - это лента интересных ссылок, немного недотягивающих до анонса в основной ленте новостей. К сожалению, иногда в мини-ленту попадают ссылки, которые могли бы послужить материалом для большой новости, но на оформление не осталось человеческих ресурсов, со временем такие мини-новости могут перерасти в большую новость, например, так планируется делать с интервью, которые без перевода нет смысла кидать в основную ленту.

Чтоб не плодить темы, напишу сюда.

Есть RSS https://www.opennet.dev/rss.shtml?last_tips

Можно туду добавить дату и время добавления поста?

Добрго дня!
А можно увеличить кол-во выводимых тем в ленте https://www.opennet.dev/opennews/opennews_all.rss
с 30 до 50.
Да, я понимаю, что тут не такое большое кол-во новостей публикуют, но всё таки редко, да бывает полезно.

> Есть возможность при создании постинга использовать теги?

В комментариях:

" Какие служебные тэги поддерживаются в сообщениях

    Форум интерпретирует значения тэгов:

..

, .., [i]..[/i], .., [ul]..[/ul], [ol]..[/ol], [li]. ""
--http://wiki.opennet.ru/ForumHelp

Возможность также сопровождается теи, что "везде"* она [не]** работает по-разному.

--
* в разных ипостасях коимментария. Штуки четыре, вроде есть и все разные...
** где-то работают только UPPERCASE таги, где-то не работают, где-то наполовину.

> Есть возможность при создании постинга использовать теги?

В новостях, советах и прочих статьях теги есть. В форуме только выбор фиксированных тем из списка.

> На многих сообщениях пропали ссылки "К модератору" при обычном заходе на страницу
> новости. Например:
> https://www.opennet.dev/openforum/vsluhforumID3/114032.html#144
> По этой ссылке есть ссылка "Сообщить модератору", но при просмотре в обычном
> режиме, её у меня нет.

Ссылка под новостью исчезает после пометки модератором ветки просмотренной. Сейчас убрал такое поведение, на больших ветках от такого только вред.

> При открытии сайта http://mobile.opennet.ru, все ссылки на новости ведут на https://mobile.opennet.ru/opennews/art.shtml?num=X

Убрал BASE. Наглядный пример, что принудительный HTTPS не всегда уместен.

> Мелочь, а не приятно. Не знаю как на это вообще реагируют мобильный
> браузеры (не на чем проверить), но десктопные пока еще дают добавлять
> исключения (с такой политикой не удивлюсь если через пару лет обычные
> сборки "для людей" эту возможность потеряют).

mobile.opennet.ru  давно устарел, на мобильных устройствах должен нормально работать обычный https://www.opennet.dev или https://opennet.ru. В let's encrypt маски появились, как дойдут руки добавлю в сертификат и m[obile].opennet.ru

> Скажите, уважаемые, а зачем при отмене подписки на нить, портал переходит на
> использование http вместо https?

Исправил. Остаётся достаточно много подобных хвостов, по возможности когда всплывает везде заменяю на https://

> Хотел задать вопрос по несколько нестандартному использованию raspberry pi и не понял
> в какой теме спросить.

Провёл реструктуризацию раздела "Портативные устройства, платы и ноутбуки", теперь там есть секция про микроконтроллеры и  raspberry pi.
https://www.opennet.dev/cgi-bin/openforum/vsluhboard.cgi?az=l...

Это всё сильно усложнено. Оптимально субъективные "+" и "-", в смысл которых каждый может вкладывать всё что угодно.

> Сократил шапку. Комментарии/рекомендации приветствуются.
> Сверстать бы шапку конечно нормально на div-ах, но пока сделал из того
> что было.

Э... а старые виды посмотреть как? Чтоб было с чем сравнивать. Можно скриншот старого вида куда-нибудь вывалить, чтоб программу не менять уж.

> Сократил шапку. Комментарии/рекомендации приветствуются.
> Сверстать бы шапку конечно нормально на div-ах, но пока сделал из того
> что было.

зомечательно!

только в GLinks логотип дважды.

> Например: https://www.opennet.dev/openforum/vsluhforumID3/113882.html#7

Есть такое из-за скобок в URL. Остаётся неисправленным так как в форуме часто ссылки помещают в скобках и если добавить скобки как валидный символ для URL, то начинают портиться подобные ссылки. Т.е. палка о двух концах, либо некоторые битые URL из wikipedia, либо  битые ссылки вида "(http://test)".

> по принципу Википедии, где исключается любая дезинформация.

до этого места было просто забавно, а отсюда стало фэйспалмно.

> Читая комментарии в новостям, я постоянно вижу бред, оскорбления, дезинформацию и стал
> замечать, что люди потом реально в весь тот бред, что пишут
> в комментариях. А замечаю я это по тому, как могут заплюсовать
> дезинформацию и заминусовать объяснение фактов.
> Есть предложение добавить в систему регистрации принцип авторитарности. Грубо говоря,
> человек регистрируется, но он остаётся для всех всё тем же анонимом.

Наличие регистрации подрывает принцип анонимности. Анонимная публикация в первую очередь оставлена, что бы дать возможность отправки сообщения без регистрации, а уже во вторую, чтобы дать возможность не идентифицировать себя. Cкрытая идентификация анонима по cookie не рассматривается, это нечестно по отношению к адекватным анонимам и бесполезно, так как те, кто намерено нарушают правила работают через Tor.

> Для всех, кроме зарегистрированных пользователей, авторитетность которых была подтверждена.
> То есть, выбираются люди, которые грамотные и в зависимости от их
> уровня им разрешается модерировать те или иные новости.

В форуме изначально присутствует возможность участия любого посетителя в системе модерирования, не важно, зарегистрированного или нет. Для этого под каждым сообщением есть кнопка "Сообщить модератору". Также есть более мягкий способ - система рейтинга, большое число плюсов и минусов также является индикатором. Кроме того, любой зарекомендовавший себя участник может получить права модератора, при наличии соответствующего желания.

> Например, человек был избран как конметентный в области языка C, ему даётся
> право модерировать все новости, связанные с языком C.

В мире, кроме черного и белого, множество разных оттенков, поэтому и возникают споры, так как абсолютной истины нет и каждый воспринимает информацию со своей колокольни. Технические ошибки могут разъяснятся на этапе обсуждения, а явные провокации и  голословные заявления подлежат удалению и без технической экспертизы.

Дорогой автор.

Мысль действительно интересная, в том смысле, что если бы можно было действительно так выбрать людей по их компетентности, а потом еще классифицировать темы, то это даже могло бы работать.

В реальности все это конечно невозможно. Причины:

0. Подавляющее большинство людей на форумы приходит не для получения профессиональных комментариев. В основном целью является примазаться к теме. "Посещаю опеннетик - я линуксоид и программист". Или ради возможности обхаркать тех самых профессионалов, к которым у них зависть и ненависть.

1. Невозможно однозначно определить компетентность. Даже в узких областях есть полутона и получатся ситуации, когда будет несколько модераторов, имеющих противоположны

> по принципу Википедии, где исключается
> любая дезинформация.

Это в Википедии-то исключается любая дезинформация? Да там это - основа системы! :-)

Увеличил размера пароля до 128 символов.  Unicode лишь ухудшает качество хэширования из-за большого числа предсказуемых повторяющихся блоков в строке (снижается уровень энтропии на каждый символ, так как хэш-функция рассматривает пароль как массив байтов).

> то что он ограничен 15 символами, а также только буквами латинского
> алфавита и всего тремя символами '.-_'.

Про ограниченность набора символов озабоченность понимаю. Хотя больше странных символом может каким-то образом усложнить их обработку, но в целом озабоченность сильно простым набором символов понятна.

> 2018 год на дворе - нельзя ли это изменить? сделать длину пароля
> 128 или 256 символов (а лучше изменяемую), а также разрешить Unicode
> 9.0?

А вот какие преимущества для паролей имеет уникод в сравнении с обычным, простым набором символов из темы простых однобайтовых кодировок? Пароль - это же специфическое понятие, в котором не требуются выкрутасы, которые важны в других местах (типа сообщений), ну там - не нужны смайлики, иконки, значки и прочие дела такого типа...

Смущает то, что на скриншоте заголовок и часть срок отобразились нормально, т.е. перекодировку brief поддерживает. Можете отправить мне на email исходник страницы RSS, в том виде, что он приходит к вам? Поробуйте также запросить RSS по https, у меня подозрение, что транзиом где-то изменяется RSS (например, Билайн в незашифрованный трафик мобильных клиентов свои кнопки добавляет).

Как обходной вариант можно попробовать вариант RSS в UTF8
https://www.opennet.dev/opennews/opennews_all_utf.rss

Я бы мог прикрутить автоматический проброс на UTF8, но, судя по всему, brief никак не выделяет себя и запросы от него приходят с обычным идентификатором User Agent.

> Они в основной массе дейбилы, +/- только искажают объективность ответов/новостей.
> И ещё со стажем меньше 366 дней, запретить +/- всех старше себя.
> Таких же - можно.

И дать павлину медаль-ачивку "Вахтёр месяца", и
http://www.opennet.dev/openforum/vsluhforumID3/107907.html#39
http://www.opennet.dev/openforum/vsluhforumID3/112504.html#87
http://www.opennet.dev/openforum/vsluhforumID3/110149.html#63
прописать витамины-прогулки.

+/- в первую очередь индикатор для системы модерирования.

В идеале хочется добиться того, чтобы робот сам всё как нужно удалял :-) В прошлом году прикрутил классификатор текста на базе машинного обучения (FastText от Facebook), который обучил на базе из сотни тысяч вручную отмодерированных и 1.5 млн нормальных сообщений. Довольно неплохо определяет некоторые виды нарушений, особенно разные политические дискуссии выхватывает :-)
Очень хочется запустить полноценную нейронную сеть для отлова нарушителей, но пока не получается.

> Нахожусь в разделе "Форум Диалог с администрацией проекта".
> Есть ли тут какой-нибудь RSS, в котором находится список тем раздела?

https://www.opennet.dev/openforum/forum_vsluhforumID4.rss
он должен автоматически предлагаться браузером, так как указан через link rel="alternate" type="application/rss+xml"

> Нашёл на странице ссылку с назвнаием RSS, пошёл по ней, а попал
> на Opennet wiki ForumHelp.

Там есть раздел со списком RSS-каналов.

>http://www.opennet.dev/openforum/vsluhforumID3/66383.html#3
>Access to the page has been denied
> because the following virus was detected
>ClamAV: winnow.malware.m0.malware.434577.UNOFFICIAL
> Что это за *варе по ссылке выше? Шутите или серьезно?

Типичный False Positive, откройте страницу и убедитесь сами, что там все чисто.

http://www.google.ru/search?q=winnow+malware+false+positive

Список помеченных для слежения тем или тредов в которых принимал участие текущий посетитель ("Избранные сообщения" в правом столбце на основной странице форума) теперь отображается и для пользователей не вошедших в форум как зарегистрированные. В данном случае в списке будут присутствовать сообщения в которых есть публикации от имени текущего ника.

Ниже некоторые заметки по улучшению форума. Комментарии приветствуются.

• Отдельный RSS для каждого треда. Рассматриваются другие предложения по расширению интеграции RSS в форум.

• При срабатывании ряда флеймовых масок или в привязке к тредам из черного списка - требовать обязательную регистрацию ников.

• В списке коментариев в новостях помечать новые сообщения, по методике как для .html образов треда, дополнительно менять содержимое cookie lastvisit для /opennews/.

• Улучшение Ajax: установку режима нити/список сохранть через cookie (в форуме это сделано, но нужно привернуть к обсуждению в новостях).

• Редактор профайла пользователя. Флажек "защита ника". Возможность подписки и отписки на получение новых сообщений в треде на email, включая подписку для сторонних наблюдателей.

• Автоматизированный режим выставления куки последнего просмотра (для не зарегистрированных и зарегистрированных но не нажимающих "пометить прочитанным").
  (Суть  метода: при закрытии любой страницы форума выставлять cookie "online" такуюже как last, но с текущим временем для данного форума.  В форуме анализировать если дата в online устарела на 1 час и пользователь не зарегистрирован или не пользуется "пометить прочитанным", то перемещать время из online в last и обновлять значение считанного в форум last времени.)

• Нарисовать значки для ссылок:  слежения за нитью,  переходом в тредовый режим,     перехода в UBB режим, раскрытия подветви. Если есть креативные идеи и желание нарисовать - пишите.

Идеи реализация которых под вопросом. Еще не совсем понятно, удобно это будет для посетителей или нет:

• Возможность загрузки mini-аватара, который будет отображаться _справа_ от обсуждения.

• В тредовом режиме просмотра отдельного сообщения добавить возможность показа содержимого всей ветви дискуссии, относительно текущего родителя или первого ответа. Режим показа только ответов первого уровня в треде (для больших тредов показывать именно так, а не одно первое сообщение).

• В тредовом режиме убрать ссылку со всех значков new и оставить только на одном для всего треда;

Сделал более видимыми ссылки "..." после начала текста треда в режиме свернутых нитей. При нажатии на "..." текст первого сообщения треда появляется полностью.

Добавлены значки "<<"  и ">>" ( [<< | >> | Смотреть все]), >> - открывает первые 10 сообщений треда,  >> - последние.

после того, как я создал тему, не могу найти информацию, сколько человек ее просмотрело. Иногда задашь вопрос в пятницу и до воскресения висит тема без ответов - и не пойми, толи люди просто забили (уехали на дачи все, и просмотров мало), толи здесь реально никто не знает ответа(просмотров много, а ответов нет)...

Как насчет жесткого перехода на HTTPS (с принудительным перенаправлением с HTTP)? О времена, о нравы...

> Это допустимо или город проживания и ФИО должны строго соответствовать моим настоящим
> данным?

Можно указывать всё что угодно, никаких требований к указанию реальных данных нет. Регистрация скорее средство для отслеживания своих сообщений, чем идентификация.

> Переделал каркас основных разделов с таблиц на div-ы и @media. При недостаточном
> экранном пространстве боковая панель убирается и шапка заменяется на легковесный вариант.
> Как результат, на мобильных устройствах https://www.opennet.dev и https://opennet.ru
> теперь должны смотреться не хуже, чем mobile.opennet.ru.
> При обнаружении любых проблем, особенно если где-то что-то стало разъезжаться или перекрываться
> - сразу пишите. Особенно интересует работа в Safari, Edge и iOS,
> так как на реальных устройствах эти платформы не тестировались.
> PS. Поддержка lynx и links сохранена.

В ios safari адаптвная верстка никакая....
Скриншот: http://s11.radikal.ru/i183/1710/0d/81f3449e3e31.png

Если добить сессионные Cookie, то это будет уже не анонимный пользователь и весь смысл в возможности отправлять сообщения без регистрации теряется. Тому, кто хочет использовать такие расширенные возможности, как редактирование сообщений и отслеживание ответов, следует входить на форум через зарегистрированный аккаунт. Один раз регистрируйтесь (никто не заставляет публиковать реальные данные) и включается отправка сессионной cookie.

> Я очень быстро набрал отрицательный рейтинг за посты в новостях. Теперь за
> каждый ответ в форуме я получаю +1 к рейтингу. Такими темпами
> я дойду до нуля за 133 ответа в форуме :( Нельзя
> ли за форум плюсовать побольше, например +5?

Надо просто больше нравиться толпе. :)

"Больше" уже есть - за удалённое модератором минус $несколько.
А, да, на носость или статью +100 дают.

> Я очень быстро набрал отрицательный рейтинг за посты в новостях. Теперь за
> каждый ответ в форуме я получаю +1 к рейтингу. Такими темпами
> я дойду до нуля за 133 ответа в форуме :( Нельзя
> ли за форум плюсовать побольше, например +5?

А, да, ещё был запрос на "новости платно" -- https://www.opennet.dev/openforum/vsluhforumID4/356.html . Теперь  тут в новостях -- "весь Фороникс".

Провёл ревизию алгоритма вычисления рейтинга. Заметил там существенный недостаток - вес комментариев к новостям и вес сообщений в остальных форумах выставляется одинаковым, хотя полезность существенно отличается. Попытался задействовать больше источников положительного вклада.

И кстати я в первом ответе не упомянул два важных источника плюсов - достаточно внушительные баллы начисляются при уведомлении о нарушениях через "сообщить модератору" и за исправление ошибок в тексте новостей.

По https://www.ssllabs.com/ssltest/analyze.html?d=opennet.ru настройки HTTPS соответствуют уроню А.

В текстах сообщений, отправляемых на email заменил http на https, спасибо, что обратили внимание. Поддержку STARTTLS при отправке сообщений включил.

Принудительного редиректа любого запроса на HTTPS не будет, так как у пользователей должна быть возможность выбора и посетители вправе сами принимать решение использовать шифрование или нет. При этом для точек входа, таких как email, по умолчанию предпочтение отдаётся в пользу HTTPS.

> 2. Вредоносное поведение счётчика countstat.ru/countad.ru, возможно их
> взломали и при определённых условиях подсовывают левый код. Вырезал их код, оставил
> для тестов только на http://opennet.ru/test/4.html

Да, на этой странице вылезает этот баннер.

> Просьба всем кто столкнётся с этой гадостью сохранить и прислать  код страницы, или в идеале отладить через что и как она лезет.

Сейчас у меня под рукой только SeaMonkey. Не убирай до вечера, попробую посмотреть подробнее.

Для теста другим пользователям: подключение через 3G-модем с сим-картой мегафона. Тариф обычный для телефона, регион Москва. Насколько мне известно, сеть Мегафон передаёт данные о "мобильных" подключения партнерам через какой-то свой сервис. Подробностей этой услуги не знаю.

> http://opennet.ru/test/4.html

С мегафоновского свистка страница выглядит так: http://storage3.static.itmages.com/i/16/0925/h_1474801321_92...

Это дрянь касается только абонентов мегафона. Вот новость о введении «Интернет-Клик» http://moscow.megafon.ru/publications/20120725-1228.html

Лично я ни разу не видел, чтобы он использовался для чего либо полезного. Все обычно предоставляют или подписку на сайт с какой-то ерундой: низкопробный развлекательный контент натыренный на просторах сети. Ну или вообще какой-то смс-сервис.

Схема работы примерно такая:

- "партнер" мегафона определяет что перед ним абонент с "мобильного" интернета мегафон
- отдает ему код с сервисом "интернет-клик" или с рекламой этого сервиса (как у нас сейчас)
- обычно явно не указывается что сервис платный, всё спрятано "под звездочкой", а для согласия достаточно кликнуть ("интернет-клик" же) по любой ссылке на сайте "контент-провайдера"

При этом абоненты других сетей ни о чем не подозревают.

Отказаться от этой услуги абонент не может, можно лишь подключить услугу "Запрет интернет-клик", но только на три месяца. Т.е. надо не забывать каждые 90 дней заново подключать запрет.

Megafon, такая же дрянь. Прописал в блокировщик рекламы countad.ru/* Всё стало норм.
Ещё если открывать в приватном окне, то ничего такого не вылезает (Firefox).

>http://opennet.ru/test/4.html

https://yadi.sk/d/bqXBB1XHvs9KB

Для выборки новостей по дате можно использовать форму расширенного поиска http://www.opennet.dev/search_adv.shtml (блок поиска в новостях)

Или выборку по ключевым словам, в простейшем случае можно набрать http://opennet.ru/inetd

В основном поиске сортировка по дате доступна только для форума, так как для некоторых динамичски генерируемыз разделов на этапе индексации нет возможности получить дату создания контента и в итоге получается путаница. При желании можно вручную указать параметр sort=time, но при этом нужно выбрать как минимум фильтр MAN-ов и возможно каких-то других разделов.