#  Re: Эдгар Аллан По
vit01 (mira, 1) → Andrew Lobanov  –  14:37:40 2016-04-21

Кстати, по сабжеэхе. Слишком большие рассказы надо бы разделять на несколько частей, потому что они не вписываются в стандарт. На php-ноде лимит и так повышен немного, но чтоб до такой степени...


fetch http://idec.spline-online.tk/u/m/sPn1SzQ3yumOmkabTJNh/NnK9BULgARR4lvyZlgX0
error: msg big
error: msg big
#  Re: Эдгар Аллан По
Andrew Lobanov (tavern,1) → vit01  –  02:41:32 2016-04-21

vit01> Пусть Андрей сам сначала добавит (ведь скрытоэха). А так как-то странно подобные вещи прятать. Если годный контент есть, то пусть его будет видно.

Меня смущает разве что юридический вопрос. То, что права на сами произведения уже давно в Public Domain это ясно, а вот с переводами как дела обстоят неизвестно.
#  Re: Эдгар Аллан По
vit01 (mira, 1) → Andrew Lobanov  –  16:31:45 2016-04-21

AL> В общем, увеличение объёма примерно на треть. То есть на 64К кодированного сообщения приходится всего 48К полезной нагрузки. Оставим как есть и я буду тогда сносить creepy.14 и edgar.allan.poe или пересмотрим стандарты?

Нет, здесь немного по-другому. В стандартах лимит 64К именно на "реальную" информацию, поэтому для base64 порог должен быть побольше.

Сейчас на php-ноде в стандартных лимитах стоит вот это:


$postlimit=70000; // limit for base64 pointmsg
$msgtextlimit=65536; // limit for message text (with headers)


creepy.14 сносить не имеет смысла, потому что она нормально переваривается фетчерами. В сабжевой эхе можно сделать гораздо проще: добавить "большие" сообщения в blacklist и просто запостить их снова, разделив на части.
#  Re: Поисковик
vit01 (mira, 1) → Difrex  –  14:30:27 2016-04-20

Difrex> все с 4-х известных мне нод

А архива за 2014 год всё-таки нет. http://alicorn.tk/ii-old/ii-point.php?q=/

// уже добавил таверну в http://ii-net.tk/station.html

Difrex> (даже пони туда попали)

Если наберёшь в амбреллу, например, echo "0L/QvtGF0L7QttC00LXQvdC40Y8g0YHRgtGA0LDQttCwCg==" | base64 -d (осторожно), то ты поймёшь, почему не все эхи следует добавлять в поисковой индекс :D

В том же архиве много в том числе и дебаг-эх (например, для трейсов Питона или для html) родом с 2014, которые также тащить не имеет особого смысла.
#  Re: Эдгар Аллан По
Difrex (mira, 14) → Difrex  –  13:41:00 2016-04-20

У меня индексируется все с 4-х известных мне нод, что есть в list.txt(даже пони туда попали)
#  Re: Эдгар Аллан По
vit01 (mira, 1) → Andrew Lobanov  –  16:58:53 2016-04-21

> 1. Мы расширяем допустимый размер кодированного сообщения до 84 килобайт, что даст нам 64 килобайта полезной нагрузки.

Расширил на ноде лимит кодированного сообщения до 87382 байт, что соответствует 4/3 для 64 килобайт (65536 байт) полезной нагрузки. Надо было это сделать ещё раньше.

> 2. Мы не трогаем стандарт, глушим и перебираем (видимо, я, ведь я эти толстые сообщения заслал) проблемные эхи.

Да, так и следует. После того, как я посмотрел в исходники, то убедился в своей правоте. Лимит в 64 кб полезной нагрузки определился правильно, и проблема именно в самих сообщениях.

А насчёт стандарта вообще забавная история. Про размер сообщений в базе там не сказано ни слова. Так что формально проблемы как бы и нет. Но это всё равно не дело, и предлагаю установить стандартом лимит в 64 кб чистого текста.
#  Caesium
Andrew Lobanov (tavern,1) → All  –  09:46:10 2016-04-21

Небольшие изменения.

Непосредственно в цезии:
* исправлен баг, уводивший курсор за пределы экрана, если эхоконференция с непрочитанными сообщениями на экране выбора не помещалась на экран;
* исправлен баг с применением цветовой схемы, приводивший к неправильному выбору цвета переднего плана курсора, стоящего на метаэхоконференции favorites.

В фетчере:
* исправлен баг в фетчере, приводивший к ошибке при вызове фетчера без параметров;
* исправлен баг в фетчере, приводивший ко входу в бесконечный цикл в случае, когда локальный индекс эхи не пересекается с индексом на ноде.

Изменения уже в master-ветке на гитхабе.

АЛЯРМ! На всякий случай. master-ветка является веткой разработчика и при внедрении новых фич может содержать баги и регрессии. Если хотите стабильной работы без отписывания багрепортов, используйте фиксированные версии (они тоже не идеальны, но всё же). Единственное но на момент фиксации версии 0.2 были баги в фетчере, но можно взять фетчер из master-ветки.
#  Re: Таверна
vit01 (mira, 1) → Andrew Lobanov  –  13:17:14 2016-04-20

Фетч уже идёт, проверяй работу.
#  Re: Caesium
Andrew Lobanov (tavern,1) → All  –  10:22:21 2016-04-21

В догонку:
* Теперь исходящие файлы едины для всех нод. Текущая выбранная нода в клиенте влияет только на то, с какого адреса будет отправлено сообщение.

Для обновления необходимо скопировать всё содержимое произвольной директории из out/nodename/ (включая .outcount) в директорию out/ и удалить все директории с именами нод.

Если не особо интересно хранить отправленные сообщения в базе, то можно просто очистить содержимое директории out/ и пользоваться клиентом дальше.
#  Re: Эдгар Аллан По
Andrew Lobanov (tavern,1) → All  –  16:09:31 2016-04-21

В общем, увеличение объёма примерно на треть. То есть на 64К кодированного сообщения приходится всего 48К полезной нагрузки. Оставим как есть и я буду тогда сносить creepy.14 и edgar.allan.poe или пересмотрим стандарты?
#  Re: Поисковик
Andrew Lobanov (tavern,1) → Difrex  –  07:02:46 2016-04-21

>> А архива за 2014 год всё-таки нет. http://alicorn.tk/ii-old/ii-point.php?q=/
Difrex> Эхи есть в list.txt? У меня не добавлена нода alicorn.tk. Ща сделаю.

На аликорне, вроде, всё на виду.

>> Если наберёшь в амбреллу, например, echo "0L/QvtGF0L7QttC00LXQvdC40Y8g0YHRgtGA0LDQttCwCg==" | base64 -d
Difrex> ЛОЛ, ржу :D

Чего только люди не делают ага =)
#  Re: Поисковик
vit01 (mira, 1) → Difrex  –  13:43:11 2016-04-21

Difrex> Эхи есть в list.txt? У меня не добавлена нода alicorn.tk. Ща сделаю.
AL> На аликорне, вроде, всё на виду

list.txt в архиве заботливо заполняется вручную и доступен как по API, так и внутри tar.xz вместе с содержимым.
#  Re: Таверна
Andrew Lobanov (tavern,1) → All  –  16:21:53 2016-04-20

vit01> Фетч уже идёт, проверяй работу.

Привет, сетяне, вам из небольшой таверны, где грубая деревянная мебель компенсируется тёплым светом множества свечей и потрескиванием дров в камине. В углу возле большого окна сидит бородатый дядька 94 килограмм весом и заваривает ароматный чай в ожидании посетителей.
#  CutieFeed
vit01 (mira, 1) → All  –  13:29:33 2016-04-20

Под вдохновением от настройки емакса добавил в сабж сочетания клавиш на самые частые действия (фетч, отправка, ответ, новое, меню, назад-вперёд и тому подобное).

Информация в стандартной справке клиента.

// сам удивляюсь, почему не сделал это раньше
#  Re: Поисковик
Difrex (mira, 14) → vit01  –  06:55:38 2016-04-21

>А архива за 2014 год всё-таки нет. http://alicorn.tk/ii-old/ii-point.php?q=/
Эхи есть в list.txt? У меня не добавлена нода alicorn.tk. Ща сделаю.

>Если наберёшь в амбреллу, например, echo "0L/QvtGF0L7QttC00LXQvdC40Y8g0YHRgtGA0LDQttCwCg==" | base64 -d

ЛОЛ, ржу :D
#  Re: Эдгар Аллан По
vit01 (mira, 1) → Difrex  –  13:01:42 2016-04-20

Difrex> Если эха будет в list.txt, то и в поиске появится =)

Пусть Андрей сам сначала добавит (ведь скрытоэха). А так как-то странно подобные вещи прятать. Если годный контент есть, то пусть его будет видно.
#  Re: Эдгар Аллан По
Andrew Lobanov (tavern,1) → All  –  16:35:07 2016-04-21

AL> Оставим как есть и я буду тогда сносить creepy.14 и edgar.allan.poe или пересмотрим стандарты?

Ещё в lit.14 есть большие сообщения. В общем, я вижу три варианта дальнейших событий:

1. Мы расширяем допустимый размер кодированного сообщения до 84 килобайт, что даст нам 64 килобайта полезной нагрузки.

2. Мы не трогаем стандарт, глушим и перебираем (видимо, я, ведь я эти толстые сообщения заслал) проблемные эхи.

3. Не трогаем стандарт и оставляем проблемные эхи как есть.

Больше вариантов я пока не придумал. Что думаете, товарищи?
#  Re: Эдгар Аллан По
Andrew Lobanov (tavern,1) → vit01  –  15:55:26 2016-04-21

vit01> Кстати, по сабжеэхе. Слишком большие рассказы надо бы разделять на несколько частей, потому что они не вписываются в стандарт. На php-ноде лимит и так повышен немного, но чтоб до такой степени...

Так ведь ни одно сообщение 64 килобайта не превышает. С другой стороны, base64 даёт некоторую избыточность, но как её вычислять? Даже в древнем фидонете ограничение было 64 килобайта. Это без всякого избыточного кодирования и в однобайтной кодировке.
#  Re: Эдгар Аллан По
Difrex (mira, 14) → vit01  –  13:38:25 2016-04-20

>Пусть Андрей сам сначала добавит (ведь скрытоэха).
Ну, как добавится, то все автоматом проиндексируется.
#  Re: Эдгар Аллан По
vit01 (mira, 1) → Andrew Lobanov  –  03:07:03 2016-04-21

AL> Меня смущает разве что юридический вопрос. То, что права на сами произведения уже давно в Public Domain это ясно, а вот с переводами как дела обстоят неизвестно.

На переводы авторское право действует по тому же алгоритму. Можно загуглить где-нибудь отдельные фрагменты текста, чтобы найти первоисточник.

Или даже ещё проще. В статье на Викитеке, к примеру, указаны разные переводы и их года. Если прибавить к ним 70 лет, то для большинства исключительное право уже давно истекло, так что свободно можно брать.
https://ru.wikisource.org/wiki/%D0%AD%D0%B4%D0%B3%D0%B0%D1%80_%D0%90%D0%BB%D0%BB%D0%B0%D0%BD_%D0%9F%D0%BE#.D0.A0.D0.B0.D1.81.D1.81.D0.BA.D0.B0.D0.B7.D1.8B
#  Re: Таверна
Andrew Lobanov (station13, 1) → vit01  –  12:54:11 2016-04-20

vit01> Минуты две думал, кто такой Олл, и только потом допёр, что это вообще-то All :)

=)

vit01> // могу хоть сейчас добавить

Через тебя пока действительно лучше. Ты если что оперативнее отреагируешь, так как я пока не всегда могу зацепиться за сервер со станцией13. Так что буду благодарен.

Поинты мои, в таверне действительны ваши auth-ключи от станции13. Можете постепенно съезжать.
#  Фетчер от цезий и iing
Andrew Lobanov (station13, 1) → All  –  12:23:00 2016-04-19

Скажем так: мои изначально задуманные юзкейсы он уже перекрыл с лихвой. Если же есть какие-либо идеи, то готов принимать патчи и даже конструктивные предложения с конкретными примерами.
#  Re: Caesium
vit01 (mira, 1) → Andrew Lobanov  –  02:31:02 2016-04-20

Обнаружил теперь регрессию в фетчере:
Если запустить без аргументов, то выдаёт

Traceback (most recent call last):
File "./fetcher.py", line 116, in <module>
node["node"] = node_addr
NameError: name 'node_addr' is not defined


Ещё минус, что при отсутствии поддержки /u/e начинается фетч с самого начала, с 2014 года
И да, если выбрать твою ноду, то он почему-то долго думает (тормозит) на этапе определения /x/features
#  Re: Caesium
Andrew Lobanov (station13, 1) → vit01  –  01:44:26 2016-04-20

vit01> Для интеграции со своими скриптами. Например, мне хотелось бы сделать Android-уведомления о фетчинге. Для этого фетчер должен иметь 3 выходных состояния: 1 - скачано N сообщений, 2 - новых сообщений нет, 3 - ошибка <название>.

vit01> Это можно реализовать либо специальным "тихим режимом", где пишется только "fetched N" или "error: text", либо заворачиванием фетчера внутрь какой-нибудь питоновской функции.

Тихий режим можно организовать вполне.
#  Re: Caesium
Andrew Lobanov (station13, 1) → vit01  –  10:25:43 2016-04-19

vit01>> Фетчер начинает бесконечно запрашивать список и не выходит из цикла.

AL> Пофиксил, вроде. Ситуация могла возникнуть только если эха была в локальной базе и не существовала на ноде. Добавл проверку.

Отпишись как протестируешь.
Powered by iii-php v0.11