Телеграм канал «Экзокортекс - Чертоги разума🧠»

Персональный data mining, персональный data lake: термины, которых не хватало 🙃

введу два термина, которыми я оперирую уже давно. в индустрии #SelfQuantify их в таком виде нет, поэтому считайте это моим личным словарем :)

персональный data mining - извлечение ценности (сигналов) из данных собственной жизни. по аналогии с классическим data mining, только майнер ты сам: твой сон, энергия, активность, активности, настроение, фокус, привычки, состояния, контекст вокруг.

персональный data lake - единое хранилище, куда все эти сигналы стекаются в сыром виде. не отдельные разрозненные приложения, каждое со своим отдельным форматом и одной сферой, описывающей тебя, а одно "озеро данных", поверх которого можно строить анализ.

зачем нам вообще эти термины?

а вот зачем: корпорации давно поняли ценность данных. они строят корпоративные дата лейки, нанимают аналитиков, извлекают из данных кучу ценностей. о нас кстати, они тоже всё собирают и анализируют и хорошо на этом зарабатывают.

так что персональный дата майнинг это один из слоёв самодигитализации, оцифровки своей жизни.

🇨🇦парадокс: о тебе данные собирают все, кроме тебя самого.

о твоём сне знает одно приложение. о шагах и калориях - второе. календарь и задачи - в третьем. финансы, бюджет - в четвертом. и ни одно из них не обменивается данными с друг с другом. и ты нигде не видишь целостной картины!

получается, что самый заинтересованный в твоих данных человек - ты сам. и ты же тот, кто ими системно не владеет.

персональный дата майнинг это по сути возвращение себе роли сбора и управления этими данными. что позволит тебе стать "аналитиком" собственной жизни: сбор сигналов, соединять их, извлекать смыслы и превращать в инсайты и рекомендации -> и в итоге в решения.

магии здесь нет. только данные, которые ты и так генерируешь пачкой каждый день. вопрос лишь в том, что не осознанно, и утекают они в никуда и не работают на тебя.

это первый шаг. в следующих постах обсудим: какие сигналы и как именно можно собирать, зачем их агрегировать и кластеризовать и что даст это тем, кто уже строит свое "озеро данных".

p.s. завел 😀 инсту, буду постить кое-что и там теперь из смежных тем, подписывайтесь.

Я ранее уже делился своими кейсами по проблемам со спиной: грыжа, протрузии, боли, ЛФК, массажи, аккуратные тренировки, попытки собрать ежедневные практики и рутины поддержки позвоночника в обычной жизни.

В процессе погружения я стал сильнее понимать одну простую вещь.

Проблема не только в том, что мы мало двигаемся.

Проблема в том, что мы слишком долго не прерываем сидение. во время рабочих сессий.

Многие думают ну да, я весь день сижу за компом, но вечером схожу в зал, на прогулку, сделаю тренировку и всё компенсируется.

К сожалению, организм работает не так.

ВОЗ прямо рекомендует взрослым ограничивать сидячее поведение и заменять его физической активностью любой интенсивности, включая лёгкую. То есть важен не только спорт после работы, но и то, что происходит с телом внутри рабочего дня.

Когда мы сидим без перерывов, тело начинает медленно превращаться в окаменелость с глазами.

Поясница долго находится в согнутом положении, снижается естественный поясничный изгиб, ткани позвоночника получают статическую перегрузку, а давление на межпозвонковые диски растёт.

В обзоре 2024 года отмечают, что сидячая поза связана с уменьшением высоты поясничных дисков и способствует их дегенерации.

И вот это очень неприятный момент.

Ты можешь посидеть за работой просто ещё часик, но для позвоночника это не часик.

Это час статической нагрузки. Без смены положения. Без нормального кровотока. Без разгрузки тканей. Без движения суставов.

Без сигнала телу, что оно вообще ещё живое. Потом встаёшь, а спина как деревянная.

И это не баг, это логичный результат. Похожая история кстати и с глазами.

При работе за экраном у многих появляется зрительное утомление: сухость, тяжесть век, дискомфорт, головные боли, покраснение, ощущение песка в глазах.

Исследование правила 20-20-20 показало, что регулярные напоминания делать паузы снижали симптомы сухости глаз у пользователей компьютера.

Суть простая: каждые 20 минут посмотреть на 20 секунд вдаль примерно на 20 футов / 6 метров.

Звучит смешно просто. Но проблема в том, что в реальной работе ты об этом не помнишь.

Особенно если вошёл в поток. Пишешь код. Собираешь проект. Разбираешь аналитику. Монтируешь.
Проектируешь. Ведёшь созвон. Генеришь идеи.

И через 3 часа понимаешь, что ты ни разу нормально не встал, не размялся и даже не моргал как человек.

С родуктивностью тоже интересно. Есть метаанализ PLOS ONE по микро перерывам: 19 публикаций, 22 независимые выборки, 2335 участников.

Вывод: микро перерывы помогают сохранять бодрость и снижать усталость, а по продуктивности не видно какого-то катастрофического провала из-за того, что человек делает короткие паузы.

То есть миф о том что если я делаю перерывы, я меньше работаю не совсем работает. Часто даже наоборот.

Ты не теряешь продуктивность. Ты перестаёшь превращаться в уставший кусок мяса, который ещё 4 часа героически смотрит в монитор, но уже почти ничего нормально не решает.

Отдельно есть обзор по активным микро перерывам: 2-3 минуты лёгкой активности каждые 30 минут сидячей работы могут снижать мышечно-скелетный дискомфорт, помогать с усталостью и стрессом, при этом без негативного влияния на продуктивность.

И вот здесь у меня родилась одна из причин, почему я вообще начал делать LogAgent.

Я понял, что проблема не в том, что люди не знают о пользе перерывов. Все всё знают.

Проблема в том, что человек в работе не способен стабильно себя контролировать.

Когда ты в фокусе, ты не думаешь: так.. дорогой мой межпозвонковый диск L4-L5, не пора ли нам аккуратно сменить положение? Нет.

Ты думаешь сейчас ещё вот это доделаю и всё.

Потом ещё одно. Потом ещё чуть-чуть. Потом уже вечер.

И позвоночник такой: спасибо, хозяин, было ужасно.

Поэтому нужен не просто таймер. Таймеры бесят. Их отключают, откладывают.

Они не понимают контекст. Они срабатывают в неудобный момент.

Они не видят, что ты уже устал, сутулишься, залип, моргаешь реже, сидишь неподвижно или работаешь без паузы слишком долго.

Мне хотелось сделать более умную систему. Чтобы приложение не просто говорило встань через 30 минут, а понимало рабочий процесс, отслеживало длительность фокуса, признаки усталости, позу, режим нагрузки и помогало встроить микроперерывы в реальную жизнь.

Не как надзиратель,а как нормальный заботливый агент.

Потому что для людей, которые много работают за компьютером, перерывы это не опция.

Это часть профессиональной гигиены. Как чистить зубы. Как спать. Как пить воду.

Как не убивать спину ради дедлайна.

Считаю всем, кто сидит за компьютером по 6-10 часов в день, стоит принять одну мысль:
здоровье ломается не в один момент.
Оно ломается множеством маленьких повторений: ещё час без движения, ещё один день без разминки, ещё один год сидячей жизни.

А потом внезапно оказывается, что тебе 35, а спина уже живёт отдельным стартапом с плохой юнит-экономикой.

Что делать на практике? Не надо начинать с героизма. Начните с малого.

Каждые 30-40 минут встать хотя бы на 2-3 минуты. Пройтись. Размять шею и плечи. Сделать пару приседаний.
Посмотреть вдаль. Подышать. Сменить положение. Разогнать кровь... и вернуться к работе уже человеком.

Это не фитнес. Это техническое обслуживание организма.

И если мы умеем обновлять софт, чистить кэш и следить за температурой процессора, то, наверное, пора так же относиться и к себе.

Потому что человек тоже система. И если система годами работает без перерывов, охлаждения и профилактики, она рано или поздно начинает сбоить.

LogAgent для меня как раз про это. Не просто трекер продуктивности.

А попытка сделать персонального агента, который помогает не сгореть, не развалиться и не потерять здоровье в процессе работы.

Особенно если ваша работа — это компьютер, фокус, дедлайны и много часов сидения. Берегите спину.

И делайте перерывы до того, как тело само заставит вас остановиться.

Антихрупкость.

Многие не представляют на сколько важна антихрупкость в сегодняшнем изменчивом мире, полном непредсказуемости. А между тем именно этот навык, если вы в него будете вкладываться, позволит вам не просто устоять при турбулентности, но и выйти из неё сильнее.

По Н. Талебу антихрупкость это способность систем не просто выдерживать хаос и стресс, но и становиться крепче благодаря им. Тут важно не путать три разные вещи. Хрупкое ломается от удара. Устойчивое удар держит и возвращается в исходное состояние. И только антихрупкое использует удар, чтобы стать сильнее, чем было до него.

В основном советы про подготовку к кризису это про устойчивость: подушка, запас, страховка. Это нужно, без этого никуда. Но я хочу показать, где в каждой сфере жизни прячется еще один шаг, тот, что превращает удары в усиление.

Тело.

Здесь антихрупкость видна буквально. Мышца, кость, сердце и даже иммунитет становятся сильнее не в состоянии покоя, а от дозированного стресса. Нагрузка это микроудар, после которого тело восстанавливается с запасом. В этом и есть смысл спорта - не просто поддерживать форму, а регулярно подкидывать телу управляемые вызовы, которое будет отвечать ростом. Для этого вам не нужно становиться КМС, достаточно выбрать резонирующий вид спорта и держать минимальную регулярность.

Здоровье работает по тому же принципу, но с другой стороны. Мы замечаем изменения, когда заболели, а в остальное время считаем данностью. Но ставку лучше делать на раннюю диагностику, чекап раз в пол года, для всей семьи. Ранняя болезнь чинится дёшево, запущенная дорого и не всегда.

Ресурсы.

Финансовая подушка спасает от удара, это про устойчивость. Антихрупкость начинается там, где у вас есть свободный ресурс, и кризис превращается из угрозы в возможность: купить подешевевшее, зайти туда, откуда другие выходят в панике. Поэтому базовый уровень это бюджет, учет доходов и расходов, финансовая подушка.
А следующий уровень это свободный капитал, который позволяет волатильности работать на вас а не против, делая антихрупким.

То же с навыками. Будущее профессий туманно при такой скорости развития ИИ. Усиливать сильное в своей профессии правильно, но этого мало. Антихрупкость здесь проявляется в опциональности, где несколько дешёвых ставок с маленьким риском и большим потенциалом. Освойте работу с ИИ (промпты, агенты, контекст, модели),
изучите, как хобби поможет стать вторым источником дохода. Каждая такая ставка стоит немного, а одна из них может выручить, если основной доход исчезнет или просядет.

Люди.

Отношения для многих как данность, а это те же инвестиции с понятным балансом, ведь нельзя бесконечно только брать, не отдавая. Но в контексте антихрупкости важное другое. Именно близкие люди подхватывают вас, когда ваши собственные системы дают сбой. Подушка кончается, здоровье подводит, работа пропадает - а крепкая сеть из друзей, семьи и родных удержит в сложный момент. И эта сеть не появится сама собой в момент кризиса, её строят заранее, маленькими регулярными вложениями внимания.

И главное нужно учиться терять.

Невозможно стать антихрупким, ни разу не споткнувшись, не потеряв ничего. Антихрупкость поощряет ошибки, но девёвые и ранние. Поощряет быструю обратную связь и учет в будущем. Проиграть немного денег на эксперименте, провалить промежуточный экзамен, нагружать иммунитет управляемым стрессом для оценки сопротивляемости - это прививки.

Если всю жизнь избегать любых ударов, не получать обратную связь, не корректировать поведение, вы станете стеклянным. Первый же крепкий удар, который нельзя будет обойти, сломает вас насовсем. Поэтому ошибки и удары это средство повышения вашей антихрупкости.

Это первая часть.
В следующих разберём критическое мышление, ментальное здоровье, энергию и фокус внимания.
Буду благодарен за обратную связь и ваши реакции.