Форум: Проблемы искусственного интеллекта

Регистрация | Вход

Все темы | Новая тема  Стр.1 (5) След. > >>    Поиск:
Автор	Тема: Оценка достоверности новостей
Павел Фоменко Сообщений: 1081	Оценка достоверности новостей Добавлено: 18 фев 15 12:25 Такая вот тема возникла, в связи с информационной войной в СМИ. Много появилось сайтов, блогов, видео-блогов якобы разоблачающих фейки. Многие из них, по факту, сами становились источниками фейков. Одним словом пропаганда, контрпропаганда и так до бесконечности. В поисках фактов перелопачивается масса новостей из различных источников, тратится время, портится настроение... Каюсь - сам сижу на этой "игле поиска фактов", так как сами понимаете - всякие гадости происходят именно здесь, рядом... Но тема не для обсуждения текущей ситуации. Возникла такая мысль: автоматизировать обработку новостей, такое себе определение достоверности. Например, определяем, как бы это сказать,- "ретроспективно": то есть, мы имеем какое-то событие (исходя из новостей) и оцениваем насколько вероятно такое событие, зная события которые ему предшествовали. Конечно, предшествующие события (их достоверность) тоже выводятся из пред-предшествующих событий и т. д. Узнавая новые факты можно пересчитывать всю цепочку событий, определяя достоверность интересующего нас события. Даже не цепочку, а, наверное дерево. Естественно, достоверность некоторых исходных событий будет оцениваться экспертной оценкой, или исходя из совсем уж "очевидных" фактов/событий. Такая обработка полученных через новости (или из других источников) данных позволит, как мне кажется, делать интересные выводы СЕЙЧАС основываясь на событиях, которые произошли, и которым уже дана экспертная оценка. Кроме того, можно так же оценить и саму экспертную оценку, вписав её как некоторое событие-следствие умозаключений эксперта. Это позволило бы рассмотреть к примеру связь между "косыгинскими реформами" и распадом СССР, или между заявлениями какого-то политика и глобальным финансовым кризисом. Или какова вероятность обнаружить на Донбассе российский танк, если Чуркин заявил об ущемлении прав русскоговорящих. Прошу ещё раз прощения за примеры - это не для разжигания!!! - это просто удобные образные примеры. [Ответ][Цитата]
Андрей Сообщений: 3943	На: Оценка достоверности новостей +1 Добавлено: 18 фев 15 12:55 Я понял чего ты хочешь. Понять чего хочет субъект - достаточно для понимания всего того, что с ним будет происходить дальше. Достаточно понять чего хочет группа людей (субъектов хотения), атрибутированная нами как целостный субъект, чтобы впоследствии оценить любую информацию, как соответствующую действительности или соответствующую пропаганде. Ведь векторы хотений отдельных людей (а уж тем более больших групп людей) инертны и предсказуемы. Если, например, я достоверно понял, что некий субъект хочет спать, то сообщение о том, что он пляшет гопак - скорее всего ложь, а сообщение о том, что он лежит на сеновале - скорее всего правда. Достаточно понять чего хочет Россия, чего хотят США, чего хотят местные олигархи, чего хотят христиане, чего хочет Хабад, чего хочет КГБ, чего хочет ИГИЛ, чего хотят бабки на лавочке, чего хотят женщины, чего хотят саентологи, чего хочет Путин, чего хочет Маккейн - чтобы оценить любое сообщение. Если Россия хочет мира у своих границ, то все сообщения об агрессии России - скорее всего ложь. Если США хотят войны, то все сообщения об их поддержке террористов - скорее всего правда. Понимание того, кто чего хочет - это базовая модель для оценки информационных сообщений. Сама эта модель строится на базе достоверных фактов из прошлого. Если мы точно знаем, что США бомбили ядерными бомбами мирные города - то мы понимаем, чего они хотят. [Ответ][Цитата]
Павел Фоменко Сообщений: 1081	На: Оценка достоверности новостей Добавлено: 18 фев 15 13:43 Цитата: Автор: Андрей Я понял чего ты хочешь. ... Если, например, я достоверно понял, что некий субъект хочет спать, то сообщение о том, что он пляшет гопак - скорее всего ложь, а сообщение о том, что он лежит на сеновале - скорее всего правда. ... Достаточно понять чего хочет Россия, чего хотят США, чего хотят местные олигархи, чего хотят христиане, чего хочет Хабад, чего хочет КГБ, чего хочет ИГИЛ, чего хотят бабки на лавочке, чего хотят женщины, чего хотят саентологи, чего хочет Путин, чего хочет Маккейн - чтобы оценить любое сообщение. Если Россия хочет мира у своих границ, то все сообщения об агрессии России - скорее всего ложь. Если США хотят войны, то все сообщения об их поддержке террористов - скорее всего правда. Андрей! Где-то очень рядом Но я бы не сводил всё к хотелкам субъектов. Ведь хотеть чего-то может нечто возникающее, [над]системное. Например, я считаю, что капитал хочет сожрать планету Земля, хотя вряд ли этого хочет миллионер, попивающий сок на палубе своей яхты. Тут ещё сложность в том, что и отдельный субъект (например, политический) может быть частью другой группы (религиозной или национальной). Классифицировать можно по всякому. А достоверность хотелок каждой группы (или отдельного субъекта) дала бы свой вклад в оценку достоверности событий. Цитата: Автор: Андрей Понимание того, кто чего хочет - это базовая модель для оценки информационных сообщений. Сама эта модель строится на базе достоверных фактов из прошлого. Если мы точно знаем, что США бомбили ядерными бомбами мирные города - то мы понимаем, чего они хотят. Тему можно развивать, например, уточнить - такие ли мирные были эти города, бомбы падают в конкретную точку города - какие цели были поражены и т. д. А там ещё уточним, что пилот хотел отомстить за смерть товарища и картина может перевернуться до неузнаваемости. Мне кажется, хорошо для такого анализа использовать теорему Байеса "которая позволяет определить вероятность какого-либо события при условии, что произошло другое статистически взаимозависимое с ним событие." Как далее пишет Википедия "Другими словами, по формуле Байеса можно более точно пересчитать вероятность, беря в расчет как ранее известную информацию, так и данные новых наблюдений." Я вот рискнул взять на себя смелость посчитать такой пример. Вероятность обнаружить в Украине российский танк (если он есть) примем равной 0,25. Вероятность принять любой танк за российский - 0,6 (да, поставил такую высокую вероятность исходя из сообщений СМИ). Доля российских танков к нероссийским пускай будет 2 к 10 (0,2). То есть, остальные танки - украинские (0,8). Вероятность принять танк за российский: 0,8*0,6+0,1*0,25 = 0,505 Вероятность того, что обнаруженный танк окажется НЕроссийским: 0,8*0,6 / (0,8*0,6+0,1*0,25) = 0,95. То есть, 95% Вот в таком духе можно играться, подставляя уточняющие данные, например, вероятность того, что танк Т-72 с какой-то особой формой башни может быть не российским, или вероятность догнать и захватить танк в чистом поле с трезвым экипажем на борту. [Ответ][Цитата]
Павел Фоменко Сообщений: 1081	На: Оценка достоверности новостей Добавлено: 18 фев 15 13:47 К стати, не такая уж и старая новость: В Facebook вводят оценку достоверности новостей. Достоверность оценивают пользователи. По мне - способ сомнительный: набежит куча злых ботов и заминусуют правду-матку. [Ответ][Цитата]
гость 109.188.127.*	На: Оценка достоверности новостей Добавлено: 18 фев 15 14:18 Цитата: Автор: Павел Фоменко К стати, не такая уж и старая новость: В Facebook вводят оценку достоверности новостей. Достоверность оценивают пользователи. По мне - способ сомнительный: набежит куча злых ботов и заминусуют правду-матку. Ну, не так все просто. Во-первых, у новости есть первоисточник - можно пытаться использовать сеть распространения новостей Во-вторых, по истечению некоторого периода проявляется реальность предшествующих событий (появляется надежная фактура) - становится возможным применение Data Mining, т.е. технологически это не так безнадежно. [Ответ][Цитата]
Андрей Сообщений: 3943	На: Оценка достоверности новостей Добавлено: 18 фев 15 14:34 Цитата: Автор: Павел Фоменко Вероятность принять танк за российский Формула Байеса мне всегда казалась попыткой скрестить ужа с ежом, навести тень на плетень и выловить рыбку в мутной воде. Вот эти числа в твоей формуле откуда брать? Я по жизни пользуюсь логикой крайностей: 1. Узнать чего хочет субъект можно только по действиям, которые он фактически совершил. 2. Достаточно одного факта действия, чтобы выдвинуть/опровергнуть гипотезу о том, чего он хочет. 3. Лучший факт - личный сенсорный опыт. Далее следуют: видео-факт и фото-факт. Чем больше фактов - тем лучше. Вот у человека из видео проблемы с логикой. Танк (какой-то) он видит, а российской армии не видит. Однако строго по Байесу делает вывод о том, что она есть. Но видит он только танк. Байес лжёт. [Ответ][Цитата]
Павел Фоменко Сообщений: 1081	На: Оценка достоверности новостей Добавлено: 18 фев 15 15:13 Цитата: Автор: Андрей ... Вот у человека из видео проблемы с логикой. Танк (какой-то) он видит, а российской армии не видит. Однако строго по Байесу делает вывод о том, что она есть. Но видит он только танк. Байес лжёт. Психологические эксперименты показали, что люди часто неверно оценивают апостериорную вероятность события, поскольку игнорируют его априорную вероятность. Поэтому правильный результат по формуле Байеса может сильно отличаться от интуитивно ожидаемого. Грубо говоря, человеку свойственно ошибаться. Поймав лбом камень он может решить, что вероятно камень упал с неба. Апостериори - камень таки прилетел в голову. Априори - камни с неба падают редко, и вряд ли именно этот камень упал с неба. Цитата: Автор: гость 109.188.127.* Ну, не так все просто. Во-первых, у новости есть первоисточник - можно пытаться использовать сеть распространения новостей Во-вторых, по истечению некоторого периода проявляется реальность предшествующих событий (появляется надежная фактура) - становится возможным применение Data Mining, т.е. технологически это не так безнадежно. То что вы назвали "во-первых" прекрасно решается цитированием и перепечатыванием новости на сотнях говносайтов, с подключением хомячков для обсуждения новости как реального факта. И первоисточником может быть пук, а СМИ раздуют этот пук до ураган, придавая новости вес только лишь ссылаясь на неё или ссылаясь на ссылку другого говносайта с многочисленной хомячьей аудиторией. Насчет "во-вторых" - в какой-то степени это так. Какие-то конкретные факты прояснятся окончательно. Но может же получиться так, что догмой станет черт знает что Цитата: Автор: Гоголь Н. В. — Прощайте, братцы! Не поминайте лихом! — Пропащая душа! Пойти, рассказать, как кузнец повесился! — Бабоньки, бабоньки! Кузнец-то, повесился! — Утопился! — Удавился! [Ответ][Цитата]
гость 176.9.136.*	На: Оценка достоверности новостей Добавлено: 18 фев 15 15:14 Рискуете господа опять здесь срачь инициировать, хотя бы не выкладывайте провокационные фото видео материалы, итак еле оклемался форум от наплыва 'хло-ватной' риторики. Наверняка ОКО ХЛО невидимо присутствует в эфире и ждёт момента снова вступить в бой с ватниками, изголодалось наверняка, брызжет слюной и семенем, а там чингачгук анти-Хло восстанет из пепла для равновесия и начнётся всё по новой. Противно же... [Ответ][Цитата]
Павел Фоменко Сообщений: 1081	На: Оценка достоверности новостей Добавлено: 18 фев 15 15:16 Цитата: Автор: гость Рискуете господа опять здесь срачь инициировать, хотя бы не выкладывайте провокационные фото видео материалы, итак еле оклемался форум от наплыва 'хло-ватной' риторики. Наверняка ОКО ХЛО невидимо присутствует в эфире и ждёт момента снова вступить в бой с ватниками, изголодалось наверняка, брызжет слюной и семенем, а там чингачгук анти-Хло восстанет из пепла для равновесия и начнётся всё по новой. Противно же... Ну так и не разводите срач. [Ответ][Цитата]
гость 176.9.136.*	На: Оценка достоверности новостей Добавлено: 18 фев 15 15:17 Цитата: Автор: Павел Фоменко Ну так и не разводите срач. Я и не собираюсь. Удалите только видеоролик пожалуйста. [Ответ][Цитата]
Павел Фоменко Сообщений: 1081	На: Оценка достоверности новостей Добавлено: 18 фев 15 15:26 Изменено: 18 фев 15 15:27 Цитата: Автор: гость Я и не собираюсь. Удалите только видеоролик пожалуйста. Отснятое на нем событие уже произошло, какая разница. [Ответ][Цитата]
гость 176.9.136.*	На: Оценка достоверности новостей Добавлено: 18 фев 15 15:44 По теме. «Формула Байеса», это на самом деле просто факторная конъюнкция(&), перемножить плотности по каждому признаку и на априорную для каждого класса и выбрать максимальную, либо пропорцию получить, применима только для очень простых зависимостей, где распределения хорошо разделимы и каждый класс сгруппирован одним желательно гауссоподобным сгустком. Где взять плотности и априорные коэффициенты? Распределения порождёнными ‘играющими’ людьми, прежде всего сложно разложить в релевантный признаковый базис, для байесовской классификации или любой другой, так как просто не возможно выписать все факторы влияющие на решения количественно, даже имея перед собой все предполагаемые мотивы игроков и данные о текущих и прошлых действиях, степеней свободы слишком много и их очень сложно синтезировать и валидировать. Вопрос ставить надо более широко, рассматривать исследования на пересечении ‘художественной статистики’(ML,DM, etc.) и теории игр. Каким образом учитывать конкурентные мотивы и нелинейное прогнозирование противников друг друга, в контексте статистики, машинного обучения, датамайнинга и тд. Это задачка… [Ответ][Цитата]
гость 176.9.136.*	На: Оценка достоверности новостей Добавлено: 18 фев 15 16:05 Есть две соревнующиеся стороны, воюющие, а на войне все средства хороши, можно что то предполагать о геополитических мотивах зачинщиков, которые кстати тоже могут дрейфовать по мере разворачивания событий, но всё таки относительно инвариантны. А по факту диверсионной деятельность в любом случае занимаются обе стороны процесса. Хло ‘работает’ по своим, хло ‘работает’ по вате, вата ‘работает’ по своих и вата ‘работает’ по хло, с целью уничтожения и взаимо-компрометации, так как она наносит больший ущерб, чем потери своих, в рамках таких провокаций. Возможно русские немного профессиональнее в этом так как Вован всё-таки сам профи в этих делах, но украинцам помогают с пиндостана, которые собственно всё это и организовали а там пропаганда и манипуляция сознанием на самом высоком уровне, но им эта Украина до одного места, просто пешка, для них главное многоуровневое ослабление России, без развязывание прямого военного конфликта. СМИ вообще чепуху транслируют, все эти пужания для крестьян понятно, исходить можно только из предполагаемых мотивов и текущих реальных экономических показателей, рыночных индексов и тд. что нельзя поделать. [Ответ][Цитата]
rrr3 Сообщений: 11857	На: Оценка достоверности новостей +1 Добавлено: 18 фев 15 22:53 Изменено: 18 фев 15 22:55 Существует ли достоверность "вообще". Не субъективно ли все на свете? Вот, например, глядя на дерево, один видит стройматериал, другой лес, третий слышит шелест листвы, но каждый не задумывается о том, что видит при этом другой, при этом у каждого свой "факт" и своя "достоверность"... (даже один и тот же человек со временем может в одном и том же видеть разное, книги, ну или "факты достоверные", или свои/чужие цели перечитывать не пробовали?) http://ai-news.ru/2015/02/polovoj_otbor_chego_hotyat_zhenshiny_245375.html [Ответ][Цитата]
гость 176.9.136.*	На: Оценка достоверности новостей Добавлено: 18 фев 15 22:57 анонимайзер плох тем, что дает один адрес разным участникам, выше - не 78.25, а сейчас он. народные средства работы с новостями - собирание кейсов (отслеживание линий), кросс-валидация (сравнение и анализ), репутационный анализ, дисквалификация пропагандонов, четкое отсечение новости (факта) от оценочных импликаций (тут ОЧЕНЬ сложно, яркий пример чему дает андрей), коррекция ошибок интерпретации. факты организуются не в деревья, а в сети. Cети можно анализировать на предмет консонанса (непротиворечия), минимизации противоречий (по типу сетей дисонансов), искать истину не в факте, а в конгерентной системе фактов, рефлексируя влияние (как правило очень сильное) принятой теории событий (предпочтений) на отбор фактов). cоответсвенно байесова модель событий - это байесова сеть. Cеть нужно анализировать с пересмотром (ревизией) ее структуры, использовать нечеткие (смешанные) оценки вероятностей. Помнить ограничения байесовой модели, проявив интерес к теории возможностей, расширенным мерам правдоподобия и проч. [Ответ][Цитата]
Стр.1 (5): [1]  2  3  4  5 След. > >>