Средства профессионального мониторинга Интернета
duroshlep
Оригинал взят у yushchuk в Средства профессионального мониторинга Интернета
Даю диалог с группы СПКР в LinkedIn с небольшими сокращениями.

Олег Петров

Понятие "Интернет" широкое, поэтому и инструментов мониторинга Интернета много. Они разные, каждый умеет делать что-то своё. Условно по функционалу можно выделить мониторинг:
1. Появления на сайте новых страничек (файлов) HTML.

2. Изменения контента на страничках (в файлах).

3. Получения контента в виде RSS-лент.

4. Получение контента HTML и его элементов (например, обычных новостей с сайта газеты "Известия").

5. Результатов поисковиков.

6. Форумов.

7. Онлайн баз данных.

8. Специфических ресурсов (например, только для Twitter или только для вКонтакте).

9. Новых источников информации.

10. Файлов "невидимого Интернета".

11. Уязвимостей сайта.

Некоторые инструменты совмещают в себе сразу несколько видов мониторинга.
Бывает, что приходится использовать два инструмента одной и той же группы, потому что реализация функционала может быть совсем разной.
Многое зависит также от того, в каком виде нужно получать результат: файлами страничек, записывать в базу данных произвольного формата, записывать в свою собственную базу данных.
Каждый инструмент потребует некоторых специфических знаний: HTML, XPath, языков запросов поисковиков, специфических внутренних команд программы мониторинга; в сложных случаях - умения программировать на Visual Basic, C#, PHP и знания SQL-запросов.

Read more...Collapse )


Не исключено, что программа АНБ SKYNET убивает тысячи невинных людей
duroshlep

Ars Technica


Кристиан Гротофф (Christian Grothoff), Дж.М. Порап (J.M. Porup)

В 2014 году бывший директор ЦРУ и АНБ объявил: «Мы убиваем людей, основываясь на метаданных». Сейчас, проведя новый анализ ранее опубликованных документов Сноудена, можно сделать вывод о том, что многие из этих людей ни в чем не повинны.

В прошлом году издание The Intercept опубликовало документы, в которых излагаются подробности программы АНБ SKYNET. Согласно этим документам, SKYNET осуществляет обширную слежку в сети сотовой связи Пакистана, а затем при помощи алгоритма машинного обучения по метаданным этой сети на 55 миллионов человек пытается оценить, насколько вероятна причастность того или иного человека к террористической деятельности.

Специалист по обработке данных Патрик Болл (Patrick Ball), работающий директором по исследовательской работе в неправительственной Группе анализа данных по правам человека (Human Rights Data Analysis Group) и не раз дававший экспертные показания в судах по военным преступлениям, назвал методы АНБ «абсурдно оптимистичными», а также «полным дерьмом». Изъян состоит в том, методы АНБ по обучению этого алгоритма SKYNET анализу сотовых метаданных делают результаты ошибочными с научной точки зрения.

С 2004 году в результате ударов беспилотников в Пакистане погибли от 2 500 до четырех тысяч человек, причем большинство из них было занесено американским правительством в категорию «экстремистов», о чем сообщает Бюро следственной журналистики (Bureau of Investigative Journalism). Эта программа машинного обучения находится в стадии разработки и развития с 2007 года, если судить по дате классификации «20070108», которую можно увидеть на одном из слайдов SKYNET (сами слайды датируются примерно 2011-2012 годом).

За это время из-за такого научно необоснованного алгоритма тысячи невинных людей в Пакистане могли по ошибке попасть в категорию террористов, что не исключает их преждевременной гибели от ударов дронов.

Сладкозвучная песнь больших данных

SKYNET работает как обычное современное коммерческое приложение больших данных.

Read more...Collapse )

Подборка редких фотографий со всего мира. Часть 4 (25 фото)
duroshlep
Примерно вот так видит мир Мона Лиза с картины.



Подборка редких фотографий со всего мира. Часть 4 (25 фото)




Read more...Collapse )
Tags:

Подборка редких фотографий со всего мира. Часть 3 (25 фото)
duroshlep
Британский спецназ с кислородными масками и очками ночного видения готовятся в десантированию во время учений.



Подборка редких фотографий со всего мира. Часть 3 (25 фото)




Read more...Collapse )
Tags:

Подборка редких фотографий со всего мира. Часть 2 (27 фото)
duroshlep
Лучшие шахматисты в мире пытаются играть в футбол.



Подборка редких фотографий со всего мира. Часть 2 (27 фото)




Read more...Collapse )
Tags:

Подборка редких фотографий со всего мира. Часть 1 (36 фото)
duroshlep

Редкий вид на Статую Свободы с балкончика на её факеле. Выход туда был закрыт с 1916 года.






Read more...Collapse )
Tags:

[reposted post]Лёгкая добыча: как разводят туристов в разных странах
Барт
varlamov.ru
reposted by duroshlep


Русский человек за границей обычно либо особенно бесшабашен, либо весьма доверчив, а потому нередко воспринимается мошенниками всего мира как лёгкая добыча. Изобретательности жуликов можно удивляться, но все они работают по примерно схожим методам, пусть их число и растёт. Сегодня я познакомлю вас с основными уловками, на которые попадаются неопытные туристы. Прочитайте этот пост, и вы, возможно, станете более ответственным путешественником, а заодно хорошо сэкономите.

Read more...Collapse )

Исповедь гения эффективности
duroshlep


Взято отсюда.
14 октября 2014


Читайте эксклюзивное интервью Лайфхакера с топ-менеджером «Альфа-Банка» Олегом Брагинским — о том, почему он счастливый человек и как профессионально решает сложные и невозможные бизнес-задачи.

Олег Брагинский

Интервью с топ-менеджером «Альфа-Банка» Олегом Брагинским. Олег о себе:




Я счастливый человек — моя работа совпадает с хобби! Профессионально решаю сложные и невозможные бизнес-задачи.



Профайл впечатляет:


  • Проекты в разных областях и странах, инновации и искусственный интеллект, Big Data и моделирование, программы лояльности и поведенческое прогнозирование.

  • Автор учебников, патентов и изобретений, спикер передовых конференций, владеет несколькими языками, имеет учёные степени и научные звания.

Если полностью прочитать профайл Олега, в голове возникает только одна ассоциация — гений.

Read more...Collapse )

Елена Ларина - о Больших данных и Поведенческих войнах
duroshlep
В течение последних полутора лет в Соединенных Штатах прошел целый ряд научных конференций, круглых столов и заседаний, инициированных теми или иными «думающими танками», среди которых выделяется Институт сложности в Санта-Фе. В  этих мероприятиях  участвовали ведущие исследователи и разработчики в сфере Больших Данных, руководители департаментов поведенческого маркетинга и таргетированной рекламы, специалисты в сфере прогнозирования на основе Больших Данных – с одной стороны, и высокопоставленные правительственные чиновники, представители разведывательного сообщества и члены британской и американской правительственных программ Надж – с другой. Например, на одной из такого рода конференций с основным докладом Strategic potential of big data for National Security выступила исполнительный директор IARPA Катарина Марш.

Read more...Collapse )

Оригинал взят у yushchuk в Елена Ларина - о Больших данных и Поведенческих войнах


"Разведкоролевство" Соединенных Штатов Америки
duroshlep

В распоряжении Вашингтона находится наиболее многочисленная сеть секретных структур в мире

Об авторе: Игорь Григорьевич Атаманенко – журналист, писатель, ветеран тайной холодной войны, подполковник в отставке.




Иногда результативность работы американских спецслужб вызывает вопросы даже у хозяина Белого дома.  Фото Reuters
Иногда результативность работы американских спецслужб вызывает вопросы даже у хозяина Белого дома. Фото Reuters


В ХХI веке разведывательный бизнес стал одним из крупнейших предприятий, бесконтрольно разрастающимся с огромной скоростью. Сегодня никто не знает, включая финансирующее разведслужбы государство, во сколько точно обходится их содержание и сколько человек там работает.


Read more...Collapse )





?

Log in

No account? Create an account