• Как написать реализацию скользящего среднего для временного ряда?

    @4ainik
    Используйте ruby, там даты и время можно с легкостью складывать и вычитать. А еще там математика не ограниченная разрядностью, с легкостью можно выполнять вычисления с очень большими числами, названия которым я даже не знаю.
  • На чём писать свой браузер?

    @4ainik
    res2001, под термином "2 ядра" по имел ввиду процессор интел с технологией HT (Hyper Threading)". А насчет многопоточности вы вот сами как считаете прокси сервер может работать в однопоточном режиме? Я допускаю что самостоятельный ответ в данном случае может вызвать затруднение, поэтому ответом будет да, это многопоточное приложение и потоков может быть несколько десятков. При этом само понимаете какие сейчас сайты и сколько запросов в секунду приходится обрабатывать прокси....
    Так что это все лирика, а вот ваш ответ насчет поставленного вопроса/предложения по codereview мне не понятен, так вы согласны дать свою экспертную оценку, хотя бы с высоты глубоких знаний Си++?
  • На чём писать свой браузер?

    @4ainik
    res2001, есть самопис гуевого прокси на Си++, естественно есть исходники, но я точно знаю, что в них есть ошибка и наверняка не одна, т.к. писалась она в юности, когда я не знал и не понимал всех тонкостей программирования на Си++. Более того я их и сейчас до конца не знаю. но тем не менее программа довольно успешно и стабильно работает, но есть одно НО. Она работает более-менее стабильно только на одном ядре. А вот как только ей выделяют 2 ядра она начинает стабильно глючить так скажем. Причем это вот очень жесткая закономерность. И вот мне было бы интересно ваше мнение по поводу того чего же я лично не понимаю в языке Си++. Готов предоставить эти исходники или даже выложить их на гитхаб, чтобы услышать компетентное мнение от вас. Может быть вам не составит труда указать на эти самые ловушки, ружья и патроны?
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    dmshar, вот за это огромное спасибо. Это по существу.
    Как я уже писал, я не владею предметной областью и я не собираюсь здесь никого тролить, но по вашим вопросам я сразу понимаю, что вы поверхностно читаете то что я пишу. Вот к примеру меня из приведенного списка интересует:
    1) анализ выбросов и аномалий;
    2) анализ рядов с изменением параметров модели;
    3) анализ рядов на основе нелинейной динамики;
    4) кластеризация временных рядов;

    Буду копать в этом направлении. С большой благодарностью восприму любую критику и советы кроме пустого тролинга.

    ЗЫ: нейронные сети это отдельная тема, вы кстати в них шарите?
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    dmshar, вас не смутило, что для такой простой и короткой фразы (я про кавычки в курсе), состоящей всего из 3х слов(!) из всего большого и могучего интернета нашлось всего 5 источников (причем опять же для тех кто не привык читать до конца, гугл находит теЖе 5 источников)?
    И вообще уважаемый сколько вам лет от роду?
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    dmshar, дорогой мой троль, общаться с вами в таком тоне у меня нету никакого желания на данной площадке, а при личной встрече я бы вас поставил на место легко и просто за 5 минут, поэтому советую вам прочитать ПОЛНОСТЬЮ все что здесь написано еще раз от начала и до конца и взять таймаут на то чтобы переосмысли и понять наконец в чем была суть вопроса и то вы на самом деле сейчас не правы...
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    dmshar, можно ссылку на источник, в котором пусть даже линейным списком перечислены хотя бы половина из 121 метода?
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    dmshar, вы знаете что по запросу "Прореживание временных рядов" вот именно в кавычках яндекс выдает всего 5 результатов?! И ваш любимый гугл ровно столько же!!!
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    dmshar, по моему тролите вы!
    мне не нужна средняя по больнице температура. мне нужны простые фразы типа: временной ряд, обработка или анализ временного ряда, способы обработки и представления данных после обработки большого массива данных. ВСЕ!
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    dmshar, я с самого начала так и написал, что за данные, и что я в теме не совсем разбираюсь. За подсказку про временные ряды отдельное спасибо вам, по крайней мере я уже хоть в чем-то стал более образованным, и теперь знаю как этот набор данных называется. Еще наткнулся на график "кластерный анализ", в книге Терещенко О.В. "Многомерный статистический анализ данных в социальных науках", что мне тоже показалось очень интересным. Теперь возник вопрос, а нельзя ли обработать временной ряд, так чтобы по нему построить вот этот самый график?!5bbc7521c2b63986201988.png
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    %)
    Да и обычно ищут способа построить нужные графики из имеющихся данных, а не наоборот.
    дык в этом и состоит задача. данные есть, нужны графики и я знаю что эти данные еще можно как-то обработать и уже по новым обработанным данным построить еще графики и они даже могут выглядеть иначе и возможно даже более информативно. Вот товарищ dmshar подсказал, что это временной ряд, буду копать в этом направлении. Может быть вы знаете способы представления, обработки/анализа и прореживания временных рядов?
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    Сергей Горностаев, вот и хочется понять какие-же именно запросы можно применить для того чтобы потом по результатам построить графики.
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    1. да 500тыс записей. основная информация в каждой записи это метка времени и продолжительность события.
    2. в моем случае временные метки имеют неодинаковый и неравномерный характер.
    3. вот тут поподробнее. интересует какие виды графиков еще можно придумать и вообще что с помощью статистики можно получить на выходе.
    4. вот это как раз то что нужно, поиск аномалий, предсказание (гадание на кофейной гуще (шутка) ) может есть какая-то статья на эту тему, просьба сформулировать ее примерное название в соответствующих терминах
    6. да я вот пытаюсь изложить мысль, может у вас уже есть какие-то графики, может натолкнет на какую-то мысль?!
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    в общем я даже толком не могу сформулировать задачу, т.к. не владею предметной областью статистики
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    хочется не обрабатывать плоскими запросами, а вообще понять что с этим можно сделать? какие графики можно построить? интересуют именно с точки зрения статистики. может там какие-то кубы я вот в этом не очень разбираюсь, если вы может куда-то указать или дать ссылку на полезную статью...
  • Какие эффективные методы для обработки больших массивов данных?

    @4ainik Автор вопроса
    да строк.
    Так это маленькие данные.
    для кого как
  • Почему неправильный вывод значений в printf?

    @4ainik
    И самое главное, что ошибка в типе аргументов и спецификаторе строки форматирования может быть не сразу заметна, и может оставаться таковой долгие годы... То что кто-то накосячил при подготовке вывода можно очень долго не понять.
    И еще результаты будут разниться на разных ОС, разных ПК, разных конфигурациях (ну это применительно к вашему тестовому кейсу)...
  • Почему неправильный вывод значений в printf?

    @4ainik
    У человека в книге написано все верно (по данной проблеме), возможно со временем в компиляторы добавят разбор строки форматирования и проверку типов.
    А насчет того в каком порядке данные считываются из стека это вопрос риторический, стек адресуется в рандомном порядке, но в данном случае адресация идет в соответсвие с префиксами декларации функции, точнее даже не адресация, а запись аргументов в стек, а то как и в каком порядке дальше будет работать с ними вызываемая функция вас не должно волновать.
  • Как на windows XP получить права?

    @4ainik Автор вопроса
    написал свою, кому надо обращайтесь
  • Как на windows XP получить права?

    @4ainik Автор вопроса
    Вы наверное не заметили, но речь идет о старой ОС Windows XP...
    Там никто ничего не спрашивает :) , но тем не менее вопрос актуален.
    Речь идет о таких вещах как вызов АПИ функций OpenProcess и SetProcessAffinityMask если вы понимаете о чем я говорю