Почему regexp в golang обрезает строку?

Question

[lelvisl]

Cуть вопроса проста - если я использую регексп для поиска подстроки а в строке б, то после у меня поячему то режется строка б.

Comments

[Andrey K]

Код в студию!

[ShamblerR]

Andrey: первый вопрос на моей памяти по regexp в котором нет самого вопроса ;)

Answer 1

[lelvisl]

Andrey Andrey

Ночью опытным путем выяснил, что вызов регекспа совпадает на 99% процентов с появлением данной проблемы. Но не всегда, так что проблема не в нем.

И да, разверну проблему подробнее

Есть golang, есть плагин, go-curl. Моя цель - парсить странички

package main

import (
    "fmt"
    curl "github.com/andelf/go-curl"
)

func main() {
    easy := curl.EasyInit()
    defer easy.Cleanup()

    easy.Setopt(curl.OPT_URL, "http://www.baidu.com/")

    // make a callback function
    fooTest := func (buf []byte, userdata interface{}) bool {
        println("DEBUG: size=>", len(buf))
        println("DEBUG: content=>", string(buf))
        return true
    }

    easy.Setopt(curl.OPT_WRITEFUNCTION, fooTest)

    if err := easy.Perform(); err != nil {
        fmt.Printf("ERROR: %v\n", err)
    }
}

Вот я хочу вынуть контент, для этого в fooTest я в глобальную переменную K присваиваю string(buf) (иного пути вытащить содержимое вебстраницы для обработки не вижу), и после присваивания ловлю плавающую ошибку - обрезается верхняя часть html страницы

Comments

[Andrey K]

а чем вас http.Get("www.baidu.com") не устраивает?

[lelvisl]

у меня есть большой баш скрипт на курлах, переписывать его на net/http вижу большим гемороем, чем выловить данную плавующую ошибку

[SilentFl]

Это не проблема регэкспов и даже не проблема го. Проблема растет из недопонимания как работает используемая библиотека - она скачивает страничку и выдает ее частями, дергая callback несколько раз. А Вы думаете что обрезается верхняя часть страницы )) Используйте net/http, это ведь совсем не сложно - res, _ := htt.Get("example.com"); body, _ := ioutil.ReadAll(res.Body)

[lelvisl]

таки переписал на net/http. Все рабоатет, всем спасибо)