Сведения о вопросе

MAT

11:36, 4th August, 2020

Теги

java   regex    

Использование Regex для генерации строк, а не для их сопоставления

Просмотров: 757   Ответов: 11

Я пишу утилиту Java, которая помогает мне генерировать множество данных для тестирования производительности. Было бы действительно здорово иметь возможность указать regex для строк, чтобы мой генератор выплевывал вещи, которые соответствуют этому. Есть ли там что-то уже испеченное, что я могу использовать для этого? Или есть библиотека, которая доставляет меня туда большую часть пути?

Спасибо



  Сведения об ответе

ITSME

04:42, 15th August, 2020

Редактировать :

Как уже упоминалось в комментариях, есть библиотека, доступная в Google Code, чтобы достичь этого: http://code.google.com/p/xeger

См. также https://github.com/mifmif/Generex по предложению Mifmif

Исходное сообщение:

Во-первых, с достаточно сложным регулярным выражением, я считаю, что это может быть невозможно. Но вы должны быть в состоянии собрать что-то вместе для простых регулярных выражений.

Если вы посмотрите на исходный код класса java.util.regex.Pattern, то увидите, что он использует внутреннее представление экземпляров узлов. Каждый из различных компонентов шаблона имеет свою собственную реализацию подкласса узлов. Эти узлы организованы в виде дерева.

Создавая посетителя, который пересекает это дерево, вы должны быть в состоянии вызвать перегруженный метод генератора или какой-то конструктор, который что-то связывает вместе.


  Сведения об ответе

repe

21:29, 17th August, 2020

Xeger (Java) тоже способен это сделать:

String regex = "[ab]{4,6}c";
Xeger generator = new Xeger(regex);
String result = generator.generate();
assert result.matches(regex);


  Сведения об ответе

screen

22:15, 25th August, 2020

Уже слишком поздно помогать оригинальному плакату, но он может помочь новичку. Generex -это полезная библиотека java, которая предоставляет множество возможностей для использования регулярных выражений для генерации строк (случайная генерация, генерация строки на основе ее индекса, генерация всех строк...).

Пример :

Generex generex = new Generex("[0-3]([a-c]|[e-g]{1,2})");

// generate the second String in lexicographical order that matches the given Regex.
String secondString = generex.getMatchedString(2);
System.out.println(secondString);// it print '0b'

// Generate all String that matches the given Regex.
List<String> matchedStrs = generex.getAllMatchedStrings();

// Using Generex iterator
Iterator iterator = generex.iterator();
while (iterator.hasNext()) {
    System.out.print(iterator.next() + " ");
}
// it prints 0a 0b 0c 0e 0ee 0e 0e 0f 0fe 0f 0f 0g 0ge 0g 0g 1a 1b 1c 1e
// 1ee 1e 1e 1f 1fe 1f 1f 1g 1ge 1g 1g 2a 2b 2c 2e 2ee 2e 2e 2f 2fe 2f 2f 2g
// 2ge 2g 2g 3a 3b 3c 3e 3ee 3e 3e 3f 3fe 3f 3f 3g 3ge 3g 3g 1ee

// Generate random String
String randomStr = generex.random();
System.out.println(randomStr);// a random value from the previous String list


  Сведения об ответе

Chhiki

17:41, 6th August, 2020

Я пошел в корень сворачивания моей собственной библиотеки для этого (в c#, но это должно быть легко понять для разработчика Java).

Rxrdg начинался как решение проблемы создания тестовых данных для реального проекта. Основная идея заключается в том, чтобы использовать существующие шаблоны проверки правильности (регулярное выражение) для создания случайных данных, соответствующих таким шаблонам. Таким образом, создаются допустимые случайные данные.

Написать парсер для простых шаблонов regex не так уж и сложно. Использование абстрактного синтаксического дерева для генерации строк должно быть еще проще.


  Сведения об ответе

SEEYOU

10:13, 22nd August, 2020

О подкасте stackoverflow 11:

Сполски: Да. Кроме того, есть новый продукт, если вы не хотите использовать командную систему, у наших друзей в Redgate есть продукт под названием SQL Data Generator [ http://www.red-gate.com/products/sql_data_generator/index.htm] . Это $295,, и он просто генерирует некоторые реалистичные тестовые данные. И он делает такие вещи, как фактически генерирует реальные города в колонке "город", которые действительно существуют, а затем, когда он генерирует их, он будет получать состояние правильно, вместо того, чтобы получать состояние неправильно, или помещать государства в немецкие города и тому подобное... вы знаете, он генерирует довольно реалистичные данные. Я не совсем уверен, что все эти функции есть.

Это, вероятно, не то, что вы ищете, но это может быть хорошей отправной точкой, вместо того, чтобы создавать свой собственный.

Мне кажется, что я ничего не могу найти в google, поэтому я бы предложил решить эту проблему, разбив данное регулярное выражение на мельчайшие единицы работы (\w, [x-x], \d, и т. д.) и написав некоторые основные методы для поддержки этих фраз регулярных выражений.

Таким образом, для \w у вас будет метод getRandomLetter(), который возвращает любую случайную букву, и у вас также будет getRandomLetter(char startLetter, char endLetter), который дает вам случайную букву между двумя значениями.


  Сведения об ответе

lesha

11:20, 7th August, 2020

Я нахожусь в полете и только что увидел вопрос: я написал Самое простое, но неэффективное и неполное решение. Я надеюсь, что это поможет вам начать писать свой собственный парсер:

public static void main(String[] args) {

    String line = "[A-Z0-9]{16}";
    String[] tokens = line.split(line);
    char[] pattern = new char[100];
    int i = 0;
    int len = tokens.length;
    String sep1 = "[{";
    StringTokenizer st = new StringTokenizer(line, sep1);

    while (st.hasMoreTokens()) {
        String token = st.nextToken();
        System.out.println(token);

        if (token.contains("]")) {
            char[] endStr = null;

            if (!token.endsWith("]")) {
                String[] subTokens = token.split("]");
                token = subTokens[0];

                if (!subTokens[1].equalsIgnoreCase("*")) {
                    endStr = subTokens[1].toCharArray();
                }
            }

            if (token.startsWith("^")) {
                String subStr = token.substring(1, token.length() - 1);
                char[] subChar = subStr.toCharArray();
                Set set = new HashSet<Character>();

                for (int p = 0; p < subChar.length; p++) {
                    set.add(subChar[p]);
                }

                int asci = 1;

                while (true) {
                    char newChar = (char) (subChar[0] + (asci++));

                    if (!set.contains(newChar)) {
                        pattern[i++] = newChar;
                        break;
                    }
                }
                if (endStr != null) {
                    for (int r = 0; r < endStr.length; r++) {
                        pattern[i++] = endStr[r];
                    }
                }

            } else {
                pattern[i++] = token.charAt(0);
            }
        } else if (token.contains("}")) {
            char[] endStr = null;

            if (!token.endsWith("}")) {
                String[] subTokens = token.split("}");
                token = subTokens[0];

                if (!subTokens[1].equalsIgnoreCase("*")) {
                    endStr = subTokens[1].toCharArray();
                }
            }

            int length = Integer.parseInt((new StringTokenizer(token, (",}"))).nextToken());
            char element = pattern[i - 1];

            for (int j = 0; j < length - 1; j++) {
                pattern[i++] = element;
            }

            if (endStr != null) {
                for (int r = 0; r < endStr.length; r++) {
                    pattern[i++] = endStr[r];
                }
            }
        } else {
            char[] temp = token.toCharArray();

            for (int q = 0; q < temp.length; q++) {
                pattern[i++] = temp[q];
            }
        }
    }

    String result = "";

    for (int j = 0; j < i; j++) {
        result += pattern[j];
    }

    System.out.print(result);
}


  Сведения об ответе

SEEYOU

10:28, 17th August, 2020

Я знаю, что уже есть приемлемый ответ, но я использую генератор данных RedGate (тот, который упоминается в ответе Крейга), и он хорошо работает REALLY для всего, что я бросил в него. Это быстро, и это оставляет меня желать использовать тот же regex для генерации реальных данных для таких вещей, как регистрационные коды, которые эта штука выплевывает.

Это занимает regex как:

[A-Z0-9]{3,3}-[A-Z0-9]{3,3}

и он генерирует тонны уникальных кодов, таких как:

LLK-32U

Это какой-то большой секретный алгоритм, который придумал RedGate, и нам всем не повезло, или это то, что мы, простые смертные, действительно могли бы сделать?


  Сведения об ответе

+-*/

21:06, 1st October, 2020

Вам придется написать свой собственный парсер, как это сделал автор String::Random (Perl). На самом деле, он не использует регексы нигде в этом модуле, это просто то, к чему привыкли perl-кодеры.

С другой стороны , возможно, вы можете взглянуть на источник, чтобы получить некоторые указания.


EDIT: черт, Блэр опередила меня на 15 секунд.


  Сведения об ответе

pumpa

13:48, 6th August, 2020

Он далек от поддержки полного регулярного выражения PCRE, но я написал следующий метод Ruby, чтобы взять строку, подобную регулярному выражению, и создать ее вариацию. (Для языка на основе CAPTCHA.)

# q = "(How (much|many)|What) is (the (value|result) of)? :num1 :op :num2?"
# values = { :num1=>42, :op=>"plus", :num2=>17 }
# 4.times{ puts q.variation( values ) }
# => What is 42 plus 17?
# => How many is the result of 42 plus 17?
# => What is the result of 42 plus 17?
# => How much is the value of 42 plus 17?
class String
  def variation( values={} )
    out = self.dup
    while out.gsub!( /\(([^())?]+)\)(\?)?/ ){
      ( $2 && ( rand > 0.5 ) ) ? '' : $1.split( '|' ).random
    }; end
    out.gsub!( /:(#{values.keys.join('|')})\b/ ){ values[$1.intern] }
    out.gsub!( /\s{2,}/, ' ' )
    out
  end
end

class Array
  def random
    self[ rand( self.length ) ]
  end
end


  Сведения об ответе

fo_I_K

05:44, 12th August, 2020

Этот вопрос очень стар, но я наткнулся на него в своем собственном поиске, поэтому я включу пару ссылок для других, которые могут искать ту же функциональность на других языках.


  Сведения об ответе

JUST___

01:25, 2nd August, 2020

Если вы хотите сгенерировать строки "critical", вы можете рассмотреть:

EGRET http://elarson.pythonanywhere.com/ который генерирует строки "evil", покрывающие ваши регулярные выражения

MUTREX http://cs.unibg.it/mutrex/ который генерирует строки обнаружения ошибок с помощью мутации regex

Оба они являются академическими инструментами (я один из авторов последнего) и работают достаточно хорошо.


Ответить на вопрос

Чтобы ответить на вопрос вам нужно войти в систему или зарегистрироваться