Вопрос по html, parsing – Разбор исходного кода HTML с использованием AppleScript

1

Я пытаюсь проанализировать HTML-файл, который я преобразовал в TXT-файл внутри Automator.

Ранее я загружал файл HTML с веб-сайта, используя Automator, и сейчас я пытаюсь разобрать исходный код.

Предпочтительно, я хочу взять информацию только из таблицы, и мне нужно повторить это действие для 1800 различных файлов HTML.

Вот пример исходного кода:

</head>
<body>
<div id="header">
    <div class="wrapper">
        <span class="access">
        <div id="fb-root"></div>


    <span class="access">
     Gold Account: <a class="upgrade" title="Account Details" href="http://www.hedge-professionals.com/account-details.html" >Active </a>       Logged in as Edward&nbsp;&nbsp; | &nbsp;&nbsp;<a href="javascript:void(0);" onclick='logout()' class="logout">Sign Out</a>

    </span>
                                    </span>
    </div><!-- /wrapper -->
</div><!-- /header -->

<div id="masthead">
    <div class="wrapper">   
        <a href="http://www.hedge-professionals.com" ><img src="http://www.hedge-professionals.com/images/hedgep_logo_white.png" alt="Hedge Professionals Database" width="333" height="46" class="logo" border="0" /></a>
        <div id="navigation">
            <ul>
<li ><a href='http://www.hedge-professionals.com/dashboard.html' >Dashboard</a></li>    <li ><a href='http://www.hedge-professionals.com/people.html'class='current' >People</a></li><li ><a href='http://www.hedge-professionals.com/watchlists.html' >My Watchlists</a></li><li ><a href='http://www.hedge-professionals.com/my-searches.html' >My Searches</a></li><li ><a href='http://www.hedge-professionals.com/my-profile.html' >My Profile</a></li></ul>               
        </div><!-- /navigation -->

    </div><!-- /wrapper -->     
</div><!-- /masthead -->


<div id="content">
    <div class="wrapper">
        <div id="main-content">

 <!-- per Project stuff -->
    <span class="section">
                <img src="http://www.hedge-professionals.com/images/people/noimage_53x53.jpg" alt="Christian Sieling" width="52" height="53" class="profile-pic" id="profile-pic-104947"/>
                <h1><span id="profile-name-104947" >Christian Sieling</span></h1>
                                    <ul class="gbutton-group right">
                    <li><a class="gbutton bold pill" href="http://www.hedge-professionals.com/people.html">&laquo; Back </a></li>
                    <li><a class="gbutton bold pill boxy on-click" href="http://www.hedge-professionals.com/addtoWatchlist.php?usr=114752"  id="row-104947" title='Add to Watchlist' >Add to Watchlist</a></li>
                </ul>

                <div style="float:right;padding:3px 3px;text-align:center;margin-top:5px;" >
                <span id="profile-updated-date" >Updated On: 4 Aug, 2010</span><br/>
                <a class="gbutton bold pill" href="http://www.hedge-professionals.com/profile/suggest/people/104947/Christian-Sieling" style="margin:5px;" title='Report Inaccurate Data' >Report Inaccurate Data</a>
                </div>
                                    <h2><span id="profile-details-104947" > at <a href="http://www.hedge-professionals.com/quicksearch/search/Lumix+Capital+Management+Ltd." ><span title='Lumix Capital Management Ltd.' >Lumix Capital Management Ltd.</span></a></span><input type="hidden" name="sub-id" id="sub-id" value="114752"></h2>

            </span>

            <table width="100%" border="0" cellspacing="0" cellpadding="0" id="profile-table">
                                                        <tr>
                    <th>Role</th>
                    <td>
                    <p>Other</p>                            </td>
                </tr>
                <tr>  
                    <th>Organisation Type</th>
                    <td>
                    <p>Asset Manager</p>                        </td>
                </tr>
                <tr>
                    <th>Email</th>
                    <td><a href="mailto:[email protected]" title="[email protected]" >[email protected]</a></td>
                </tr>
                <tr>
                    <th>Website</th>
                    <td><a href="http://www.lumixcapital.com/" target="_new" title="http://www.lumixcapital.com/" >http://www.lumixcapital.com/</a></td>
                </tr>
                <tr>
                    <th>Phone</th>
                    <td>41 78 616 7334</td>
                </tr>
                <tr>
                    <th>Fax</th>
                    <td></td> 
                </tr>
                <tr>
                    <th>Mailing Address</th>
                    <td>Birrenstrasse 30</td>
                </tr>
                <tr>
                    <th>City</th>
                    <td>Schindellegi</td>
                </tr>
                <tr>
                    <th>State</th>
                    <td>CH</td>
                </tr>
                <tr>
                    <th>Country</th>
                    <td>Switzerland</td>
                </tr>
                <tr>
                    <th class="lastrow" >Zip/ Postal Code</th>
                    <td class="lastrow" >8834</td>
                </tr>
        </table>
                </div><!-- /main-content -->
                    <div id="sidebar"  >
                    </div>

            <div id="similar_sidebar" class="similar_refine" >



            </div>
                            </div><!-- /wrapper -->
</div><!-- /content -->

<div id="footer">

</div>

Моя попытка AppleScript, которая используетtext item delimiters извлечь таблицу аналогичным образом:

set p to input
set ex to extractBetween(p, "<table>", "</table>") -- extract the URL
to extractBetween(SearchText, startText, endText)
set tid to AppleScript's text item delimiters
set AppleScript's text item delimiters to startText
set endItems to text of text item -1 of SearchText
set AppleScript's text item delimiters to endText
set beginningToEnd to text of text item 1 of endItems
set AppleScript's text item delimiters to tid
return beginningToEnd
end extractBetween

Как я могу разобрать таблицу из файла HTML?

Но вы бы этого не почувствовали, если бы AppleScript избавил вас от буквально многих лет тяжелой работы, как это сделали миллионы людей в области публикаций и других областях творчества. Simon White

Ваш Ответ

4   ответа
0

set xxx to read alias "Mac OS X:Users:paolo:Desktop:paolo.html"
set yyy to do shell script "echo " & quoted form of xxx & " | grep -o \\<table.*table\\>"
-1

сообщить приложение "Safari" установить sourceCode в символы (смещение<table in (источник документа 1 в виде строки)) thru ((смещение «/ table» в (источник документа 1 в виде строки)) + (количество «/ table» ») of (источник документа 1 в виде строки) как строка

1

чальной таблицы отсутствует в тексте html, поэтому его нельзя найти. Строка, которая начинает таблицу на самом деле ...

<table width="100%" border="0" cellspacing="0" cellpadding="0" id="profile-table">

Поэтому я изменил ваш код для поиска этого тега в 2 этапа. Первый...

<table

И тогда это отдельно ...

>

Таким образом, мы можем игнорировать весь код, который идет с табличным тегом (ширина, граница и т. Д.), Потому что я предполагаю, что он будет варьироваться между файлами. После этого мы получаем только код таблицы. Попробуй это...

set p to input
set ex to extractBetween(p, "<table", ">", "</table>")

to extractBetween(SearchText, startText1, startText2, endText)
    set tid to AppleScript's text item delimiters
    set AppleScript's text item delimiters to startText1
    set endItems to text item -1 of SearchText
    set AppleScript's text item delimiters to endText
    set beginningToEnd to text item 1 of endItems
    set AppleScript's text item delimiters to startText2
    set finalText to (text items 2 thru -1 of beginningToEnd) as text
    set AppleScript's text item delimiters to tid
    return finalText
end extractBetween
Однако с помощью простого & quot; получить абзацы & quot; Я смог выбрать контент, который хотелset sourceFile to (choose file) // set newContent to read sourceFile // get paragraphs 247 thru 306 of newContent Paolo Bernasconi
@ regulus6633 Вы были правы, извините. Я пытался изменить HTML-теги, чтобы они лучше подходили к тому, что я анализировал, и это не сработало (не знаю почему, все еще пытаюсь). Но потом я попробовал яблочный скрипт с предоставленным вами исходным кодом, и он отлично работал. Спасибо Paolo Bernasconi
Не уверен, почему это не сработало для вас. Это работает ... поверь мне. Там должно быть что-то еще, что вы делаете. Как упоминает adayzdone, ваше решение не будет работать более чем для одного файла. Номера абзацев, очевидно, будут меняться с каждым файлом.
Это решение для одного файла.
1

чтобы создавать собственный HTML-анализатор, вы можете использовать HTML-анализатор в Safari с помощью команды do javascript. JavaScript имеет встроенную функциональность для работы с HTML-элементами и данными.

Этот скрипт получает HTML-код только для первой таблицы на странице:

tell application "Safari"
    tell document 1
        set theFirstTableHTML to do JavaScript "document.getElementsByTagName('table')[0].innerHTML"
    end tell
end tell

Вы можете использовать эту технику для применения базовых сценариев DOM к любой странице и извлечения любых данных, которые вы хотите прочитать. Вы можете получить только значения ячеек таблицы или что угодно.

Похожие вопросы