AOit Data-Service: maj 2011

onsdag den 18. maj 2011

Broken link checker

Getting my websites up and running again and creating new ones have let to the need for some webmaster tools. One thing thats needed is a way to monitor if links are still valid and once again unix provides a program "linkchecker" that can perform this task in simple way so input and output can be manipulated by other programs each doing there little thing.
You can find more information on the program at sourceforge.net

I have made a setup with a shell script generating an index page for the websites to monitor and a short description of their check result.
From here you can go to the check result for the website in concern.

You can see my setup at AOit.dk and the script below. In the script I have restricted the recursion level to 1. Look further down for an example of automatic ftp upload one could add to the script.

#!/bin/bash

title="YOUR TITLE";
sites="WEBSITE.TO.MONITOR0 WEBSITE.TO.MONITOR1";
  
for site in $sites
do
  linkchecker --no-status -r1 -ohtml http://${site} | sed "s/<h2>LinkChecker 6.2<\/h2>/<h3>AOit link check<\/h3><b>Current website $site<\/b>/g" | sed 's/LinkChecker comes with ABSOLUTELY NO WARRANTY!//g' | sed 's/This is free software, and you are welcome to redistribute it//g' | sed "s/under certain conditions. Look at the file \`LICENSE' within this//g" | sed 's/distribution.//g' | sed 's/<br><br>Start/Start/g' > link_chk_${site}.html
done

echo '
  <html>
    <head>
      <title>
'${title}'
      </title>
    </head>
    <body>
      <h3>'${title}'</h3>
      <hr>
      Last run time:<pre> '`date -R`'</pre><p>
      Sites monitored:
      <ul>
      <pre>' > link_chk.html

for site in $sites
do
  echo -n '<li><a href=link_chk_'${site}'.html>'${site}'</a></li>' >> link_chk.html
  grep "That's it." link_chk_${site}.html | sed "s/That's it.//g" >> link_chk.html
  echo '' >> link_chk.html
done

echo '
      </ul>
      <hr>
      <a href=http://aoit.dk/redirect.html>www.AOit.dk</a>
    </body>
   </html>
' >> link_chk.html

If you would like it to upload the link check result to your website you could add something like the below to the script.

ftp -i -n << eof
open HOSTNAME
user USERNAME PASSWORD
cd PUBLIC_DIR/link_chk
mput *.html
bye
eof

It can take time to check all the url's so i also added an email notice upon finish.

cat link_chk.html | mail -s 'Broken links report' -aFrom:linkchecker@aoit.dk abo@aoit.dk

Now all thats left to do is to add it to the crontab if one fancy.
Hope this will lead to not spending hours looking for the right link checker to do the job or spending hours writing your own as "linkchecker" can proberly do the job for you as it did for me.

fredag den 6. maj 2011

AO WebTools

A framework of independent website services to create a multi functional website. The framework consist of three tools: AOSideMaker, AOGalleryMaker and AOShopMaker.
Each of the tools can be used independently and each of the services provided by the tools inter linked with each other. The tools all use CMS to control their appearance and blend together.
A closer description of the three tools

søndag den 1. maj 2011

xlinks, forskellig browser opførsel for grafiske "input buttons" i HTML

Der har været et problem med forskellig browser opførsel når man brugte input type image som knap i HTML. Nogen gange var det som værdier ikke blev sendt med.
Det var første gang opserveret i "Opera" web browseren men det blev ikke givet meget tanke da "Firefox", "Chromium" and Dooble" alle opførte sig som forvendtet.
Men efter en opdatering af "Firefox" blev det klart at det ikke bare var et tilfælde af fjollet opførsel da den pluslig opførte sig som "Opera".

En lille opklaring viste at de forventede variabler fra input ikke indeholdte noget data.
Jeg har altid brugt HTML input type image som en hvilket som helst anden input type og brugt "name" attributen til at opløse dens værdi. Men ved at grave lidt dybere hos 3w fandt jeg ud af at typen faktisk bliver behandlet som et "clickable map" der sender to variabler $name.x $name.y, hvis der ikke gives noget navn er det bogstavligt 'name.x' and 'name.y'. Hvis der ikke bliver klikket på "clickable map" men der istedet bruges enter bliver værdierne der returneres af $name.x and $name.y 0 for alle "input type image" i den pågældene form. Det gør det svært at finde ud af hvilket billede der blev valgt.

"Logikken" bag de to forskellige opførselser er også nedarvet af alternativ tekst funktion, hvor nogle browsere gør den "clickable" og herved anerkende brugen som submit knap, mens andre ikke vil.

Sammenholdt med et virsuelt fortolkings problem med input type image at funktionen ikke er ønsket som submit knapper i HTML

Det skal ydermere noteres at i nogen programmerings sprog vil variabel blive sendt som $name_x og $name_y.

Sider